terça-feira, 24 de setembro de 2013

Facebook Frankenphoto morgue irá armazenar frios, selfies mortos PARA SEMPRE


Entrega Email: Ódio e-mails de phishing? Você vai adorar DMARC


O termo "câmara fria" tem algo do necrotério sobre isso. Cadáveres em câmaras frigoríficas, o que é uma imagem. Facebook está apoiando o uso de um necrotério foto, o uso do armazenamento a frio para o velho pix.


Fotos antigas terão baixos índices de acesso individuais, mas quando o acesso é procurado é querido em velocidades mais rápidas do que uma biblioteca de fitas pode produzir, como cartuchos de fita tem que ser roboticamente coletadas a partir de sua abertura e transportado para uma unidade, antes de serem transmitidos para encontrar o caminho certo foto.







O Facebook Aberto Compute Projeto produziu uma especificação de armazenamento a frio (pdf) que afirma: "um servidor de armazenamento a frio [é] uma capacidade, o sistema de alto custo baixo para o armazenamento de dados que é acessado muito raramente ... é concebido como um arquivo rápido carregamento em massa. "


Qual é a melhor tecnologia para isso? De acordo com o Open Compute Projecto (OCP):


O caso de uso típico é uma série de gravações sequenciais, mas leituras aleatórias. A gravação magnética Shingled * (SMR) HDD com capacidade de spin-down é a tecnologia mais adequada e de baixo custo para armazenamento a frio.

Este precisa de sua própria infra-estrutura, ou seja, um centro de dados de armazenamento a frio, eo documento fornece um esquema de um desses centros de dados, mantendo 744 racks. Estes racks de armazenamento a frio são mais altos (39 Aberto U) e mais pesado do que Racks padrão aberto.


OCP diagrama esquemático de armazenamento a frio do Facebook

OCP diagrama esquemático de armazenamento a frio do Facebook



Há 16 Abertas unidades de armazenamento Vault por rack. Cada unidade é um chassis de 2U com discos rígidos hot-plug 30 x 3.5 polegadas SATA 3Gbit / s no seu interior, não 6Gbit / s SATA "devido ao sinal de preocupações de integridade para SATA 6G".


OCP Armazenamento Vault

OCP Armazenamento Vault



Vamos fazer um pouco de aritmética:



  • Um rack tem 16 cofres de armazenamento, ou seja, 16 x 30 unidades = 480 unidades

  • A linha tem 24 prateleiras: 24 x 480 = 11.520 unidades

  • O centro de dados tem 30 linhas de disco Rack: 30 x 11.520 = 345.600 unidades

  • Supondo que eles usam unidades SMR 4TB: 4 x 345.600 = 1.382.400 TB


Isso é 1,38 exabytes de capacidade bruta. Wow!


Desde o OCP, aprendemos: "Para atingir baixo custo e de alta capacidade, Shingled Magnetic Recording (SMR) unidades de disco rígido são usados ​​no sistema de armazenamento a frio Este tipo de HDD é extremamente sensível a vibrações, por isso, apenas uma unidade de 15. num tabuleiro de abóbada aberta é capaz de girar num determinado momento ".


Também: "No caso de uso típico, apenas um HDD está ligado em um momento em cada bandeja HDD, então, no máximo, apenas dois HDDs será ligado em um sistema Vault Abrir 2xOpenU em um dado momento."


Prevenção de danos vibração para as unidades SMR parece crucial:


Porque SMR HDD são utilizados no sistema de armazenamento de frio, para além do requisito de que apenas a rodar um disco rígido de uma bandeja para a leitura / escrita, é necessário um mecanismo especial de controlo de rotação para cima durante o processo de alimentação do sistema para evitar a vibração / para o outro. Nem todos os HDDs girar em primeiro ligar.

O sistema tem uma função de spin-down do disco como uma medida de economia de energia:


Para estar alinhada com a estratégia de economia de energia em operações de data center futuros, o design aberto Vault também suporta controle de spin-down. Tanto o projeto de hardware e gerenciamento de gabinete firmware apoio à implementação esse recurso.

O armazenamento a frio especificação afirma:


Um controlador de disco rígido rotação assegura que existe apenas um disco activo numa bandeja.


• Power-on um disco rígido específico antes de acessá-lo. Ele pode precisar de spin-up se foi recentemente virou-down.

• Desligar um HDD específico depois de terminar de acesso.

• Dentro de um sistema Vault Open, power-on os dois HDDs no mesmo slot em ambos os tabuleiros.


Este projeto cofre de armazenamento a frio é específico para um arquivo de dados (fotos), com acesso relativamente rápido necessário. Nós imaginamos que outros provedores de serviços de aplicativos em nuvem pode ter necessidades semelhantes. Na verdade, Taiwan tipo ODMs (Fabricantes Originais de design) também poderiam se beneficiar como principais fornecedores de storage array não seria capaz de enviar tais matrizes, dada a sua estrutura de custos atuais e modelos de negócios.


Do Facebook foto necrotério poderia ser a morte de frios esperanças de fornecimento de armazenamento principais dos fornecedores da matriz. ®


Bootnotes


Leia-se sobre gravação magnética telhas aqui . Seagate tem shingled produtos unidade vinda.


El Reg escreveu pela primeira vez sobre os centros de dados de armazenamento a frio do Facebook aqui .







via Alimentar (Feed)

Nenhum comentário:

Postar um comentário