Disaster nível de proteção de recuperação de auto-avaliação
re: Invent 2013 Quanto mais dados você colocar em uma nuvem, o que é mais difícil para migrar. E tão nova "Kinesis" dados ingester da Amazon é uma peça elegante de tecnologia, e ao mesmo tempo uma forma sagaz para ligar o Amazon Web Services no Hotel California da nuvem.
Kinesis foi anunciada pelo diretor de tecnologia Werner Vogels do web bazar em um discurso na empresa re: Invent conferência hoje. É essencialmente a tentativa da Amazon ao fogo até uma variante comercial de código-fonte aberto para processamento de dados e mensagens motores tempestade , Spark Streaming, e Kafka .
A diferença entre o Kinesis e estes sistemas é que a Amazon lida com toda a infra-estrutura de gerenciamento e provisionamento traquinas, e simplesmente expõe o sistema para um desenvolvedor como um serviço que permite ao programador escolher quais dados a ingerir, quanto, onde e para alimentá-lo para.
Kinesis também vai competir com sistemas comerciais, como BigQuery do Google - embora capacidades de streaming do ad-lançador são rudimentares em comparação com a tecnologia de dados bufando de Kinesis.
Serviço da Amazon pode "coletar e processar centenas de terabytes de dados por hora de centenas de milhares de fontes," o biz escreveu em um documento discutir a tecnologia. Ele pode, então, transmitir isso rapidamente para outras tecnologias AWS complementares, como DynamoDB e redshift para análise ou apresentação.
Alguns dos aplicativos que torna possível poderia incluir social media software de mineração de dados, análise de dados ao vivo em todo os mercados financeiros, ou uma maneira de alimentar alterar informações de inventário de lojas em massa software para estoque re-ordem.
"Em poucos cliques e um par de linhas de código, você pode começar a construir aplicativos que respondem a mudanças em seu fluxo de dados em segundos, em qualquer escala, enquanto apenas pagando para os recursos que você usa", a empresa escreveu.
Os administradores podem configurar um serviço de Kinesis, dizendo o quanto de entrada e saída que eles precisam em blocos de 1MBps chamado 'Fragmentos', através do console AWS, API, ou SDKs. O tamanho da corrente pode ser ajustada sem a necessidade de reiniciar, e os dados são carregados com HTTP PUTs
Dados colocados em Kinesis está disponível para análise "em questão de segundos" disse a empresa, e é armazenado em vários celeiros bits por 24 horas, tempo durante o qual ele pode ser "lido, re-lido, backfilled e analisados", ou movidos para armazenamento serviços como o S3 e redshift disse a empresa.
Amazon também produziu uma biblioteca cliente para o serviço que automatiza como Kinesis adapta-se a "mudanças no volume de fluxo, balanceamento de carga de streaming de dados, coordenação de serviços distribuídos, e processamento de dados com tolerância a falhas", a empresa disse.
No entanto, Kinesis é um projecto ambicioso e talvez mais propensas a oscilações de desempenho do que outros serviços da AWS. "Em tempo real é definitivamente uma das áreas em que temos de quebrar um monte de nozes ainda", disse Vogels El Reg. Nós estaremos observando seu desempenho de perto por quaisquer oscilações.
Kinesis custa R $ 0,015 por 'Shard' por hora, juntamente com $ 0,028 por 1.000.000 PUT transações. Inicialmente, a tecnologia está disponível a partir da Região Leste dos EUA como uma " visualização limitada "que os desenvolvedores precisam para se candidatar. Transferência de dados de entrada é gratuita e não há nenhum custo para transmitir dados de Kinesis em outros aplicativos da AWS.
Um AWS exemplo de preços , diz Kinesis pode ser usado para criar um aplicativo para ingerir 10Mbps de dados, enquanto a alimentação Informações para duas aplicações de processamento em tempo real de 4,22 dólares por dia.
Kinesis parece o resultado de um serviço de grande dados, que El Reg manchado em fevereiro , e apelidada de Mistério-Amazônia-Data-Service (MADS).
MADS ia ser capaz de "altamente disponível processamento, altamente confiável de dados quase em tempo real". Anúncios de recrutamento na época disse que o serviço teria que ingerir entre dois e cinco milhões de registros de dados por segundo no lançamento, e, eventualmente, escala de lidar com centenas de milhões de pessoas - o que é exatamente o tipo de capacidade Kinesis requer.
Com Kinesis, a Amazon está dando às empresas uma forma de analisar fluxos de alterar os dados da web, e fazê-lo funcionar sem qualquer hardware ou infra-estrutura complexa. Ele também lhe dá um app que vai derramar mais dados do que nunca em sua nuvem, engorda suas margens e deixá-lo comprar mais equipamentos de armazenamento a preços mais baixos do que nunca, permitindo que Bezos & Co para ganhar dinheiro duas vezes - primeiro por parte do cliente a pagar-lhe e, em seguida, a partir dos descontos que pode obter de seus fornecedores de equipamentos. ®
via Alimentar (Feed)
Nenhum comentário:
Postar um comentário