O que a remodelação da minha cozinha tem a ver com grandes dados?
Por Brad Parks, @HPBradParks, Estrategista da Infra-estrutura Convergente para HP Storage
Arquitetura é importante
Estou no meio da remodelação da minha cozinha que é de um bangalô de tijolos de 1910. Apesar de amar essa casa e todas as características que acompanham uma casa histórica, sou constantemente desafiado com paredes inclinadas, argamassa em decomposição e estranhas escolhas de design... como o telhado que está DENTRO da minha cozinha. Eles me levaram a seguinte conclusão: arquitetura importa... e muito.
Todos os dias produzimos informação. No nosso percurso ao trabalho, nós produzimos informação para as autoridades rodoviárias que monitoram os padrões do tráfico. Durante nossa parada para o cafézinho, nós produzimos dados quando ordenamos um café e pão de queijo. E, enquanto esperamos a reunião começar, produzimos informação quando compartilhamos nossas fotos do final de semana no Facebook. Para alguns esses são atos de interação social mas para outras pessoas bem armadas, eles são a chave para novos modelos de negócios, linhas de produtos e vantagem competitiva.
As autoridades rodoviárias podem usar a análise de grandes dados (Big Data) para ajudá-los a configurar e construir novas estradas para prevenir problemas de tráficos em certas áreas. Distribuidores podem prever o sucesso de um novo produto analisando as preferências de compra.
A Evolução dos grandes dados (Big Data) – e os desafios que estão por vir.
O desafio não é apenas aumentar a movimentação do volume de dados, mas também lidar com a diversidade e imprevisibilidade disso. Isto nos traz de volta ao tema da arquitetura... neste caso tanto para o software usado para compilar e analisar a informação quanto a infra-estrutura de armazenamento físico para suportá-la.
“Grandes dados” (Big Data) é um termo utilizado de diferentes maneiras recentemente. Tradicionalmente reservados para aplicações analíticas, hoje se estende para outras áreas de crescimento de conteúdo extremo. A informação pode vir de maneira “humana” – ou seja comunicação de pessoa a pessoa seja por email, vídeos, telefonemas, mensagem de voz e atualizações de mídia social - como também através de dados extremos de conjuntos cheios de informação geradas através de sensores, tags, telecomunicações e sinais de GPS.
Os Software Analíticos mudaram muito, foram além dos limites tradicionais de design RDBMS e linha baseada em banco de dados. As base de dados colunar como HP Vertica e máquinas computacionais baseadas nos significados como a plataforma HP Autonomy IDOL são novas abordagens de arquiteturas desenhadas especificamente para estes novos tipos de dados e conjunto de dados massivos.
O mundo mudou e as arquiteturas de armazenamento (storage) necessitam se atualizar.
Análise de grandes dados (Big Data) é uma das quatro maiores tendências das empresas de tecnologia ,é o que os maiores conhecedores de tecnologia da HP estão falando hoje em dia. Essas discussões incluem a nossa abordagem para a optimização da informação para ajudar as organizações a proteger, conhecer, integrar, compartilhar e criar todas as informações empresariais relevantes de uma forma consistente e unificada.
Milan Shetti, Vice-presidente e CTO de HP Storage, reconhece a necessidade da criação de análise de negócios para a decisão do significado do negócio como uma tendência definitiva de condução dos dados grandes (Big Data). Ele coloca a saúde como um exemplo de como a análise de um negócio pode beneficiar a indústria: “Imagine se a informação de uma organização bio-tecnológica que está estudando o perfil do genoma pudesse ser integrado com os dados de uma companhia farmacêutica, a FDA e os dados do paciente por parte dos médicos. Toda as informações poderiam estar integradas e correlacionadas com as informações dos remédios e a informação da aplicação poderia ser dada aos clientes. Os médicos poderiam se enfocar em analisar as pesquisas inovadoras para acelerar o tempo que leva para obter a aprovação das drogas na FDA para o mercado mais rapidamente. Nenhuma destas análises são integradas hoje.”
Para fazer a optimização da informações corretas, você necessitará uma estrutura flexível Scale-out de armazenamento de dados da infra-estrutura. O legado da arquitetura de armazenamento simplesmente não consegue suportar nosso novo mundo de informação humana e dados extremos.
As arquiteturas de armazenamento monolítico que são implantadas em muitas organizações hoje, foram projetadas há 20 anos atrás para cargas de trabalho e crescimento previsíveis. No entanto, agora nós estamos esbarrando em limites da arquitetura monolítica. O velho mundo colidiu com o novo mundo de informação humana, onde as necessidades de armazenamento são altamente imprevisíveis.
Porque armazenamento Scale-out? Porque mudanças acontecem…
Levando em consideração que os últimos cinco anos foram de crescimento de dados massivos e com turbulência na economia, o que nos ensinou algo, esse algo é que você tem que ser capaz de lidar com as mudanças de uma forma contínua e sem interrupções. Arquiteturas de armazenamentos Scale-out fornecem escalabilidade e flexibilidade necessária para fazer otimização de informação correta.
Armazenamento Scale-out difere do aumento do armazenamento tradicional, que principalmente escala através da adição de vários discos individuais para um único par de controladores de armazenamento. Quando você necessita mais potência ou altura (headroom) você encara a dolorosa e muitas vezes cara, tarefa de subir um degrau a mais para um grande par de controladores de armazenamento. Mark Peters, analista de armazenamento com o Enterprise Strategy Group, escreveu que o armazenamento Scale-out pode ajudar a fornecer oportuna provisão de IT, melhorar a disponibilidade do sistema e fornecer uma melhor utilização dos recursos.
Quando combinada com as tecnologias de armazenamento federadas (Federated Storage Technologies), armazenamento Scale-out permite a criação de recursos pools virtualmente ilimitados e persistentes. Ao lidar com um universo em rápida transformação de conjuntos de dados de escala de petabyte, essa é uma necessidade absoluta.
Scale-out permite uma escala incremental e independente da capacidade, desempenho e resistência enquanto a grupos federados (federating groups) de grupos scale-out fornecendo junção da mobilidade da carga de trabalho. O resultado é o aumento do processamento do computador, largura de banda e capacidade de armazenamento que pode ser imensamente superior ao de uma matriz de armazenamento tradicional simples ou um computador de alta performance.
O impacto da imprevisibilidade e Big Data na performance
O armazenamento deve, no nosso novo mundo, também ser capaz de lidar com muitas solicitações variáveis e cargas de trabalho mistas. Algumas soluções de armazenamento trabalham muito bem para largas operações sequenciais mas são insuficientes quando se trata de pedidos de Input/Output ou se a informação contêm uma grande quantidade de metadados. Empresas com uma grande quantidade de dados não estruturados (e eu não conheço uma organização que não esteja gerando uma grande quantia de dados não estruturados) necessitarão gerenciar muitos tipos diferentes de volume de trabalho ao mesmo tempo com níveis previsíveis de performance. Algo que descrevemos como dinâmica “multi-locação” (multi-tenancy).
Armazenamento Convergente, grandes dados e as tendências para 2012
Estes requisitos em torno do gerenciamento de mudança e imprevisibilidade compõe uma das razões que a HP está focada em Armazenamento Convergido (Converged Storage) como parte da nossa abordagem para Converged Infrastructure. No cerne da nossa estratégia de Converged Storage é um centro de design que inclui solução “federated scale-out” implantadas em plataformas líderes de mercado. Sim, as questões de arquitetura importam – e é importante que as aplicações analíticas para os grandes dados (Big Data) sejam executadas em arquiteturas desenhadas do zero para os requerimentos atuais.
É por isso que o casamento de HP IBRIX, o qual cuida de dados não estruturados, e HP 3PAR, o qual lida com dados estruturados, funciona tão bem. Essas tecnologias convergentes e complementares potencializam alguns centros de informação mais largos da nuvem (cloud) e depósito de conteúdos desestruturados no mundo e são componentes críticos da estrutura para suportar as aplicações das grandes informações (big data).
HP CTOs desempenham um papel fundamental na criação de tecnologias e estratégias que atendam as necessidades atuais e do futuro. Cada dia, eles analisam as tendências dos negócios e sociais para criar soluções tecnológicas que ajudam a direcionar as necessidades do negócio.
Leia mais sobre como HP CTIO pensa que big data analytics irá desempenhar um papel na empresa de IT nos próximos meses e, em seguida, explorar como HP Converged Storage pode responder às novas exigências de armazenamento de dados.
É algo que eu estarei pensando enquanto continuo com meu grande projeto de remodelação da casa. Por favor, envie-me seus pensamentos a respeito dos Grandes Dados (Big Data), converged storage e as tendências para 2012, podemos continuar a conversa por aqui ou sigam-me pelo Twitter: @HPBradParks
Aprenda mais:
>> 4 IT Trends that will help you remain competitive in 2012
>> Converged storage for the new era of computing
