Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. Clique na imagem para ve-la em tamanho maior. O termo Big Data esta cada vez mais popular, emboraainda esteja mal compreendido. Observo em muitas palestras que nao existeconsenso quanto a que realmente e Big Data e quais as tecnologias fundamentaisque o sustentam. E mais ainda, existem muitas duvidas de como tangibilizar oconceito, ou seja, como sair do conceitual e criar solucoes de negocio queagreguem valor para as companhias.Eliminar estas duvidas e essencial e o primeiro passopara as empresas se aventurarem em projetos Big Data. Para colocarmos otermo em contexto, Big Data vem chamando atencao pela acelerada escala em quevolumes cada vez maiores de dados sao criados pela sociedade. Ja falamoscomumente em petabytes de dados gerados cada dia, e zetabytes comeca a ser umaescala real e nao mais imaginaria e futurista. O que era futuro ha uma decada,terabytes, hoje nos ja temos nas nossas proprias casas. As tecnologias que sustentam Big Data podem seranalisadas sob duas oticas: as envolvidas com analytics, tendo Hadoop eMapReduce como nomes principais e as tecnologias de infraestrutura, quearmazenam e processam os petabytes de dados. Neste aspecto, destacam-se osbancos de dados NoSQL (No, significa not only SQL). Por que estas tecnologias?Por que Big Data e a simples constatacao pratica que o imenso volume de dadosgerados a cada dia excede a capacidade das tecnologias atuais de os trataremadequadamente. Comecando pelo inicio. O que e Big Data? Outro diaescrevi um post com uma formula simples para conceitualiza-lo. Big Data =volume + variedade + velocidade. Hoje adiciono mais dois Vs: veracidade evalor. Vamos detalhar estes topicos um pouco mais. Volume esta claro. Geramos petabytes de dados a cadadia. E estima-se que este volume dobre a cada 18 meses. Variedade tambem, poisestes dados vem de sistemas estruturados (hoje minoria) e nao estruturados (aimensa maioria), gerados por e-mails, midias sociais (Facebook, Twitter,YouTube e outros), documentos eletronicos, apresentacoes estilo Powerpoint,mensagens instantaneas, sensores, etiquetas RFID, cameras de video, etc. Velocidade porque muitas vezes precisamos agirpraticamente em tempo real sobre este imenso volume de dados, como em umcontrole automatico de trafego nas ruas. Veracidade porque precisamos tercerteza que os dados fazem sentido e sao autenticos. E valor porque eabsolutamente necessario qua a organizacao que implementa projetos de Big Dataobtenha retorno destes investimentos. Um exemplo poderia ser a area de seguros,onde a analise de fraudes poderia ser imensamente melhorada, minimizando-se osriscos, utilizando-se, por exemplo, de analise de dados que estao fora dasbases estruturadas das seguradoras, como os dados que estao circulandodiariamente nas midias sociais. Falamos que as tecnologias atuais de tratamento dedados nao sao mais adequadas. Por que? Vejamos o modelo relacional, propostopelo pesquisador da IBM, Edgar F. Codd, em 1969. Quando foi proposto, a demandaera