(http://computerworld.uol.com.br/tecnologia/2011/04/07/missao-ti-controlar-montanha-de-dados)Por Redacao da Computerworld-EUAPublicada em 07 de abril de 2011 - 07h30Informacoes corporativas crescem de forma exponencial e demandam ferramentas avancadas. A oportunidade de controlar os processos que fazem analise em lote e em tempo real das montanhas de informacao existentes na forma de dados nao estruturados e, para a area de tecnologia de informacao (TI), uma chance de se firmar de vez como agente de negocios. E as ferramentas que estao surgindo para essas finalidades sao as que desenham esse cenario para TI. Um dos destaques e a plataforma em codigo aberto Apache Hadoop.Especialistas do mercado explicam que as empresas sentem cada vez mais a necessidade de aprimorar a analise das enormes quantidades de dados estocados em bancos de dados paralelos para saber tudo sobre o habito e a necessidade dos clientes. Isso permite que as companhias trabalhem melhor o planejamento estrategico e a nocao de marketing.A montanha de informacoes (que os norte-americanos chamam de big data) abrange todas as coletadas nos sistemas computacionais internos, as de transacoes financeiras e buscas na web, metadados de e-mail, consultas a mecanismos de busca, alem de atividades em redes sociais.De acordo com levantamentos do cientista chefe da empresa de cloud Joyent, Jason Hoffman, somente no ano de 2010 foram gerados 1,5 bilhao de Terabytes em informacoes do genero. As companhias, coletivamente, preencheram espacos de armazenamento com cerca de 16 milhoes de Terabytes de dados no mesmo ano.Algumas companhias ja estao encontrando maneiras de dissecar os dados com as ferramentas mais modernas. A Barnes & Noble, por exemplo, iniciou a analise de todas as informacoes possiveis de seus clientes virtuais para deliberar seus comportamentos e fatores determinantes para suas decisoes de compras.Segundo o vice-presidente de retencao de mercados e fidelidade, Marc Parrish, os logs web que indicavam como os usuarios estavam utilizando leitores e livros eletronicos, produziram 35 Terabytes de dados em 2010 e devem gerar mais 20 Terabytes em 2011. Ja tomamos decisoes importantes, com o auxilio de ferramentas de analise, sobre os proximos passos da empresa e sobre como lidar com o imaginario do cliente.Em outro caso, a radio norte-americana National Public Radio (NRP) utiliza ferramentas de relatorios para manter controle sobre os conjuntos de dados em constante crescimento e determinar tendencias sobre o uso do website. O software utilizado cria logs e metricas, alem de capturar dados e indices de outras aplicacoes, servidores e rede, tudo em um unico repositorio que pode ser pesquisado.A NPR estava usando o software de analise web Omniture, mas a analista de metricas da NPR, Sondra Russel, sentiu que a ferramenta nao era suficiente para lidar com os volumes de dados em constante crescimento da organizacao. Eu so queria saber quantas vezes alguem ouvia a um determinado programa e um periodo de tempo determinado, diz Sondra. Com o Splunkt, nosso novo software, nao ha mais atrasos entre a aparicao dos dados em uma pasta de consulta e a aparicao dos mesmos dados em relatorios. Posso ter graficos de demonstracao sem precisar de uma semana de preparacao, conta.O analista da RedMonk Stephen O Grady, aponta que o mercado