Big Data
description
Transcript of Big Data
-
Big Data
um conjunto de dados extremamente amplos e que, por este motivo,
necessitam de ferramentas especialmente preparadas para lidar com grandes
volumes, de forma que toda e qualquer informao nestes meios possa ser
encontrada, analisada e aproveitada em tempo hbil.
A questo que o pargrafo anterior no fico cientfica, em analogia obra
de George Orwell em seu clssico 1984. O texto descreve o que acontece hoje no
nosso mundo virtual. Espalhados pela internet esto os registros de toda a nossa
atividade na grande rede, como por exemplo:
Horrio em que entramos e samos da rede;
Sites que visitamos;
Vdeos que assistimos;
Produtos que clicamos;
Pessoas com quem nos relacionamos;
Assuntos que nos interessam;
Cidade em que moramos;
Nossa idade;
E infinitas outras informaes pessoais capazes de descrever nossas
personalidades e padres de comportamento.
-
At pouco tempo, a no organizao destas informaes atuava como uma
proteo ao nosso anonimato. Com a exploso das redes sociais online, estas
informaes esto ficando cada vez mais disponveis e organizadas.
Voltando para o exemplo do mundo real, como se fosse apresentada uma
proposta para instalar uma cmera dentro da nossa casa. Esta cmera permitiria
vermos a famlia quando no estivssemos em casa e, a qualquer momento, saber se
est tudo bem com ela. Poderamos at pedir a um amigo de confiana que desse
uma olhada de vez em quando em algumas das imagens para ver se est tudo bem.
O lado cruel que a proposta no mencionaria que outras pessoas desconhecidas
tambm poderiam, atravs das cmeras, monitorar o que EU e minha famlia fazemos.
Que tal agora, reler o pargrafo anterior substituindo a palavra cmera por
rede social online? Ok! O risco est claro, mas o objetivo no criar pnico. O que
precisamos saber que isto existe e a navegao na internet no um ato annimo.
Uma vez conscientes disto, podemos passar a pensar nos benefcios que esta
tendncia traz.
Big data no , por concepo, uma ferramenta para simplesmente gerenciar
dados humanos. Segundo Viktor Mayer-Schonberger e Kenneth Cukier, em seu livro
Big Data: A Revolution That Will Transform How We Live, Work, and Think, Big data
se refere a processar grandes volumes de informao e tirar concluses que no
seriam possveis em baixa escala. Este conceito aplicvel a qualquer tipo de
informao. Big data pode, por exemplo, ser utilizado para:
Identificar tendncias de fraudes em operaes financeiras;
Monitorar a percepo de qualidade de clientes em relao a uma marca;
Tirar concluses sobre trnsito em grandes centros com base nas
informaes de localizao de telefones celulares;
Identificar riscos de atentados segurana com base nos padres de posts
nas redes sociais.
-
O processamento de Big data pode otimizar trabalhos estatsticos em geral,
que hoje dependem de longos perodos de levantamento de dados em campo. Neste
sentido, uma grande mudana conceitual reside no fato de Big data analisar eventos
em andamento, enquanto grandes estudos estatsticos revelam uma situao j
ocorrida, j que um estudo estatstico com milhes de amostras pode consumir
semanas ou meses entre coleta e anlise de dados.
Enfim, Big data, como toda tecnologia em si, pode ser aplicada em favor da
sociedade ou contra ela. Na conhecida definio que a diferena entre o remdio e o
veneno a dose, estamos frente a uma poderosa ferramenta capaz de beneficiar a
qualidade de vida humana. Resta cuidarmos, enquanto sociedade, para que sua
utilizao seja de fato positiva.
O volume de dados comerciais gerados aumentou consistentemente ano a ano,
especialmente a partir de 2000, quando a mudana do formato analgico pelo digital
comeou para valer. Atualmente, a revoluo digital est em plena velocidade. Todos
os tipos de informaes podem ser armazenados em formato binriono apenas
dados de aplicaes empresariais, mas tambm de pginas da Web; sites de mdia
social; trocas de e-mail; ndices de pesquisa; fluxos de clique; sensores de
equipamento e todos os tipos de arquivos de multimdia, inclusive udio, vdeo e
fotogrfico. Segundo o IDC, o mundo produziu 1 trilho de GB de dados em 2010,
motivados por bilhes de telefones mveis, dezenas de bilhes de postagens em
mdias sociais e uma matriz sempre em expanso de sensores em rede de carros,
medidores, recipientes de entrega, equipamentos de cho de fbrica, terminais de
pontos de venda e muitas outras origens.
Os CIOs esto tentando analisar esse fluxo grande de dados e desenvolver
plataformas de anlises capazes de sintetizar dados estruturados tradicionais com
tipos de dados semiestruturados e desestruturados. De acordo com mais de 1.000
CIOs e executivos de negcios entrevistados pelo IDC no ano passado, as anlises
comerciais foram consideradas a rea tecnolgica nmero 1 que permitiria a suas
organizaes conseguir uma margem competitiva no ano seguinte.1
-
O volume total de dados cresceu rapidamente a partir de 2000 com a
digitalizao dominante do contedoFigura 1. O volume total de dados cresceu
rapidamente a partir de 2000 com a digitalizao dominante do contedo [Fonte:
Hilbert e Lopez, Science, 2011].
Por que o entusiasmo? Quando capturado e analisado corretamente, o Big
Data pode oferecer informaes nicas sobre tendncias de mercado, padres de
compra, ciclos de manuteno e muitas outras questes comerciaisreduzir custos
e permitir decises de negcios mais especficas. Uma pesquisa feita recentemente
pelo Independent Oracle Users Group (IOUG) revelou que aproximadamente 48% das
empresas esperam um aumento significativo ou moderado na anlise de dados
desestruturados em relao aos prximos cinco anos.
As Possibilidades
CIOs de praticamente todos os setores esto acordando para as possibilidades
do Big Data. Por exemplo, as empresas de manufatura normalmente inserem
sensores em seu maquinrio para monitorar padres de uso, prever problemas de
manuteno e melhorar a qualidade da produo. O estudo desses fluxos de dados
permite que elas melhorem seus produtos e consigam ciclos de servio mais precisos.
Os anunciantes usam dados sobre o local dos fornecedores de telecomunicao para
segmentar clientes quando eles esto prximos de uma loja, de um caf ou de um
restaurante e, em seguida, respondem com promoes insuperveis. Os varejistas
dependem da mdia social e dos arquivos de blog para melhorar a segmentao do
cliente e criar campanhas de marketing personalizadas. Sites de mdia social, como o
Facebook e o LinkedIn, usam o Big Data para personalizar interaes entre seus
membros. As empresas de energia coletam um grande volume de dados enquanto
monitoram a vazo de gs e lquidos em seus poos e dutos. Uma anlise criteriosa
d a eles um aviso antecipado sobre problemas de manuteno e abastecimento em
potencial.
Um dos melhores exemplos do Big Data em ao o monitoramento do
sentimento, que abrange agregar dados de operaes de call center, cliques na Web,
novos feeds, blogs e postagens em mdias sociais para identificar comentrios
positivos ou negativos sobre uma empresa, um produto ou uma campanha.
-
Sensores eletrnicos monitoram no apenas as condies mecnicas e
atmosfricas, mas tambm a biomtrica do corpo humano. Na assistncia mdica,
existe uma grande oportunidade no apenas de melhorar os resultados do paciente,
mas tambm de monitorar as tendncias em diagnsticos, tratamentos e
reivindicaes em assistncia mdica para tomar decises clnicas e administrativas
melhores.
Embora cada um desses exemplos do setor ilustre o potencial do Big Data em
instncias especficas, as oportunidades ficam ainda mais atraentes assim que os
dados so analisados na forma agregada. Se agregar os dados de milhares de
pacientes, voc poder ver como as mudanas na biomtrica so precursoras de
graves condies mdicas, o que pode prevenir um derrame ou um ataque cardaco.
Se milhares de clientes tm uma preferncia semelhante, milhares de sensores
revelam um padro de falha no equipamento, ou milhares de monitores cardacos
mostram uma correlao entre nveis biomtricos e reaes adversas, podemos
comear a transformar tendncias em previsese acabar usando o Big Data para
realizar aes corretivas ou proativas.
A Tecnologia
Os dados comerciais tradicionais so facilmente estruturados em colunas e
linhas e armazenados em um banco de dados relacional. O Big Data costuma ser
desestruturado (udio, vdeo, fotogrfico) ou semiestruturado (postagens de mdia,
dados geoespaciais, e-mails). necessrio um conjunto especializado de ferramentas
para agregar valor junto a esses tipos de dados.
Com a Oracle Exadata Database Machine e a Oracle Exalytics Business
Intelligence Machine, o Oracle Big Data Appliance oferece tudo de que uma
organizao precisa para adquirir, organizar, analisar e tomar decises que
maximizem o valor do Big Data. A Figura 2 mostra trs Oracle Big Data Appliances
transmitindo dados de sensores e mdia social, adquirindo esses dados, organizando-
os e aproveitando o Oracle Exadata para anlise.