Big Data

5
Big Data É um conjunto de dados extremamente amplos e que, por este motivo, necessitam de ferramentas especialmente preparadas para lidar com grandes volumes, de forma que toda e qualquer informação nestes meios possa ser encontrada, analisada e aproveitada em tempo hábil. A questão é que o parágrafo anterior não é ficção científica, em analogia à obra de George Orwell em seu clássico “1984”. O texto descreve o que acontece hoje no nosso mundo virtual. Espalhados pela internet estão os registros de toda a nossa atividade na grande rede, como por exemplo: • Horário em que entramos e saímos da rede; • Sites que visitamos; • Vídeos que assistimos; • Produtos que clicamos; • Pessoas com quem nos relacionamos; • Assuntos que nos interessam; • Cidade em que moramos; • Nossa idade; • E infinitas outras informações pessoais capazes de descrever nossas personalidades e padrões de comportamento.

description

Informatica

Transcript of Big Data

  • Big Data

    um conjunto de dados extremamente amplos e que, por este motivo,

    necessitam de ferramentas especialmente preparadas para lidar com grandes

    volumes, de forma que toda e qualquer informao nestes meios possa ser

    encontrada, analisada e aproveitada em tempo hbil.

    A questo que o pargrafo anterior no fico cientfica, em analogia obra

    de George Orwell em seu clssico 1984. O texto descreve o que acontece hoje no

    nosso mundo virtual. Espalhados pela internet esto os registros de toda a nossa

    atividade na grande rede, como por exemplo:

    Horrio em que entramos e samos da rede;

    Sites que visitamos;

    Vdeos que assistimos;

    Produtos que clicamos;

    Pessoas com quem nos relacionamos;

    Assuntos que nos interessam;

    Cidade em que moramos;

    Nossa idade;

    E infinitas outras informaes pessoais capazes de descrever nossas

    personalidades e padres de comportamento.

  • At pouco tempo, a no organizao destas informaes atuava como uma

    proteo ao nosso anonimato. Com a exploso das redes sociais online, estas

    informaes esto ficando cada vez mais disponveis e organizadas.

    Voltando para o exemplo do mundo real, como se fosse apresentada uma

    proposta para instalar uma cmera dentro da nossa casa. Esta cmera permitiria

    vermos a famlia quando no estivssemos em casa e, a qualquer momento, saber se

    est tudo bem com ela. Poderamos at pedir a um amigo de confiana que desse

    uma olhada de vez em quando em algumas das imagens para ver se est tudo bem.

    O lado cruel que a proposta no mencionaria que outras pessoas desconhecidas

    tambm poderiam, atravs das cmeras, monitorar o que EU e minha famlia fazemos.

    Que tal agora, reler o pargrafo anterior substituindo a palavra cmera por

    rede social online? Ok! O risco est claro, mas o objetivo no criar pnico. O que

    precisamos saber que isto existe e a navegao na internet no um ato annimo.

    Uma vez conscientes disto, podemos passar a pensar nos benefcios que esta

    tendncia traz.

    Big data no , por concepo, uma ferramenta para simplesmente gerenciar

    dados humanos. Segundo Viktor Mayer-Schonberger e Kenneth Cukier, em seu livro

    Big Data: A Revolution That Will Transform How We Live, Work, and Think, Big data

    se refere a processar grandes volumes de informao e tirar concluses que no

    seriam possveis em baixa escala. Este conceito aplicvel a qualquer tipo de

    informao. Big data pode, por exemplo, ser utilizado para:

    Identificar tendncias de fraudes em operaes financeiras;

    Monitorar a percepo de qualidade de clientes em relao a uma marca;

    Tirar concluses sobre trnsito em grandes centros com base nas

    informaes de localizao de telefones celulares;

    Identificar riscos de atentados segurana com base nos padres de posts

    nas redes sociais.

  • O processamento de Big data pode otimizar trabalhos estatsticos em geral,

    que hoje dependem de longos perodos de levantamento de dados em campo. Neste

    sentido, uma grande mudana conceitual reside no fato de Big data analisar eventos

    em andamento, enquanto grandes estudos estatsticos revelam uma situao j

    ocorrida, j que um estudo estatstico com milhes de amostras pode consumir

    semanas ou meses entre coleta e anlise de dados.

    Enfim, Big data, como toda tecnologia em si, pode ser aplicada em favor da

    sociedade ou contra ela. Na conhecida definio que a diferena entre o remdio e o

    veneno a dose, estamos frente a uma poderosa ferramenta capaz de beneficiar a

    qualidade de vida humana. Resta cuidarmos, enquanto sociedade, para que sua

    utilizao seja de fato positiva.

    O volume de dados comerciais gerados aumentou consistentemente ano a ano,

    especialmente a partir de 2000, quando a mudana do formato analgico pelo digital

    comeou para valer. Atualmente, a revoluo digital est em plena velocidade. Todos

    os tipos de informaes podem ser armazenados em formato binriono apenas

    dados de aplicaes empresariais, mas tambm de pginas da Web; sites de mdia

    social; trocas de e-mail; ndices de pesquisa; fluxos de clique; sensores de

    equipamento e todos os tipos de arquivos de multimdia, inclusive udio, vdeo e

    fotogrfico. Segundo o IDC, o mundo produziu 1 trilho de GB de dados em 2010,

    motivados por bilhes de telefones mveis, dezenas de bilhes de postagens em

    mdias sociais e uma matriz sempre em expanso de sensores em rede de carros,

    medidores, recipientes de entrega, equipamentos de cho de fbrica, terminais de

    pontos de venda e muitas outras origens.

    Os CIOs esto tentando analisar esse fluxo grande de dados e desenvolver

    plataformas de anlises capazes de sintetizar dados estruturados tradicionais com

    tipos de dados semiestruturados e desestruturados. De acordo com mais de 1.000

    CIOs e executivos de negcios entrevistados pelo IDC no ano passado, as anlises

    comerciais foram consideradas a rea tecnolgica nmero 1 que permitiria a suas

    organizaes conseguir uma margem competitiva no ano seguinte.1

  • O volume total de dados cresceu rapidamente a partir de 2000 com a

    digitalizao dominante do contedoFigura 1. O volume total de dados cresceu

    rapidamente a partir de 2000 com a digitalizao dominante do contedo [Fonte:

    Hilbert e Lopez, Science, 2011].

    Por que o entusiasmo? Quando capturado e analisado corretamente, o Big

    Data pode oferecer informaes nicas sobre tendncias de mercado, padres de

    compra, ciclos de manuteno e muitas outras questes comerciaisreduzir custos

    e permitir decises de negcios mais especficas. Uma pesquisa feita recentemente

    pelo Independent Oracle Users Group (IOUG) revelou que aproximadamente 48% das

    empresas esperam um aumento significativo ou moderado na anlise de dados

    desestruturados em relao aos prximos cinco anos.

    As Possibilidades

    CIOs de praticamente todos os setores esto acordando para as possibilidades

    do Big Data. Por exemplo, as empresas de manufatura normalmente inserem

    sensores em seu maquinrio para monitorar padres de uso, prever problemas de

    manuteno e melhorar a qualidade da produo. O estudo desses fluxos de dados

    permite que elas melhorem seus produtos e consigam ciclos de servio mais precisos.

    Os anunciantes usam dados sobre o local dos fornecedores de telecomunicao para

    segmentar clientes quando eles esto prximos de uma loja, de um caf ou de um

    restaurante e, em seguida, respondem com promoes insuperveis. Os varejistas

    dependem da mdia social e dos arquivos de blog para melhorar a segmentao do

    cliente e criar campanhas de marketing personalizadas. Sites de mdia social, como o

    Facebook e o LinkedIn, usam o Big Data para personalizar interaes entre seus

    membros. As empresas de energia coletam um grande volume de dados enquanto

    monitoram a vazo de gs e lquidos em seus poos e dutos. Uma anlise criteriosa

    d a eles um aviso antecipado sobre problemas de manuteno e abastecimento em

    potencial.

    Um dos melhores exemplos do Big Data em ao o monitoramento do

    sentimento, que abrange agregar dados de operaes de call center, cliques na Web,

    novos feeds, blogs e postagens em mdias sociais para identificar comentrios

    positivos ou negativos sobre uma empresa, um produto ou uma campanha.

  • Sensores eletrnicos monitoram no apenas as condies mecnicas e

    atmosfricas, mas tambm a biomtrica do corpo humano. Na assistncia mdica,

    existe uma grande oportunidade no apenas de melhorar os resultados do paciente,

    mas tambm de monitorar as tendncias em diagnsticos, tratamentos e

    reivindicaes em assistncia mdica para tomar decises clnicas e administrativas

    melhores.

    Embora cada um desses exemplos do setor ilustre o potencial do Big Data em

    instncias especficas, as oportunidades ficam ainda mais atraentes assim que os

    dados so analisados na forma agregada. Se agregar os dados de milhares de

    pacientes, voc poder ver como as mudanas na biomtrica so precursoras de

    graves condies mdicas, o que pode prevenir um derrame ou um ataque cardaco.

    Se milhares de clientes tm uma preferncia semelhante, milhares de sensores

    revelam um padro de falha no equipamento, ou milhares de monitores cardacos

    mostram uma correlao entre nveis biomtricos e reaes adversas, podemos

    comear a transformar tendncias em previsese acabar usando o Big Data para

    realizar aes corretivas ou proativas.

    A Tecnologia

    Os dados comerciais tradicionais so facilmente estruturados em colunas e

    linhas e armazenados em um banco de dados relacional. O Big Data costuma ser

    desestruturado (udio, vdeo, fotogrfico) ou semiestruturado (postagens de mdia,

    dados geoespaciais, e-mails). necessrio um conjunto especializado de ferramentas

    para agregar valor junto a esses tipos de dados.

    Com a Oracle Exadata Database Machine e a Oracle Exalytics Business

    Intelligence Machine, o Oracle Big Data Appliance oferece tudo de que uma

    organizao precisa para adquirir, organizar, analisar e tomar decises que

    maximizem o valor do Big Data. A Figura 2 mostra trs Oracle Big Data Appliances

    transmitindo dados de sensores e mdia social, adquirindo esses dados, organizando-

    os e aproveitando o Oracle Exadata para anlise.