Demonstrações de análises de dados para social media e jornalismo

141
Olar..

description

O trabalho baseado em dados está em voga no mundo da TI e da comunicação. Matérias como big data, redes neurais, estatística, datamining, regressões, entre outras, podem inibir profissionais de comunicação – normalmente sem traquejo para aspectos técnicos da computação – que estão interessados em explorar suas possibilidades. Algumas novas tecnologias, como a de máquinas virtuais, podem ser usadas como um atalho para ferramentas que estavam antes disponíveis apenas para quem tinha domínio técnico. Com essas tecnologias, é possível acessar bibliotecas populares para análise de dados a partir de um navegador convencional. Vamos apresentar demonstrações práticas do uso de dados para social media e jornalismo usando essas soluções.

Transcript of Demonstrações de análises de dados para social media e jornalismo

Page 1: Demonstrações de análises de dados para social media e jornalismo

Olar..

Page 2: Demonstrações de análises de dados para social media e jornalismo
Page 3: Demonstrações de análises de dados para social media e jornalismo

Rafa Spoladore

Page 4: Demonstrações de análises de dados para social media e jornalismo
Page 5: Demonstrações de análises de dados para social media e jornalismo

Rafa Spoladorenerd profissional, professional geek

Page 6: Demonstrações de análises de dados para social media e jornalismo

Rafa Spoladore;)

ScientifiCloud

Page 7: Demonstrações de análises de dados para social media e jornalismo

OBJETIVO

Ressaltar a importância estratégica da análise

de dados.

Page 8: Demonstrações de análises de dados para social media e jornalismo

‘Master ofThe Obvious’

Page 9: Demonstrações de análises de dados para social media e jornalismo

‘NOVIDADE’Soluções sofisticadas de

análise de dados estão mais acessíveis para profissionais e negócios de social media

e jornalismo.

Page 10: Demonstrações de análises de dados para social media e jornalismo

‘NOVIDADE’Soluções sofisticadas de

análise de dados estão mais acessíveis para profissionais e negócios de social media

e jornalismo.

Page 11: Demonstrações de análises de dados para social media e jornalismo

‘NOVIDADE’Soluções sofisticadas de

análise de dados estão mais ace$$íveis para profissionais e negócios de social media

e jornalismo.

Page 12: Demonstrações de análises de dados para social media e jornalismo

Roteiro:●Dados●Ciência●Padrões●Big data

●Social media●Jornalismo

●Jabá

Page 13: Demonstrações de análises de dados para social media e jornalismo

Roteiro:●Dados análise de dados

●Ciência base teórica●Padrões busca por informação

●Big data hypes●Social media Habib’s●Jornalismo Eleições●Jabá ScientifiCloud

Page 14: Demonstrações de análises de dados para social media e jornalismo

DadosAnálise de dados, né!?

Page 15: Demonstrações de análises de dados para social media e jornalismo

DadosPor que analisar dados?

Page 16: Demonstrações de análises de dados para social media e jornalismo

HumanosNóis

Page 17: Demonstrações de análises de dados para social media e jornalismo

HumanosObcecados por padrões

Page 18: Demonstrações de análises de dados para social media e jornalismo

PADRÕES

Page 19: Demonstrações de análises de dados para social media e jornalismo
Page 20: Demonstrações de análises de dados para social media e jornalismo
Page 21: Demonstrações de análises de dados para social media e jornalismo
Page 22: Demonstrações de análises de dados para social media e jornalismo

HumanosObcecados por padrões

●rostos●música

●linguagem

Page 23: Demonstrações de análises de dados para social media e jornalismo

HumanosObcecados por padrões

●rostos●música

●linguagem (gramática etc.)

Page 24: Demonstrações de análises de dados para social media e jornalismo

CiênciaObcecada por padrões

●gravidade

Page 25: Demonstrações de análises de dados para social media e jornalismo
Page 26: Demonstrações de análises de dados para social media e jornalismo

Albert de Almeida, O Einstein

Page 27: Demonstrações de análises de dados para social media e jornalismo

CiênciaObcecada por padrões

●gravidade●genética

Page 28: Demonstrações de análises de dados para social media e jornalismo
Page 29: Demonstrações de análises de dados para social media e jornalismo

CiênciaObcecada por padrões

●gravidade●genética

●tecnologia

Page 30: Demonstrações de análises de dados para social media e jornalismo
Page 31: Demonstrações de análises de dados para social media e jornalismo
Page 32: Demonstrações de análises de dados para social media e jornalismo

Química etc.

Page 33: Demonstrações de análises de dados para social media e jornalismo

Informação

Page 34: Demonstrações de análises de dados para social media e jornalismo

‘O que é informaçãoe quando ela passou

a existir?’

Informação

Page 35: Demonstrações de análises de dados para social media e jornalismo

'WHAT IS NOT RANDOM?'

Page 36: Demonstrações de análises de dados para social media e jornalismo

InformaçãoObcecada por padrões

Informação = padrões queextraímos dos dados

Page 37: Demonstrações de análises de dados para social media e jornalismo

Dados

Page 38: Demonstrações de análises de dados para social media e jornalismo

https://www.youtube.com/watch?v=A4xW17jUJCw

Page 39: Demonstrações de análises de dados para social media e jornalismo
Page 40: Demonstrações de análises de dados para social media e jornalismo

RUÍDO

Page 41: Demonstrações de análises de dados para social media e jornalismo

Olhe para os dadosem busca de informação

Page 42: Demonstrações de análises de dados para social media e jornalismo

Olhe para os dadosem busca de informação

padrões

Page 43: Demonstrações de análises de dados para social media e jornalismo

rastelo

Page 44: Demonstrações de análises de dados para social media e jornalismo
Page 45: Demonstrações de análises de dados para social media e jornalismo

rasteloanálise de dados =

passar o rastelonos dados

Page 46: Demonstrações de análises de dados para social media e jornalismo
Page 47: Demonstrações de análises de dados para social media e jornalismo
Page 48: Demonstrações de análises de dados para social media e jornalismo
Page 49: Demonstrações de análises de dados para social media e jornalismo
Page 50: Demonstrações de análises de dados para social media e jornalismo

A qualidade da análise de dados depende dos dados disponíveis e do

“alcance do rastelo”.

Page 51: Demonstrações de análises de dados para social media e jornalismo

A qualidade da análise de dados depende dos dados disponíveis e do

“alcance do rastelo”.

●quando? (rotina?)●como? (superficial?)

●etc.

Page 52: Demonstrações de análises de dados para social media e jornalismo

Big data

Page 53: Demonstrações de análises de dados para social media e jornalismo

●Rich media●Web 2.0

●SustentabilidadeEtc.

Page 54: Demonstrações de análises de dados para social media e jornalismo

Big data de Almeida

Page 55: Demonstrações de análises de dados para social media e jornalismo

Sobrenaturalde Almeida

https://pt.wikipedia.org/wiki/Sobrenatural_de_Almeida

Page 56: Demonstrações de análises de dados para social media e jornalismo

Big data

Page 57: Demonstrações de análises de dados para social media e jornalismo
Page 58: Demonstrações de análises de dados para social media e jornalismo

●Custo●Tecnologia

Page 59: Demonstrações de análises de dados para social media e jornalismo

●Custo diminui●Tecnologia evolui

Page 60: Demonstrações de análises de dados para social media e jornalismo

Trilhões de dados em 'tempo real'Mesa (Google)

Big data para as 'massas'Hadoop 2 (Spark) ♥

Machine learning inspirada no neocórtexNuPIC e Grok (Numenta)

ModelagemCUDA (Nvidia)

Etc.

Page 61: Demonstrações de análises de dados para social media e jornalismo

Mas e o little data?

Page 62: Demonstrações de análises de dados para social media e jornalismo

Little dataExcel, txt, pdf, xml, metadadosPequenos arquivos do dia a dia

MicrodadosEtc.

Page 63: Demonstrações de análises de dados para social media e jornalismo

Little dataExcel, txt, pdf, xml, metadadosPequenos arquivos do dia a dia

MicrodadosEtc.

tempoBig

data

Page 64: Demonstrações de análises de dados para social media e jornalismo

Resumo até agora:

●Como humanos, analisamos os dados em busca de padrões.

●Como profissionais, analisamos os dados na busca de informações

vantajosas, valiosas, estratégicas etc.●O modelo big data barateia o

armazenamento e a análise de dados.

Page 65: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

Page 66: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

ferramentas(análise, monitoramento,

analytics etc.)

Page 67: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

ferramentas

Page 68: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

“Continue com as ferramentas que lhe

trazem valor.”

Page 69: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

“Continue com as ferramentas que lhe trazem

valor, mas também sofistique-se.”

Page 70: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

POR QUE ME SOFISTICAR?

Page 71: Demonstrações de análises de dados para social media e jornalismo

https://www.youtube.com/watch?v=0I2t12MZXtQ

Page 72: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

ESTRATÉGIA

Page 73: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

ESTRATÉGIAem grego strateegia

em latim strategiem francês stratégie

Page 74: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

COMO ME SOFISTICAR?

Page 75: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

ENTRANHE A ANÁLISEAPRENDA

CRIE CONHECIMENTOBUSQUE INFORMAÇÃO RELEVANTE

...profit

Page 76: Demonstrações de análises de dados para social media e jornalismo
Page 77: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

Se não puder entranhar =aproxime-se da análise

Se não puder aprender do zero =treine pessoas

Page 78: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

Demonstração

de análise de dados de uma palavra-chave no

stream do Twitter

Page 79: Demonstrações de análises de dados para social media e jornalismo

PALAVRA-CHAVE: habibs + habib's

Page 80: Demonstrações de análises de dados para social media e jornalismo

PERÍODO: 21 dias

Page 81: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

Plaformas:Android – 37.4%Web – 20.5%IPhone – 19.6%Instagram – 3.6%

TweetDeck – 2.9%Facebook – 2.8%Windows Phone – 1.7%Outras - resto

Page 82: Demonstrações de análises de dados para social media e jornalismo
Page 83: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

Palavras:ExplodindoAlimentadaBuchoLanchinhoBacon

Ganhou → 'igual'

Page 84: Demonstrações de análises de dados para social media e jornalismo

SOCIAL MEDIA

Palavra:Ônibus

Page 85: Demonstrações de análises de dados para social media e jornalismo

“Mulher no onibus tava c habibs quase peguei a caixa

e sai correndo”

Page 86: Demonstrações de análises de dados para social media e jornalismo

“ai vc vai no habibs e gasta todo seu dinheiro e dps nao

tem grana pra pegar onibus,e mente pro cobrador

que foi assaltada prair embora”

Page 87: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

Page 88: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insights** INFORMAÇÕES

RELEVANTES

Page 89: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insightÉ A INFORMAÇÃO

MAIS VALIOSA

Page 90: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insightINFORMAÇÃO MAIS

VALIOSA DE UMA ANÁLISE

Page 91: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

COMO CHEGAR NUM INSIGHT?

Page 92: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

ANTES DA ANÁLISEintuiçãovocação

experiênciaetc.

Page 93: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insight

Page 94: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insightaquisição dos dados

Page 95: Demonstrações de análises de dados para social media e jornalismo

(AQUISIÇÃO DOS DADOS)acesso aos dadosregistro dos dados

armazenamento dos dadosmodelagem dos dados

etc.

Page 96: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insightaquisição dos dados

Page 97: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insightaquisição dos dados

análise

Page 98: Demonstrações de análises de dados para social media e jornalismo

(A análise gera resultados.Nos resultados você procura

o[s] insight[s].)

Page 99: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

insightaquisição dos dados

análiseconfirmação

do insight

Page 100: Demonstrações de análises de dados para social media e jornalismo

Ou...

Page 101: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

DEPOIS DA ANÁLISE

Page 102: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

aquisição dos dados

análise

Page 103: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

aquisição dos dados

análise

busca de insights nos resultados

Page 104: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

aquisição dos dados

análise

busca de insights nos resultados

confirmação do insight

Page 105: Demonstrações de análises de dados para social media e jornalismo

http://www.transparencia.org.brhttp://www.excelencias.org.br

http://www.farejadordoplanalto.com.brhttp://transparencia.gov.br

TSE, Câmara, Senado

Etc.

Page 106: Demonstrações de análises de dados para social media e jornalismo

Insights antes da análise (premissas; hipóteses)

continuam dependentesde análise.

Page 107: Demonstrações de análises de dados para social media e jornalismo

Insights depois da análise complementam premissas ou hipóteses e usam a mesma

infra-estrutura.

Page 108: Demonstrações de análises de dados para social media e jornalismo

Insights depois da análise complementam premissas ou

hipóteses e otimizam ainfra-estrutura.

Page 109: Demonstrações de análises de dados para social media e jornalismo

Assim...

Page 110: Demonstrações de análises de dados para social media e jornalismo

Análise de dados sempre produz mais

insights quandoé rotina.

Page 111: Demonstrações de análises de dados para social media e jornalismo

E também...

Page 112: Demonstrações de análises de dados para social media e jornalismo

Análise de dados como rotina pode usar e otimizar a infra da análise ocasional.

Page 113: Demonstrações de análises de dados para social media e jornalismo

JORNALISMO

Demonstração

de análise de dadospara jornalismo

Page 114: Demonstrações de análises de dados para social media e jornalismo

JORNALISMOBuscando insights na

análise da:idade de todos os

candidatos desta eleição

Page 115: Demonstrações de análises de dados para social media e jornalismo
Page 116: Demonstrações de análises de dados para social media e jornalismo
Page 117: Demonstrações de análises de dados para social media e jornalismo

Resumo final total:●Dados são muito importantes.●Insights a partir da análise dos dados já são e

serão ainda mais estratégicos para um negócio.●É preciso estar o mais próximo possível da sua

informação estratégica.●Análise de dados já não é tão cara e está cada

vez mais e mais barata.●Softwares sofisticados para buscar insights estão

se popularizando.●Análise de dados precisa ser uma rotina.

Page 118: Demonstrações de análises de dados para social media e jornalismo

SOFTWARES SOFISTICADOS

Mas tipo quais, meu

filho?!

Page 119: Demonstrações de análises de dados para social media e jornalismo

SOFTWARES SOFISTICADOSPandasStatsmodelsScikit-learnNunPyNLTK (Natural Language Toolkit)PyMC (Bayesian statistical modeling)

etc.

Page 120: Demonstrações de análises de dados para social media e jornalismo

TUDO OPEN SOURCE

de Almeida

Page 121: Demonstrações de análises de dados para social media e jornalismo

SOFTWARES SOFISTICADOS

etc.

Page 122: Demonstrações de análises de dados para social media e jornalismo

ScientifiCloud

Page 123: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD"O homenzinho médio de nossas grandes cidades perambula entre os bancos e o tédio rotineiro dos escritórios, às vezes

temperados com ar condicionado. Sempre sonha com as férias e com a liberdade, sempre sonha com pagar as contas, até que, um dia, o coração para, e adeus."

– Pepe Mujica

Page 124: Demonstrações de análises de dados para social media e jornalismo
Page 125: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

O QUE FAZEMOSUma máquina virtual que empacota todos os softwares sofisticados que

citamos e os torna acessíveis a partir de uma interface web.

Page 126: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

É UM ATALHOExige alguma proficiência técnica

intermediária, mas não demanda um cientista de dados (ou de um

fornecedor muito caro).

Page 127: Demonstrações de análises de dados para social media e jornalismo

PARA SER UM “CIENTISTA”

1. Interesse2. Curiosidade3. Persistência

Page 128: Demonstrações de análises de dados para social media e jornalismo

FARTA DOCUMENTAÇÃO

FÓRUNS

EXEMPLOS PRONTOS

Google etc.

Page 129: Demonstrações de análises de dados para social media e jornalismo
Page 130: Demonstrações de análises de dados para social media e jornalismo
Page 131: Demonstrações de análises de dados para social media e jornalismo
Page 132: Demonstrações de análises de dados para social media e jornalismo
Page 133: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

PROFISSIONALDBA junior

Desenvolvedor juniorSysadmin juniorEstagiário junior

Page 134: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

PROFISSIONALDBA junior

Desenvolvedor juniorSysadmin junior

Junior junior (de matemática, sistemas, estatística etc.)

Page 135: Demonstrações de análises de dados para social media e jornalismo

Ou...NERD PROFISSIONAL(interesse, curiosidade,

persistência etc.)

Page 136: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

O QUE VENDEMOSAnálise de Dados

TreinamentoSuporte

Infra-estrutura

Page 137: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

O QUE VENDEMOSAnálise de Dados

TreinamentoSuporte

Infra-estrutura

Consultoria em geral etc.

Page 138: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD

EM BREVEInfografismo = ciência de

visualização de dados

Page 139: Demonstrações de análises de dados para social media e jornalismo

SCIENTIFICLOUD.COM

EM BREVEVersão 0.4 da SCi Python (análise)Versão 1 para jornalismo de dados

(criptografada)Versão 1 com Hadoop+R

(aprendizado)

Page 140: Demonstrações de análises de dados para social media e jornalismo

É ISSO AÍ,rapeizo...

Page 141: Demonstrações de análises de dados para social media e jornalismo

FIMPARA CONTATO, COMENTÁRIOS, CRÍTICAS OU SUGESTÕES -> [email protected] (Rafa Spoladore)

Blog ScientifiCloud.com -> http://scientificloud.com

Layout inspirado no Manifesto Web Tosqueirahttp://qualquer.org/tosqueira/manifesto.html

"Se um designer elogiar, não diga que é tosco,diga que é low profile."

MUITO OBRIGADO A TODOS!