Apresentaçao fmu big data

42
A NOVA STARTUP Caio Gomes, @caiocgomes Diretor de Inovação e Big Data Maplink e Apontador

description

Apresetanção dada na semana de inovação e tecnologia da FMU sobre a relação e a importância do Big Data para as novas startups. Presentation given at Innovation and Technology Weetk at FMU College about Big Data and its importance to new startups.

Transcript of Apresentaçao fmu big data

Page 1: Apresentaçao fmu   big data

A NOVA STARTUP Caio Gomes, @caiocgomes Diretor de Inovação e Big Data Maplink e Apontador

Page 2: Apresentaçao fmu   big data

empreender é preciso •  2012

•  São Francisco: 336 •  Londres: 216

•  40 Startups com 1 Bilhão ou mais de valuation • Startups conhecidas: Facebook, Twitter, Tumblr

Page 3: Apresentaçao fmu   big data
Page 4: Apresentaçao fmu   big data

• Tem garagem? • Local da residência •  Idade • Local de trabalho • Sexo • Trabalha com o carro? • Quanto anda?

Page 5: Apresentaçao fmu   big data

a startup de tecnologia • programadores • marketing • design • UX

Page 6: Apresentaçao fmu   big data
Page 7: Apresentaçao fmu   big data
Page 8: Apresentaçao fmu   big data

age of data • Pesquisa Cientifica (LHC, Genética, Meteorologia)

• Mercado Financeiro • Entretenimento(Netflix, Amazon)

• NÜMEROS

Page 9: Apresentaçao fmu   big data
Page 10: Apresentaçao fmu   big data
Page 11: Apresentaçao fmu   big data

o produto do novo século • Adaptativo • Pessoal • Customizado • Não intrusivo • Serendipitous

Page 12: Apresentaçao fmu   big data

BIG DATA

Page 13: Apresentaçao fmu   big data

big data

Coleta e Armazenamento

Processamento

Extrair informações de negócio

Visualização

Coleta e Armazenamento

Processamento

Extrair informações de negócio

Visualização

Page 14: Apresentaçao fmu   big data
Page 15: Apresentaçao fmu   big data
Page 16: Apresentaçao fmu   big data

CONTANDO PALAVRAS

Page 17: Apresentaçao fmu   big data

MAPREDUCE Processando bases gigantes de dados

Page 18: Apresentaçao fmu   big data

Dados

Saída

Master Node

Worker

Worker

Worker

Page 19: Apresentaçao fmu   big data

mapreduce

Vantagens

• Escalável •  Facilmente corrigível • Custo de expansão baixo • Virtualmente sem limites

de expansão • Sem equipamentos

expecificos

Desvantagens

• Arquitetura de baixo nível • Escrever tarefas simples

não é natural • Nova maneira de pensar

Page 20: Apresentaçao fmu   big data
Page 21: Apresentaçao fmu   big data

• Yahoo/ Apache • Google / 2004 • Grandes empresas: FB,

Twitter, Apple, Microsoft, IBM

• AWS: 5.5 mi de clusters abertos

• Controle das máquinas • Organização das tarefas • Distribuição da ordem das

tarefas • Controle de falhas • Arquivos armazenados

Page 22: Apresentaçao fmu   big data

big data

Coleta e Armazenamento

Processamento

Extrair informações de negócio

Visualização

Page 23: Apresentaçao fmu   big data

DATA SCIENCE Extraindo informações uteis para seu negócio

Page 24: Apresentaçao fmu   big data

data science • Extrair informações aparentemente escondidas. • Métodos matemáticos que aumentem a certitude de

acerto •  Técnicas de Machine Learning

•  Regressão •  Clustering •  Classificação

• Nova área para TI. Área em alta!

Page 25: Apresentaçao fmu   big data

padrões escondidos

Page 26: Apresentaçao fmu   big data
Page 27: Apresentaçao fmu   big data

Publicidade

• AdSense • Remarketing • Segmentação de usuários • Recomendação • Promoções individualizadas

Page 28: Apresentaçao fmu   big data

jornal overkill • 

Page 29: Apresentaçao fmu   big data

público especifico

• 

Page 30: Apresentaçao fmu   big data

Publicidade

• Onde almoço? • Músicas preferidas? • Tipos de livros? • Filmes? • Séries?

Page 31: Apresentaçao fmu   big data

mapreduce

Page 32: Apresentaçao fmu   big data

mapreduce

Page 33: Apresentaçao fmu   big data

startup do século XXI • Pessoal •  Individualizada

Page 34: Apresentaçao fmu   big data
Page 35: Apresentaçao fmu   big data

Seguradora

• Onde almoço? • Músicas preferidas? • Multas? • Como dirijo? • Que horários dirijo?

Page 36: Apresentaçao fmu   big data

metereologia

Page 37: Apresentaçao fmu   big data

•  Medidas de trânsito Veiculos enviam informação a cada instante.

•  O que quero saber? Estado da via Tipo de veículos Como os motoristas dirigem Velocidade da via

19 de 21

estimando o trânsito

Page 38: Apresentaçao fmu   big data
Page 39: Apresentaçao fmu   big data

SOBRE O ROTEIRIZADOR

<Route><Category>1</Category><DateTime>0001-01-01T00:00:00</DateTime><Destination xmlns:a="http://schemas.datacontract.org/2004/07/SwissKnife.Spatial"><a:Lat>-8.150483</a:Lat><a:Lng>-35.420284</a:Lng></Destination><Origin xmlns:a="http://schemas.datacontract.org/2004/07/SwissKnife.Spatial"><a:Lat>-8.149973</a:Lat><a:Lng>-35.41825</a:Lng></Origin>

o que recebemos?

Page 40: Apresentaçao fmu   big data

SOBRE O ROTEIRIZADOR padrão da marginal pinheiros

Page 41: Apresentaçao fmu   big data

SOBRE O ROTEIRIZADOR relembrando • Nova era para startups • Big Data é parte fundamental das empresas do futuro • Diversas áreas ainda esperam a chance de ter seus

dados aproveitados

• Oportunidades novas pra quem está entrando no mercado!

Page 42: Apresentaçao fmu   big data

OBRIGADO! @caiocgomes Diretor de Inovação e Big Data Maplink e Apontador