Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no...

30
P l a t a f o r m a d e Ciê n c i a d e D a d os a aplicada à Saúde P r o f . D r . M a r c e l P e d r o s o P r o f . D r . M a r c e l P e d r o s o Pesquisador em Saúde Pública

Transcript of Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no...

Page 1: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

Plataforma de

CCiência de Dadosaaplicada à Saúde

Prof. Dr. Marcel PedrosoProf. Dr. Marcel PedrosoPesquisador em Saúde Pública

Page 2: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 3: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 4: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 5: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 6: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 7: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 8: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 9: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CIÊNCIA DE DADOS - DEFINIÇÃO

Page 10: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

OBJETIVO PRINCIPALPesquisar, desenvolver e disponibilizar Plataforma de Ciência de Dados para armazenamento, gestão e análise de Big Data em Saúde para pesquisadores, docentes e discentes de instituições de ensino e pesquisa, bem como, gestores governamentais

OBETIVOS ESPECÍFICOSPesquisar e avaliar ferramentas tecnológicas e estratégias para o desenvolvimento da

PlataformaIdentificar, coletar, normalizar, armazenar e conectar as bases de dados de interesseAdquirir equipamentos, desenvolver, testar e homologar a PlataformaConstruir ferramentas e aplicativos para análise visual, análise multicritério, mineração

de dados e análise preditivaCapacitar equipe de referência em Ciência de Dados

Page 11: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

INSTITUIÇÕES PARCEIRAS

Escola de Informática e Computação

Page 12: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

Equipe de Referência em CIÊNCIA DE DADOS

Estatística e Matemática

Domínio científico do objeto

em estudo(FIOCRUZ)

Ciência da Computação

Pesquisa tradicional

Software tradicional

Aprendizagem de máquina e

Mineração de Dados

Ciência de

Dados

Page 13: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

VOLUME E VARIEDADE (até 2015)

180 milhões de autorizações de internações hospitalares (Datasus)57 milhões de registros de nascimentos (Datasus)19 milhões de declarações de óbito (Datasus)24 bilhões de registros de procedimentos ambulatoriais (Datasus)2,5 bilhões de registros de doses de vacinas (Datasus)120 milhões de questionários domiciliares dos Censos de 2000 e 2010 (IBGE)milhões de medições diárias realizadas pelo INPE e CEMADEN

diariamente são criados 2,5 quintilhões de dados, sendo que 3/4 deste conteúdo é produzido por internautas (dados interacionais) e não empresas ou instituições (dados transacionais)As interações com Google geram diariamente 24 petabytes (1 PB é o suficiente para

armazenar, por exemplo, um vídeo em alta definição com duração de 13,3 anos)

Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia

Page 14: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

Descoberta de Conhecimento em Bases de DadosKnowledge Discovery in Databases – KDD

Page 15: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

PLATAFORMA DE CIÊNCIA DE DADOS como serviço (PaaS)

COMPONENTES DA PLATAFORMA

Indexação, Extração e Análise Visual

Inovação e Aprendizagem Colaborativa

Data Science Lab

Mineração de Dados e Análise Preditiva

Page 16: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

COMPONENTE ANÁLISE VISUAL

Análise VisualIndexação, extração e análise visual de grandes quantidades de dados do setor

saúde e seus determinantes socioambientais

Page 17: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

COMPONENTE MINERAÇÃODE DADOS

Mineração de Dados e Análise PreditivaConexão aos dados da Plataforma via R Studio Server

Page 18: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

COMPONENTE DATA SCIENCE LAB

Data Science LabInovação e Aprendizagem Colaborativa

Page 19: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta
Page 20: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

INFORMAÇÕES SOBRE UTILIZAÇÃO DA PLATAFORMA

2.200+ usuários diferentes acessaram o site

5 minutos em média de tempo de visita51% de novos acessos

300+ usuários cadastrados na Plataforma

Page 21: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

HARDWARE• 2 servidores para de gestão do cluster

• 4 Processadores Intel Xeon E5-2630 v3 com 8

Núcleos e 2.4GHz cada

• 256 GB memória RDIMM total (126 GB por servidor)

• 4 servidores para armazenamento de dados

• 40 Terabyte de armazenamento

• 8 Processadores Intel Xeon E5-2630 v3 com 8

Núcleos e 2.4GHz cada

• 64 GB memória RDIMM total (16 GB por servidor)

• 10 Gigabit conexão internet

Page 22: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CAPACITAÇÃO em CIÊNCIA DE DADOS

EQUIPE DE REFERÊNCIAICICT - LNCC - USP – CEFET - MS - UnB

Plataforma online de capacitação em Ciência de Dados DataCamp

DISCIPLINA e ATUALIZAÇÃO - ICICTCiência de Dados aplicada à Saúde

Curso presencial (120 horas) TCC utilizando a Plataforma

Page 23: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CAPACITAÇÃO em CIÊNCIA DE DADOS

Participação de integrantes do Icict no 13º Programa de Verão do LNCC, em Petrópolis.

Fonte: Matéria da Ascom/Icict intitulada “Grupo de Pesquisa da Fiocruz adota estratégia Big Data em Saúde”.

Page 24: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CAPACITAÇÃO em CIÊNCIA DE DADOS

Seminário para lançamento da Plataforma de Ciência de Dados aplicada à Saúde

Fonte: Matéria da Ascom/Icict intitulada “Especialistas em Ciência de Dados e Saúde discutem ferramentas e técnicas em Seminário do Centro de Estudos”.

Page 25: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CAPACITAÇÃO em CIÊNCIA DE DADOS

Page 26: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CAPACITAÇÃO em CIÊNCIA DE DADOSAula e visita técnica da 1ª turma de Ciência de Dados aplicada à Saúde ao LNCC

Fonte: Matéria da Ascom/Icict intitulada Alunos do curso de Ciência de Dados visitam o LNCC, em Petrópolis”.

Page 27: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

PÓXIMOS PASSOS - MINERAÇÃO DE DADOS E MACHINE LEARNING G VISUAL

Page 28: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

Computação Científica e Big Data em Saúde

GRUPO DE PESQUISA NO CNPq

OUTRAS PARCERIAS? (Instituições e pesquisadores)

[email protected]

http://dgp.cnpq.br/dgp/espelhogrupo/4230691756969719

Page 29: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

CRONOGRAMA

PRINCIPAIS PARCEIROS

Page 30: Plataforma de Ciência de Dados - RNP...9Os 1.3 bilhões de usuários do Facebook (68 milhões no Brasil) compartilham mais de 350 milhões de fotos e geram 500 terabytes por dia Descoberta

Institute for Scientific and Technological Communication and Information on Health