Integração de Dados Astronômicos Vinícius P. Freire José Macedo Fábio Porto.
Transcript of Integração de Dados Astronômicos Vinícius P. Freire José Macedo Fábio Porto.
Integração de Dados Astronômicos
Vinícius P. FreireJosé MacedoFábio Porto
1º Seminário de Pesquisa DEXL 212/6/2012
1º Seminário de Pesquisa DEXL 3
Hipparchus de Rhodes
• Segundo século a.C.• Mapa do céu• Descoberta– Deslocamento dos astros– Uma das maiores descobertas da astronomia– Graças ao seu mapa.
12/6/2012
1º Seminário de Pesquisa DEXL 4
Nos dias atuais
• Novas descobertas– Quasares• Tamanho do sistema solar• Mais brilhantes do que uma galáxia inteira• São os mais distantes do Universo
• Construção do mapa de todo o Universo– Poderá esclarecer as origens do Universo
12/6/2012
1º Seminário de Pesquisa DEXL 5
O que seria mapear todo o Universo?
• Medir posições e propriedades de todas as centenas de milhões de objetos celestes que um telescópio possa observar de forma adequada.– Mede as posições de forma bastante precisa• Distancias• Figura tridimensional
– Mapa do céu: diz onde olhar para encontrar
12/6/2012
1º Seminário de Pesquisa DEXL 6
Telescópio SDSS
12/6/2012
1º Seminário de Pesquisa DEXL 7
O que é um Catálogo?
Levantamento Espectrópico:
12/6/2012
1º Seminário de Pesquisa DEXL 8
Catálogos
12/6/2012
1º Seminário de Pesquisa DEXL 9
Integração de Dados
12/6/2012
1º Seminário de Pesquisa DEXL 10
Algoritmos
12/6/2012
1º Seminário de Pesquisa DEXL 11
International Virtual Observatory Alliance (IVOA)
12/6/2012
1º Seminário de Pesquisa DEXL 12
Arquitetura Virtual Observatory
12/6/2012
1º Seminário de Pesquisa DEXL 13
Problema Inicial
• Como construir uma visão linked data de huge database? -> Bilhões de objetos
12/6/2012
14
Proposta Inicial
• Construir uma visão integrada usando visões linked data;
• Materializar relacionamentos “sameAs” entre objetos, de acordo com os algoritmos de matching;
• Combina:– Representação do grafo
• sameAs
– Visão linked data de catálogos• Banco de dados relacional
1º Seminário de Pesquisa DEXL12/6/2012
1º Seminário de Pesquisa DEXL 15
Integração
12/6/2012
Céu com todos os objetos
1º Seminário de Pesquisa DEXL 16
Diferença quanto a integração de BD tradicional
• Volume de dados (huge); • Schema+instance;• “Same-as" + catalogos complementando
dados;• Integrar mapas com atributos contendo
valores diferentes (erro).
12/6/2012
1º Seminário de Pesquisa DEXL 17
Problemas a Tratar• Matching de Instâncias
– Estático / Móvel– Validar os catálogos– Astros e componentes de astros– Funções de Similaridade
• Matching de Schemas– Criação do Modelo Conceitual
• Integração Espacial– Mapas Diferentes
• Como processar consultas de integração nesse contexto– Impacto do grafo de same-as– Impacto do aspecto espacial (ra, dec);– Como particionar grafo + catálogos12/6/2012
1º Seminário de Pesquisa DEXL 18
O que pode nos auxiliar?
• Q3C – Sky Indexing Scheme– Implementação PostgreSQL
12/6/2012
1º Seminário de Pesquisa DEXL 19
Cross-matching usando Q3C
• Cross-match de usnob com a tabela 2mass erro de raio de 1 arcsec (0.00027◦).
SELECT * from 2mass, usnob WHERE q3c join(2mass.ra, 2mass.dec, usnob.ra, usnob.dec, 0.00027);
12/6/2012
1º Seminário de Pesquisa DEXL 20
Passos a curto prazo
• Qualificação– Integração de Dados– Armazenamento de Grandes Grafos– Integração de Dados Astronômicos
• Teste da ferramenta GAVO DaCHS.– Pode ajudar na integração dos catálogos
12/6/2012
1º Seminário de Pesquisa DEXL 2112/6/2012