Apresentação dos Serviços para Processamento de Dados de ... · 8 BladeCenter • 112 lâminas...
Transcript of Apresentação dos Serviços para Processamento de Dados de ... · 8 BladeCenter • 112 lâminas...
Apresentação dos Serviços para Processamento
de Dados de Alto Desempenho disponibilizados
pela InterNuvem
Francisco Ribacionka e Ettore Enrico (STI ) – USP/STI/InterNuvem – [email protected]
Março - 2016
Competência da STI:
• Disponibilização de serviços para processamento de
dados de alto desempenho em nuvens computacionais
interconectadas
Apresentação dos Serviços para Processamento de Dados de
Alto Desempenho disponibilizados pela InterNuvem
Programação
1. Resumo da Computação de Alto Desempenho na USP
2. Criação de clusters e utilização multiusuária
3. Utilização de GPU para HPC
Apresentação dos Serviços para Processamento de Dados de
Alto Desempenho disponibilizados pela InterNuvem
Programação
1. Resumo da Computação de Alto Desempenho na USP
2. Criação de clusters e utilização multiusuária
3. Utilização de GPU para HPC
Apresentação dos Serviços para Processamento de Dados de
Alto Desempenho disponibilizados pela InterNuvem
Computação de alto desempenho – HPC
Antes de 1990: Evento “50 Anos de TI na USP”
http://iptv.usp.br/portal/video.action?idItem=28479
• Anos 60: IBM 1620
• 5000 operações por segundo
• Cálculo de Estruturas (Poli), Cálculo da Inflação (Fea), Folha de Pagamento
• Anos 70: Burroughs B-3500, B-6700
• Anos 80: Unisys A9, IBM 4381
1990 – Convex C-220
• Dois Processadores Vetoriais
• 128 MB RAM
• S. O. Unix
• Fortran, C
Computação de alto desempenho – HPC
1995 – IBM SP2
• 16 nós de processamento
• Comunicação via switch
• AIX Unix
• Parallel Operation Environment
• Fortran, C, MPI
• LoadLeveler
• Deep Blue SP2 X Casparov
Computação de alto desempenho – HPC
• 6 AlphaServer
•24 processadores
•Storage com 1.4 TB
• Load Share Facility
1998 – Compaq
Computação de alto desempenho – HPC
2000 – Cray J90
• 16 processadores
• 256 MB RAM
• 80 GB Disco
Computação de alto desempenho – HPC
Computação de alto desempenho – HPC
2004 - Cluster Alcatéia
• 32 servidores Supermicro
• S.O. Linux
• Compiladores Intel
8 BladeCenter
• 112 lâminas (PowerPC 970) 2.5 GHz
• 1 switch Myrinet - 2000 com 160 portas
• 1 storage com 8 TB (6 TB em raid 5)
• 4 Tflops
• LoadLeveler
• Posição 363 www.top500.org
2007 – IBM Mamute
Computação de alto desempenho – HPC
2008 - Cluster Jaguar – SGI Altix 450
• 56 CPUs Intel Itanium 2
• 112 GB de RAM
• 5 TB Storage
• 0,34 TFlops
• PBS Pro
Computação de alto desempenho – HPC
2009 - Cluster Puma
• 59 servidores DeLL, cada um com:
•16 GB de memória RAM
•16 CPUs Intel Xeon 2.6 GHz
•2 discos 300 GB
• Rede Gibabit-ethernet
• 1.26 TFlops
• PBS
Este cluster é gerenciado por programas de livre
distribuição
Computação de alto desempenho – HPC
Computação de alto desempenho – HPC
SERVIDORES:
Cisco B230 M2
2 – CPUs Intel E7-2870
2,4 GHz / 10 Cores / 30MB cache
512 GB memória DDR3 1333MHz
2 – Interfaces 10Ge FCoE (VIC 128 int)
Aguia
• 64 servidores físicos, cada um com
•2 CPUs Intel E7-2870
•2,4 GHz / 10 Cores / 30MB cache
• 512 GB de RAM DDR3 1333MHz
• /scratch com 28 TB para arquivos temporários.
• PBS
Computação de alto desempenho – HPC
Lince
•32 servidores, cada um com:
• 2 Tesla k20m
• 16 cores Intel E7-2870 (2,4 GHz)
• 129 GB RAM
•Scratch com 55 TB
•PBS
Computação de alto desempenho – HPC
Blue Gene/P
� Posição 377 na lista
Top500 de junho de 2012
� 84 teraflops de
performance
� 24,576 cores
2012 - Convênio USP e Rice University: http://usp.rice.edu
Computação de alto desempenho – HPC
Convênio USP e Rice University: http://usp.rice.edu
Blue Gene/Q
� 209 teraflops de performance
� 16.384 cores
� 1024 nós
� 16 cores por nó
� 16 GB RAM por nó
� 32 nós (512 cores) mínimo de
recursos por job
Computação de alto desempenho – HPC
Para obter acesso:
1. Aguia / Lince
Um professor da USP deve enviar uma mensagem para [email protected] com
resumo do projeto, nome, e-mail e número USP dos membros do grupo
que vai utilizar os recursos
Preencher o formulário http://www.usp.br/hpc/acesso.php
2. Blue Gene
Verifique as regras em usp.rice.edu
no item How to gain access to the BG?
ssh shark.lcca.usp.br
ssh aguia
ssh lince
Comandos úteis:
• pwd
• hostname
• cd
• ls
• module avail
• qstat -q
Dúvidas? [email protected]
Programação
1. Resumo da Computação de Alto Desempenho na USP
2. Criação de clusters e utilização multiusuária
3. Utilização de GPU para HPC
Apresentação dos Serviços para Processamento de Dados de
Alto Desempenho disponibilizados pela InterNuvem
Apresentação dos Serviços para
Processamento de Dados de Alto
Desempenho disponibilizados pela
InterNuvem
Francisco Ribacionka e Ettore Enrico (STI ) – USP/STI/InterNuvem – [email protected]
Março - 2016