R7 no AWS - Qcon SP 2011

Fazendo mais com menosComo o R7 entrega conteúdo a partir do AWS

Roberto [email protected]

@rgaiserQCon SP - Setembro/2011

Sobre o R7

Sobre o R7

• 2 anos de vida

Sobre o R7

• 2 anos de vida

• Culturas diferentes

Sobre o R7

• 2 anos de vida


• Eficiência

Sobre o R7

• 2 anos de vida


• Eficiência

• Soluções não convencionais

Sobre o R7

Sobre o R7Page Views Unique Visitors

539 Milhões 14,4 MilhõesIbopeNet//RatingsJulho/2011



Notícias Entretenimento

8ª 9ªIbopeNet//RatingsJulho/2011



Notícias Entretenimento

8ª 9ªIbopeNet//RatingsJulho/2011

R7 Segundo lugar Internet Brasil

51,12% 5,13% 4,9%IbopeNet//RatingsJulho/2011

Estrutura tradicional


• Servidores


• Servidores

• Storage


• Servidores

• Storage

•Rede


• Servidores

• Storage

•Rede

•Link

Problema

Problema“Efeito TV”

Como sobrevivemos?

Como sobrevivemos?

• Utilizando o AWS como CDN

Como sobrevivemos?


• Varnish

Como sobrevivemos?


• Varnish

• Cópia do conteúdo para casos de desastre

Como sobrevivemos?


• Varnish


• Aplicações otimizadas

Como sobrevivemos?


• Varnish


• Aplicações otimizadas

• NoSQL, assíncrono, filas etc.

Motivação

Motivação

• Otimizar custo fixo

Motivação


• “Efeito TV”

Motivação


• “Efeito TV”

• Resiliência a ataques

Motivação


• “Efeito TV”

• Resiliência a ataques

• Site backup

Primeira vez

Primeira vez

• ELB

Primeira vez

• ELB

• Large instance

Primeira vez

• ELB

• Large instance

• Varnish

Primeira vez

• ELB

• Large instance

• Varnish

• Medição do tempo de carregamento

Primeira vez

• ELB

• Large instance

• Varnish

• Medição do tempo de carregamento

• Sem aviso prévio

Funcionou, e agora?

Funcionou, e agora?

• ELB + Auto Scaling (Cloudwatch alarm)

Funcionou, e agora?


• Problemas do ELB

Funcionou, e agora?



• Global load balancing (DNS)

Funcionou, e agora?




• Automação (CHEF)

Funcionou, e agora?




• Automação (CHEF)

• Ubuntu

Tudo vem de lá?

Tudo vem de lá?

• Conteúdo estático e dinâmico

Tudo vem de lá?


• Vídeos da Akamai

Tudo vem de lá?



• Performance do RDS X Custo

Tudo vem de lá?



• Performance do RDS X Custo

• Aplicações não preparadas

EC2

• Escolher o tipo adequado para a aplicação

EC2


• CPU x Memória

EC2


• CPU x Memória

• EBS x Instance Store

EC2


• CPU x Memória


• Tráfego x CPU

EC2


• CPU x Memória


• Tráfego x CPU

• Reserved Instance

EC2Compute UnitMemória (GB)

EC2

0

2

4

6

8

Small High-CPU Medium Large

Compute UnitMemória (GB)

EC2

0

2

4

6

8

Small High-CPU Medium Large

Compute UnitMemória (GB)

32 bits 32 bits 64 bits

EBS

• EBS-backed instance

EBS


• Dados

EBS


• Dados

• Performance

EBS


• Dados

• Performance

• Vantagens

EBS


• Dados

• Performance

• Vantagens

• Problemas

AMI

• Pronta ou com automação?

AMI


• CHEF

AMI


• CHEF

• Ubuntu (http://uec-images.ubuntu.com/)

AMI


• CHEF


• 32bits e 64bits

AMI


• CHEF


• 32bits e 64bits

• Pacotes prontos, salvo exceções

S3

• Custo

S3

• Custo

• Simples

S3

• Custo

• Simples

• Videos e Thumbnails

S3

• Custo

• Simples

• Videos e Thumbnails

• Permissões

ELB

• CNAME

ELB

• CNAME

• TTL e suas implicações

ELB

• CNAME


• SSL

ELB

• CNAME


• SSL

• Múltiplas zonas

Cloudfront

Cloudfront

• Controle do cache

Cloudfront


• Varnish e Nginx

Cloudfront


• Varnish e Nginx

• Imagens a partir do S3 (Thumbnails)

Cloudfront


• Varnish e Nginx

• Imagens a partir do S3 (Thumbnails)

• CDN Global

Cloudwatch

Cloudwatch

• Unidades nem sempre “amigáveis”

Cloudwatch


• Métricas customizadas

Cloudwatch



• Alarmes

Cloudwatch



• Alarmes

• Auto Scaling

Monitoração

Monitoração

• Zabbix

Monitoração

• Zabbix

• Cloudwatch

Monitoração

• Zabbix

• Cloudwatch

• Dinâmico

Monitoração

• Zabbix

• Cloudwatch

• Dinâmico

• Otimizar custo e desempenho

Monitoração

• Zabbix

• Cloudwatch

• Dinâmico

• Otimizar custo e desempenho

•Capacity planning

Automação

Automação

• Puppet x Cfengine x CHEF

Automação


• CHEF já estava pronto para o EC2

Automação



• OHAI

Automação



• OHAI

• Cloudformation

Automação



• OHAI

• Cloudformation

• Disaster recovery

Cloudformation

Cloudformation

• JSON

Cloudformation

• JSON

• Versionamento

Cloudformation

• JSON

• Versionamento

• Consegue controlar todos os serviços

Cloudformation

• JSON

• Versionamento

• Consegue controlar todos os serviços

• Testes e recuperação de falhas

Segurança

Segurança

• ACL de entrada, saída sempre é liberado

Segurança


• Grupos entre diferentes contas

Segurança



• Impossibilidade de alterar o grupo

Segurança



• Impossibilidade de alterar o grupo

• Implicações legais

Controle de acesso

Controle de acesso

• IAM

Controle de acesso

• IAM

• API Key/Secret

Controle de acesso

• IAM

• API Key/Secret

• Por aplicação/usuário

Controle de acesso

• IAM

• API Key/Secret

• Por aplicação/usuário

• Granularidade varia entre os serviços

Problemas?

Problemas?

• Eles existem

Problemas?

• Eles existem

• RTT

Problemas?

• Eles existem

• RTT

• Conectividade das operadoras

Problemas?

• Eles existem

• RTT


• Controle de acesso (IAM)

Problemas?

• Eles existem

• RTT


• Controle de acesso (IAM)

• Problemas do AWS

Futuro

Futuro

•O medo foi vencido

Futuro


• Global load balancer possibilita outros provedores

Futuro



• Busca de soluções competitivas

Futuro



• Busca de soluções competitivas

• Construir aplicações preparadas para este tipo de ambiente

Outros usos

Outros usos

• Possibilidade de criar a mesma estrutura de produção

Outros usos


• Homologação

Outros usos


• Homologação

• Testes

Outros usos


• Homologação

• Testes

• S3 e EBS como backup

Outros usos


• Homologação

• Testes

• S3 e EBS como backup

• Hadoop para relatórios

“Cloud Computing”

Perguntas?

R7 no AWS - Qcon SP 2011

Technology

Transcript of R7 no AWS - Qcon SP 2011