batch - escalando um sistema sem fermento

BatchEscalando um sistema sem “fermento”

@qmx@scalone

terça-feira, 1 de junho de 2010

Batch?

pão?3

lucro?4

demanda5

mais pão?6

mais lucro?7

mas....

isso escala?9

NOterça-feira, 1 de junho de 2010

#comofaz?11

padoca?12

mais lucro?13

e daí?

fazer software

é tão artesanal quanto

fazer pão

e daí?18

portal do pão19

ruby, obviamente

portal do pão

• fotos de pão caseiro

portal do pão

• produtos para fazer pão

portal do pão

• receitas de pão

portal do pão

• comunidade

portal do pão

• comunidade

• pão opensource?

caiu na rede22

volume de acessos23

acessos / m

volume de acessos23

10h 12h 14h 16h 18h0

acessos / m

volume de acessos23

10h 12h 14h 16h 18h0

acessos / m

volume de acessos23

10h 12h 14h 16h 18h0

acessos / m

volume de acessos23

10h 12h 14h 16h 18h0

acessos / m

volume de acessos23

10h 12h 14h 16h 18h0

acessos / m

volume de acessos23

10h 12h 14h 16h 18h0

acessos / m

R.I.P.24

soluções!

problemas de banco?

problemas de banco?DBA.current_dba.kill!

dba = DBA.new

dba = DBA.newdba.acts_as_jedi

problemas de infra?

torrar grana pra aliviar consciência27

problemas no código?

architecture fail30

caffeine fail31

no desespero...32

consultoria [A-Z]{3}33

qual era o problema mesmo?

investigando o problema36

upload de imagens?

imagemagick

o usuário precisa mesmo ver a imagem

na hora?

DJ - Vantagens

• Excelente documentação e tutoriais

• Suporta prioridades

• Curva de aprendizado baixa

• Múltiplos Workers

DJ - Desvantagens

• Depende de ActiveRecord, mas suporta backend MongoMapper

DJ - Desvantagens

• Delayed Job usa UTC, cuidado

DJ - Desvantagens

• Delayed Job usa UTC, cuidado

• Engessado em tarefas rake

DJ - Detalhes

• sinatra-dj

• imcompatível com rails < 2.2

• usa daemon ou worker(s)

resolvendo o problema

delayed_paperclip!48

delayed_paperclip49

upload de vídeo?

o usuário precisa esperar até o fim da

conversão?

BJ - Vantagens

• Simples e Robusta

BJ - Vantagens

• Instalação fácil

BJ - Vantagens

• Ambiente de execução no nível do SO (syscall)

BJ - Vantagens

• Suporta níveis de prioridade

BJ - Vantagens

• Suporta níveis de prioridade

• Roda no windows, acredite!

BJ - Vantagens

BJ - Desvantagens

• Execução serial

BJ - Desvantagens

• Dependente de ActiveRecord

BJ - Desvantagens

• Dependente de ActiveRecord

• Documentação, que documentação?

resolvendo o problema

fácil, não?

aquele relatório insano #medo

precisa ser “online”?

resquedj on steroids

resque

• persistente

• interface de administração

• rápido!!!

resque-web65

let’s batch!

e daí?

feedback

• ajax

• email

• impedir de agendar diversas vezes a mesma tarefa

• comet / websockets

monitoramento

porque, afinal, ...

...se não cuidar...70

...já viu né...71

Monitoramento

• Monit

• God

• Munin

• AutoSEG

• github

obrigado!@qmx => http://qmx.me

@scalone => http://twitter.com/scalone

http://www.flickr.com/photos/akshaydavis/186598700/sizes/o/http://www.flickr.com/photos/snidely7/4374153874/sizes/o/http://www.flickr.com/photos/clocky/2660785933/sizes/o/http://hrblogatresearchvoice.files.wordpress.com/2009/05/borat1.jpghttp://www.flickr.com/photos/wheatfields/3673314570/sizes/o/http://www.flickr.com/photos/daffyduke/2872752836/sizes/o/in/set-72157607388359306/http://www.flickr.com/photos/daffyduke/2872753092/sizes/o/in/set-72157607388359306/http://www.flickr.com/photos/daffyduke/2871921629/sizes/l/in/set-72157607388359306/http://www.flickr.com/photos/daffyduke/2872749786/sizes/o/in/set-72157607388359306/http://www.flickr.com/photos/kevinkemmerer/2998086908/sizes/l/http://www.flickr.com/photos/bibliona/538164298/sizes/o/in/photostream/http://www.flickr.com/photos/jonmarulanda/3736708170/sizes/o/http://www.flickr.com/photos/dirgon/446839052/sizes/o/http://www.flickr.com/photos/miemo/210258035/sizes/l/http://www.flickr.com/photos/m4tik/47714548/sizes/o/http://www.flickr.com/photos/muehlinghaus/235334412/sizes/l/http://www.flickr.com/photos/abusx/2181644630/sizes/l/http://www.flickr.com/photos/arthur-caranta/2925352521/sizes/l/http://www.flickr.com/photos/paulobrandao/2670585467/sizes/o/

Thanks creative commons!

batch - escalando um sistema sem fermento

Technology

Transcript of batch - escalando um sistema sem fermento

Cap. 2 Batch Input

Escalando DevOps para uma transformação de TI habilitada ...

Corpo Cases Batch 1

2o ProdConf - Escalando Ágil em Projetos com Múltiplos Times

Escalando o Abismo.pdf

Escalando aplicação Python usando Getup OpenShift

Ano XVII - Nº 149 | Outubro de 2012 Editorial Proclamação ... · 2 fermento fermento expediente Informativo FERMENTO da Paróquia Nossa Senhora do Rosário de Fátima Periódico

Escalando API's com NodeJS, Docker e RabbitMQ

Tutorial de Programação Em Batch

Introduçãoo aws, escalando uma aplicação Web

BR1M500_BR1M2(1).0.BATCH 1

Escalando sua aplicação Web com Beanstalk

Escalando primeiros 10 milhões de usuários

Escalando para alguns milhares

Escalando o Ecommerce em Momentos de Alta Demanda

Um Pouco De Fermento

AWS Experience Fortaleza: Escalando sua aplicação Web com Beanstalk

Escalando a Gestão Ágil com SAFe - Manoel Pimentel

Apostila de Comandos Batch

Concepção de um Reactor Batch Multifunções - recipp.ipp.ptrecipp.ipp.pt/bitstream/10400.22/1993/1/DM_PedroPinheiro_2010_MEQ.pdf · batch multifunções para laboratório que permita