OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover,...

33
OFICINA DE APROPRIAÇÃO APROPRIAÇÃO DE RESULTADOS 2011

Transcript of OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover,...

Page 1: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

OFICINA DE APROPRIAÇÃOAPROPRIAÇÃO 

DE RESULTADOS 2011

Page 2: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

O que é Avaliação?O que é Avaliação?O que é Avaliação?O que é Avaliação?

Page 3: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Conceito de Avaliação

AVALIARAVALIARÉ refletir sobre uma determinada realidade a partir de dados e informações, e emitir um p ç ,

julgamento que possibilite uma ação.

Page 4: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Quebra de paradigmas

Page 5: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Tipos de Avaliação

AvaliaçãoAvaliação

Diagnóstica Formativa Somativa

InternaEscola

ExternaSistemas

InternaEscola

ExternaSistemas

InternaEscola

ExternaSistemasEscola  Sistemas  Escola  Sistemas Escola Sistemas

Pequena escala Larga escala

Page 6: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Avaliação Interna e Externa 

AVALIAÇÃO EDUCACIONAL

A li ã I /E lAvaliação Interna/Escola

Processo da aprendizagem

Avaliação Externa/Sistemas

Desempenho dos alunos

Provas abertas

Processo da aprendizagem Desempenho dos alunos

Provas abertasProvas objetivas

Observação/RegistroPortfólio

Testes de proficiência Questionários contextuais

Portfólio

TEORIA CLÁSSICA TEORIA DA RESPOSTATEORIA CLÁSSICAAO ITEM

Page 7: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Metodologia de análise

Teoria de Resposta ao ItemTeoria de Resposta ao Item

Os três parâmetros da TRI:Os três parâmetros da TRI:Os três parâmetros da TRI:Os três parâmetros da TRI:

Page 8: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Metodologia de análise

Vantagens da TRIVantagens da TRI

A TRI nos permite:

Vantagens da TRIVantagens da TRI

A TRI nos permite:

Comparar resultados de diferentes avaliações como oComparar resultados de diferentes avaliações, como o SAEB.

Avaliar com alto grau de precisão a proficiência de alunos em l á d h b ê l lamplas áreas do conhecimento sem submetê‐los a longos 

testes.

Comparar os resultados entre diferentes séries comoComparar os resultados entre diferentes séries, como o início e fim do Ensino Médio.

Page 9: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Objetivos da Avaliação Externa 

Monitoramento dodesempenho dos alunos

Melhor eficiência do trabalho

desenvolvido em cada unidade escolarunidade escolar

AvaliaçãoAvaliação Externa em Larga Escala

Acompanhamento,ao longo do tempo, Identificação de fatores

Larga Escala

ao longo do tempo,da qualidade da

educação ofertada

Identificação de fatoresintra e extra-escolares queinterferem no desempenho

dos alunos

Page 10: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Uso dos resultados 

Page 11: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Como é feita a Avaliação?Como é feita a Avaliação?Como é feita a Avaliação?Como é feita a Avaliação?

Page 12: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Matriz de Referência

ItemItem

Page 13: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Matriz de ReferênciaExemplo de uma matriz deuma matriz de referência

Page 14: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Matriz de Referência

Page 15: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Matriz de Referência

Composição dos TestesComposição dos Testes

Page 16: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Escala de ProficiênciaEscala de Proficiência de Língua Portuguesa

PROMOVER_OFICINA_DINÂMICA_ESCALA DE PROFICIÊNCIA_120328.pdf

Page 17: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

• Teoria da Resposta ao Item (TRI)

– Grupo de modelos matemáticos e estatísticos qued i ã t tidã d i di íddescrevem a associação entre a aptidão de um indivíduo ea probabilidade de uma resposta a um item.

• Item e proficiência na mesma escala• Item e proficiência na mesma escala

Page 18: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

Construindo uma escala

Page 19: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

Escala: altura de uma pessoaIt 1• Item 1

Você consegue guardar as malas no bagageiro interno de um ônibus?

• Item 2

Você consegue subir ou descer dois degraus de cada vez em uma escada?

• Item 3

P ê i lh b i ?Para conversar com as pessoas, você precisa olhar para baixo?

Nome Item 1 Item 2 Item 3Nome Item 1 Item 2 Item 3

Carolina Sim Não Não

Priscila Sim Sim Não

Leonardo Sim Sim Sim

Page 20: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

Escala: item x medidaNome Item 1 Item 2 Item 3

Carolina Sim Não Não

Priscila Sim Sim NãoPriscila Sim Sim Não

Leonardo Sim Sim Sim

Carolina Priscila Leonardo

1,5 1,6 1,7 1,8 1,9

Item 1 Item 2 Item 3

Page 21: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

Questionário de altura

Page 22: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

Posição dos itens na escala

17169 4 15 7 20 18 11 14 5 13 6 3 2 19 8

1,5 1,6 1,7 1,8 1,9

12 10 1

Guardar a bagagemPés fora da cama

Atrás na fila

Page 23: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

A Escala de Proficiência

Posição dos itens e pessoas na escala43,6%

32%

14,6%9,8%

1 5 1 6 1 7 1 8 1 9

17169 4 15 7 20 18

12

11

10

14 5 13 6 3 2 19 8

1

1,5 1,6 1,7 1,8 1,9

Page 24: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Como trabalhar com osComo trabalhar com osComo trabalhar com os Como trabalhar com os resultados da avaliação?resultados da avaliação?

Page 25: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Padrões de desempenho

d õ d h d il í / á i

Padrões de desempenho

• Padrões de Desempenho Estudantil – Língua Portuguesa/Matemática

Page 26: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Medidas educacionais

PISAInternacional

SAEB, PROVA BRASILNacional

PROEB SAERJ PAEBESEstadual PROEB, SAERJ, PAEBESEstadual

Promover, AVALIA BHMunicipal

Page 27: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Avaliação Educacional

Dimensões avaliadasDimensões avaliadas

Page 28: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Avaliação Educacional

Fatores Associados ao DesempenhoFatores Associados ao Desempenhoato es ssoc ados ao ese pe oato es ssoc ados ao ese pe o

Fatores Fatores ExtraescolaresExtraescolares Fatores Fatores IntraescolaresIntraescolares

Fatores socioeconômicos

Fatores familiares

Gestão e administração

Prática pedagógicaFatores familiares

Fatores individuais

Prática pedagógica

Condições de infraestrutura

Qualificação dos profissionais

Page 29: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Canais de ComunicaçãoCanais de ComunicaçãoCanais de ComunicaçãoCanais de Comunicação

Page 30: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Publicações previstas para 2012

Volume 1 Volume 2 Volume 3Volume 1• Boletim do sistema de avaliação. A t

Volume 2• Boletim de resultados do gestor

Volume 3• Boletim de resultados pedagógicos• Apresenta 

informações básicas sobre a avaliação, mas não

gestor.• Apresenta resultados gerais da avaliação e traz

pedagógicos. • Apresenta os resultados da escola para cada série eavaliação, mas não 

não apresenta resultados.

avaliação e traz análises com enfoque para gestores.

para cada série e disciplina com textos de suporte pedagógico para professores e coordenadores.

Page 31: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Publicações previstas para 2012

Volume 4 Volume 5 Volume 6Volume 4• Sumário executivo.• Apresenta uma 

í t d t d

Volume 5• Caderno de gestão.• Apresenta análises 

di õ

Volume 6• Caderno de pesquisa.A t tisíntese de todos os 

resultados da avaliação, inclusive com dados dos

e discussões acerca de diferentes temas educacionais com enfoque para

• Apresenta artigos acadêmicos utilizados como suporte para acom dados dos 

questionários contextuais.

enfoque para gestores.

suporte para a produção de textos para as demais publicações.

Page 32: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato

Portal da Avaliação

Page 33: OFICINA DE APROPRIAÇÃO DE RESULTADOS 2011 · Estadual PROEB, SAERJ, PAEBES Municipal Promover, AVALIA BH. Avaliação Educacional Dimensões avaliadas. Avaliação Educacional Fatoato