Avaliação educacional em larga escala

72
Avaliação educacional em larga escala Contribuições e possibilidades por Álvaro Dyogo

description

Avaliação educacional em larga escala. Contribuições e possibilidades por Álvaro Dyogo. Tópicos da nossa apresentação. O que é avaliar?. ?. O que é avaliar?. - PowerPoint PPT Presentation

Transcript of Avaliação educacional em larga escala

Page 1: Avaliação educacional em larga escala

Avaliação educacional em larga escala

Contribuições e possibilidadespor Álvaro Dyogo

Page 2: Avaliação educacional em larga escala

Tópicos da nossa apresentação•Definição1

•Classificação2

•Histórico3

•Processo4

•Justificativa5

•Importância6

•Possibilidades7

•Uso dos resultados8

•Evolução9

•Desafios10

Page 3: Avaliação educacional em larga escala

O que é avaliar?

?

Page 4: Avaliação educacional em larga escala

O que é avaliar?

v.t. e v.i. Determinar o valor, o preço, a importância de alguma coisa / Reconhecer a grandeza, a intensidade, a força de / Fixar aproximadamente / Imaginar

Fonte: Dicionário Aurélio

Page 5: Avaliação educacional em larga escala

Alguns questionamentos

- Qual é a importância que damos à educação?- Como imaginamos que está a nossa educação?- Como nossa educação de fato está?

Page 6: Avaliação educacional em larga escala

O que é avaliar?

O processo de avaliação está relacionado à produção de informações sobre determinada realidade e é algo que está bastante presente no cotidiano escolar.

Page 7: Avaliação educacional em larga escala

Como funciona o processo?

Coletar

Diagnosticar

Decidir Agir

Produzir algum julgamento sobre a realidade.

Dados e informações sobre determinada realidade.

Em função de um objetivo que se deseja alcançar.

Traçar estratégias de uma ação sobre o objeto avaliado.

Page 8: Avaliação educacional em larga escala

O que é avaliar?

Professores Observações, Registros, Provas etc.

O que precisa ser feito para que os alunos avancem?

Aferição de Aprendizagem

Page 9: Avaliação educacional em larga escala

Avaliação educacional em larga escala

Nas últimas décadas, paralelo às avaliações tradicionais, outro procedimento de avaliação educacional tem ganhado espaço: são as avaliações externas, geralmente em larga escala, que têm objetivos e procedimentos diferenciados das avaliações realizadas pelos professores nas salas de aula.

Page 10: Avaliação educacional em larga escala

Por que avaliamos?

Informação

Ação

Qualidade e Equidade

Page 11: Avaliação educacional em larga escala

O que é avaliado?

Teste Proficiência

Questionário Fatores associados

Page 12: Avaliação educacional em larga escala

Medidas de proficiência

Ferramenta de Medida

Construção da

Medida

Interpretação

da Medida

Page 13: Avaliação educacional em larga escala

Medidas de Proficiência

Page 14: Avaliação educacional em larga escala

Medidas de Proficiência

Page 15: Avaliação educacional em larga escala

Medidas de Proficiência

Page 16: Avaliação educacional em larga escala

Importância da Avaliação

- Desempenha um papel sobre os rumos do sistema de ensino;

- Garante a fidedignidade das informações oferecidas;

- Garante a reflexão sobre os resultados;

- Estimula o envolvimento crescente dos atores participantes do processo, seja pelo aprimoramento de

métodos, instrumentos e logística de realização da avaliação.

Page 17: Avaliação educacional em larga escala

Diagnóstica Formativa Somativa

InternaEscola

ExternaSistemas

Interna Escola

ExternaSistemas

InternaEscola

ExternaSistemas

Pequena escala

Avaliação

Larga escala

Tipos de Avaliação

Page 18: Avaliação educacional em larga escala

Tipos de Avaliação

•Definição: Ocorre no início de um processo para obter informações sobre os conhecimentos dos estudantes.•Objetivo: Identificar características dos alunos com finalidade de escolher o tipo de trabalho mais adequado.•Características: Aspecto preventivo; capacidade de determinar causas de dificuldades de aprendizagem permanentes.•Resultados: Possibilitam planejamento de intervenções iniciais e novos procedimentos.

Diagnóstica

Page 19: Avaliação educacional em larga escala

Tipos de Avaliação

•Definição: Tem foco no processo de ensino/ aprendizagem e caráter essencialmente pedagógico.•Objetivo: Melhorar o processo de ensino/ aprendizagem a partir das informações coletadas pelo processo avaliativo.•Características: Geração rápida de informações sobre etapas vencidas; feedback contínuo; diálogo entre professor e aluno.•Resultados: Permitem planejamento, ajuste e redirecionamento de práticas pedagógicas.

Formativa

Page 20: Avaliação educacional em larga escala

Tipos de Avaliação

•Definição: Modalidade avaliativa pontual que ocorre ao final de um processo.•Objetivo: Fazer um balanço somatório de uma ou várias sequências do trabalho de formação.•Características: Além de informar, situar e classificar o avaliado, tendo a perspectiva de conclusão em evidência.•Resultados: Permitem registrar o que parece ter sido assimilado pelos alunos ao longo do processo.

Somativa

Page 21: Avaliação educacional em larga escala

Tipos de Avaliação

•Definição: Realizada pelo professor em sala de aula; corresponde à verificação da aprendizagem dos alunos. •Objetivo: Verificar o processo de ensino e aprendizagem, fornecendo informações sobre o trabalho do professor.•Características: Refletir resultados do trabalho do professor, bem como o desempenho dos alunos. Utiliza a teoria clássica dos testes (TCT).•Resultados: Permitem reformular práticas pedagógicas ou retomar alguma dificuldade apresentada pelos alunos.

Interna

Page 22: Avaliação educacional em larga escala

Tipos de Avaliação

•Definição: Um dos principais instrumentos para a elaboração de políticas públicas dos sistemas de ensino e redirecionamento das metas das unidades escolares. •Objetivo: Assegurar a qualidade da Educação; diagnosticar a realidade do ensino.•Características: Podem ser censitárias ou amostrais. Avalia as redes ou os sistemas de ensino, indo além da sala de aula. Utiliza a teoria da resposta ao item (TRI)•Resultados: Fornecem subsídios para a tomada de decisões; permitem acompanhar o desenvolvimento das redes e sistemas de ensino.

Externa

Page 23: Avaliação educacional em larga escala

Linha do Tempo | Avaliações

Page 24: Avaliação educacional em larga escala

Linha do Tempo | Avaliações

•Sistema de Avaliação da Educação Básica (Saeb)1990•Adoção da escala de proficiência do Saeb1997•Estabelecimento das matrizes de referência1998

Page 25: Avaliação educacional em larga escala

Linha do Tempo | Avaliações

•Uso das escalas de proficiência estaduais2000•Prova Brasil2005•Índice de Desenvolvimento da Educação Básica (Ideb) / Metas estaduais2007

Page 26: Avaliação educacional em larga escala

Linha do Tempo | Avaliações

•Ceará/Minas Gerais (1992); Mato Grosso do Sul; São Paulo/Paraná; Rio Grande do Sul

1990-7(Alicerces)

•Acre; Pernambuco/Espírito Santo/Rio de Janeiro; Tocantins/Alagoas/Bahia/Goiás; Amazonas

1997-2007(Expansão)

•Piauí; Pará; Rondônia/Paraíba (2012)

2007-Hoje(Presente)

Page 27: Avaliação educacional em larga escala

Linha do Tempo | Avaliações

SEAPE

SADEAM

SAEPI

SARESP

SIMAVE

SAERJ

SAERO

PAEBESSAEMS

SAEGO

AREAL

AVALIE

SISPAE

SALTO

SPAECE

SAEPESAEMI

SAERS

SAEP

Sistema de Av. da Educ. da Paraíba

AVALIA BH

ALFABETIZA RIO

Page 28: Avaliação educacional em larga escala

Características dos sistemas próprios de Avaliação

Page 29: Avaliação educacional em larga escala

Vantagens dos sistemas próprios de Avaliação

?

Page 30: Avaliação educacional em larga escala

Desenho próprio, adequado às necessidades da rede.

Alinhamento entre currículo, ensino e avaliação.

Definição da série e áreas do conhecimento.

Menor periodicidade entre os ciclos avaliados.

Vantagens dos sistemas de próprios de Avaliação

Page 31: Avaliação educacional em larga escala

Etapas básicas dos programas de avaliação

• Determinação da população a ser avaliada1• Elaboração da Matriz ou utilização da

Matriz de Referência do SAEB• Construção de itens• Pré-testagem dos itens• Análise estatística e pedagógica dos itens

2

• Montagem dos cadernos de testes (BIB) • Elaboração dos testes padronizados• Elaboração dos questionários contextuais3

Page 32: Avaliação educacional em larga escala

Etapas básicas dos programas de avaliação

• Aplicação dos instrumentos• Processamento e constituição da base de

dados da avaliação4

• Análise dos resultados: utilização da TCT e da TRI

• Produção dos resultados• Construção e interpretação das Escalas de

Proficiência• Divulgação dos resultados

5

Page 33: Avaliação educacional em larga escala

O que a avaliação externa possibilita?

Page 34: Avaliação educacional em larga escala

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Page 35: Avaliação educacional em larga escala

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Possibilidades dos Sistemas próprios de Avaliação

Page 36: Avaliação educacional em larga escala

2006 2007 2008 2009 2010175.0

200.0

225.0

250.0

275.0

300.0

196.5 205.2218.2 226.2

235.1246.3 250.9 255.8261.4

268.9274.7 282.4 282.2 284.0290.6

5º ano EF 9º ano EF 3º ano EM

Evolução da proficiência média em Matemática Rede Estadual – Minas Gerais

Fonte: Proeb 2006/2010

Page 37: Avaliação educacional em larga escala

2012

2011

2010

2012

2011

2010

2012

2011

2010

5EF

9EF

3EM

13.1%

14.1%

11.8%

17.5%

19.1%

17.3%

59.5%

60.2%

54.8%

27.0%

28.8%

28.8%

59.4%

59.7%

56.9%

36.7%

36.2%

41.1%

60.0%

57.1%

59.4%

23.2%

21.2%

25.8%

3.8%

3.7%

4.1%

Baixo Intermediário Recomendado

Evolução da distribuição por Padrões de Desempenho em Matemática - Rede Estadual - MG

Fonte: Proeb 2010/2012

Page 38: Avaliação educacional em larga escala

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Possibilidades dos Sistemas próprios de Avaliação

Page 39: Avaliação educacional em larga escala

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2007

Fonte: Spaece-Alfa 2007

Page 40: Avaliação educacional em larga escala

Fonte: Spaece-Alfa 2008

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2008

Page 41: Avaliação educacional em larga escala

Fonte: Spaece-Alfa 2009

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2009

Page 42: Avaliação educacional em larga escala

Fonte: Spaece-Alfa 2010

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2010

Page 43: Avaliação educacional em larga escala

Fonte: Spaece-Alfa 2011

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2011

Page 44: Avaliação educacional em larga escala

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Possibilidades dos Sistemas próprios de Avaliação

Page 45: Avaliação educacional em larga escala

Resultados Estaduais Transversais ou Longitudinais

Estado

Aluno

Page 46: Avaliação educacional em larga escala

Resultados Estaduais Transversais ou Longitudinais

Transversais

•Coleta periódica•Amostras representativas de escolas e alunos•Amostras diferentes em •cada aplicação.•Permite comparações ao longo do tempo no •conjunto

Longitudinais

•Coleta com período contínuo definido•Amostras selecionadas de escolas e alunos•Mesma amostra em cada aplicação•Permite acompanhamento do valor agregado de cada aluno

Page 47: Avaliação educacional em larga escala

Diagnóstico do efeito das políticas públicas implementadas.

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Utilização dos resultados, com foco na identidade escolar..

Possibilidades dos Sistemas próprios de Avaliação

Page 48: Avaliação educacional em larga escala

Padrões de

desempenho

estudantil

Estabelecimento e

monitoramento das metas de

qualidade educacional

Caracterização do desempenho

escolar

Grau de realização das

ações educacionais

Políticas públicas

voltadas à promoção da

equidade

Identificação do percentual de

alunos em risco pedagógico

(evasão, reprovação ou

abandono)

Padrões de desempenho

Page 49: Avaliação educacional em larga escala

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Abaixo do Básico

Os alunos que apresentam este padrão de desempenho revelam ter desenvolvido competências e habilidades muito aquém do que seria esperado para o período de escolarização em que se encontram. Por isso, esse grupo de alunos necessita de uma intervenção focada de modo a progredirem com sucesso em seu processo de escolarização.

Básico

Os alunos que apresentam este padrão de desempenho demonstram já terem começado um processo de sistematização e domínio das habilidades consideradas básicas e essenciais ao período de escolarização em que se encontram. Para esse grupo de alunos, é importante o investimento de esforços para que possam desenvolver habilidades mais elaboradas.

Page 50: Avaliação educacional em larga escala

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Adequado

Os alunos que apresentam este padrão de desempenho demonstram ter ampliado o leque de habilidades tanto no que diz respeito à quantidade quanto no que se refere à complexidade dessas habilidades, as quais exigem um maior refinamento dos processos cognitivos nelas envolvidos.

AvançadoOs alunos que apresentam este padrão de desempenho revelam ser capazes de realizar tarefas que exigem habilidades mais sofisticadas. Eles desenvolveram habilidades que superam aquelas esperadas para o período de escolaridade em que se encontram.

Page 51: Avaliação educacional em larga escala

Abaixo do Básico Recuperação

Básico Reforço

Adequado Aprofundamento

Avançado Desafio

Projetos de intervenção pedagógica a partir dos Padrões de Desempenho

Page 52: Avaliação educacional em larga escala

da Rede• Planejamento e execução de políticas públicas

• Criação de metas de qualidade e equidade educacionais

• Implementação de medidas de responsabilização

• Políticas de incentivos diretos ou indiretos

• Ações de formação continuada de professores

da Escola• Elaboração do projeto da escola

• Monitoramento da qualidade de ensino

• Subsídio para avaliação institucional

Uso dos ResultadosGestor

Page 53: Avaliação educacional em larga escala

• Projetos de intervenção pedagógica

• Elaboração de projetos especiais

• Foco nos alunos com dificuldades

• Ações de reforço escolar

• Planejamento das ações de sala de aula

• Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

Uso dos ResultadosProfessor

Page 54: Avaliação educacional em larga escala

• Acompanhamento individual do desempenho escolar pelos alunos e

seus familiares.

• Informações sobre a qualidade dos serviços educacionais oferecidos.

Uso dos ResultadosAluno e família

Page 55: Avaliação educacional em larga escala

Avaliação em larga escala:Em que avançamos e quais os desafios?

Page 56: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Em que avançamos?

Maior transparência no processo de avaliação e divulgação dos resultados

Debate sobre as responsabilidades

Ampliação das oportunidades educacionais e o reconhecimento do direito de aprender

Atenção especial aos alunos de baixo desempenho

Page 57: Avaliação educacional em larga escala

Canais de divulgação dos resultados

• Revista do Sistema• Revista do Gestor• Revista Pedagógica• Revista Contextual• Caderno de Gestão• Caderno de Pesquisa

Material Impresso

• Oficinas• Vídeos • Kits instrucionais

Ações de formação

Page 58: Avaliação educacional em larga escala

Canais de divulgação dos resultados

• Integração dos dados• Resultados das escolas• Mídias sociais

Portal da Avaliação

• Cursos a distância• Curso presencial• Acompanhamento técnico/pedagógico

Transferência de tecnologia

Page 59: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Em que avançamos?

Discussão sobre os fatores que interferem no desempenho escolar, eficácia de práticas, programas e políticas

educacionais.

Page 60: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Em que avançamos?

Discussão sobre a construção de propostas curriculares inovadoras, bem desenhadas e de fácil compreensão por

diferentes públicos.

Page 61: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Em que avançamos?

Participação dos acadêmicos e pesquisadores das universidades, gestores e professores da educação básica no

debate sobre o direito à educação.

Page 62: Avaliação educacional em larga escala

Fatores socioeconômicos

Fatores familiares

Fatores individuais

Gestão e administração

Prática pedagógica

Condições de infraestrutura

Qualificação dos profissionais

Fatores Extraescolares Fatores Intraescolares

Fatores Associados ao Desempenho

Page 63: Avaliação educacional em larga escala

Investigação de fatores intra e extraescolares específicos de cada sistema

Avaliação do impacto dos programas implementados pelas Secretarias

Estudo de casos de sucesso (escolas eficazes)

Correlações entre fatores de desigualdade educacionais

Em que consiste considerar os fatores associados ao Desempenho?

Page 64: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Desafios

?

Page 65: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Desafios

Maior participação dos gestores e professores nas discussões sobre apropriação e utilização dos resultados pelas escolas.

Page 66: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Desafios

Maior participação dos gestores e professores nas discussões sobre apropriação e utilização dos resultados pelas escolas.

Melhor alinhamento entre as propostas curriculares e avaliação e participação dos professores na definição dos Padrões de

Desempenho.

Page 67: Avaliação educacional em larga escala

Sistemas Estaduais de Avaliação Desafios

Maior participação dos gestores e professores nas discussões sobre apropriação e utilização dos resultados pelas escolas.

Melhor alinhamento entre as propostas curriculares e avaliação e participação dos professores na definição dos Padrões de

Desempenho.

Canais de comunicação efetivos e constantes com gestores, professores, pais, alunos e sociedade sobre a qualidade da

educação e responsabilidade de todos.

Page 68: Avaliação educacional em larga escala

Tópicos da nossa apresentação•Definição1

•Classificação2

•Histórico3

•Processo4

•Justificativa5

•Importância6

•Possibilidades7

•Uso dos resultados8

•Evolução9

•Desafios10

Page 69: Avaliação educacional em larga escala
Page 70: Avaliação educacional em larga escala
Page 71: Avaliação educacional em larga escala
Page 72: Avaliação educacional em larga escala

Obrigado!

[email protected]