Contribuições da Avaliação Educacional em Larga Escala · Diagnóstica. Formativa Somativa....

61
Contribuições da Avaliação Educacional em Larga Escala Juliana Frizzoni Candian Coordenação de Análises e Publicações

Transcript of Contribuições da Avaliação Educacional em Larga Escala · Diagnóstica. Formativa Somativa....

Contribuições da Avaliação Educacional em Larga Escala

Juliana Frizzoni CandianCoordenação de Análises e Publicações

O que é avaliar?

É refletir sobre uma determinada realidade a partir de dados e informações, e emitir um julgamento que possibilite uma ação.

Diagnóstica Formativa Somativa

InternaEscola

ExternaSistemas

InternaEscola

ExternaSistemas

InternaEscola

ExternaSistemas

Pequena escala Larga escala

Avaliação

Tipos de Avaliação

Linha do Tempo | Avaliações

Sistemas de Avaliação da Educação Básica

18 estados

Estados Brasileiros com sistemas autônomos de avaliação

Desenho próprio, adequado às necessidades da rede.

Alinhamento entre currículo, ensino e avaliação.

Definição da série e áreas do conhecimento.

Menor periodicidade entre os ciclos avaliados.

Vantagens dos sistemas de próprios de Avaliação

Montagem dos cadernos de testes (BIB) Elaboração dos testes padronizados Elaboração dos questionários contextuais

•Determinação da população a ser avaliada

Elaboração da Matriz ou utilização da Matriz de Referência do SAEB Construção de itens Pré-testagem dos itens Análise estatística e pedagógica dos itens

2

3 Aplicação dos instrumentos Processamento e constituição da base de dados da avaliação4 Análise dos resultados: utilização da TCT e da TRI Produção dos resultados Construção e interpretação das Escalas de Proficiência Divulgação dos resultados

5

1

Etapas básicas dos programas de avaliação

O que a avaliação externa possibilita?

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

196,5205,2

218,2226,2

235,1246,3250,9 255,8

261,4

268,9274,7 282,4 282,2284,0

290,6

175,0

200,0

225,0

250,0

275,0

300,0

2006 2007 2008 2009 2010

5º ano EF 9º ano EF 3º ano EM

Evolução da proficiência média em Matemática -Rede Estadual – Minas Gerais

Fonte: Proeb 2006/2010

13,1%

14,1%

11,8%

17,5%

19,1%

17,3%

59,5%

60,2%

54,8%

27,0%

28,8%

28,8%

59,4%

59,7%

56,9%

36,7%

36,2%

41,1%

60,0%

57,1%

59,4%

23,2%

21,2%

25,8%

3,8%

3,7%

4,1%

2012

2011

2010

2012

2011

2010

2012

2011

2010

5EF

9EF

3EM

Baixo Intermediário Recomendado

Evolução da distribuição por Padrões de Desempenho em Matemática - Rede Estadual - MG

Fonte: Proeb 2010/2012

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Mapa de Alfabetização do Estado do CearáResultado do SPAECE-Alfa 2007

Fonte: Spaece-Alfa 2007

Mapa de Alfabetização do Estado do CearáResultado do SPAECE-Alfa 2008

Fonte: Spaece-Alfa 2008

Mapa de Alfabetização do Estado do CearáResultado do SPAECE-Alfa 2009

Fonte: Spaece-Alfa 2009

Mapa de Alfabetização do Estado do CearáResultado do SPAECE-Alfa 2010

Fonte: Spaece-Alfa 2010

Mapa de Alfabetização do Estado do CearáResultado do SPAECE – Alfa 2011

Fonte: Spaece-Alfa 2011

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Resultados Estaduais Transversais ou Longitudinais

Estado

Regionais

Municípios

Escola

Turma

Aluno

da Rede• Planejamento e execução de políticas públicas• Criação de metas de qualidade e equidade educacionais• Implementação de medidas de responsabilização• Políticas de incentivos diretos ou indiretos• Ações de formação continuada de professores

da Escola• Elaboração do projeto da escola• Monitoramento da qualidade de ensino• Subsídio para avaliação institucional

Uso dos ResultadosGestor

• Intervenção pedagógica

• Elaboração de projetos especiais

• Foco nos alunos com dificuldades

• Ações de reforço escolar

• Planejamento das ações de sala de aula

• Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

Uso dos ResultadosProfessor

• Acompanhamento individual do desempenho escolar pelos alunos e seus familiares.

• Informações sobre a qualidade dos serviços educacionais oferecidos.

Uso dos ResultadosAluno e Família

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais

Padrões de desempenho

estudantil

Estabelecimento e monitoramento das metas de qualidade

educacional

Caracterização do desempenho escolar

Grau de realização das ações

educacionais

Políticas públicas voltadas à promoção

da equidade

Identificação do percentual de alunos em risco pedagógico (evasão, reprovação

ou abandono)

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Abaixo do Básico

Os alunos que apresentam este padrão de desempenho revelam ter desenvolvido competências e habilidades muito aquém do que seria esperado para o período de escolarização em que se encontram. Por isso, esse grupo de alunos necessita de uma intervenção focada de modo a progrediremcom sucesso em seu processo de escolarização.

Básico

Os alunos que apresentam este padrão de desempenho demonstram já terem começado um processo de sistematização e domínio das habilidades consideradas básicas e essenciais ao período de escolarização em que se encontram. Para esse grupo de alunos, é importante o investimento de esforços para que possam desenvolver habilidades mais elaboradas.

Adequado

Os alunos que apresentam este padrão de desempenho demonstram ter ampliado o leque de habilidades tanto no que diz respeito à quantidade quanto no que se refere à complexidade dessas habilidades, as quais exigem um maior refinamento dos processos cognitivos nelas envolvidos.

Avançado

Os alunos que apresentam este padrão de desempenho revelam ser capazes de realizar tarefas que exigem habilidades mais sofisticadas. Eles desenvolveram habilidades que superam aquelas esperadas para o período de escolaridade em que se encontram.

@@@@@

INSERIR CÓPIA DA ESCALA

@@@@@

Escala de ProficiênciaA nossa “régua” para o desempenho

Material Impresso

1. Revista do Sistema

2. Revista do Gestor

3. Revista Pedagógica

4. Revista Contextual

5.Caderno de Gestão

6. Cadernos de Pesquisa

Ações de Formação

1. Oficinas

2. Vídeos

3. Kits instrucionais

Portal da Avaliação

1. Integração dos dados

2. Resultados das escolas

3. Mídias sociais

Transferência de Tecnologia

1. Cursos a distância

2. Curso presencial

3.Acompanhamento técnico/pedagógico

Com os sistemas estaduais de avaliação, as ações de divulgação são diretivas, com foco nas necessidades de cada sistema e capilarizadas até o nível de cada escola.

Canais de Divulgação

Fatores associados ao desempenho

Investigação de fatores intra e extraescolaresespecíficos de cada sistema

Avaliação do impacto dos programas implementados pelas Secretarias

Estudo de casos de sucesso (escolas eficazes)

Correlações entre fatores de desigualdade educacionais

Sistemas Estaduais de Avaliação Em que avançamos?

Maior transparência no processo de avaliação e divulgação dos resultados

Debate sobre as responsabilidades

Ampliação das oportunidades educacionais e o reconhecimento do direito de aprender

Atenção especial aos alunos de baixo desempenho

Sistemas Estaduais de Avaliação Em que avançamos?

Discussão sobre os fatores que interferem no desempenho escolar, eficácia de práticas, programas e políticas

educacionais.

Discussão sobre a construção de propostas curriculares inovadoras, bem desenhadas e de fácil compreensão por

diferentes públicos.

Participação dos acadêmicos e pesquisadores das universidades, gestores e professores da educação básica no

debate sobre o direito à educação.

Sistemas Estaduais de Avaliação Desafios

Maior participação dos gestores e professores nas discussões sobre apropriação e utilização dos resultados

pelas escolas.

Melhor alinhamento entre as propostas curriculares e avaliação e participação dos professores na definição dos

Padrões de Desempenho.

Canais de comunicação efetivos e constantes com gestores, professores, pais, alunos e sociedade sobre a

qualidade da educação e responsabilidade de todos.

Avaliando IDEPB 2013Resultados Gerais

ParticipaçãoDesempenho

Distribuição por padrões

PARTICIPAÇÃO

PARTICIPAÇÃO

Resultados de Participação – 5EF

GRE EdiçãoN° de Estudantes

PrevistosN° de Estudantes

AvaliadosParticipação (%)

JOAO PESSOA 2012 4.976 3.672 73,82013 4.330 3.570 82,4

GUARABIRA 2012 1.239 1.022 82,52013 1.122 907 80,8

CAMPINA GRANDE 2012 3.073 2.206 71,82013 2.755 2.103 76,3

CUITE 2012 443 410 92,62013 437 363 83,1

MONTEIRO 2012 403 348 86,42013 286 243 85,0

PATOS 2012 544 499 91,72013 594 536 90,2

ITAPORANGA 2012 828 650 78,52013 786 665 84,6

PARTICIPAÇÃO

Resultados de Participação – 5EF (continuação)

GRE EdiçãoN° de Estudantes

PrevistosN° de Estudantes

AvaliadosParticipação (%)

CATOLE DO ROCHA 2012 381 291 76,42013 244 215 88,1

CAJAZEIRAS 2012 817 512 62,72013 701 591 84,3

SOUSA 2012 731 615 84,12013 679 605 89,1

PRINCESA ISABEL 2012 365 299 81,92013 331 297 89,7

ITABAIANA 2012 868 628 72,42013 690 545 79,0

POMBAL 2012 193 162 83,92013 201 160 79,6

MAMANGUAPE 2012 687 535 77,92013 731 566 77,4

PARTICIPAÇÃO

Resultados de Participação – 9EF

GRE EdiçãoN° de Estudantes

PrevistosN° de Estudantes

AvaliadosParticipação (%)

JOAO PESSOA 2012 6.692 4.620 69,02013 6.610 4.797 72,6

GUARABIRA 2012 1.778 1.222 68,72013 1.577 1.174 74,4

CAMPINA GRANDE 2012 6.454 4.538 70,32013 6.015 4.450 74,0

CUITE 2012 435 357 82,12013 521 428 82,1

MONTEIRO 2012 983 768 78,12013 865 690 79,8

PATOS 2012 1.315 1.101 83,72013 1.252 1.022 81,6

ITAPORANGA 2012 1.165 882 75,72013 1.070 798 74,6

PARTICIPAÇÃO

Resultados de Participação – 9EF (continuação)

GRE EdiçãoN° de Estudantes

PrevistosN° de Estudantes

AvaliadosParticipação (%)

CATOLE DO ROCHA 2012 413 328 79,42013 425 308 72,5

CAJAZEIRAS 2012 1.062 279 26,32013 1.118 823 73,6

SOUSA 2012 900 652 72,42013 840 707 84,2

PRINCESA ISABEL 2012 599 499 83,32013 478 350 73,2

ITABAIANA 2012 948 707 74,62013 1.105 864 78,2

POMBAL 2012 353 246 69,72013 305 232 76,1

MAMANGUAPE 2012 628 472 75,22013 661 528 79,9

PARTICIPAÇÃO

Resultados de Participação – 3EM

GRE EdiçãoN° de Estudantes

PrevistosN° de Estudantes

AvaliadosParticipação (%)

JOAO PESSOA 2012 8.156 4.846 59,42013 7.954 5.141 64,6

GUARABIRA 2012 2.406 1.590 66,12013 2.535 1.799 71,0

CAMPINA GRANDE 2012 6.931 4.395 63,42013 6.343 4.404 69,4

CUITE 2012 839 624 74,42013 911 709 77,8

MONTEIRO 2012 891 719 80,72013 866 670 77,4

PATOS 2012 1.984 1.495 75,42013 1.916 1.465 76,5

ITAPORANGA 2012 1.281 903 70,52013 1.393 884 63,5

PARTICIPAÇÃO

Resultados de Participação – 3EM (continuação)

GRE EdiçãoN° de Estudantes

PrevistosN° de Estudantes

AvaliadosParticipação (%)

CATOLE DO ROCHA 2012 990 666 67,32013 951 710 74,7

CAJAZEIRAS 2012 1.314 227 17,32013 1.365 981 71,9

SOUSA 2012 795 595 74,82013 744 577 77,6

PRINCESA ISABEL 2012 613 423 69,02013 624 464 74,4

ITABAIANA 2012 1.165 790 67,82013 1.294 990 76,5

POMBAL 2012 724 565 78,02013 697 522 74,9

MAMANGUAPE 2012 1.453 902 62,12013 1.539 1.056 68,6

RESULTADOS GERAIS

Proficiências Médias – 2013Língua Portuguesa – 5º Ano do Ensino Fundamental

177,5 181,4

75

125

175

225

275

2012 2013

RESULTADOS GERAIS

Proficiências Médias – 2013Língua Portuguesa – 9º Ano do Ensino Fundamental

219,7226,2

150

200

250

300

350

2012 2013

RESULTADOS GERAIS

Proficiências Médias – 2013Língua Portuguesa – 3º Ano do Ensino Médio

249,1 252,8

175

225

275

325

375

2012 2013

RESULTADOS GERAIS

Proficiências Médias – 2013Matemática – 5º Ano do Ensino Fundamental

196,2 195,9

100

150

200

250

300

2012 2013

RESULTADOS GERAIS

Proficiências Médias – 2013Matemática – 9º Ano do Ensino Fundamental

225,9 226,6

175

225

275

325

375

2012 2013

RESULTADOS GERAIS

Proficiências Médias – 2013Matemática – 3º Ano do Ensino Médio

251,3 252,0

200

250

300

350

400

2012 2013

RESULTADOS GERAIS

Percentual de alunos por Padrão de Desempenho Língua Portuguesa – 5º Ano do Ensino Fundamental

9,6%

6,4%

37,7%

44,9%

36,0%

36,8%

16,8%

11,8%

2013

2012

Abaixo do Básico Básico Adequado Avançado

RESULTADOS GERAIS

Percentual de alunos por Padrão de Desempenho Língua Portuguesa – 9º Ano do Ensino Fundamental

29,3%

34,9%

39,8%

39,6%

25,4%

21,7%

5,5%

3,8%

2013

2012

Abaixo do Básico Básico Adequado Avançado

RESULTADOS GERAIS

Percentual de alunos por Padrão de Desempenho Língua Portuguesa – 3º Ano do Ensino Médio

28,2%

30,2%

38,2%

39,8%

28,1%

25,3%

5,5%

4,7%

2013

2012

Abaixo do Básico Básico Adequado Avançado

RESULTADOS GERAIS

Percentual de alunos por Padrão de Desempenho Matemática – 5º Ano do Ensino Fundamental

13,1%

12,3%

43,1%

42,8%

33,2%

35,9%

10,5%

9,0%

2013

2012

Abaixo do Básico Básico Adequado Avançado

RESULTADOS GERAIS

Percentual de alunos por Padrão de Desempenho Matemática – 9º Ano do Ensino Fundamental

49,0%

48,7%

37,9%

39,9%

12,0%

10,6%

1,2%

0,8%

2013

2012

Abaixo do Básico Básico Adequado Avançado

RESULTADOS GERAIS

Percentual de alunos por Padrão de Desempenho Matemática – 3º Ano do Ensino Médio

49,6%

50,9%

34,7%

32,4%

13,3%

14,3%

2,4%

2,3%

2013

2012

Abaixo do Básico Básico Adequado Avançado

RESULTADOS GERAIS

Proficiências Médias por Regional – 2013Língua Portuguesa – 5º Ano do Ensino Fundamental

190,8 189,2 188,5 186,2 185,0 181,3 180,5 179,8 178,0 175,9 171,4 171,4 171,1 169,2

75

125

175

225

275

SOU

SA

PRIN

CESA

ISA

BEL

CAJA

ZEIR

AS

JOÃO

PES

SOA

CATO

LÉ D

O R

OCH

A

CUIT

É

CAM

PIN

A G

RAN

DE

POM

BAL

PATO

S

GU

ARA

BIRA

ITA

BAIA

NA

MO

NTE

IRO

MA

MA

NG

UA

PE

ITA

PORA

NG

A

RESULTADOS GERAIS

Proficiências Médias por Regional – 2013Língua Portuguesa – 9º Ano do Ensino Fundamental

232,9 232,2 230,6 229,8 228,8 225,6 225,5 225,3 222,9 219,5 219,3 217,8 212,0 208,4

150

200

250

300

350

SOU

SA

POM

BAL

CAM

PIN

A G

RAN

DE

JOÃO

PES

SOA

CUIT

É

MO

NTE

IRO

CAJA

ZEIR

AS

CATO

LÉ D

O R

OCH

A

PATO

S

PRIN

CESA

ISA

BEL

GU

ARA

BIRA

ITA

BAIA

NA

MA

MA

NG

UA

PE

ITA

PORA

NG

A

RESULTADOS GERAIS

Proficiências Médias por Regional – 2013Língua Portuguesa – 3º Ano do Ensino Médio

263,1 259,7 256,4 255,1 254,3 254,3 253,4 251,9 251,4 249,4 246,9 246,8238,4 237,6

175

225

275

325

375

POM

BAL

CAM

PIN

A G

RAN

DE

CUIT

É

JOÃO

PES

SOA

CAJA

ZEIR

AS

SOU

SA

PRIN

CESA

ISA

BEL

CATO

LÉ D

O R

OCH

A

MO

NTE

IRO

PATO

S

GU

ARA

BIRA

ITA

PORA

NG

A

ITA

BAIA

NA

MA

MA

NG

UA

PE

RESULTADOS GERAIS

Proficiências Médias por Regional – 2013Matemática – 5º Ano do Ensino Fundamental

206,0 205,4 204,3 198,9 196,6 195,8 195,3 194,2 192,7 191,8 191,1 188,6 184,2 180,8

100

150

200

250

300

SOU

SA

PRIN

CESA

ISA

BEL

CAJA

ZEIR

AS

JOÃO

PES

SOA

CATO

LÉ D

O R

OCH

A

GU

ARA

BIRA

CUIT

É

CAM

PIN

A G

RAN

DE

POM

BAL

PATO

S

ITA

BAIA

NA

ITA

PORA

NG

A

MA

MA

NG

UA

PE

MO

NTE

IRO

RESULTADOS GERAIS

Proficiências Médias por Regional – 2013Matemática – 9º Ano do Ensino Fundamental

234,4 231,2 230,2 229,8 229,7 229,5 228,0 227,5 225,8 225,2 219,9 216,8 215,7 212,0

175

225

275

325

375

SOU

SA

POM

BAL

CAM

PIN

A G

RAN

DE

CUIT

É

CAJA

ZEIR

AS

CATO

LÉ D

O R

OCH

A

JOÃO

PES

SOA

MO

NTE

IRO

PRIN

CESA

ISA

BEL

PATO

S

GU

ARA

BIRA

ITA

BAIA

NA

ITA

PORA

NG

A

MA

MA

NG

UA

PE

RESULTADOS GERAIS

Proficiências Médias por Regional – 2013Matemática – 3º Ano do Ensino Médio

261,7 257,8 257,5 257,4 256,8 255,0 254,0 252,8 252,6 250,1 248,7 244,6 237,0 236,8

200

250

300

350

400

POM

BAL

CAM

PIN

A G

RAN

DE

CUIT

É

PRIN

CESA

ISA

BEL

CATO

LÉ D

O R

OCH

A

CAJA

ZEIR

AS

SOU

SA

PATO

S

JOÃO

PES

SOA

MO

NTE

IRO

ITA

PORA

NG

A

GU

ARA

BIRA

ITA

BAIA

NA

MA

MA

NG

UA

PE

RESULTADOS GERAIS

Juliana [email protected]