OFICINA DE APROPRIAÇÃO

DE RESULTADOS 2011

Analista de Instrumento de Avaliação : Tatiane Moraes

SAEMS 2011

Objetivo

•Analisar e interpretar os resultados do SAEMSpara (re)planejamento das ações pedagógicas aserem definidas pelas escolas envolvidas noprocesso de avaliação.

SAEMS 2011

Seção 1:

Matriz de Referência

SAEMS 2011

Aspectos a serem considerados em uma Matriz

• Constitui um parâmetro de orientação;• Apresenta o objeto da avaliação;• Caráter de universalidade; • Orientação na elaboração de itens.

- competências e habilidades cognitivas.

Quanto ao comportamento mental:SAEMS 2011

- modalidades estruturais da inteligência , isto é, ações e operações que utilizamos para estabelecer relações com e entre objetos, pessoas, fenômenos e situações.

- operações mentais: identificar, localizar comparar, classificar, ordenar, estabelecer relações, interpretar, analisar, inferir, resolver, dentre outras.

SAEMS 2011

É bom ressaltar que as matrizes de referêncianão englobam todo o currículo escolar.

É feito um recorte com base no que épossível aferir por meio do tipo deinstrumento de medida utilizado na avaliaçãoe que, ao mesmo tempo, é representativo doque está contemplado nos currículos.

Vejamos um exemplo:

SAEMS 2011

Em Matemática, as competências englobam três níveis.Veja um exemplo em Geometria.

1)Firmar conceitos e reconhecer figuras geométricasplanas ou espaciais. Conceituação

2)Mobilizar conceitos e propriedades geométricas paraestabelecer relações ou efetuar cálculos envolvendoelementos de uma figura. Manipulação

3) Utilizar conceitos e propriedades geométricas pararesolver problemas. Aplicação

SAEMS 2011A Matriz de Matemática está estruturada em quatro temas:

Espaço e Forma

Grandezas e Medidas

Números, Operações e Álgebra

Tratamento da Informação

SAEMS 2011

Aspectos a considerar sobre Descritores

• Os descritores têm origem na associação entre os conteúdoscurriculares e as operações mentais desenvolvidas pelo estudanteque se traduzem em certas habilidades.

• Constituem uma sumária “descrição” das habilidades esperadas ao final de cada período escolar avaliado

• Implicam, como fundamento, aspectos conceituais ou teóricos relacionados a diferentes áreas do conhecimento a serem avaliadas.

SAEMS 2011

• A função dos descritores é, portanto, indicar as habilidades queserão objeto de avaliação, no conjunto de itens que compõe oteste em cada período de escolaridade.

• Os descritores:-- pretendem indicar quais as habilidades que se espera

que os estudantes tenham desenvolvido;--constituem a referência para a elaboração dos itens que

devem compor o teste de desempenho.

• É a matéria-prima para elaboração dos itens.

SAEMS 2011Das Matrizes aos itens dos testes de proficiência

SAEMS 2011

O QUE É UM ITEM?

• É uma questão do teste de larga escala.• Avalia uma única habilidade, portanto é unidimensional.• Obtém do examinado uma resposta que permita inferências quanto às suas construções mentais.

SAEMS 2011

Considerar

Grau de Dificuldade – diz respeito àadequação entre a formulação do iteme a capacidade de resposta doestudante.

Discriminação – capacidade do item dedistinguir estudantes com diferentesníveis de habilidade.

SAEMS 2011

O ITEM E SUAS PARTES

10

- enfocar uma única situação-problema;- incluir no enunciado figura geométrica, recorte de

artigo de jornal ou revista, gráfico, fotografia, tabela ou quadro, que contenha informações necessárias à sua elaboração;

- redigir o enunciado de forma direta e afirmativa;- utilizar vocabulário adequado ao nível de

escolaridade do estudante;

Recomendações para a elaboração do enunciadoSAEMS 2011

10

- excluir qualquer referência discriminatória quanto a etnia, religião, gênero ou orientação sexual;

- observar as normas da ABNT na apresentação de textos e figuras;

- não utilizar “pegadinhas” nem “dicas”;- não utilizar termos como “sempre”, “nunca”,

“todo”,“totalmente”.

Recomendações para a elaboração do enunciadoSAEMS 2011

estar diretamente relacionada a um único descritor da Matriz de Referência;

11

formular de maneira positiva;

a tarefa desejada em conexão com o problema proposto.

Recomendações: Instrução para respostaSAEMS 2011

Quanto à Redação

Enunciado: deve ser claro, preciso e conciso.

Gabarito: exclusivamente um.

Distratores: devem ser plausíveis.

Suportes: devem conter informações relevantes.

13

LembretesSAEMS 2011

SAEMS 2011

SAEMS 2011

SAEMS 2011

ATIVIDADE 1Dinâmica dos itens.Analisar os itens.

SAEMS 2011

ATIVIDADE 2ESTUDO DA MATRIZ.ANOTAR NA CARTOLINA A HABILIDADE AVALIADA PELO ITEM.RELACIONAR A HABILIDADE A UMA COMPETÊNCIA DA MATRIZ.

SAEMS 2011- resultado por percentual de acerto por descritor

0,0

10,0

20,0

30,0

40,0

50,0

60,0

70,0

80,0

D02

D08

D10

D11

_1EM D12

D13

D14

D15

D16

D17

D25

D26

D27

D28

D71

D73

Espaço e Forma Grandezas e Medidas

Trat. Da Inform.

3º Ano do Ensino Médio

Espaço e Forma D02

Espaço e Forma D08

Espaço e Forma D10

Espaço e Forma D11_1EM

Espaço e Forma D12

Espaço e Forma D13

Espaço e Forma D14

Espaço e Forma D15

Espaço e Forma D16

Espaço e Forma D17

Grandezas e Medidas D25

Grandezas e Medidas D26

Grandezas e Medidas D27

Grandezas e Medidas D28

0,0

10,0

20,0

30,0

40,0

50,0

60,0

70,0

80,0

90,0

D33

D40

_1EM

D44

_1EM D45

D46

D51

D54

D55

D56

_1EM D57

D58

D59

D60

D61

D62

D63

_1EM D64

D65

D66

D67

D68

Números e Operações / Álgebra e Funções

3º Ano do Ensino Médio

SAEMS 2011- resultado por percentual de acerto por descritor

0,0

10,0

20,0

30,0

40,0

50,0

60,0

70,0

80,0

D01 D03 D04 D20 D22 D23

Espaço e Forma Grandezas e Medidas

3º Ano da Alfabetização

Espaço e Forma D01

Espaço e Forma D03

Espaço e Forma D04

Grandezas e Medidas D20

Grandezas e Medidas D22

Grandezas e Medidas D23

SAEMS 2011- resultado por percentual de acerto por descritor

0,0

10,0

20,0

30,0

40,0

50,0

60,0

70,0

80,0

90,0

D30 D31 D32 D34 D35 D36 D37 D38 D69 D70

Números e Operações Trat. Infor.

3º Ano da Alfabetização

Números e Operações D30

Números e Operações D31

Números e Operações D32

Números e Operações D34

Números e Operações D35

Números e Operações D36

Números e Operações D37

Números e Operações D38

Trat. Infor. D69

Trat. Infor. D70

SAEMS 2011- resultado por percentual de acerto por descritor

Seção 2:Interpretação pedagógica

dos resultados

SAEMS 2011Formas de Apresentação dos Resultados

Proficiência média – médias comparadas

Participação

Distribuição do percentual de estudantes por nível de proficiência e padrão de desempenho

Evolução do percentual de estudantes por padrão de desempenho

Percentual de acerto por descritor

Resultados por estudante

Resultado SAEMS 3EM

SAEMS 2011 Proficiência é a medida que representa um determinado traço latente (aptidão).

SAEMS 2011

Participação ( número de estudantes).

ESTADO POLO MUNICÍPIO ESCOLA

SAEMS 2011Evolução do percentual de estudantes por padrão de desempenho

SAEMS 2011

Muito Crítico: Somam números racionais constituídos pelo mesmo número de casasdecimais; resolvem problemas envolvendo porcentagem, reconhecem alguns

polígonos, calculam o contorno de um polígono com ou sem malha quadriculada einterpretam gráficos de coluna por meio da leitura de valores no eixo vertical

Crítico : Há um salto cognitivo no campo Numérico e o campo Algébrico começa a sedesenvolver. Os estudantes calculam o valor numérico de uma expressão algébrica,

calculam probabilidade, identificam o termo de uma PG, calculam a medida doperímetro de um polígono irregular, reconhecem um gráfico de linha, localizam pontosno plano cartesiano e identificam elementos de figuras tridimensionais.

Intermediário: Resolvem problemas envolvendo variação proporcional entre mais deduas grandezas, porcentagens mais complexas, calculam o valor numérico de umafunção, calculam volume, resolvem problemas envolvendo a lei angular de tales etc.

Adequado: Ampliam-se as habilidades matemáticas relativas ao estudo das funções.Os estudantes resolvem problemas envolvendo função afim, aplicam definição delogaritmos, reconhecem a equação de uma reta a partir de dois de seus pontos ou deum ponto e sua inclinação, calculam área total de uma pirâmide, aplicam o Teorema dePitágoras em figuras espaciais.

Padrões de desempenho

estudantil

Estabelecimento e monitoramento das metas de qualidade

educacional

Caracterização do desempenho escolar

Grau de realização das ações

educacionais

Políticas públicas voltadas à promoção

da equidade

Identificação do percentual de

estudantes em risco pedagógico (evasão,

reprovação ou abandono)

De Rede: Planejamento e execução de políticas públicasCriação de metas de qualidade e equidade educacionaisImplementação de medidas de responsabilizaçãoPolíticas de incentivos diretos ou indiretosAções de formação continuada de professores

De Escola: Elaboração do projeto da escolaMonitoramento da qualidade de ensino Subsídio para avaliação institucional

Uso dos Resultados1. Gestor

• Intervenção pedagógica

• Elaboração de projetos especiais

• Foco nos estudantes com dificuldades

• Ações de reforço escolar

• Planejamento das ações de sala de aula

• Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica

Uso dos Resultados2 . Professor

• Acompanhamento individual do desempenho escolar pelos estudantes e seus familiares

• Informações sobre a qualidade dos serviços educacionais oferecidos

Uso dos Resultados3. estudante

Educar é impregnar de sentido o que fazemos a cada instante!Paulo Freire

Obrigada!

tatianemoraes@caed.ufjf.br