Avaliacao online: instrumentos e classificacao

Post on 06-May-2015

1.558 views 1 download

description

Avaliacao online das aprendizagens__Unid Curricular do Mestrado em TIC e Educação e Tecnologias e Metodologias em E-learning, Instituto de Educação, Universidade de Lisboa

Transcript of Avaliacao online: instrumentos e classificacao

Critérios de Avaliação,

instrumentos e cotações

ouO Pânico! da Classificação

Avaliação dada aprendizagem

Avaliação parapara aprendizagem

Avaliação comocomo aprendizagem

AprendenteAprendente+

Tecnologia (método e conteúdo)

Avaliação Diversificada

… nas Abordagens

Classificação:Abordagem analítica vs Abordagem

global

Abordagem Global- Pouco tempo

- Questões abertas (simples ou muito complexas)- Questões sem referente- Muito dependente das expectativas do avaliador- Crianças pequenas (ex. pré-escolar)

Questão: A quem serve?

“Holistic scoring seemed to held more consistent ratings for the same student from block to block or from judge to judge

than analytic scoring.

As a general rule, global quality scaling is simpler as faster than analytic scoring. In some situations it may be more

reliable. But it does not provide any clear justification of the grade assigned, nor does it give any indication to the student

of how his answer fell short to the mark.” (Ebel, 1972, p. 151).

Abordagem Global

- Requer um avaliador experiente

- Requer vários avaliadores (painel) ou provedor/especialista (ou um avaliador extremamente confiante!!!)

- Referência a norma vs referência ao grupo

- Implica a não existência de ‘conflitos’ e de distúrbios no interior da prova

Novamente… A quem serve?

1) Ler cuidadosamente as respostas encontradas na globalidade2) Distingui-las de forma geral, considerando o nível de adequação às

expectativas do avaliar3) Dividir as respostas em pilhas de distintas qualidades de desempenho

4) Rever cada uma das pilhas para conferir a consistência entre as respostas

Fraco

Médio Bom

Satisfaz2

Mto Bom5

Mto

Fraco

1

Fraco2

Satifaz Pouco

2

Bom4

5) Subdividir novamente as pilhas em novas pilhas de qualidades de desempenho distintas (n vezes: quanto > n, > precisão)

6) A divisão (pode) considerar níveis equilibrados de respostas por pilha ou aproximação a distribuição normal

5% 25% 20% - 40% - 20% 25% 5%

Ebel (1972)

Abordagem Analítica- Time-consuming

- Criteria-based assessment = quebra tarefas complexas em diferentes componentes

- Procura aumentar o grau de precisão, exactidão e especificidade- Questões abertas- Questões com referente (teórico/empírico)

Questão: A quem serve?

“Holistic scoring seemed to held more consistent ratings for the same student from block to block or from judge to judge

than analytic scoring.

As a general rule, global quality scaling is simpler as faster than analytic scoring. In some situations it may be more

reliable. But it does not provide any clear justification of the grade assigned, nor does it give any indication to the student

of how his answer fell short to the mark.” (Ebel, 1972, p. 151).

Avaliação Diversificada

… nos Instrumentos

Instrumentos de Avaliação

diferentes permitemanalisar diferentes facetas

Instrumentos de Avaliação

vs Actividades ou

Produtos sobre os quais incide a

avaliação

Testes Exames

Produção de vídeos

Narrações / Story-telling

Criação de apresentações(áudio)

Relatórios (fotográficos)

Tutoriais explicativos

Legendagens

Entrevistas a ‘especialistas’

Gestão de Projectos

Criação de Websites/blogues/Wikis

. Observação . Registos de

incidentes críticos

. Listas de Verificação

(Check-lists ou Inventários). Grelha de Avaliação.Rubricas

. Entrevistas . Escalas, testes e

Questionários

ExamesApresentações

oraisComposições/

Ensaios / SíntesesProdução de

vídeosPodcasts

Relatórios de Imagens/ Books

NarraçõesLegendagens

ProjectosWebsites

Concepção de Produtos (obras)

Portefólios

(Pais & Monteiro, 1996)

Observação- Baseada em evidências, processo sistemático (procura eliminar a

avaliação baseada em impressões gerais)- Grelhas de observação/Protocolos: procuram aumentar o grau de

precisão e especificidade- Time-consuming

Estratégias ?

. Utilizar grelhas de registo

. Sistematizar o foco de avaliação (num comportamento observável)

. Focar a atenção num grupo de cada vez

. Seleccionar aleatoriamente um sujeito para observar

Registo de Incidentes

críticos- Complementar à obervação - Baseado em situações atípicas (positivas e negativas)- Grelhas de Registo: procuram aumentar o grau de precisão e

especificidade- Exaustividade na descrição

Inquéritos pré-definidos

Listas de Verificação

http://printablechecklist.org/

- Baseada numa abordagem dicotómica - Difíceis de construir pela necessidade de discriminação dos componentes- Não permite avaliar a qualidade do desempenho- Rápida aplicação

Exemplos: http://www.uwstout.edu/soe/profdev/rubrics.cfm http://www.grelhasonline.com/showquestions.php?id=28

- Baseada numa abordagem progressiva de etapas na qualidade da performance

- Qualitativa e descritiva: grau de complexidade na construição de rubricas de qualidade (global/analítica)

- Permite avaliar a qualidade do desempenho (abordagem escalar)- Aval. propósitos formativos (durante/prévio à tarefa)- Rápida aplicação

Grelhas de Avaliação- Baseada numa abordagem analítica (descriminativa da qualidade de cada elemento

da tarefa =- Quantitativa (por vezes, explicativa)- Aval. propósitos sumativos e concomitantemente formativos (após tarefa)- Aplicação morosa

??? Listas,

Grelhas ou Rubricas

???

Os professores

e a avaliaçãoOs Puristas Os

Poetas Os Pragmáticos

(Griffin, 2009)

ReferênciasAndrade H., & Du, Y. (2005). Student perspectives on rubric-referenced assessment. Practical Assessment Research & Evaluation, 10 (3). Disponivel em http://pareonline.net/pdf/v10n3.pdf.

Black, P., Harrison, C., Lee, C., Marshall, B. and Wiliam, D. (2003) Assessment for Learning. Putting it into practice. Maidenhead: Open University Press.

Ebel, R. L. (1972). Essentials of educational measurement (2nd ed.). New Jersey: Prentice Hall, Inc.

Dierick, S., & Dochy, F. (2001). New lines in Edumetrics: New forms of assessment lead to new assessment criteria. Studies in educational evaluation, 27,4, 307-329.

Griffin, M. (2009). What is a Rubric?. Assessment Update, 21, 6, 4-13.

Kan, D. (2007). An alternative method in the new educational program from the point of performance-based-assessment: rubric scoring scales. Educational Sciences: Theory & Practice, 7 (1), 144-152.

Pais, A., & Monteiro, M. (1996). Avaliação, uma prática diária. Lisboa: Editorial Presença.

Taggart, G. L., Phifer, S. J., Nixon, J. A., & Wood, M. (Eds.) (2008). Rubrics: Handbook for construction and use. Lancaster: Technomic Publishing Co.