AvaliaAvaliaçção em ão em contexto educativocontexto educativo

““AvaliaAvaliaçção de software educativoão de software educativo””

MME, UAMME, UA

Maria João Loureiro e Lúcia Pombo

(adaptado de Costa e Pereira, s.d.,LAQE)

ÍÍndicendice

�� O que O que éé avaliar;avaliar;

�� FunFunçções da avaliaões da avaliaçção;ão;

�� Processo de avaliaProcesso de avaliaçção;ão;

�� Envolventes da avaliaEnvolventes da avaliaçção;ão;

�� Indicador e critIndicador e critéério;rio;

�� Ciladas da avaliaCiladas da avaliaççãoão

O que O que éé avaliar?avaliar?

�� AA AvaliaAvaliaççãoão, nas palavras de Vilar (1992) e com as , nas palavras de Vilar (1992) e com as quais nos identificamosquais nos identificamos::

�� ““((……) ) éé o o úúnico procedimento que dnico procedimento que dáá garantias de que um garantias de que um projecto (projecto (……) social e humano não se desenvolva ao sabor do ) social e humano não se desenvolva ao sabor do acaso e/ou da apregoada intuiacaso e/ou da apregoada intuiçção humana, que constituem alião humana, que constituem aliáás, s, factores impeditivos ou obstfactores impeditivos ou obstááculos epistemolculos epistemolóógicos de qualquer gicos de qualquer acacçção consequente. (ão consequente. (……) a ) a ““avaliaavaliaççãoão”” não pode ser encarada não pode ser encarada como uma questão meramente tcomo uma questão meramente téécnica. Tratacnica. Trata--se, efectivamente, se, efectivamente, de algo muito complexo que exige grande preparade algo muito complexo que exige grande preparaçção daqueles ão daqueles que são chamados a avaliar (que são chamados a avaliar (……))”” ((psps.. 7 e 8)7 e 8)

O que O que éé avaliar?avaliar?

�� Por outras palavras, um pouco mais operacionais Por outras palavras, um pouco mais operacionais ……

�� A A AvaliaAvaliaççãoão éé um um processoprocesso de procura e selecde procura e selecçção de ão de informainformaççãoão que, promovendo a que, promovendo a compreensão compreensão de um de um determinado campo permita determinado campo permita tomar as decisõestomar as decisões que conduzam, que conduzam, ou sejam susceptou sejam susceptííveis de conduzir, veis de conduzir, àà ambicionada melhoria, ou ambicionada melhoria, ou seja, ao seja, ao aperfeiaperfeiççoamentooamento do objecto avaliado (do objecto avaliado (FigariFigari, 1996; , 1996; PerrenoudPerrenoud, 1999; , 1999; AlonsoAlonso, 2002, entre outros), 2002, entre outros)

�� A A AvaliaAvaliaççãoão assenta numa assenta numa relarelaçção bilateralão bilateral entre o que se entre o que se observaobserva e um determinado e um determinado sistema de referênciassistema de referências que que constitui uma perspectiva de anconstitui uma perspectiva de anáálise privilegiada (lise privilegiada (BarbierBarbier, 1985; , 1985; ArdoinoArdoino etet alal.,1989; .,1989; HadgiHadgi, 1994; , 1994; FigariFigari, 1996), 1996)

JuJuíízo de valor?zo de valor?

�� ÉÉ, na verdade, um balan, na verdade, um balançço dos pontos fortes e dos o dos pontos fortes e dos pontos fracos da acpontos fracos da acçção avaliada, das suas vantagens e ão avaliada, das suas vantagens e inconvenientes, das suas qualidades e defeitos, dos seus inconvenientes, das suas qualidades e defeitos, dos seus valores e insuficiências. [Barbier, 1990]valores e insuficiências. [Barbier, 1990]

Complexidade(sComplexidade(s))

CompetênciaCompetência(s)(s)

DesempenhoDesempenho

CoerênciaCoerência

ClassificaClassificaççãoão

AprendizagemAprendizagem

AnAnáálise/Anlise/Anááliselise cuidadosacuidadosa

AferiAferiçção/Aferirão/Aferir

ConhecimentosConhecimentos, , ValoresValorese e AtitudesAtitudes

ObjectividadeObjectividadee e subjectividadesubjectividade

MediMediççãoão((quantitativaquantitativae e qualitativaqualitativa))

JustiJustiçça/Necessidadea/Necessidadede de fazerfazerjustijustiççaa

JulgarJulgar

FormativaFormativae e sumativasumativa

DificuldadesDificuldadese e complexidadecomplexidade

CritCritéériosrios

PalavrasPalavras associadasassociadas àà avaliaavaliaççãoão

FunFunçções da Avaliaões da Avaliaççãoão

�� FunFunçção Social:ão Social: associaassocia--se, por um lado, a necessidades sociais de certificase, por um lado, a necessidades sociais de certificaçção e ão e selecselecçção e, por outro, a expectativas sociais.ão e, por outro, a expectativas sociais.

�� FunFunçção Pedagão Pedagóógica:gica: associaassocia--se, se, àà regularegulaçção e monitorizaão e monitorizaçção do processo ão do processo conducente conducente àà melhoria do objecto de avaliamelhoria do objecto de avaliaçção.ão.

�� FunFunçção Polão Polííticotico--Administrativa:Administrativa: associaassocia--se, se, àà prestaprestaçção de contas, como ão de contas, como modo, por exemplo, de obter apoio.modo, por exemplo, de obter apoio.

[Correia, 2001]

Determinar as informações a recolher e a estratégia apropriada

RECOLHA DE

INFORMAÇÃO

[Rodrigues, 1992][Rodrigues, 1992]

COMPONENTES DO PROCESSO DE AVALIACOMPONENTES DO PROCESSO DE AVALIAÇÇÃOÃO

Recolher a informaçãoe codificá-laMEDIDA

Confrontar a informação com os critérios

CONTROLE

Determinar critérios operacionais e indicadores

AVALIAÇÂO Formular juízos de valor

Determinar objectivos pertinentes

Tomar uma decisão

Determinar objectivos pertinentes

Referente x Referido?Referente x Referido?

[[HadjiHadji, 1994], 1994]

AVALIAR = atribuir

A dupla articulação na operação da avaliação

em função de

a partir de

um valor

um sentidoao confrontar

uma situação real

uma situação desejada

REFERIDO

REFERENTEAplicação

Com

paração

Utilização de

indicadores

Produção de

normas/critérios

Campo da realidade concreta

Campo das expectativas sociais

REALID

ADE

Dados de facto

(o que se observou)

PROJECTO

Dados do dever-ser

(o que se espera/desaja)

Envolventes da AvaliaEnvolventes da Avaliaççãoão

�� HadjiHadji (1994) refere a avalia(1994) refere a avaliaçção como um processo que ão como um processo que envolve a elaboraenvolve a elaboraçção de um referente e a determinaão de um referente e a determinaçção ão de um referido:de um referido:

Referente – o que serve de norma e critério, o ideal, o modelo, o correcto.

Referido – o que é constatado, o que serve para ajuizar sobre um desempenho, uma representação de facto.

�� Contudo, a avaliaContudo, a avaliaçção não de deve, nem pode, reduzir ão não de deve, nem pode, reduzir apenas a uma medida de desvio entre referentes e referidos apenas a uma medida de desvio entre referentes e referidos pois:pois:

�� ““((……) A ac) A acçção avaliativa insereão avaliativa insere--se num processo dinâmico que se num processo dinâmico que integra nomeadamente a produintegra nomeadamente a produçção de sentido e de ajuda ão de sentido e de ajuda ààdecisão. decisão. DialDialóógicagica, por natureza, ela , por natureza, ela éé explicitaexplicitaçção e ão e confrontaconfrontaçção, no interior de um processo de negociaão, no interior de um processo de negociaçção. (ão. (……))””((RoullierRoullier, 2004), 2004)

Referente x Referido?Referente x Referido?

Transparência na subjectividadeTransparência na subjectividade

OBJECTIVIDADESUBJECTIVIDADE

AVALIAÇÃO

DEFINIÇÃO RIGOROSA:

- DOS CRITÉRIOS

- DO OBJECTO

-…

Indicador e CritIndicador e Critéériorio

�� CritCritéério:rio: caractercaracteríística ou propriedade de um objecto que permite stica ou propriedade de um objecto que permite atribuiratribuir--lhe um julhe um juíízo de valor. O que permite segmentar (por zo de valor. O que permite segmentar (por exemplo; integrar numa categoria). [exemplo; integrar numa categoria). [HadjiHadji, 1994], 1994]

�� Indicador:Indicador: caractercaracteríística particular que stica particular que éé um testemunho da um testemunho da existência de um fenexistência de um fenóómeno predeterminado. Signo no qual se meno predeterminado. Signo no qual se reconhece a presenreconhece a presençça de um efeito esperado. [a de um efeito esperado. [HadjiHadji, 1994], 1994]

Fases do processoFases do processo

�� Fase IFase IProcura de Procura de referentes referentes (sobre o objecto de avalia(sobre o objecto de avaliaçção); definião); definiçção de ão de critcritéérios rios de avaliade avaliaçção; ão; negocianegociaççãoão do seu significado com os do seu significado com os diferentes actores envolvidos.diferentes actores envolvidos.

�� Fase IIFase IIConstruConstruçção de um ão de um instrumento de recolha de informainstrumento de recolha de informaççãoão edificado edificado sobre os referentes escolhidos, em particular, provenientes de sobre os referentes escolhidos, em particular, provenientes de indicadores emergentes dos critindicadores emergentes dos critéérios estabelecidos; recolha de rios estabelecidos; recolha de informainformaçção e sua anão e sua anáálise.lise.

�� Fase IIIFase IIIReflexão sobre essa anReflexão sobre essa anáálise (conjuntamente com os actores lise (conjuntamente com os actores envolvidos e tomada de decisões sobre caminhos a prosseguir.envolvidos e tomada de decisões sobre caminhos a prosseguir.

Questões tQuestões téécnicas da Avaliacnicas da Avaliaççãoão

Pela observaPela observaçção? Testes? Inquão? Testes? Inquééritos?ritos?Como se avalia?Como se avalia?

Antes do processo, durante ou apAntes do processo, durante ou apóós?s?Quando se avalia?Quando se avalia?

EX: Os formandos? Os formadores? Pais? EX: Os formandos? Os formadores? Pais? Especialistas?Especialistas?

Quem avalia?Quem avalia?

EX: Aprendizagem? Processos? Produtos? EX: Aprendizagem? Processos? Produtos? ServiServiçços? Sistemas?os? Sistemas?

Qual(isQual(is) ) o(so(s) ) objecto(sobjecto(s) desta ) desta avaliaavaliaçção?ão?

Ex: Aos formandos? Aos formadores? Ex: Aos formandos? Aos formadores?

Ao MinistAo Ministéério?rio?

Para quem se destinam os Para quem se destinam os seus resultados?seus resultados?

Ex: para regular? Para controlar? Ex: para regular? Para controlar? Para quê esta avaliaPara quê esta avaliaçção?ão?

A todasas situações de avaliação podem ser colocadas as seguintes questões:

Ciladas a que se expõe o avaliadorCiladas a que se expõe o avaliador

�� A armadilha do objectivismo A armadilha do objectivismo ““Considero que a avaliaConsidero que a avaliaçção ão éé um processo subjectivo e que estum processo subjectivo e que estáá inerente inerente àà definidefiniçção ão

dos prdos próóprios critprios critéérios de avaliarios de avaliaçção, que são estabelecidos pelo ser humanoão, que são estabelecidos pelo ser humano””..

�� A armadilha do autoritarismoA armadilha do autoritarismo““Ao termo avaliaAo termo avaliaçção associo uma anão associo uma anáálise ponderada de determinado objecto ou lise ponderada de determinado objecto ou

acontecimento, por um sujeito que segue determinados critacontecimento, por um sujeito que segue determinados critéérios previamente rios previamente definidos.definidos.””

�� A armadilha do tecnicismoA armadilha do tecnicismo“…“…não encaro a avalianão encaro a avaliaçção como uma grelha predefinida mas sim como um esquema ão como uma grelha predefinida mas sim como um esquema

que, seguindo umas linhas mestras, se vai gradualmente definindoque, seguindo umas linhas mestras, se vai gradualmente definindo..””

�� A armadilha embriaguez interpretativaA armadilha embriaguez interpretativa““O conceito de avaliaO conceito de avaliaçção ão éé tão subjectivo como a prtão subjectivo como a próópria acpria acçção de avaliar. ão de avaliar. ””

[Hadji, 1996]