Autoavaliação das competências de informação em estudantes universitários: validação...

Autoavaliação das competências de informação em estudantes universitários:

validação portuguesa do IL-HUMASS (Parte II)

Carlos Lopes Maria Pinto

[ 18 de outubro de 2012 | (5ª Feira) | Auditório 3 | 17h]

Lopes, C., & Pinto, M. (2012). Autoavaliação das competências de informação em estudantes universitários: Validação portuguesa do IL-HUMASS (Parte II) . |

11º Congresso da BAD, Lisboa, Fundação Calouste Gulbenkian, 18 de Outubro de 2012 |

2

Agenda 1. Contexto

2. Problema de partida

3. Modelo (Revisão da literatura)

4. Objetivos

5. Método 5.1 Participantes

5.2 Instrumento

5.3 Procedimentos

6. Resultados & Discussão

7. Conclusões

8. Desenvolvimentos futuros

Aprendizagem por competências transversais

Em Portugal: Institucionalização do Processo de Bolonha no Ensino Superior

A transição de um sistema de ensino baseado na ideia de transmissão de conhecimentos para um sistema baseado no desenvolvimento de competências pelos próprios alunos (…) é uma questão crítica central em toda a Europa, com particular expressão em Portugal.

Contexto

Competência… um conceito complexo

Uma competência é um poder agir de forma eficaz

numa classe de situações, mobilizando e combinando, em

tempo real e de forma pertinente os recursos intelectuais

e emocionais (Perrenoud, 2011)

Recursos intelectuais:

Os saberes declarativos

Os saberes de procedimentos

(metodológicos e tecnológicos)

Os saberes condicionais ou estratégicos

Recursos emocionais ou relacionais:

Atitudes

Valores princípios e normas

Relações consigo próprio

Relação com as sua emoções e relações

5

Processo de Bolonha: graus de licenciado e

mestre são conferidos aos que demonstrem: (…)

d) Capacidade de recolher, selecionar e interpretar a

informação relevante, particularmente na sua área de formação, que os habilite a fundamentarem as soluções que preconizam e os juízos que emitem, incluindo na análise os aspetos sociais, científicos e éticos relevantes

e) Competências que lhes permitam comunicar

informação, ideias, problemas e soluções, tanto a públicos constituídos por especialistas como por não especialistas

Diário da República, 24 de março de 2006 —I Série-A, N.º 60

Contexto



6

Definição de Literacia da Informação

Sistema de competências necessárias para pesquisar, recuperar, analisar, e usar a informação, ou seja,

reconhecer necessidades de informação, saber como localizar, identificar modos de acesso, avaliar, organizar e aplicar a informação, sendo capaz de sintetizar informação e de a usar para criar novo conhecimento e compreensão. Em simultâneo, estar consciente das envolventes éticas, culturais, económicas e sociais.

Association of College & Research Libraries (ACRL, 2000)

Contexto



Estudantes universitários

Navegantes em oceanos de informaçãomação

Desconhecem o valor da informaçãoção

Não sabem delimitar as suas necessidades de informação

Relaxamento face à tradição escrita, a favor das imagens, som, multimédia

Carência de um referencial qualitativo para avaliar a informação

Desconhecem os aspetos éticos/legais do uso da informação

?

Problema de partida

8

Entrevistas

Estudo de casos

Estudo Piloto

Métodos (qualitativos)

Focus groups

Revisão da Literatura Lopes, C., & Pinto, M. (2010). IL-HUMASS – Instrumento de avaliação de competências em literacia da informação : um

estudo de adaptação à população portuguesa (Parte I). In 10º Congresso de Bibliotecários, Arquivistas e

Documentalistas, Guimarães, Abril de 2010. [Em linha] Lisboa : BAD. Disponível em http://repositorio.ispa.pt/handle/10400.12/200

PINTO, M. (2010). Design of the IL-HUMASS survey on information literacy in higher o education: A self-assessment

approach. Journal of Information Science. 38, 86-103.

PINTO, M. (2012). Information literacy perceptions and behaviour among history students. Aslib Proceedings. 64, 3 304-327.

Revisão da Literatura

http://repositorio.ispa.pt/handle/10400.12/200





9

Domínios das atividades de aprendizagem (KSA)

A literacia da informação engloba tanto o uso como a criação de informação através do pensamento crítico e emocional. Três domínios:

Conhecimento (K): é constituído por dados e informação, assim como os modelos e teorias que usamos para trabalhar com essa mesma informação.

Habilidades (S): são aprendidas e repetidas,

conduzem-nos da teoria à ação e implicam a realização de tarefas mentais, cognitivas e afetivas

Atitudes (A): é a imagem de todas as nossas ações e decisões. É o espírito e a perspetiva com o qual um indivíduo, grupo ou organização introduz e provoca desenvolvimentos na sociedade

Skills Knowledge

Atitudes

Modelo

Perspetiva atitudinal (Triângulo educacional)

10

Fonte de

Conhecimento

Aprendizagem

Declarativo

Motivação

Conhecimento

Procedimental

Auto-eficácia

Importância das atitudes no triângulo educacional (Pinto, 2010)

A

S



11

Objetivos gerais O questionário – IL-HUMASS, visa conhecer a opinião

sobre competências no uso e na gestão da informação no ensino superior nas área das Ciências Sociais e Humanas

Desenvolver um instrumento baseado nas normas internacionais para a recolha de dados sobre a competência informacional

Conhecer, desde uma perspetiva de autoavaliação, a opinião e perceção que os estudantes universitários, têm sobre as suas próprias competências e habilidades na gestão e uso da informação

Objetivos



12

Objetivos gerais

Identificar no âmbito académico (docentes/investigadores, bibliotecários e estudantes) a perceção sobre a literacia da informação

Segundo uma perspetiva atitudinal (autorepostas) tendo em conta três fatores: importância, autoavaliação e fonte de aprendizagem

Objetivos



13

> Objetivos específicos

Estudo quantitativo (Parte ll)

Tradução e adaptação para a língua portuguesa do Questionário IL-HUMASS (PINTO, 2010), bem como a sua validação numa amostra de estudantes universitários

Oferecer um diagnóstico, numa perspetiva de autoavaliação, da opinião e da perceção que os estudantes universitários têm sobre as suas próprias competências e habilidades na gestão e uso da informação

Objetivos



15

Inquérito online

16

926 estudantes universitários 3 instituições:

ISPA-IU Universidade Nova de Lisboa

Universidade do Porto

Cursos: Psicologia, História, Filosofia, Ciências da Informação

Sociologia, Línguas e Literatura, Ciências da Educação

Ano de Curso: 334 - 1º ano 132 - 2º ano 171 – 3º ano 116 – 4º ano 71 – 5º ano 103 - Mestrados

Conclusões

> Participantes

Método

Idade:

17

Caraterização:

A ferramenta IL-HUMASS é um questionário de auto-resposta desenhado na Web, constituído por 26 itens,

com resposta tipo Likert com 9 posições (onde 1 corresponde a baixa competência e 9 a alta competência)

Visa avaliar a competência percebida em estudantes, professores e bibliotecários do ensino superior relacionadas com a: pesquisa, avaliação, processamento, e difusão da informação

Desenho IL-HUMASS: versão final

Método



18

Pesquisa da informação (8 itens): 1. Utilização de fontes de informação impressas (ex. livros, …) 2. Aceder e usar catálogos automatizados 3. Consultar e usar fontes eletrónicas de informação primárias (ex. revistas, …) 4. Utilização de fontes eletrónicas de informação secundárias (ex. bases de dados, …) 5. Conhecimento da terminologia da sua área de estudo 6. Saber pesquisar e recuperar informação na Internet (ex. pesquisas avançadas, diretórios, portais) 7. Utilização de fontes eletrónicas de informação informal (ex. blogs, listas de distribuição, …) 8. Conhecimento de estratégias de pesquisa de informação (ex. descritores, operadores booleanos, …)

Pe

sq

uis

a d

a I

nfo

rma

çã

o

IL-HUMASS: Categorias

Método



19

Avaliação da informação (5 itens): 9. Saber avaliar a qualidade dos recursos de informação 10. Reconhecer no texto as ideias do autor 11. Conhecimento da tipologia da informação científica (ex. teses de Doutoramento, atas de congressos, …) 12. Ser capaz de determinar a atualização da informação existente num recurso 13. Conhecimento dos autores ou instituições mais relevantes na sua área de estudo

A

va

lia

çã

o d

a In

form

açã

o


Método



20

Processamento da informação (6 itens): 14. Saber resumir e esquematizar a informação 15. Ser capaz de reconhecer a estruturação de um texto 16. Utilização de gestores de bases de dados (ex. Access, Oracle, MySQL, …) 17. Utilização de gestores de referências bibliográficas (ex. Endnote, Reference Manager, …) 18. Utilização de programas estatísticos e folhas de cálculo (ex. SPSS, Excel, …) 19. Saber instalar programas informáticos

Pro

ce

ssa

me

nto

In

form

açã

o


Método



21

Comunicação e difusão da informação (7 itens):

20. Saber comunicar em público 21. Saber comunicar noutros idiomas 22. Saber redigir um documento (ex. relatório, trabalho académico, …) 23. Conhecer o código ético e deontológico da sua área de estudo 24. Conhecer a legislação sobre o uso da informação e da propriedade intelectual 25. Saber fazer apresentações académicas (ex.

PowerPoint) 26. Saber difundir a informação na Internet (ex. Webs, Blogs, …)

Co

mu

nic

açã

o e

Dif

usã

o I

nf.


Método

22

Em relação a … Importância Autoavaliação Fonte de

Aprendizagem

PESQUISA DA INFORMAÇÃO Baixa Alta

1 2 3 4 5 6 7 8 9

Baixa Alta

1 2 3 4 5 6 7 8 9

A Sala de Aula C Formação

B Biblioteca I Auto-

aprendizagem

O Outros

8. Conhecimento de estratégias

de pesquisa de informação

(ex. descritores, operadores

booleanos, …)

9 2 I

Perspectiva atitudinal, tendo em conta 3 fatores:

Importância relacionada com o item (motivação)

Autoavaliação em relação ao nível de desempenho de cada item

Cenário de aprendizagem em relação a cada um dos itens

Desenho IL-HUMASS

Método

(1= Muito baixa; 3= Baixa; 5= Média; 7= Alta; 9 = Muito alta)



(Pinto, 2010)

Método

> Pesquisa da informação 1. Utilização de fontes de informação impressas (ex. livros, …) 2. Aceder e usar catálogos automatizados 3. Consultar e usar fontes eletrónicas de informação primárias (ex. revistas, …) 4. Utilização de fontes eletrónicas de informação secundárias (ex. bases de dados, …) 5. Conhecimento da terminologia da sua área de estudo 6. Saber pesquisar e recuperar informação na Internet (ex. pesquisas avançadas, diretórios, portais) 7. Utilização de fontes eletrónicas de informação informal (ex. blogs, listas de distribuição, …) 8. Conhecimento de estratégias de pesquisa de informação (ex. descritores, operadores booleanos, …)

> Avaliação da informação 9. Saber avaliar a qualidade dos recursos de informação 10. Reconhecer no texto as ideias do autor 11. Conhecimento da tipologia da informação científica (ex. teses de Doutoramento, atas de congressos, …) 12. Ser capaz de determinar a atualização da informação existente num recurso 13. Conhecimento dos autores ou instituições mais relevantes na sua área de estudo

> Processamento da informação 14. Saber resumir e esquematizar a informação 15. Ser capaz de reconhecer a estruturação de um texto 16. Utilização de gestores de bases de dados (ex. Access, Oracle, MySQL, …) 17. Utilização de gestores de referências bibliográficas (ex. Endnote, Reference Manager, …) 18. Utilização de programas estatísticos e folhas de cálculo (ex. SPSS, Excel, …) 19. Saber instalar programas informáticos

> Comunicação e difusão da informação 20. Saber comunicar em público 21. Saber comunicar noutros idiomas 22. Saber redigir um documento (ex. relatório, trabalho académico, …) 23. Conhecer o código ético e deontológico da sua área de estudo 24. Conhecer a legislação sobre o uso da informação e da propriedade intelectual 25. Saber fazer apresentações académicas (ex. PowerPoint) 26. Saber difundir a informação na Internet (ex. Webs, Blogs, …)



24

Inquérito online

Método

25 Inquérito online Método

26

- Extração de componentes principais, seguida de uma

rotação Varimax, permitiu analisar o padrão fatorial

- Os itens distribuem-se pelos quatro fatores de cada

dimensão (importância e autoavaliação)

- O grau de saturação de cada item com o respetivo fator

mostrou-se adequado, sendo a média de saturação para

todos os itens de .67 (nível) e .68 (importância) e a

percentagem de variância explicada de 56,3% e 60,8%

Análise fatorial exploratória

> Resultados

Resultados

27

Dimensão

Fiabilidade

Categoria Alfa de

Cronbach

Importância

Pesquisa .80

Avaliação .79

Processamento .78

Comunicação/Difusão .81

Autoavaliação

Pesquisa .84

Avaliação .83

Processamento .77

Comunicação/Difusão .80

Tabela 2

Valores de Alfa de Cronbach para as dimensões do instrumento

Resultados

27 Resultados

28

Importância Autoavaliação

Categorias M DP Pesquisa Avaliação Processamento Comunicação Pesquisa Avaliação Processamento Comunicação

Importância

Pesquisa

7,35 1,049 1 .631** .510** .578** .398** .279** .225** .259**

Avaliação 7,95 0,957 1 .665** .619** .221** .342** .174** .212**

Processamento 7,38 1,201 1 .688** .201** .201** .210** .286**

Comunicação

8,01 0,944 1 .252** .259** .382** .247**

Autoavaliação

Pesquisa 6,14 1,284 1 .684** .676** .672**

Avaliação

6,34 1,304 1 .650** .707**

Processamento

5,66 1,386 1 .722**

Comunicação 6,23 1,289 1 Nota: **p<.01

Tabela 3.

Estatística descritiva e matriz de correlações das dimensões por categorias

Resultados

Resultados

29

Resultados

Importância

Categorias M DP N

Pesquisa 7,35 1,05 828

Avaliação 7,95 0,96 828

Processamento 7,38 1,20 828

Comunicação 8,01 0,94 828

F(3,38) = 19,06, p<0.001, η2=.005

Tabela 4. Análise ANOVA com medidas repetidas para a dimensão Importância

Figura 3. Ilustração gráfica da dimensão Importância

Resultados

Autoavaliação

Categorias M DP N

Pesquisa 6,13 1,29 829

Avaliação 6,37 1,31 829

Processamento 5,64 1,39 829

Comunicação 6,25 1,29 828

30

Resultados

F(3,38) = 23,06, p<0.001, η2=.01 Figura 5. Ilustração gráfica da dimensão Autoavaliação

Tabela 5. Análise ANOVA com medidas repetidas para a dimensão Autoavaliação

Resultados

31

8,150

6,86

7,44

7,42

8,14

8,06

6,08

6,55

8,13

8,39

7,59

7,52

8,12

7,010

5,33

6,52

6,01

6,36

6,98

5,86

4,9

6,54

7,15

5,85

5,84

6,33

1 2 3 4 5 6 7 8 9

1. Utilização de fontes de informação impressas (ex.

livros, …)

2. Aceder e usar catálogos automatizados

3. Consultar e usar fontes electrónicas de informação

primárias (ex. revistas.)

4. Utilização de fontes electrónicas de informação

secundárias (ex. bases…)

5. Conhecimento da terminologia da sua área de estudo

6. Saber pesquisar e recuperar informação na Internet

(ex. pesquisas …)

7. Utilização de fontes electrónicas de informação

informal (ex. blogs, ...)

8. Conhecimento de estratégias de pesquisa de

informação (ex. descritores,

9. Saber avaliar a qualidade dos recursos de informação

10. Reconhecer no texto as ideias do autor

11. Conhecimento da tipologia da informação científica

(ex. teses de

12. Ser capaz de determinar a actualização da informação

existente num

13. Conhecimento dos autores ou instituições maisrelevantes na sua área

Escala

ite

ns


Resultados

Pesquisa

Avaliação

Resultados

32

8,37

8,06

6,77

6,53

7,73

6,69

8,29

8,07

8,51

8,31

7,51

8,19

7,03

6,99

6,95

4,68

4,05

5,44

5,8

6,28

5,69

6,9

6,2

5,53

7,38

5,52

1 2 3 4 5 6 7 8 9

14. Saber resumir e esquematizar a informação

15. Ser capaz de reconhecer a estruturação de um texto

16. Utilização de gestores de bases de dados (ex.

Access, Oracle, MySQL,)

17. Utilização de gestores de referências bibliográficas

(ex. Endnote, …)

18. Utilização de programas estatísticos e folhas de

cálculo (ex. SPSS,

19. Saber instalar programas informáticos

20. Saber comunicar em público

21. Saber comunicar noutros idiomas

22. Saber redigir um documento (ex. relatório, trabalho

académico, …)

23. Conhecer o código ético e deontológico da sua área

de estudo

24. Conhecer a legislação sobre o uso da informação e

da propriedade

25. Saber fazer apresentações académicas (ex.

PowerPoint, …)

26. Saber difundir a informação na Internet (ex. Webs,

Blogs, …)

Escala

ite

ns


Resultados

Processamento

Comunicação

/Difusão

Resultados

33

Categorias Competência mais importante

Competência menos

importante Competência

melhor adquirida Competência pior adquirida

Pesquisa

1. Utilização de fontes de informação impressas (ex. livros, …)

7. Utilização de fontes eletrónicas de informação informal (ex. blogs, l...)

1. Utilização de fontes de informação impressas (ex. livros, …)

8. Conhecimento de estratégias de pesquisa de informação (ex. descritores,

M 8,15 6,08 7,01 4,9

Avaliação 10. Reconhecer no texto as ideias do autor

12. Ser capaz de determinar a atualização da informação existente num recurso

10. Reconhecer no texto as ideias do autor

12. Ser capaz de determinar a atualização da informação existente num recurso

M 8,39 7,52 7,15 3,14

Processamento 14. Saber resumir e esquematizar a informação

17. Utilização de gestores de referências bibliográficas (ex. EndNote, …)

14. Saber resumir e esquematizar a informação

16. Utilização de gestores de bases de dados (ex. Access, Oracle, MySQL,)

M 8,37 6,53 6,99 4,68

Comunicação / Difusão

22. Saber redigir um documento (ex. relatório, trabalho académico, …)

24. Conhecer a legislação sobre o uso da informação e da propriedade

25. Saber fazer apresentações académicas (ex. PowerPoint, …)

26. Saber difundir a informação na Internet (ex. Webs, Blogs, …)

M 8,5 7,51 7,38 5,52

Tabela. 8 Análise exploratória, Médias dos itens das competências por fatores

Resultados

34

Oportunidades de melhoria • Utilização de gestores de referências bibliográficas

(ex. EndNote, Reference Manager, …) (2,48) • Utilização de programas estatísticos e folhas de cálculo

(ex. SPSS, Excel, …) (2,29) • Saber comunicar em público (2,01) • Saber comunicar noutros idiomas (2,38) • Conhecer o código ético e deontológico da sua área de

estudo (2,11)

Resultados

Resultados



Tabela 9. ANOVA para os cinco fatores significativos em função do ano de curso dos

estudantes

Fator ANOVA Ano de Curso

Dimensão

F P Ordem de Maior a Menor (Tukey)

Pesquisa Importância 4.94 .001 5º, 4º, M, 3º, 2º, 1º

Autoavaliação 6.21 .001 5º, 4º, 2º, 3º, M, 1º

Avaliação Importância 3.26 .005 5º, 4º, 2º, M, 3º, 1º

Autoavaliação 15.17 .001 5º, M, 4º, 2º, 3º, 1º

Comunicação / Difusão Autoavaliação 8.95 .001 2º, 5º, M, 4º, 3º, 1º

35

Resultados

Ano de curso

Resultados



Figura 7. Fontes preferenciais de aprendizagem dos estudantes por categorias

36

Resultados

Fontes de aprendizagem

57

52

61

54

0

10

20

30

40

50

60

70

Pesquisa Avaliação Processamento Comunicação

%

Categorias

Sala de Aula

Biblioteca

Formação

Individual

Resultados



Figura 8. Fontes preferenciais de aprendizagem dos estudantes

37

Sala de Aula 26%

Biblioteca 9%

Ações de Formação

8%

Individual 57%

Resultados

Fontes de aprendizagem

Resultados

38

Sugestões dos estudantes No total de 926 estudantes, 403 (43,5%) responderam à questão aberta do questionário, com realce para:

• formação no uso das bases de dados • apresentações em público • maior formação packages estatísticos (SPSS) e recursos

informáticos (webs, Excel,…) • aprendizagem de línguas (inglês) • redação de trabalhos académicos (normas de estilo,…) • estratégias de pesquisa de informação • gestores de referências • formação em literacia da informação e a sua integração

na estrutura curricular

Resultados

Resultados



39

> Conclusões

Este estudo – metodologia quantitativa, permitiu adaptar o questionário IL-HUMASS à população envolvida, com o objetivo da validação das suas propriedades psicométricas, através da análise da sua validade e fidelidade

Fluente, objetivo, compreensível e diversificado em tópicos sobre a literacia da informação para os vários interlocutores

Permite criar perfil pessoal de literacia da informação

Discussão & Conclusões



40

Conclusões

Originalidade na sua tripla dimensão: importância, na autoavaliação e na fonte favorita de aprendizagem

Alguns dos itens correlacionados são críticos para avaliar a literacia da informação básica e podem ser integradas nos curricula dessas disciplinas

Permite identificar no âmbito académico (docentes/investigadores, bibliotecários e estudantes) a percepção sobre a literacia da informação




41

Conclusões

Desenvolvido de acordo com as normas internacionais

Diagnosticar o estado de literacia da informação no Ensino Superior na área das Ciências Sociais e Humanas

Determinar se existem diferenças na conceção e na prática de literacia de informação em diferentes disciplinas.




42

> Trabalhos em curso

Comparação dos resultados aferidos para a população portuguesa com a espanhola

Análises comparativas por pais, plano de estudos (Psicologia, Sociologia, …) e por categoria (profissionais da informação, docentes)




43

> Desenvolvimentos futuros

Dispor de instrumentos e aplicações para diagnosticar, planear e programar actividades ALFIN.

Esta investigação representa um pequeno mas necessário passo na direcção da importância de literacia da informação no âmbito do ensino superior.

Sobre o futuro do instrumento?, está na forma como for utilizado para gerar conhecimento. A resposta está em que o IL-HUMASS estabelece que as necessidades dos utilizadores dependerão das opiniões dos utilizadores.




Palavra final…

44

Vemos, ouvimos e lemos

Não podemos ignorar.

Sophia de Mello Breyner

Para não concluir…



Agradecimentos

Clara Macedo (UP)

João Leite (UP)

Fernanda Ribeiro (UP)

Helena Mesquita (UP)

Fátima Crespo (UNL)

Alfredo Ramalho (UCP)

Joana Santos (UBI)

Lícia Marques (EBSCO)

António Candeias (UNL)

Equipa da Biblioteca (ISPA)

Tatiana Sanches (FPCE-Lisboa)

Maria da Luz Antunes (ESTeSL)

João Maroco (ISPA)

Teresa Garcia Marques (ISPA)

Francisco Peixoto (ISPA)

Dora Sales (UPB, Espanha)

Pilar Osório (UGR, Espanha)

Julio Arévalo (USAL, Espanha)

Angels Carles (UAB, Espanha)

Luis Anglada (CBUC, Espanha)

Agradecimentos

Obrigado pela vossa atenção!

Questões?

Maria Pinto

[email protected]

Carlos Lopes [email protected]

mailto:[email protected]



Autoavaliação das competências de informação em estudantes universitários: validação...

Education

Transcript of Autoavaliação das competências de informação em estudantes universitários: validação...