A VALIDAÇÃO DE TECNOLOGIAS CUIDATIVO-EDUCACIONAIS EM FOCO

Dr.ª Elizabeth Teixeira

REDE DE ESTUDOS DE TECNOLOGIAS EDUCACIONAIS - RETE

• Foi no Grupo de Pesquisa “Práticas Educativas em Saúde e Cuidado na Amazônia” – PESCA que iniciamos a validação de tecnologias educacionais

• Tudo começou em 2009...e esse ciclo foi se ampliando até 2015

INTRODUÇÃO...

2015

• Em 2016 criamos a REDE DE ESTUDOS DE TECNOLOGIAS EDUCACIONAIS – RETE...

• E um novo ciclo começou......Novas tecnologias educacionais estão sendo validadas... estamos adotando novos meios e métodos...testando novos caminhos...

• Novas produções estão sendo escritas e publicadas...

O PROCESSO O PROCESSO COMPLETO

Produção(Contextualização, Preparação-Criação)

PASSO 1

ValidaçãoPASSO 2

Aplicação

e

AvaliaçãoPASSO 3

Tipos de Estudos e Abordagens

Validação de TE Tipo Produto: formatos impressos, guias de bolso, cadernos, etc.

POR CONSENSO

TECNICA DELPHI

POR CONCORDÂNCIA

JUÍZES-ESPECIALISTAS

JUÍZES-ESPECIALISTAS

(CONTEÚDO)

JUÍZES-ESPECIALISTAS (CONTEÚDO &

COMUNICAÇÃO)

PÚBLICO-ALVO (SEMÂNTICA & APARÊNCIA)

PESQUISA METODOLÓGICA (QT)

PROCEDIMENTOS PRÉVIOS (ANTES)

Validação de TE Tipo Processo: formatos leves, sócio-interativos, etc.

PROCEDIMENTOS PRÉVIOS (ANTES)

PROCEDIMENTOS DE TESTAGEM (DURANTE)

PROCEDIMENTOS DE AVALIAÇÃO DE MUDANÇAS (DEPOIS)

PESQUISA CONVERGENTE ASSISTENCIAL (QL)

Participantes: Juízes-Especialistas e Público-AlvoAlvo

Para a análise da dimensão didático-ilustrativa ou de comunicação (Etapa 1)

Juízes-especialistas de áreas humanas-sociais e/ou tecnológicas- aplicadas: pedagogo, comunicador social, design gráfico, antropólogo, informática, robótica, etc.

Para a análise da dimensão técnico-científica ou de conteúdo Para a análise da dimensão técnico-científica ou de conteúdo (Etapa 2)

Juízes-especialistas de áreas da saúde

Para a análise da dimensão semântica ou de aparência (Etapa 3)

Público alvo levando em consideração o grau de escolaridade; poderão ser divididos em 3 grupos: grupo 01: nível fundamental; grupo 02: nível médio; grupo 03: nível superior.

A determinação do número de Juízes-Especialistas Especialistas

Os critérios de inclusão para Juízes-EspecialistasEspecialistas

Há uma tendência em se valorizar mais os atributos acadêmicos

Modelo utilizado por Juventino (2010) adaptado de Fehring (1994)

CONHECIMENTO ACADÊMICO

Juízes Acadêmicos

Uma estratégia é selecionar dois Grupos de Juízes da área da saúde

CONHECIMENTO TÉCNICO

Juízes Técnicos

Coleta de Dados

� Instrumento segundo blocos para Juízes da área da Saúde (adaptado de OLIVEIRA, 2006)

� Instrumento segundo páginas-tópicos da tecnologia para Juízes da área da Saúde (BENEVIDES et al, 2016)

� Instrumento para Juízes de outras áreas (adaptado de GALDINO, 2014)

• O instrumento destinado aos juízes de outras áreas, com foco em design e marketing, foi elaborado tendo como base um instrumento americano proposto em 1996 para avaliação da dificuldade e conveniência dos materiais educativos, denominado Suitability Assessment ofMaterials (SAM).

•• No instrumento SAM há uma lista para checar atributos relacionados a conteúdo, estilo de escrita, aparência, motivação e adequação cultural do material educativo.

• Foi utilizado por Galdino ( 2014) para validar uma cartilha para o autocuidado com os pés de pessoas com diabetes.

� Instrumento para público-alvo (adaptado de OLIVEIRA, 2006)

� Instrumento para público-alvo (GALDINO, 2014)

Análise de Dados

Cálculo do IVC a partir do Instrumento dos Juízes-Especialistas da Saúde

• O IVC mede a proporção dos juízes em concordância sobre determinado aspecto do instrumento.

• Recomenda-se um IVC de no mínimo 70% (o,70) ou 80% (o,80)

• Para esse cálculo se utiliza uma escala Likert com pontuações de um a quatro.

•• O índice é calculado por meio do somatório de concordância dos itens marcados como “1” e “2” pelos especialistas, dividido pelo total de respostas.

• Utilizamos a seguinte fórmula para o cálculo do IVC:

IVC = Número de Respostas 1 e 2

Número total de Respostas

O IVC pode ser calculado por três equações matemáticas:

S-CVI/Ave (média dos índices de validação de conteúdo para todos os índices da escala)

S-CVI/UA (proporção de itens da escala que atinge escores 3 − realmente relevante − e 4 − muito relevante −, por todos os peritos)

I-CVI (validade de conteúdo dos itens individuais).

Coeficiente de Kappa (K)

O coeficiente de Kappa (K) é recomendado para aferir medidas de concordância entre juízes da área da saúde.

Os valores de K variam de -1 a +1 Quanto mais próximo do valor positivo, mais fidedigno o nível de

confiança entre os juízes em relação à permanência ou não dos itens avaliados no instrumento.

Coeficiente kappa Força de concordância<0 Pobre

0-0.19 Leve0.20-0.39 Aceitável0.40-0.59 Moderada0.60-0.79 Considerável0.80-1.00 Perfeito acordo

Cálculo do Escore SAM a partir do Instrumento dos Juízes-Especialistas da Outras Áreas

• O Escore SAM é calculado a partir da soma de pontos obtidos no instrumento.

• Para ser considerada adequada, a tecnologia deve obter um escore igual ou superior a 10 pontos. escore igual ou superior a 10 pontos.

• Vamos ver a Tabela 10 do estudo de Galdino (2014):

Cálculo do Índice de Concordância - IC a partir do Instrumento do público-alvo

• O IC aponta a proporção dos participantes em concordância sobre determinado aspecto do instrumento.

• Recomenda-se um IC de no mínimo 70% (o,70) ou 80% (o,80)

• Para esse cálculo pode-se utilizar uma escala Likert com pontuações de um a quatro ou outro modelo de avaliação com menos de 4 pontuações.

Reflexões Finais...Reflexões Finais...

Práticas Educativas Exitosas são ...

TRAVESSIAS DE SABERES ENTRE

REDES DE AFETOSTECIDAS EM GRUPO

MEDIADAS POR MEDIADAS POR TECNOLOGIAS

EDUCACIONAIS VALIDADAS

SENSÍVEIS À REALIDADE.

• OBRIGADA

• etfelipe@hotmail.com