Claudia Flemming ColussiUniversidade Federal de Santa Catarina

Conceitos de AvaliaçãoConceitos de Avaliação

Juízo de valor

Tomada dedecisão

“A avaliação é uma forma de pesquisa (...) destinada a identificar, obter e proporcionar de maneira válida e

confiável dados e informação suficiente e relevante para apoiar um juízo sobre

o mérito e o valor dos diferentes componentes de um programa (...),de

forma tal que sirva de base ou guia para uma tomada de decisões (...), ou para solucionar problemas e promover o conhecimento e a compreensão dos

fatores associados ao êxito ou ao fracasso de seus resultados.”

Aguilar, Ander-Egg (1994)

Avaliar significa emitir um juízo de valor percebido

a partir de um julgamento realizado com base em critérios previamente definidos.

AVALIAÇÃO EXIGE: MEDIR, COMPARAR, EMITIR JUÍZO DE VALOR

Monitoramento, Auditoria e Monitoramento, Auditoria e AvaliaçãoAvaliação

MONITORAMENTOMONITORAMENTO AUDITORIA AVALIAÇÃO

Contínuo Contínuo Ocasional

Acompanhar, controlar, supervisionar

Aferir pertinência normativa

Emitir juízo de valor

Processos e produtosProcessos financeiros e produção de ações

Resultados, impacto, qualidade

Técnico Jurídico Político

Questões da AvaliaçãoQuestões da Avaliação

1. Para quem interessa a avaliação?

2. O que está sendo avaliado?

3. Para que avaliar, ou qual a finalidade da avaliação?

4. Como avaliar, ou quais os instrumentos e técnicas que podem ser utilizados na avaliação?

Questões da AvaliaçãoQuestões da Avaliação

1. Para quem interessa a avaliação?

2. O que está sendo avaliado?

3. Para que avaliar, ou qual a finalidade da avaliação?

4. Como avaliar, ou quais os instrumentos e técnicas que podem ser utilizados na avaliação?

Questões da AvaliaçãoQuestões da Avaliação

1. Para quem interessa a avaliação?

2. O que está sendo avaliado?

3. Para que avaliar, ou qual a finalidade da avaliação?

4. Como avaliar, ou quais os instrumentos e técnicas que podem ser utilizados na avaliação?

Questões da AvaliaçãoQuestões da Avaliação

1. Para quem interessa a avaliação?

2. O que está sendo avaliado?

3. Para que avaliar, ou qual a finalidade da avaliação?

4. Como avaliar, ou quais os instrumentos e técnicas que podem ser utilizados na avaliação?

Questões da AvaliaçãoQuestões da Avaliação

1. Para quem interessa a avaliação?

2. O que está sendo avaliado?

3. Para que avaliar, ou qual a finalidade da avaliação?

4. Como avaliar, ou quais os instrumentos e técnicas que podem ser utilizados na avaliação?

Quem?

Técnico

Político

Usuários

Sociedade

interno externo

1. Para quem interessa a avaliação?

INTERESSADO:INTERESSADO:Usuário e sociedade

Acesso: consegue ser atendido? Qualidade: é bem atendido? Resolubilidade: resolve seu problema? Satisfação: serviço atende suas

expectativas? Cumpre a função para qual se destina?

INTERESSADO:INTERESSADO:Trabalhador

Gosta do seu trabalho? Tem boas condições de trabalho? Seu trabalho é reconhecido? Seu trabalho traz recompensa

adequada? Sente-se satisfeito com seu

trabalho?

INTERESSADO:INTERESSADO:Técnico

Avaliar as questões técnicas envolvidas no processo Usar indicadores de custo,

rendimento, produtividade, clássicos de saúde Comparar o que foi executado com o

que foi proposto

INTERESSADO:INTERESSADO:Decisor

Avaliar as questões políticas envolvidas no processo Usar indicadores de viabilidade,

legitimidade, utilidade Justificar os recursos e esforços

empenhados e conseguir novos investimentos

PROCESSOS E

RESULTADOS DIFERENTES

2. O que está sendo avaliado?

(objeto da avaliação)

Uma ação de saúdeUma campanha de saúdeUm programa de saúdeUm sistema de saúde

Cada um com características, objetivos, e estratégias deferentes

Donabedian (1980):Donabedian (1980):

Estrutura

Processo

Resultado

3. Para que avaliar, ou qual a finalidade da

avaliação?

Estão fazendo de acordo com o combinado?

Será que isto funciona?

O que precisa ser melhorado?

Para que?

Conhecimento DecisãoGerência

Pesquisas científicas

Investigações acadêmicas

Diagnósticos de saúde

Controle

Supervisão

Acompanhamento

Reorientação

Implantação

Financiamento

Prestação de contas

Novas propostas

Atender determinações

4. Como avaliar?

Preciso de novas informações?

Preciso de outros instrumentos?

Vou usar as informações disponíveis?

InternaExterna

QualidadeQuantidade

Dados primáriosDados secundários

Que instrumentos e técnicas podem ser utilizados na

avaliação?

Avaliação em SaúdeAvaliação em Saúde no Brasil no Brasil

Avaliação em SaúdeAvaliação em Saúde no Brasil no Brasil

Processos incipientes;

Pouco incorporados às práticas dos serviços de saúde;

Caráter mais prescritivo, burocrático e punitivo que subsidiário do planejamento e gestão;

Não se constituem, ainda, em instrumento de suporte ao processo decisório

Avaliação em SaúdeAvaliação em Saúde no Brasil no Brasil

Processos incipientes;

Pouco incorporados às práticas dos serviços de saúde;

Caráter mais prescritivo, burocrático e punitivo que subsidiário do planejamento e gestão;

Não se constituem, ainda, em instrumento de suporte ao processo decisório

Avaliação em SaúdeAvaliação em Saúde no Brasil no Brasil

Processos incipientes;

Pouco incorporados às práticas dos serviços de saúde;

Caráter mais prescritivo, burocrático e punitivo que subsidiário do planejamento e gestão;

Não se constituem, ainda, em instrumento de suporte ao processo decisório

Avaliação em SaúdeAvaliação em Saúde no Brasil no Brasil

Processos incipientes;

Pouco incorporados às práticas dos serviços de saúde;

Caráter mais prescritivo, burocrático e punitivo que subsidiário do planejamento e gestão;

Não se constituem, ainda, em instrumento de suporte ao processo decisório.

Institucionalização da AvaliaçãoInstitucionalização da Avaliação

“Atualmente, o fortalecimento de uma política específica para a

atenção básica que determina a esfera municipal como responsável

pela sua execução, redefine os papéis para os gestores estaduais e

federais, que passam a assumir cada vez mais atribuições normativas e reguladoras, ressaltando-se a função de

avaliação do sistema de saúde”.

FELISBERTO, 2006

Avaliação em Saúde Bucal no Brasil

Compreensão da realidade

Hierarquização dos problemas e Definição de diretrizes

Elaboração e execução da programação

Acompanhamento e avaliaçãoAcompanhamento e avaliação

(Pinto,VG 2000)

Avaliação em Saúde Avaliação em Saúde BucalBucal

no Brasil no Brasil

Avaliação em Saúde BucalAvaliação em Saúde Bucal no Brasil no Brasil

“avaliação”“avaliação de desempenho”

“avaliação da qualidade dos cuidados em saúde”

“qualidade da assistência à saúde” “avaliação dos serviços”

“indicadores de qualidade”

76 10 2

Avaliação em Saúde BucalAvaliação em Saúde Bucal no Brasil no Brasil

Poucos estudosDiferentes metodologias

Obstáculos:Os sistemas de informaçãoRetro-alimentação de informações entre equipe e nível centralAvaliações voltadas para quantidade e tipo dos procedimentos, sem perspectiva de reorientação da prática

Modelo de Avaliação da Qualidade da

Atenção Odontológica na Atenção Básica em Santa Catarina

SANDER, B. (1995)SCRIVEN, M. (1991)

Eficiência: geração do maior volume de serviços de saúde possível com os

recursos disponíveis;

Eficácia: cumprimento das metas estabelecidas nos planos de saúde e dos

protocolos médicos estabelecidos para o provimento da atenção à saúde;

Efetividade: satisfazer as necessidades e expectativas individuais quanto ao recebimento de atenção à saúde;

Relevância: atendimento dos desejos e expectativas coletivas da sociedade.

GESTÃO DO SISTEMA MUNICIPAL

DE SAÚDE

GESTÃO DO PROVIMENTO DA ATENÇÃO BÁSICA

Promoção e Prevenção

Diagnóstico e Tratamento

Atuação intersetorial Criança Criança

Participação popular Adolescente Adolescente

Recursos Humanos Adulto Adulto

Infra-Estrutura Idoso Idoso

Indicadores

GESTÃO DO SISTEMA MUNICIPAL DE SAÚDE

GESTÃO DO PROVIMENTO DA ATENÇÃO BÁSICA

Promoção, Prevenção e Diagnóstico Precoce

Tratamento, Recuperação e Reabilitação

Atuação intersetorial Criança Criança

Participação popular Adolescente Adolescente

Recursos Humanos Adulto Adulto

Infra-Estrutura Idoso Idoso

RelevânciaEfetividade

EficáciaEficiência

RelevânciaEfetividade

Eficácia

IndicadoresPesquisa bibliográfica e discussões com grupos técnicos da Secretaria

Estadual da Saúde

Aplicação do modelo: 293 municípios de Santa Catarina

coleta dos dados:– bancos de dados

governamentais(DATASUS, IBGE, SES/SC)

– formulário enviado à Secretaria Municipal de Saúde

Modelo de avaliação da Modelo de avaliação da efetividadeefetividade da Atenção da Atenção

em Saúde Bucalem Saúde Bucal

Daniela Alba Nickel

ReferênciasReferênciasBibliográficasBibliográficas

NARVAI, P. C. Avaliação de ações de saúde bucal. Oficina Saúde Bucal no SUS. Secretaria de Saúde do Estado de São Paulo. São Paulo, 1996.

SOUZA, T.M.S.; RONCALLI, A.G. Saúde bucal no Programa Saúde da Família: uma avaliação do modelo assistencial. Cad. Saúde Pública, v.23, n.11, p.2727-2739, 2007.

CHAVES, S.C.L.; VIEIRA-DA-SILVA, L.M. Atenção à saúde bucal e a descentralização da saúde no Brasil: estudo de dois casos exemplares no Estado da Bahia. Cad Saúde Pública, Rio de Janeiro, v.23, n.5, p.1119-1131, mai, 2007.

NICKEL, Daniela Alba. UNIVERSIDADE FEDERAL DE SANTA CATARINA Programa de Pós-Graduação em Saúde Pública . Modelo de avaliação da efetividade da atenção em saúde bucal. Florianopolis, 2008. 89 f. Dissertação (Mestrado) - Universidade Federal de Santa Catarina, Centro de Ciências da Saúde. Programa de Pós-Graduação em Saúde Pública

CALVO, Maria Cristina Marino; HENRIQUE, Flávia. Avaliação: algumas concepções teóricas sobre o tema. In: TELINO, Josimari de Lacerda; TRAEBERT, Jefferson Luiz. A Odontologia e a estratégia saúde da família. Tubarão: Unisul, 2006. p. 115-139.