Agência Nacional de Vigilância Sanitária Curso sobre vigilância de kits no Brasil Dra. Evelinda...

85
Agência Nacional de Vigilância Sanitária www.anvisa.gov.br Curso sobre Curso sobre vigilância de vigilância de kits kits no no Brasil Brasil Dra. Evelinda Trindade Dra. Evelinda Trindade Atualmente Atualmente realizando realizando assessoria em tecnologia assessoria em tecnologia para a GGLAS/ANVISA, para a GGLAS/ANVISA, Diretoria Executiva do Diretoria Executiva do InCor-HC e cursando PhD na InCor-HC e cursando PhD na FM/USP FM/USP

Transcript of Agência Nacional de Vigilância Sanitária Curso sobre vigilância de kits no Brasil Dra. Evelinda...

Page 1: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Curso sobre vigilância Curso sobre vigilância de de kitskits no Brasil no Brasil

Dra. Evelinda TrindadeDra. Evelinda Trindade Atualmente Atualmente realizando assessoria em realizando assessoria em

tecnologia para a GGLAS/ANVISA,tecnologia para a GGLAS/ANVISA,Diretoria Executiva do InCor-HC e Diretoria Executiva do InCor-HC e

cursando PhD na FM/USPcursando PhD na FM/USP

Page 2: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Tópicos para Tópicos para discussãodiscussão  

1. Conceitos e discussão sobre validade e validação1. Conceitos e discussão sobre validade e validação2. Desenhos de estudos e fontes de informação2. Desenhos de estudos e fontes de informação3. Análise Comparativa: 3. Análise Comparativa:       (a) Conhecimentos a priori, métodos de síntese e construção de (a) Conhecimentos a priori, métodos de síntese e construção de indicadoresindicadores      (b) Estruturando análise de dados(b) Estruturando análise de dados                  (b.1) Medidas de ocorrência (b.1) Medidas de ocorrência                   (b.2) Funções de associação(b.2) Funções de associação                  (b.3) Intervalos e riscos(b.3) Intervalos e riscos                  (b.4) Probabilidades e acordo(b.4) Probabilidades e acordo                  (b.5) Curvas de comparação(b.5) Curvas de comparação                  (b.6) Análise de variabilidade(b.6) Análise de variabilidade4. Estrutura, comunicação e educação, através de resultados e riscos4. Estrutura, comunicação e educação, através de resultados e riscos

Page 3: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Contextos e Conceitos Contextos e Conceitos em vigilância de em vigilância de kitskits

no Brasilno BrasilDra. Evelinda TrindadeDra. Evelinda Trindade

Atualmente Atualmente realizando assessoria em realizando assessoria em tecnologia para a GGLAS/ANVISA,tecnologia para a GGLAS/ANVISA,Diretoria Executiva do InCor-HC e Diretoria Executiva do InCor-HC e

cursando PhD na FM/USPcursando PhD na FM/USP

Page 4: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Pressões sobre o setor saúdePressões sobre o setor saúde----------------------------------------------------------------------------------------

----• Recursos LimitadosRecursos Limitados• Rápido desenvolvimentoRápido desenvolvimento

TécnológicoTécnológico{Comparar com o Computador}{Comparar com o Computador}

• Aumento exponencial dosAumento exponencial dos CustosCustos

O que é O que é TecnoTecnovigilância?vigilância?

Page 5: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Aumento de demanda por assistência; por exemplo população Aumento de demanda por assistência; por exemplo população mais idosa com maior número de pessoas com doenças crônicas.mais idosa com maior número de pessoas com doenças crônicas.Disponibilidade comercial e promoção Kits /demandas /pacientes.Disponibilidade comercial e promoção Kits /demandas /pacientes.Prestígio profissional percebido de usar "novas tecnologias de Prestígio profissional percebido de usar "novas tecnologias de ponta".ponta".Medicina "defensiva" (provas)Medicina "defensiva" (provas)Formulários de solicitação Formulários de solicitação em listaem lista - facilidade sem justificativa, - facilidade sem justificativa, sem guia / protocolo de prática.sem guia / protocolo de prática.Conflito de interesses.Conflito de interesses.Falta de auditorias dos pares da prática clínica.Falta de auditorias dos pares da prática clínica.Crescimento exponencial (complexidade dos conhecimentos) e Crescimento exponencial (complexidade dos conhecimentos) e insegurança (prova) por falta de atualização contínua dos insegurança (prova) por falta de atualização contínua dos profissionais da saúde.profissionais da saúde.

Fatores que influenciam a demanda de investigações:Fatores que influenciam a demanda de investigações:

Page 6: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Número de Publicações na MedLine Número de Publicações na MedLine "Equipments and supplies"[MESH]"Equipments and supplies"[MESH]

por Décadapor Década

0

50000

100000

150000

200000

250000

1966 1971 1981 1991 2000

Década de Publicação

Núm

ero

de P

ublic

açõe

s

MESH Terms Tendência

Page 7: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Contexto:Contexto:99%99%dosdosprodutoresprodutoressãosãoestrangeirosestrangeiros

Page 8: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

InformaçãoInformação sobresobre aa QUALIDADEQUALIDADE dede umum

produtoproduto • Estudos Clínicos de efeito e segurançaEstudos Clínicos de efeito e segurança• Relatos de Eventos Adversos Relatos de Eventos Adversos

AssociadosAssociados• Avaliações dos ProdutosAvaliações dos Produtos• Normas que se aplicamNormas que se aplicam• Regulação SanitáriaRegulação Sanitária• DesenvolvimentosDesenvolvimentos• Colegas / RedeColegas / Rede

www.www.

Page 9: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AVALIAÇ ÃO DE EFEITO E SEG URANÇ A

EstudosPRÉ-

clínicos

EstudosclínicosFase I

efeito e segurança

sãos

Estudosclínicos

Fase IIefeito e

segurançaalguns

doentes

Estudosclínicos

Fase IIIefeito e

segurançacentenasdoentes

ESTUDO SCLÍN ICO S

fase IVEFETIVIDADE+SEGURANÇA

m ilhares de pacientes,USO rotina

Page 10: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AVALIAÇ ÃO DE EFEITO E SEG URANÇ AREGISTRO: Relatório Técnico (segundo RDCs)REGISTRO: Relatório Técnico (segundo RDCs)• Características TécnicasCaracterísticas Técnicas• DimensionamentoDimensionamento• Vida útilVida útilManual de operação e instruções de uso Manual de operação e instruções de uso • Indicações aprovadasIndicações aprovadas• Condições de usoCondições de uso• PrecauçõesPrecauções• Manutenção preventiva e corretivaManutenção preventiva e corretivaParâmetros de Eficácia e SegurançaParâmetros de Eficácia e Segurança• Contrato de RegistroContrato de RegistroSe não é nacional: países onde é usado, TEM DADOSSe não é nacional: países onde é usado, TEM DADOS

Sistema de Informações sobre Produtos RegistradosSistema de Informações sobre Produtos Registrados

Page 11: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

A transformação das pilhas de papéisA transformação das pilhas de papéis=> => SISCORSISCOR

/DATAVISA /DATAVISAJáJá• QUASE todos dispomos de computadorQUASE todos dispomos de computador• Há conexão com a InternetHá conexão com a Internet• Há um plano para o DATAVISA, Há um plano para o DATAVISA, • Há uma plataforma comum ORACLEHá uma plataforma comum ORACLE

• Há acordos com as VISASHá acordos com as VISAS

Em construçãoEm construção• Precisamos de maior local físico e Precisamos de maior local físico e

+RH_Biblioteca+RH_Biblioteca• A velocidade da Internet ainda precisa A velocidade da Internet ainda precisa

• Maior interação com os parceirosMaior interação com os parceiros

Page 12: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

ParceirosParceirosAutoridadesAutoridades• Sistema nacional de Vigilância SanitáriaSistema nacional de Vigilância Sanitária• Sistema de saúde nacional e Sistema de saúde nacional e

internacionaisinternacionais• Governos nacional e internacionaisGovernos nacional e internacionais

AcademiaAcademia• nacional e internacionalnacional e internacional• TODOS os profissionaisTODOS os profissionais

• OperadoresOperadores• IndústriaIndústria• CidadãosCidadãos

Page 13: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

SISCORSISCOR ListasListas•Empresas Autorizadas Empresas Autorizadas •Produtos RegistradosProdutos Registrados

Page 14: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Sistema de Sistema de Produtos e Produtos e Serviços sob Serviços sob Vigilância Vigilância SanitáriaSanitária DATAVISADATAVISA

Page 15: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Construção do RepositórioConstrução do Repositório

Prod1

S-ATP

Prod1Prod1Prod1Prod5

SAT(ant)

Emp6

SIVS

Emp1Emp1Emp1Emp4UF-14 Est.Org 6

Outros

Assunto

Alim

Emp7

Empresas ProdutoTabelas Gerais(UF, Est.Org)

RepositórioInstitucional

DATAVISA PRODIR SAT AD M

Page 16: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

DATAVISA: DATAVISA: Linhas de ProduçãoLinhas de Produção

Page 17: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Pharmacogenetics and Pharmacogenomic in drug developmentPharmacogenetics and Pharmacogenomic in drug developmentEuropean regulatory perspectivesEuropean regulatory perspectives

This workshop will discuss five specific areas involving This workshop will discuss five specific areas involving pharmacogenetic and pharmacogenomic testing:pharmacogenetic and pharmacogenomic testing:

I. Issues in the validation of assays of SNPs and haplotypesI. Issues in the validation of assays of SNPs and haplotypesII. Reference populations, allelle frequency estimation, and II. Reference populations, allelle frequency estimation, and

population stratificationpopulation stratificationIII. Data quality issues III. Data quality issues surrounding application of gene expression surrounding application of gene expression

microarrays to include nonclinical microarrays to include nonclinical pharmacology / toxicology pharmacology / toxicology investigations and clinical trial performanceinvestigations and clinical trial performance

IV. Issues in array and chip validationIV. Issues in array and chip validationV. Validation issues in analytical and clinical trials, and V. Validation issues in analytical and clinical trials, and

approval of drugs and associated approval of drugs and associated in vitro in vitro diagnostic devicesdiagnostic devices

Page 18: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Pharmacogenetics and Pharmacogenomic in drug developmentPharmacogenetics and Pharmacogenomic in drug developmentEuropean regulatory perspectivesEuropean regulatory perspectives

London, 3 May 2002Doc. Ref: EMEA/11030/02

Abstract

• The robustness of the predictive value of the The robustness of the predictive value of the pharmacogenetic indicator, its clinical pharmacogenetic indicator, its clinical relevance, the validation and availability of relevance, the validation and availability of reliablereliable pharmacogenetic pharmacogenetic test methodologytest methodology and knowledge of genetic “and knowledge of genetic “epidemiologyepidemiology” ” might establish in the future new grounds might establish in the future new grounds for global access to the product.for global access to the product.

Page 19: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “in vitro”Produtos para diagnóstico “in vitro”

RDC 59: Boas PrRDC 59: Boas Prááticas de ticas de FabricaçãoFabricação

RDC 56: Requisitos Essenciais de Eficácia e RDC 56: Requisitos Essenciais de Eficácia e SegurançaSegurança

CNS 196/96: Pesquisa clinicaCNS 196/96: Pesquisa clinica

Portaria SVS No. 8/96: Registro de Portaria SVS No. 8/96: Registro de kitskits

Page 20: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Pesquisa prPesquisa préé-mercado com produtos para -mercado com produtos para diagnóstico “in vitro”diagnóstico “in vitro”

Objeto: Medir Eficácia e SegurançaObjeto: Medir Eficácia e SegurançaConceitos:Conceitos: Eficácia Eficácia é o efeito obtido em condições ideais, é o efeito obtido em condições ideais, controladas (treinamento ótimo dos operadores, controladas (treinamento ótimo dos operadores, ambiente apropriado e os melhores insumos). ambiente apropriado e os melhores insumos). Segurança Segurança é a balança (nível crítico ou é a balança (nível crítico ou aceitável) entre o benefício de realizar o aceitável) entre o benefício de realizar o diagndiagnóóstico e o risco de induzir em erro.stico e o risco de induzir em erro.

Page 21: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros de avaliação de produtos para Parâmetros de avaliação de produtos para diagnóstico “in vitro”diagnóstico “in vitro”

Objeto: Medir Eficácia e SegurançaObjeto: Medir Eficácia e SegurançaConceitos:Conceitos:AcuráciaAcurácia é a é a habilidade o teste de obter resul-tados habilidade o teste de obter resul-tados

similares ao teste padrão ("similares ao teste padrão ("Gold StandardGold Standard").").

PrecisãoPrecisão - é a reprodutibilidade dos resultados ao - é a reprodutibilidade dos resultados ao repetir o teste várias vezes, no mesmo ou em vários repetir o teste várias vezes, no mesmo ou em vários laboratórios, em circunstâncias similares. laboratórios, em circunstâncias similares.

A precisão não implica acurácia!A precisão não implica acurácia!

Page 22: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros: Medindo Eficácia e Segurança de Parâmetros: Medindo Eficácia e Segurança de kitskits para diagnóstico “in vitro” para diagnóstico “in vitro”

Sensibilidade Sensibilidade - - é a porcentagem de pacientes é a porcentagem de pacientes com determinada Condição / Doença para os com determinada Condição / Doença para os quais, se o teste é utilizado, se obtém resultados quais, se o teste é utilizado, se obtém resultados positivos. Estes também são denominados positivos. Estes também são denominados "verdadeiros positivos""verdadeiros positivos"..

• Quanto maior a sensibilidade, maior o Quanto maior a sensibilidade, maior o poder poder do do teste de detectar a condição ou doença. teste de detectar a condição ou doença.

Page 23: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Sensibilidade –Sensibilidade –• Testes com alta sensibilidade (Testes com alta sensibilidade ( 99%) podem, ao se 99%) podem, ao se

obter resultado negativo, obter resultado negativo, excluirexcluir a presença da a presença da condição ou doença. condição ou doença.

• Existem casos em que os pacientes estão Existem casos em que os pacientes estão semsem a a determinada condiçãodeterminada condição ouou doença, o teste é utilizado doença, o teste é utilizado e apresenta resultado positivo. Estes casos e apresenta resultado positivo. Estes casos denominam- se denominam- se falsos positivosfalsos positivos. A maioria dos . A maioria dos testes apresentam alguma margem/proporção de testes apresentam alguma margem/proporção de falsos positivos. falsos positivos.

Page 24: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros: Medindo Eficácia e Segurança de Parâmetros: Medindo Eficácia e Segurança de kitskits para diagnóstico “in vitro” para diagnóstico “in vitro”

Especificidade Especificidade – é a porcentagem dos – é a porcentagem dos indivíduos que não tem a condição/doença e ao indivíduos que não tem a condição/doença e ao utilizar-se o teste apresenta resultados utilizar-se o teste apresenta resultados negativos. Estes são denominados negativos. Estes são denominados "verdadeiros"verdadeiros negativos".negativos". Os testes com alta especificidade ( Os testes com alta especificidade ( 99%) e que são negativos em indivíduos sadios 99%) e que são negativos em indivíduos sadios ou que apresentam sintomas similares mas não ou que apresentam sintomas similares mas não apresentam a condição/doença, são muito úteis apresentam a condição/doença, são muito úteis para confirmar o diagnóstico. para confirmar o diagnóstico.

Page 25: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Especificidade –Especificidade –• Quanto mais alta a especificidade, menor será a taxa Quanto mais alta a especificidade, menor será a taxa

de falso positivos e menor será a proporção das de falso positivos e menor será a proporção das pessoas desnecessariamente preocupadas ou expostas pessoas desnecessariamente preocupadas ou expostas a tratamentos indevidos. a tratamentos indevidos.

• A maioria dos testes mostra alguns A maioria dos testes mostra alguns "falso-negativos“:"falso-negativos“: os pacientes estão com a condiçãoos pacientes estão com a condição ouou doença e nos doença e nos quais o teste se apresenta negativo. quais o teste se apresenta negativo.

• Em algumas situações ou condições em que há Em algumas situações ou condições em que há riscosriscos de omitir ou retardar tratamentos necessários, a de omitir ou retardar tratamentos necessários, a proporção de falso negativos pode ser inaceitável.proporção de falso negativos pode ser inaceitável.

Page 26: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros: Medindo Eficácia e Segurança de Parâmetros: Medindo Eficácia e Segurança de kitskits para diagnóstico “in vitro” para diagnóstico “in vitro”

PrevalênciaPrevalência é a freqüência da condição ou doença é a freqüência da condição ou doença na população em momento dado. na população em momento dado.

• Esta se baseia na incidência de novos casos em um Esta se baseia na incidência de novos casos em um período de um ano, geralmente, por 100.000 período de um ano, geralmente, por 100.000 habitantes e na duração de episódio de estar com a habitantes e na duração de episódio de estar com a condição ou doença. condição ou doença.

• A densidade e concentração de casos em uma A densidade e concentração de casos em uma população em um determinado momento, população em um determinado momento, influência as proporções de testes positivos influência as proporções de testes positivos detectados . detectados .

Page 27: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros: Medindo Eficácia e Segurança de Parâmetros: Medindo Eficácia e Segurança de kitskits para diagnóstico “in vitro” para diagnóstico “in vitro”

Valor positivo preditivoValor positivo preditivo é a é a probabilidade que um paciente com probabilidade que um paciente com um teste positivo tenha efetivamente a um teste positivo tenha efetivamente a condição ou doença, baseada na condição ou doença, baseada na prevalência da condição ou doença na prevalência da condição ou doença na população estudada.população estudada.

Page 28: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros: Medindo Eficácia e Segurança de Parâmetros: Medindo Eficácia e Segurança de kitskits para diagnóstico “in vitro” para diagnóstico “in vitro”

Valor preditivo negativoValor preditivo negativo mede a mede a probabilidade de obter probabilidade de obter "verdadeiros negativos":"verdadeiros negativos": sem a condição ou doença nos quais se obtém sem a condição ou doença nos quais se obtém resultados negativos, baseado na prevalência desta resultados negativos, baseado na prevalência desta condição, nesta população, neste período de tempo. condição, nesta população, neste período de tempo.

• Enquanto a sensibilidade e a especificidade de um Enquanto a sensibilidade e a especificidade de um teste são constantes na população em estudo sempre teste são constantes na população em estudo sempre que testadas, o valor predito que testadas, o valor predito varia com a varia com a sensibilidade e com a prevalência.sensibilidade e com a prevalência.

Page 29: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Valor preditivoValor preditivo varia com a varia com a sensibilidade e com a prevalência.sensibilidade e com a prevalência.

Por exemplo, se um teste tem Por exemplo, se um teste tem sensibilidade desensibilidade de 96%96%, o , o valor valor positivo preditopositivo predito varia com a prevalência como segue: varia com a prevalência como segue:

PrevalênciaPrevalência VPP (%)VPP (%)11 191922 333355 5656

1010 73732020 8686

A significância de um teste pode ser muito diferente noA significância de um teste pode ser muito diferente no hospital comparado a uma clínica geral, pois a hospital comparado a uma clínica geral, pois a prevalência é mais elevada na população referida.prevalência é mais elevada na população referida.

Page 30: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros: Medindo Eficácia e Segurança de Parâmetros: Medindo Eficácia e Segurança de kitskits para diagnóstico “in vitro” para diagnóstico “in vitro”

EficiênciaEficiência é a porcentagem correta de é a porcentagem correta de resultados do testes, resultados do testes, verdadeiros verdadeiros positivos e positivos e negativonegativoss (é utilizada como sinônimo de (é utilizada como sinônimo de Acurácia!)Acurácia!)

• Em economia da saúde, aoEm economia da saúde, ao compararcomparar

produtos, produtos, eficiênciaeficiência inclui a variável custo, inclui a variável custo, indicandoindicando oo mesmomesmo ouou maior efeito pelomaior efeito pelo

menormenor custocusto..

Page 31: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Parâmetros de avaliação de produtos para Parâmetros de avaliação de produtos para diagnóstico “in vitro”diagnóstico “in vitro”

Objeto: Medir Eficácia e SegurançaObjeto: Medir Eficácia e Segurança

Conceito de Conceito de VALIDAÇÃOVALIDAÇÃO: : AcuráciaAcurácia ee

PrecisãoPrecisão – – para a para a FinalidadeFinalidade específica! específica!

Pré Mercado – Pré Mercado – Boas Práticas + Requisitos Essenciais de Boas Práticas + Requisitos Essenciais de

Segurança e Eficácia, Segurança e Eficácia, Estudos Clínicos comparadosEstudos Clínicos comparados aoao Padrão Padrão

Page 32: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 33: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

O que é O que é TecnoTecnovigilância?vigilância?

•Produtos para diagnóstico “in Produtos para diagnóstico “in vitro”vitro”•Artigos e materiais de uso médicoArtigos e materiais de uso médico•Equipamentos médico-hospitalaresEquipamentos médico-hospitalares

GGarantir a segurança arantir a segurança sistematizar eventossistematizar eventos MManter a qualidade anter a qualidade manter conformidademanter conformidadePPromover a qualidade romover a qualidade medir efetividademedir efetividade dos produtos em uso dos produtos em uso em meio hospitalarem meio hospitalar

Page 34: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

O que é a O que é a MissãoMissão

da da TecnoTecnovigilância?vigilância?

““Promover e Promover e protegerproteger a saúdea saúde assegurandoassegurando que que os produtos da os produtos da saúde comercializados no Brasilsaúde comercializados no Brasil permanecempermanecem segurosseguros e eficazese eficazes”.”.

Page 35: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

AbordagensAbordagens =>=> Promoção de Produtos Promoção de Produtos =>=> Pressão para decisões de Pressão para decisões de

INCORPORAçãoINCORPORAção

Pós Mercado –Pós Mercado – VendasVendas≥Boas Práticas + Requisitos Essenciais deBoas Práticas + Requisitos Essenciais de

Segurança e Eficácia, Segurança e Eficácia, ≥Estudos Clínicos comparadosEstudos Clínicos comparados ao Padrãoao Padrão

Page 36: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AVALIAÇ ÃO DE EFEITO E SEG URANÇ A

Sistema de Informações sobre Produtos RegistradosSistema de Informações sobre Produtos Registrados

Licitação Licitação Avaliação:Avaliação:• Compara produtosCompara produtos• Documenta os critériosDocumenta os critérios• Documenta os resultadosDocumenta os resultados

Page 37: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

INCORPORAçãoINCORPORAção –– ConsideraçõesConsiderações≥ Registro válido na ANVISA?Registro válido na ANVISA?≥ Bula e Manual em Português?Bula e Manual em Português?≥ IgualIgual ouou MaiorMaior Segurança e Eficácia? Segurança e Eficácia? ≥ Estudos econômicos comparadosEstudos econômicos comparados ao padrão ouao padrão ou utilizado(s)utilizado(s)

AbordagensAbordagens =>=> Resolução de Problemas Resolução de Problemas =>=> Estruturação de decisões Estruturação de decisões

Page 38: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

Volume de amostra necessária e requerimentos de Volume de amostra necessária e requerimentos de coleta, armazenamento e transporte.coleta, armazenamento e transporte.Custo de verificações inicialCusto de verificações inicial

Custo do programa Custo do programa - impacto nos recursos necessários ao programa- impacto nos recursos necessários ao programa detalhar requerimentos de controle de qualidade /lote?detalhar requerimentos de controle de qualidade /lote? pessoal e treinamentos pessoal e treinamentos

ConsideraçõesConsiderações

Page 39: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

ConsideraçõesConsideraçõesDisponibilidade dos instrumentos:Disponibilidade dos instrumentos: espaço físico de instalação / rotina espaço físico de instalação / rotina abrangência do controle de qualidadeabrangência do controle de qualidade

Disponibilidade de materiais / reagente Disponibilidade de materiais / reagente de proficiência e condições: de proficiência e condições: armazenamento, transportes e durabilidade.armazenamento, transportes e durabilidade. Custo e disponibilidade de teste de proficiência.Custo e disponibilidade de teste de proficiência.

Page 40: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

Perspectiva de uso:Perspectiva de uso:identificar as indicações para o qual o teste identificar as indicações para o qual o teste influencia o diagnósticoinfluencia o diagnóstico - estimativa de prevalência / incidência.- estimativa de prevalência / incidência. Alternativas diagnósticas: Alternativas diagnósticas: metodologias e interação/Substituição metodologias e interação/Substituição possível.possível.

Page 41: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

Volume de amostra necessária e requerimentos de Volume de amostra necessária e requerimentos de coleta, armazenamento e transporte.coleta, armazenamento e transporte.Custo de verificações inicialCusto de verificações inicial

Custo do programa Custo do programa - impacto nos recursos necessários ao programa- impacto nos recursos necessários ao programa detalhar requerimentos de controle de qualidade detalhar requerimentos de controle de qualidade /lote?/lote? pessoal e treinamentos pessoal e treinamentos

ConsideraçõesConsiderações

Page 42: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

A tecnologia está em A tecnologia está em utilização nesta utilização nesta Instituição?Instituição?

Revisão da utilizaçãoRevisão da utilização

A tecnologia substitui A tecnologia substitui outra(s) em utilização outra(s) em utilização na na InstituiçãoInstituição??

A tecnologia não tem A tecnologia não tem financiamento?financiamento?

SIMSIM

Revisão da evidência e Revisão da evidência e utilização de ambasutilização de ambas

SIMSIM

SIMSIM

ComissãoComissão dede EspecificaçãoEspecificação ee HomologaçãoHomologaçãoQuestões centrais para a compra de produtosQuestões centrais para a compra de produtos

Revisão: efetividade e custosRevisão: efetividade e custos

Page 43: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Produtos para diagnóstico “Produtos para diagnóstico “in vitroin vitro””

ConsideraçõesConsideraçõesTeste de Validação – DemonstraçãoTeste de Validação – DemonstraçãoÉ É válidoválido quando cumpre quando cumpre o que propõe!o que propõe!

Decisões de compra- Decisões de compra- Satisfaz Parâmetros considerados no editalSatisfaz Parâmetros considerados no edital

=>=> Treinamento adequado do pessoal Treinamento adequado do pessoal=>=> Verificação dentro da Estrutura de Uso Verificação dentro da Estrutura de Uso =>=>

Decisões: Decisões: Aceitação,Aceitação, COMPRA, COMPRA, INCORPORAção e USOINCORPORAção e USO

Page 44: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AVALIAÇ ÃO DE EFEITO E SEG URANÇ A

Sistema de Informações sobre Produtos RegistradosSistema de Informações sobre Produtos Registrados

Relatório TécnicoRelatório Técnico de Seguimento de Seguimento•Relatos de Eventos AdversosRelatos de Eventos Adversos•ProblemasProblemas Técnic Técnicooss Corrigidos Corrigidos•Confirmação da Confirmação da Vida útilVida útil•Treinamentos oferecidosTreinamentos oferecidos•Volume de vendas

Page 45: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AVALIAÇ ÃO DE EFEITO E SEG URANÇ ATECNOVIGILÂNCIA nacionalTECNOVIGILÂNCIA nacional e e internacionalinternacional

•Literatura e WWW=> EVENTOS ADVERSOSLiteratura e WWW=> EVENTOS ADVERSOS•Novas Condições de usoNovas Condições de uso•Novas PrecauçõesNovas Precauções•Novas medidas preventivas e corretivasNovas medidas preventivas e corretivas

Sistema de Informações sobre Produtos RegistradosSistema de Informações sobre Produtos Registrados

Page 46: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Tecno: Notificação de Tecno: Notificação de Incidentes e InvestigaçãoIncidentes e Investigação

Proposta: PARTICIPACAO ATIVA DOS Proposta: PARTICIPACAO ATIVA DOS USUARIOS [USUARIOS [piloto, piloto, 100 hospitais 100 hospitais sentinelas, sistematizar o sentinelas, sistematizar o riscorisco dos dos produtosprodutos em uso] em uso]

Situação atual: Situação atual: notificações de incidentes notificações de incidentes envolvendo envolvendo kitskits, artigos e equipamentos , artigos e equipamentos médicos chegam a ANVISA de forma esporádica, médicos chegam a ANVISA de forma esporádica, sem padronização e sem estrutura específica sem padronização e sem estrutura específica para resposta sistematizada.para resposta sistematizada.

Page 47: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Notificação de Incidentes e Notificação de Incidentes e InvestigaçãoInvestigação::

Situação atual: Situação atual: ““Bombeiros”, respostas reativas.Bombeiros”, respostas reativas. Proposta: investir em Proposta: investir em “INFORMAÇÃO”“INFORMAÇÃO” sobre os produtos em uso para a saúdesobre os produtos em uso para a saúde

Proposta:Proposta: sentinelas sentinelas ““formadores”, formadores”, elevarelevar capacidades de capacidades de gerenciar gerenciar os os produtosprodutos em uso em uso e e estudar o risco estudar o risco de desvios de qualidadede desvios de qualidade

Page 48: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 49: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 50: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 51: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 52: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 53: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

• Le fait, pour le fabricant ou son mandataire, Le fait, pour le fabricant ou son mandataire, l'importateur, le distributeur et les l'importateur, le distributeur et les professionnels de santé utilisateurs d'un professionnels de santé utilisateurs d'un dispositif médical de diagnostic in vitro, de ne dispositif médical de diagnostic in vitro, de ne pas respecter les obligations de signalement est pas respecter les obligations de signalement est puni d'un an d'emprisonnement et de 15 000 € puni d'un an d'emprisonnement et de 15 000 € d'amende.d'amende.

143 / 147 bd Anatole France143 / 147 bd Anatole France93285 ST DENIS CEDEX93285 ST DENIS CEDEX

Télécopie : 01 55 87 42 82Télécopie : 01 55 87 42 82

AGENCE FRANÇAISE DE SECURITE SANITAIRE AGENCE FRANÇAISE DE SECURITE SANITAIRE DES PRODUITS DE SANTEDES PRODUITS DE SANTE

Unité Vigilance DIVUnité Vigilance DIV

Page 54: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Page 55: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Normas que se aplicam no Normas que se aplicam no contexto de QUALIDADE: contexto de QUALIDADE: IIoo.) Credenciamento para .) Credenciamento para

Boas Práticas de Boas Práticas de LaboratórioLaboratório

Gerência Geral de Laboratórios de Gerência Geral de Laboratórios de Saúde Pública – GGLAS/ANVISASaúde Pública – GGLAS/ANVISA

e e INMETRO INMETRO

Page 56: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Objetivos:Objetivos:

1.1. Elevar a prática de controle de Elevar a prática de controle de qualidade e segurança dos qualidade e segurança dos processosprocessos institucionaisinstitucionais parapara aa saúdesaúde ..

2.2. Identificar Identificar capacidadecapacidade e e complexidadecomplexidade instaladas no instaladas no Brasil.Brasil.

Page 57: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Objetivos e Propostas:Objetivos e Propostas:

3.3. Formar uma rede eletrônica de comunicação entre Formar uma rede eletrônica de comunicação entre profissionais que atuam na área de controle de profissionais que atuam na área de controle de qualidade de kits.qualidade de kits.

4.4. Identificar necessidades dos participantes para Identificar necessidades dos participantes para incrementar as atividades de controle de qualidade incrementar as atividades de controle de qualidade de kits.de kits.

5.5. Identificar que tipo de suporte a Vigilância Sanitária a Identificar que tipo de suporte a Vigilância Sanitária a nível estadual e federal poderão dar aos laboratórios.nível estadual e federal poderão dar aos laboratórios.

6.6. Identificar hipóteses para estudos prospectivos a Identificar hipóteses para estudos prospectivos a partir da experiência de controle de qualidade de kits.partir da experiência de controle de qualidade de kits.

Page 58: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Objetivos – continuaçãoObjetivos – continuação......

7.7. IdentificarIdentificar metodologias novasmetodologias novas de de avaliação de qualidadeavaliação de qualidade e e segurançasegurança de produtosde produtos parapara aa saúdesaúde..

8.8. Identificar Identificar indicadores de indicadores de resultados resultados de/parade/para a a

vigilância de produtosvigilância de produtos..

Page 59: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

6.18.2 Item de Referência ou Substância de Referência ou Controle 6.18.2 Item de Referência ou Substância de Referência ou Controle [princípio de [princípio de RASTREABILIDADERASTREABILIDADE]]

É qualquer espécie química, biológica ou biotecnológica É qualquer espécie química, biológica ou biotecnológica bem definidabem definida usada para estabelecer a base de comparações para medida, química, usada para estabelecer a base de comparações para medida, química, físico-química ou biológica físico-química ou biológica conhecidasconhecidas. .

A substância de referência pode ser o próprio padrão analítico ou pode A substância de referência pode ser o próprio padrão analítico ou pode ser o material não exposto à substância teste.ser o material não exposto à substância teste.

O controle pode ser amostra, parcela de solo, ou animal não exposto à O controle pode ser amostra, parcela de solo, ou animal não exposto à substância teste ou aos efeitos do Estudo, usado como referência ou substância teste ou aos efeitos do Estudo, usado como referência ou controle do Estudo.controle do Estudo.

INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 ::CRITÉRIOS PARA O CREDENCIAMENTO DE LABORATÓRIOS DE CRITÉRIOS PARA O CREDENCIAMENTO DE LABORATÓRIOS DE

ENSAIOS SEGUNDO OS PRINCÍPIOSENSAIOS SEGUNDO OS PRINCÍPIOS BPL - BOAS PRÁTICAS DE LABORATÓRIOBPL - BOAS PRÁTICAS DE LABORATÓRIO

APROVADA EM SET/03 PÁGINA 1/30APROVADA EM SET/03 PÁGINA 1/30

Page 60: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

8.8.2.1.4 Métodos de ensaio8.8.2.1.4 Métodos de ensaioa) Deve ser feita a referência a métodos de ensaios validados e, quando a) Deve ser feita a referência a métodos de ensaios validados e, quando

pertinente, métodos oficiais recomendados para fins específicos – pertinente, métodos oficiais recomendados para fins específicos – Guias e Protocolos OECD, incluindo procedimentos de confirmação Guias e Protocolos OECD, incluindo procedimentos de confirmação dos resultados obtidos, quando apropriado e métodos nacionais ou dos resultados obtidos, quando apropriado e métodos nacionais ou internacionais -normas ABNT ou EPA já validados.internacionais -normas ABNT ou EPA já validados.

b) Caso o método não tenha sido desenvolvido ou validado no momento b) Caso o método não tenha sido desenvolvido ou validado no momento em que o Plano de Estudo for assinado, ele pode ser especificado em que o Plano de Estudo for assinado, ele pode ser especificado posteriormente como Emenda. No entanto os ensaios para o Estudo posteriormente como Emenda. No entanto os ensaios para o Estudo não podem ser iniciados se os não podem ser iniciados se os critérios de validaçãocritérios de validação não tiverem sido não tiverem sido estabelecidos.estabelecidos.

a) Em caso de uso de "kits" (métodos, aparelhos e reagentes) deverá ser a) Em caso de uso de "kits" (métodos, aparelhos e reagentes) deverá ser apresentado o relatório de validação.apresentado o relatório de validação.

INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 ::- BOAS PRÁTICAS DE LABORATÓRIO- BOAS PRÁTICAS DE LABORATÓRIO

Page 61: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

8.10.2.5 Descrição de Materiais e Métodos8.10.2.5 Descrição de Materiais e Métodosa) Descrição dos materiais e métodos utilizados;a) Descrição dos materiais e métodos utilizados;b) Referência aos procedimentos, protocolos, normas e b) Referência aos procedimentos, protocolos, normas e

práticas, bibliografias oficiais ou oficialmente práticas, bibliografias oficiais ou oficialmente reconhecidos;reconhecidos;

c) Todos as referências de ensaios utilizadas devem ser c) Todos as referências de ensaios utilizadas devem ser validadas; ou por conteúdo normativo: ex. normas validadas; ou por conteúdo normativo: ex. normas ABNT; ou, pelo laboratório: ex. procedimento do ABNT; ou, pelo laboratório: ex. procedimento do laboratório - POP.laboratório - POP.

INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 ::BOAS PRÁTICAS DE LABORATÓRIOBOAS PRÁTICAS DE LABORATÓRIO

Page 62: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

8.11.1.1 Generalidades8.11.1.1 Generalidadesa) Os a) Os arquivosarquivos devem permitir a recuperação rápida e prontamente devem permitir a recuperação rápida e prontamente

de todo material arquivado;de todo material arquivado;b) Os arquivos devem ser estruturados e equipados para b) Os arquivos devem ser estruturados e equipados para

acondicionamento e armazenamento segura dos documentos dos acondicionamento e armazenamento segura dos documentos dos estudosestudos, que são: plano de estudo, dados brutos, relatório final, , que são: plano de estudo, dados brutos, relatório final, relatórios de inspeções e auditorias conduzidas de acordo com o relatórios de inspeções e auditorias conduzidas de acordo com o programa da UGQ, agenda mestra, amostras de sistema teste, programa da UGQ, agenda mestra, amostras de sistema teste, substância teste e substância de referência, sumário de substância teste e substância de referência, sumário de qualificações, treinamento, experiência e descrição de cargo do qualificações, treinamento, experiência e descrição de cargo do pessoal, registros e relatórios de manutenção e calibração de pessoal, registros e relatórios de manutenção e calibração de equipamentos e instrumentos de medir, documentação de equipamentos e instrumentos de medir, documentação de validação de sistemas computadorizados, histórico de POPs, e validação de sistemas computadorizados, histórico de POPs, e todos os registros do controle ambiental de cada estudo.todos os registros do controle ambiental de cada estudo.

INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 ::BOAS PRÁTICAS DE LABORATÓRIOBOAS PRÁTICAS DE LABORATÓRIO

Page 63: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

8.24.2 É aceitável que o laboratório apresente o 8.24.2 É aceitável que o laboratório apresente o certificado de validação do certificado de validação do softwaresoftware adquirido adquirido em bases legais fornecido pelo fabricante. No em bases legais fornecido pelo fabricante. No entanto, a documentação completa do processo entanto, a documentação completa do processo de validação deve estar disponível no de validação deve estar disponível no laboratório e deve ser arquivada como elemento laboratório e deve ser arquivada como elemento do sistema da UO.do sistema da UO.

INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 ::BOAS PRÁTICAS DE LABORATÓRIOBOAS PRÁTICAS DE LABORATÓRIO

Page 64: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

8.25 Substâncias de Referência - Padrões8.25 Substâncias de Referência - Padrões8.25.1 A GUO deve assegurar que as substâncias de referência 8.25.1 A GUO deve assegurar que as substâncias de referência

manufaturadas atendam as especificidades dos critérios BPL para manufaturadas atendam as especificidades dos critérios BPL para identificação, pureza e estabilidade de cada lote de material de identificação, pureza e estabilidade de cada lote de material de referência.referência.

8.25.2 Os certificados fornecidos pelos fabricantes devem conter data 8.25.2 Os certificados fornecidos pelos fabricantes devem conter data da identificação, pureza e estabilidade, nas condições exigidas da identificação, pureza e estabilidade, nas condições exigidas pelo Estudo, e outras características para definir o lote pelo Estudo, e outras características para definir o lote adequadamente.adequadamente.

8.25.3 Nos casos em que o fornecedor precisar apresentar 8.25.3 Nos casos em que o fornecedor precisar apresentar informações adicionais tal como, métodos de análise, este deve informações adicionais tal como, métodos de análise, este deve estar preparado para demonstrar quais medidas nacionais e/ou estar preparado para demonstrar quais medidas nacionais e/ou internacionais de controle de qualidade foram adotadas.internacionais de controle de qualidade foram adotadas.

INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 INMETRO- NORMA Nº NIT-DICLA-028 REV. Nº 01 ::BOAS PRÁTICAS DE LABORATÓRIOBOAS PRÁTICAS DE LABORATÓRIO

Page 65: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Avaliação comparativa: resultados de dois ou mais testes. Avaliação comparativa: resultados de dois ou mais testes.

1)1) O padrão de referência deve ser o(s) O padrão de referência deve ser o(s) melhormelhor(es) método(s) (es) método(s) disponível(is) para discriminar entre presença ou ausência disponível(is) para discriminar entre presença ou ausência da “condição”.da “condição”.

2)2) A informação dos grupos em estudo e de referência tem que A informação dos grupos em estudo e de referência tem que ser independente, simétrica e reprodutível. ser independente, simétrica e reprodutível.

3)3) A A ACURÁCIAACURÁCIA reflete a magnitude do acordo entre a reflete a magnitude do acordo entre a informação do teste em estudo e o padrão de referência.informação do teste em estudo e o padrão de referência.

4)4) Quanto menor o Quanto menor o poderpoder discriminatório dos testes maior discriminatório dos testes maior número de amostras deverão ser estudadas. número de amostras deverão ser estudadas.

DesenhoDesenho dede EstudosEstudos parapara ValidarValidar “kits”“kits”

Page 66: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Avaliação comparativa: resultados de um ou mais testes. Avaliação comparativa: resultados de um ou mais testes. 1)1) O padrão de referência pode ser o(s) O padrão de referência pode ser o(s) melhormelhor(es) método(s) (es) método(s)

disponível(is) para discriminar entre presença ou ausência da disponível(is) para discriminar entre presença ou ausência da “condição”.“condição”.

2)2) A informação dos grupos em estudo e de referência tem que ser A informação dos grupos em estudo e de referência tem que ser independente, simétrica e reprodutível. independente, simétrica e reprodutível.

3)3) A A ACURÁCIAACURÁCIA reflete a magnitude do acordo entre a informação do reflete a magnitude do acordo entre a informação do teste em estudo e o padrão de referência.teste em estudo e o padrão de referência.

4)4) Quanto menor o Quanto menor o poderpoder discriminatório dos testes maior numero de discriminatório dos testes maior numero de amostras deverão ser estudadas. amostras deverão ser estudadas.

5)5) Quanto mais completo e mais detalhado o relatório do estudo, Quanto mais completo e mais detalhado o relatório do estudo, melhor se detectam tendências e mais condiz com a sua validade melhor se detectam tendências e mais condiz com a sua validade interna, bem como a aplicabilidade de seus resultados, interna, bem como a aplicabilidade de seus resultados, possibilidade de generalizar ou sua validade externa.possibilidade de generalizar ou sua validade externa.

DesenhoDesenho dede EstudosEstudos parapara ValidarValidar “kits”“kits”

Page 67: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

CContarontar DDividirividir CCompararomparar

com o conhecimento com o conhecimento estabelecido,estabelecido, padrão-ouropadrão-ouro

Considerações metodológicasConsiderações metodológicas

Page 68: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Nível crítico:Nível crítico: Regra de DecisãoRegra de Decisão Quantidade de Incerteza Quantidade de Incerteza

aceitávelaceitável Finalidade do Teste: Finalidade do Teste:

Rastreamento ou Rastreamento ou Dx_ConfirmatórioDx_Confirmatório

Considerações metodológicasConsiderações metodológicas

Page 69: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

TesteTeste CondiçãoCondição Totais ParciaisTotais Parciais

  PresentePresente AusenteAusente  

++ PVPV FPFP PV+FPPV+FP-- FNFN NVNV FN+NVFN+NV

Totais ParciaisTotais Parciais PV+FPV+FNN

FP+NFP+NVV

TotalTotal

Considerações metodológicasConsiderações metodológicas

Page 70: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

• sensibilidade = [1 – taxa FN]sensibilidade = [1 – taxa FN] ou [PV/(PV+FN)]ou [PV/(PV+FN)]• especificidade = [1 – taxa FP]especificidade = [1 – taxa FP] ou [NV/(NV+FP)] ou [NV/(NV+FP)] • medidas em estudos clínicos com medidas em estudos clínicos com população população comparávelcomparável àquela na qual o àquela na qual o teste será utilizado rotineiramenteteste será utilizado rotineiramente

Considerações metodológicasConsiderações metodológicas

Page 71: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Teste deTeste deReferênciaReferência

positivopositivo

Teste deTeste deReferênciaReferêncianegativonegativo

Teste positivoTeste positivo aa bb[FP][FP] TotalTotal positivopositivo

Teste incerto,Teste incerto,intermediáriointermediárioou BorderLineou BorderLine

cc dd

Teste Teste negativonegativo e[FN]e[FN] ff TotalTotal

negativonegativoTotalTotal a+a+cc+e+e b+b+dd+f+f TotalTotal

TotalTotal comcom aa doençadoença TotalTotal semsem aa doençadoença

EstruturaEstrutura dede dadosdados parapara ValidarValidar “kits”“kits”

Page 72: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AnáliseAnálise dede dadosdados parapara ValidarValidar “kits”“kits”

Razão de probabilidade de resultado positivoRazão de probabilidade de resultado positivo = [a/(a+c+e)]= [a/(a+c+e)]//[b/(b+d+f)][b/(b+d+f)]

Razão de probabilidade de resultado intermediárioRazão de probabilidade de resultado intermediário = [c/(a+c+e)]= [c/(a+c+e)]//[d/(b+d+f)][d/(b+d+f)]

Razão de probabilidade de resultado negativo Razão de probabilidade de resultado negativo = [e/(a+c+e)]= [e/(a+c+e)]//[f/(b+d+f)] [f/(b+d+f)]

Page 73: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

AnáliseAnálise dede dadosdados parapara ValidarValidar “kits”“kits”Onde:Onde: 1.1. [a/(a+c+e)][a/(a+c+e)] ** 100100 = Sensibilidade= Sensibilidade

ee2.2.[b/(b+d+f)][b/(b+d+f)] ** 100100 = = 1-Especificidade1-Especificidade

(Especificidade (Especificidade = [f/(b+d+f)]= [f/(b+d+f)] ** 100)100)

3.3. VPP = a/(a+b)VPP = a/(a+b) ** 100 100 4. VPN = e/(e+f)4. VPN = e/(e+f) ** 100100

5. Eficiência = (a+f)/(a+b+c+d+e+f)5. Eficiência = (a+f)/(a+b+c+d+e+f) ** 100 100

Page 74: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Simulações:Simulações: Impacto dos possíveis Níveis Impacto dos possíveis Níveis

críticoscríticos Curvas ROC (x, y| 1-e, Curvas ROC (x, y| 1-e, S) S)

Quantidade de Quantidade de Subjetividade na Subjetividade na Interpretação do ResultadoInterpretação do Resultado

interobserverinterobserver AgreementAgreementKappa de CohenKappa de Cohen

Considerações metodológicasConsiderações metodológicas

Page 75: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

CurvasCurvas ROCROC parapara compararcomparar desempenho desempenho

dede“kits”“kits”PropriedadesPropriedades::1.1. DescreveDescreve aa balançabalança entreentre Sensibilidade eSensibilidade e

EspecificidadeEspecificidade2.2. Cada ponto da curvaCada ponto da curva estestáá associadoassociado comcom umum

critériocritério diagnósticodiagnóstico especespecííficofico3. Quanto mais a curva se aproxima do angulo superior 3. Quanto mais a curva se aproxima do angulo superior

esquerdo maior o desempenho do testeesquerdo maior o desempenho do teste4. A linha tangente no ponto 4. A linha tangente no ponto cut-offcut-off reflete a razão reflete a razão

(likelihood(likelihood ratio:ratio: LR) LR) deste valor para o testedeste valor para o teste5. A área sob a curva é a medida da acurácia do teste. 5. A área sob a curva é a medida da acurácia do teste.

Page 76: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

CurvasCurvas ROCROC parapara compararcomparar desempenho desempenho

dede“kits”“kits”Considere um teste diagnóstico com 5Considere um teste diagnóstico com 5 resultadosresultados possíveis:possíveis: --, -, 0, +, ++.--, -, 0, +, ++.   - - - 0 + ++ Total

D+ 2 44 10 14 20 50D- 28 14 5 2 1 50

  - - - 0 + ++D+ 44 % 12%12% 32% 60% 100%

D- 56% 84% 94% 98% 100%

É mais fácil se É mais fácil se convertermos convertermos esta tabela em esta tabela em porcentagens porcentagens cumulativas=>cumulativas=>

Nota: D+ são pessoas com doença, eNota: D+ são pessoas com doença, e D- estão sadiosD- estão sadios

Page 77: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

CurvasCurvas ROC:ROC: lógica delógica de como construir a curvacomo construir a curva

1.1. SeSe usarmosusarmos umum cut-offcut-off dede ----,, teríamosteríamos 4%4% dede falsosfalsos negativosnegativos ee 44%44% (100-56%)(100-56%) dede falsosfalsos positivos.positivos.

2.2. SeSe mudarmosmudarmos oo cut-offcut-off parapara --,, teremosteremos taxastaxas dede 12%12% ee 16%,16%, respectivamente.respectivamente.

3.3. ParaPara umum cut-offcut-off dede 00,, teríamosteríamos 32%32% ee 6%.6%.

4.4. ParaPara umum cut-offcut-off dede ++,, teríamosteríamos 60% e60% e 2%.2%.

Page 78: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Duas considerações adicionais são necessárias Duas considerações adicionais são necessárias para completar a curva: para completar a curva:

1) Se ignorarmos o teste, e consideramos todos 1) Se ignorarmos o teste, e consideramos todos como sadios, teremos 0% falso negativos, como sadios, teremos 0% falso negativos, mas 100% falso positivos, respectivamente.mas 100% falso positivos, respectivamente.

2) Se denominarmos todos como doentes, 2) Se denominarmos todos como doentes, teremos 100% falso negativos, mas 0% falso teremos 100% falso negativos, mas 0% falso positivos, respectivamente.positivos, respectivamente.

CurvasCurvas ROCROC parapara compararcomparar desempenho desempenho

dede“kits”“kits”

Page 79: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

ROC:ROC: plotsplots dede taxataxa FPFP (eixo(eixo X)X) ee [1-FN] [1-FN] (eixo(eixo Y)Y)      - -- - -- 00 ++ ++++

FNFN 0%0% 4%4% 12%12% 32%32% 60%60% 100%100%FPFP 100%100% 44%44% 16%16% 6%6% 2%2% 0%0%

Teste A x Outros: Variações 20,10,5 e 1% + ou - cutoff positivo

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%

1 - Especifidade

Sensibilidade

ABACADAEAFAGAHAIAJReferência

Page 80: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

      - -- - -- 00 ++ ++++FNFN 0%0% 4%4% 12%12% 32%32% 60%60% 100%100%

=1-FP=1-FP 0%0% 56%56% 84%84% 94%94% 98%98% 100%100%

RefRef 0%0% 20%20% 40%40% 60%60% 80%80% 100%100%

ROC:ROC: plotsplots dede taxataxa FNFN (eixo(eixo X)X) ee [1-FP] [1-FP] (eixo(eixo Y)Y)

4%; 56%

12%; 84%

60%; 98% 100%; 100%32%; 94%

0%; 0%0%

20%

40%

60%

80%

100%

0% 20% 40% 60% 80% 100%

Page 81: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

ROC:ROC: plotsplots dede taxataxa FNFN (eixo(eixo X)X) ee [1-FP] [1-FP] (eixo(eixo Y)Y)

10%; 56%

20%; 70%

0%; 0%

34%; 82%

100%; 100%62%; 90%

0%

20%

40%

60%

80%

100%

0% 20% 40% 60% 80% 100%

Page 82: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Concordância observada, Co= [(a + d) / (a + b + c + d)];Concordância observada, Co= [(a + d) / (a + b + c + d)];Concordância aleatória, Concordância aleatória,

Ca=Ca= [((a+b)*(a+c))/(a+b+c+d)]+[((c+d)*(b+d))/(a+b+c+d)];[((a+b)*(a+c))/(a+b+c+d)]+[((c+d)*(b+d))/(a+b+c+d)];Índice Kappa = [(Co-Ca)/(1-Ca)].Índice Kappa = [(Co-Ca)/(1-Ca)].

Resultado Teste nResultado Teste noo. 1. 1ResultadoResultado TestTest nnoo.2.2 Positivo (+)Positivo (+) Negativo (-)Negativo (-)

Positivo (+)Positivo (+) a = a = Concordante positivoConcordante positivo b = b = positivo discordantepositivo discordante

Negativo (-)Negativo (-) c = c = negativo discordantenegativo discordante d = d = Concordante negativoConcordante negativo

Kappa de Cohen: Kappa de Cohen: interobserverinterobserver AgreementAgreement

Page 83: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Tendências de Acordo entre os Testes Sorológicos

(Teste Kappa de Cohen)

0,56

0,57

0,58

0,59

0,60

0,61

0,62

0,63

0,56 0,57 0,58 0,59 0,60 0,61 0,62 0,63

AxH CxJ FxJ

Tendências de Acordo entre os Tendências de Acordo entre os Testes Sorológicos Testes Sorológicos (Teste Kappa de Cohen)(Teste Kappa de Cohen)

Page 84: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

Proposta de Continuidade do Proposta de Continuidade do Trabalho: Trabalho: •Rede de Laboratórios e Rede de Laboratórios e

REBLASREBLASAndamento do projeto e participaçãoAndamento do projeto e participação•Outras propostasOutras propostas??=>=>Escrevam,Escrevam, discutamosdiscutamos projetosprojetos e e

contribuições possíveiscontribuições possíveis

A A ANVISAANVISA necessita necessita aa

PARTICIPAÇÃO PARTICIPAÇÃO dede TODOS! TODOS!

Page 85: Agência Nacional de Vigilância Sanitária  Curso sobre vigilância de kits no Brasil Dra. Evelinda Trindade Atualmente realizando assessoria.

Agência Nacionalde Vigilância Sanitária www.anvisa.gov.br

www.anvisa.gov.br/tecnovigilanciawww.anvisa.gov.br/tecnovigilancia por correio eletrônicopor correio eletrônico::

[email protected]@anvisa.gov.br

ou por correio aoou por correio ao

SEPN, W3 Norte, Q.515, Bloco"B",SEPN, W3 Norte, Q.515, Bloco"B", Ed. "Ômega", 4ºandar, sala 01.Ed. "Ômega", 4ºandar, sala 01.

CEP 70770-502 Brasília, DFCEP 70770-502 Brasília, DF

Fax:Fax: 0xx-61-448-1257 0xx-61-448-1257