Dental Press J Orthod 33 2011 Nov-Dec;16(6):33-5

David normando**, marco antonio de oliveira almeida***, Cátia Cardoso abdo Quintão****

a r t i g o o n l i n E *

* acesse www.dentalpress.com.br/revistas para ler o artigo na íntegra.

análise do emprego do cálculo amostral e do erro do método em pesquisas científicas publicadas na literatura ortodôntica nacional e internacional

introdução: o dimensionamento adequado da amostra estudada e a análise apropriada do erro do método são passos importantes na validação dos dados obtidos em determinado estudo científico, além das questões éticas e econômicas. Objetivo: esta investigação tem o objetivo de avaliar, quantitativamente, com que frequência os pesquisadores da ciência ortodôntica têm empregado o cálculo amostral e a análise do erro do método em pesquisas publicadas no Brasil e nos Estados Unidos. Métodos: dois importantes periódicos, de acordo com a Capes (Coordenação de Aperfeiçoamento de Pessoal de Nível Superior), foram analisados, a Revista Dental Press de Ortodontia e Ortopedia Facial (Dental Press) e o American Journal of Orthodontics and Dentofacial Orthopedics (AJO-DO). Apenas artigos publicados entre os anos de 2005 e 2008 foram analisados. Resultados: a maioria das pesquisas publicadas em ambas as revistas emprega alguma forma de análise do erro do método, quando essa metodologia pode ser aplicada. Porém, apenas um número muito pequeno dos artigos publicados nesses periódicos apresenta qualquer descrição de como foram dimensionadas as amostras estudadas. Essa proporção, já pequena (21,1%) na revista editada nos Estados Unidos (AJO-DO), é significativamente menor (p=0,008) na revista editada no Brasil (Dental Press) (3,9%). conclusão: os pesquisadores e o corpo editorial, de ambas as revistas, deveriam dedicar uma maior atenção ao exame dos erros inerentes à ausência de tais análises na pesquisa científica, em especial aos erros inerentes a um dimensionamento inadequado das amostras.

Resumo

Palavras-chave: Bioestatística. Cálculo amostral. Erro do método.

** Professor da Disciplina de Ortodontia da Faculdade de Odontologia da UFPA. Doutor em Ortodontia pela UERJ. Mestre em Clínica Inte-grada pela FOUSP. Especialista em Ortodontia pela PROFIS-USP.

*** Mestre e Doutor em Ortodontia pela UFRJ. Professor Titular de Ortodontia, UERJ. **** Mestra e Doutora em Ortodontia pela UFRJ. Professor Adjunto da Disciplina de Ortodontia, UERJ.

Como citar este artigo: Normando D, Almeida MAO, Quintão CCA. Análise do emprego do cálculo amostral e do erro do método em pesquisas científi-cas publicadas na literatura ortodôntica nacional e internacional. Dental Press J Orthod. 2011 Nov-Dec;16(6):33-5.

» Os autores declaram não ter interesses associativos, comerciais, de proprie-dade ou financeiros que representem conflito de interesse, nos produtos e companhias descritos nesse artigo.

Dental Press J Orthod 34 2011 Nov-Dec;16(6):33-5

Análise do emprego do cálculo amostral e do erro do método em pesquisas científicas publicadas na literatura ortodôntica nacional e internacional

Journal of Orthodontics and Dentofacial Or-thopedics (AJO-DO). Foram avaliados 92 artigos originais publicados na Dental Press (2005-2007) e 94 artigos originais publicados no AJO-DO (2007-2008). Os resultados demonstraram que, no período avaliado, o cálculo amostral foi utili-zado em somente 3,9% dos artigos publicados na Dental Press, ao passo que foi utilizado em pouco mais de 21% dos artigos publicados no AJO-DO, com diferença estatisticamente significativa entre os periódicos. Já o estudo do erro do método foi reportado em 60,9% dos artigos da Dental Press e em 76,6% dos artigos do AJO-DO. Os autores da presente pesquisa concluíram que, apesar do estudo do erro ser comumente empregado, houve um número bastante restrito de artigos em que foi realizado o cálculo amostral em ambos os pe-riódicos, com uma redução ainda mais acentuada, de forma estatisticamente significativa, na Den-tal Press. Devido a isso, maior atenção deveria ser dispensada — por revisores, pesquisadores e editores — ao dimensionamento adequado das amostras em estudos ortodônticos, com vistas a obter resultados científicos mais confiáveis.

Resumo do editor A evolução da ciência depende, de modo fun-

damental, de estudos metodologicamente bem delineados. Recentemente, dois aspectos metodo-lógicos têm ganhado destaque: o erro do método e o cálculo do tamanho da amostra. O erro do mé-todo, em geral, é obtido por meio da duplicação de parte das mensurações realizadas em um intervalo de tempo, de forma a determinar se os dados ana-lisados são reproduzíveis, o que atestará a confiabi-lidade da metodologia empregada na pesquisa. Por outro lado, as amostras analisadas devem possuir um tamanho adequado para que possam demons-trar diferenças clínicas importantes em termos es-tatísticos, quando essas existirem. Em decorrência da importância científica desses cálculos, o presen-te estudo objetivou analisar a frequência de uso, na literatura ortodôntica nacional e internacional, do dimensionamento amostral e do erro do método. Foram selecionados dois periódicos científicos da literatura ortodôntica com o maior fator de impac-to no Brasil e no exterior, segundo a Capes: respec-tivamente, a Revista Dental Press de Ortodontia e Ortopedia Facial (Dental Press) e o American

Questões aos autores

1) Quais aspectos devem ser considerados, em um estudo clínico prospectivo, para a definição do tamanho da amostra?

O dimensionamento adequado da amostra a ser estudada, assim como a análise apropriada do erro do método, são passos importantes na valida-ção dos dados obtidos em um determinado estudo científico, além das questões éticas e econômicas. Um estudo utilizando amostra pequena pode não produzir resultados úteis, expondo os seus partici-pantes (amostra) a riscos desnecessários, enquanto uma amostra de tamanho excessivo usa mais recur-sos do que o necessário, além de expor um excessivo número de indivíduos aos riscos que possam existir.

Para entendermos a importância do cálculo amos-

tral, precisamos compreender o que significa “po-der” em estatística. O poder expressa a probabili-dade de detectar um efeito verdadeiro. Amostras pequenas reduzem o poder de um estudo, con-tudo, amostras demasiadamente grandes propor-cionam, geralmente, significância estatística entre os grupos3 estudados, mesmo quando a diferença é muito pequena e considerada clinicamente sem importância. Além do nível de certeza desejado, expresso pelo valor p e pelo poder, outros fato-res fazem parte da receita que define o tamanho amostral1,2,4, sendo eles:

a) O efeito clínico mínimo que o pesquisador deseja constatar na variável principal (primá-ria) do estudo desenvolvido.

Normando D, Almeida MAO, Quintão CCA

Dental Press J Orthod 35 2011 Nov-Dec;16(6):33-5

Endereço para correspondênciaDavid normandorua Boaventura da silva, 567-1201CeP: 66.055-090 – Belém/Pae-mail: davidnor@amazon.com.br

b) Como os dados obtidos vão ser mensurados (escala contínua, ordinal ou nominal).

c) O tipo de teste estatístico a ser usado e se é unicaudal ou bicaudal.

d) A variabilidade dos dados obtidos.

2) Qual a importância da realização de estudos como o presente?

Os resultados da presente investigação revela-ram que apenas 3,9% dos artigos publicados na Re-vista Dental Press nos anos de 2006-2007 apresen-tavam dados sobre o cálculo amostral, percentual significativamente menor (P=0,008) em compara-ção ao American Journal of Orthodontics and Den-tofacial Orthopedics (AJO-DO), que apresentava pouco mais de 21% dos seus artigos com a descri-ção dos métodos utilizados para o cálculo amos-tral (Tab. 1). Esses dados refletem uma desatenção preocupante dos pesquisadores e revisores quanto a esse importante fator de introdução de erros na avaliação estatística dos dados obtidos em publica-ções nesses dois importantes periódicos.

3) como os autores veem a pesquisa científica ortodôntica brasileira no cenário mundial?

A Ortodontia como ciência tem evoluído cons-tantemente, o que inclui o emprego de métodos estatísticos em nossa especialidade. No Brasil, esse crescimento é visivelmente mais rápido. Nas déca-das anteriores, conseguíamos publicar estudos que hoje provavelmente não seriam aceitos, devido a questões metodológicas. Isso inclui o emprego do cálculo amostral e do erro do método. A competi-tividade exige padrões mais acurados e, portanto,

quem se preocupar com essa questão ganhará pontos na avaliação dos revisores e editores. Em uma entrevista recente publicada nesse periódi-co5, o então editor do AJO-DO, David Turpin, enfatizou que fica “...espantado com a quantida-de de autores que conduzem estudos bastante criativos, mas submetem um manuscrito sem ter mesmo se dado ao trabalho de calcular o número de sujeitos necessários para que as conclusões se-jam estatisticamente significativas...”.

A Ortodontia brasileira já é a que mais publica no mundo. E conseguirá lograr maior êxito aquele pesquisador que dedicar maior atenção ao planeja-mento e execução dos métodos estatísticos. Em ou-tras palavras, a inspiração ainda é importante, mas a expiração tornou-se o diferencial.

TABELA 1 - Frequência absoluta e relativa (%), diferença relativa, valor p e poder para os artigos com análise estatística (A) e com descrição do cálculo amostral (B), publicados na revista Dental Press de Ortodontia e Ortopedia Facial e no American Journal of Orthodontics and Dentofacial Orthopedics.

**p<0,01.

Descrição Dental Press2006-2007

AJO-DO2007-2008 Diferença (%) Valor p Poder

Artigos originais com análise estatística (A) 51 (100%) 57 (100%) ----

Artigos com descrição do cálculo amostral (B) 2 (3,9%) 12 (21,1%) -17,2 0,008** 0,78

1. Browner WS, Newman TB. Sample size and power based on the population attributable fraction. Am J Public Health. 1989 Sep;79(9):1289-94.

2. Lenth RV. Some practical guidelines for effective sample size determination. Am Statistician. 2001;55(3):187-93.

3. MacFarlane TV. Sample size determination for research projects. J Orthod. 2003 Jun;30(2):99-100.

4. Phillips C. Sample size and power: What is enough? Semin Orthod. 2002;8(2):67-76.

5. Turpin DL. Uma entrevista com David L. Turpin (editor-chefe do AJO-DO). Dental Press J Orthod. 2010;15(2):33-8.

RefeRências

Enviado em: 7 de agosto de 2008Revisado e aceito: 31 de agosto de 2008