Custo e Eficiência de um Processo de Amostragem Telefónica Nacional para todos os Indicativos...

Custo e Eficiência de um Processo de Amostragem Telefónica Nacional para todos os Indicativos Fixos e Móveis

Comparação de Dois Processos de Validação Automática de Números Aleatórios

Marta Godinho, Fernando Martins, Jorge Ventura, Paulo J NicolaUnidade de Epidemiologia Instituto de Medicina Preventiva Faculdade de Medicina de Lisboa

V Congresso APE Validação Automática de Números Telefónicos Aleatórios para Amostragens Nacionais

Motivação

Para determinadas observações epidemiológicas, o inquérito telefónico pode ser útil.


Motivação


Painel Ecos do Departamento de Epidemiologia do INSA Conhecimentos, usos de medicação, cobertura vacinal, etc.


Motivação


O inquérito telefónico pode ter várias vantagens:

Baixo custo

Rapidez

Dispensa deslocação

Amostragem de base individual ou do agregado familiar


Motivação


O inquérito telefónico pode ter várias vantagens.

Existem vários processos de amostragem telefónica:

Método “da régua”Acesso a registos de assinantesBases de dados comerciaisProdução de números aleatórios


Motivação


A amostragem telefónica pode ter várias vantagens.

Existem vários processos de amostragem telefónica.

Em Portugal tem existido um declínio dos números fixos e aumento dos números móveis e nómadas.


Motivação

Em Portugal tem existido um declínio dos números fixos e aumento dos números móveis e nómadas.

Números atribuídos por ano, de acordo com o tipo de operador

Ano

To

tal

de

nú

me

ros

atr

ibu

ído

s

Fixos 4384600 4350500 4281100 4238300 4234400 4233950 4143730 4107160

Móveis 7978000 8670000 10030000 10362000 11447000 12226000 13451000 14325000

Nómadas 3400 76290 100220

2001 2002 2003 2004 2005 2006 2007 2008

4384.6 4350.5 4281.1 4238.3 4234.4 4233.95 4143.73 4107.16

79788670

10030 10362

1144712226

1345114325

3.4 76.29 100.22

0

2000

4000

6000

8000

10000

12000

14000

16000

Mil

ha

res

Fonte:ANACOM (Jul 2008)


Motivação

Em PortugalApenas 10% dos agregados familiares não tem acesso directo a número fixo ou móvel.

Mas 48% dos agregados familiares tem acesso apenas a números móveis!

Distribuição do acesso ao telefone, por tipo, nos lares portugueses,

comparado com a Europa

11%27%

12%

48%

57%

5%

30%

10%

Apenas telefone móvel

Sem telefone

Com telefone fixo e móvel

Apenas telefone fixo

Fonte: Eurobarómetro (Jul 2008)


Objectivo

Comparar duas técnicas de validação automática de números telefónicos gerados aleatoriamente sem restrição de indicativo.

Determinar a informação base para assegurar representatividade geográfica e orçamentar estudos de amostragem telefónica aleatória.


Métodos – visão geral

Produção de números aleatórios

Validação automática

Códigos de

resposta

Contactos

Resultados

Até 5 tentativas

Resultadosalternativos

Validação alternativa


Métodos: produção de números aleatórios

Listaram-se todos os indicativos (56)Fixos

Móveis

Nómadas

50% fixos e nómadas

50% móveis



Listaram-se todos os indicativos. Para os indicativos fixos, a

proporção de números gerados foi de acordo com a percentagem da população do distrito respectivo (Censos 2001).







Relativamente aos números móveis, foram produzidos de acordo com a proporção de números atribuídos:



Relativamente aos números móveis, foram produzidos de acordo com a proporção de números atribuídos:

• TMN - 40 % • Vodafone - 40 %

• Optimus - 20 %


Métodos: validação automática

Construído um software que procede a ligações telefónicas durante a noite.

As chamadas são desligadas logo após o primeiro sinal (caso o número exista e esteja activo): não chega a fazer tocar o telefone nem tem custos.

O processo devolve um código de resposta.






O processo devolve um código de resposta: O processo devolve um código de resposta:STATUS Descrição

0 UNPLACED Não colocada

1 ROUTING A ser reencaminhada

2 EARLYMEDIA Mensagem de voz

3 FAILED Falhada

4 RINGING A tocar

5 INPROGRESS Em progresso

6 ONHOLD Em espera

7 FINISHED Terminada

8 MISSED Falhada

9 REFUSED Recusada

10 BUSY Ocupado

11 CANCELLED Tentativa cancelada

STATUS Descrição




3 FAILED Falhada

4 RINGING A tocar


6 ONHOLD Em espera


8 MISSED Falhada

9 REFUSED Recusada

10 BUSY Ocupado


Razões de Falha (STATUS3)

1 Erro genérico

2 Número inexistente

3 Utilizador desligado

4 Proxy não encontrado

5 Sessão terminada

6 Descodificador comum não encontrado

7 Erro de I/O no som

8 Erro no dispositivo de som remoto

9 Chamada bloqueada pelo destinatário

10 Destinatário não éamigo

11 Utilizador não autorizado pelo destinatário

12 Insuficiente qualidade do som


1 Erro genérico




5 Sessão terminada













Este processo classificou como válidos 74,4% dos números gerados.




Este processo classificou como válidos 74,4% dos números gerados.


Métodos: contactos

Os contactos foram realizados por 2 entrevistadoras.

Uma plataforma online indicava o número a ser marcado, com prioridade para os re-contactos.

Os contactos foram realizados por 2 entrevistadoras.

Uma plataforma online indicava o número a ser marcado, com prioridade para os re-contactos.


Métodos: Algoritmo de re-contacto

Até 5 tentativas para os números com sinal de chamada.

Até 3 tentativas para os números com sinal de impedido.

As 5 tentativas implicavam:Pelo menos duas tentativas à noite (19h-21h)

Pelo menos uma tentativa de manhã (10h-13h)

Pelo menos uma tentativa à tarde (13h-19h)

Até 5 tentativas para os números com sinal de chamada.

Até 3 tentativas para os números com sinal de impedido.

As 5 tentativas implicavam:Pelo menos duas tentativas à noite (19h-21h)

Pelo menos uma tentativa de manhã (10h-13h)

Pelo menos uma tentativa à tarde (13h-19h)


Métodos: Critérios de eligibilidade

Contacto residencial Maiores de 16 anos Consentimento oral para ser entrevistado

Contacto residencial Maiores de 16 anos Consentimento oral para ser entrevistado


Métodos: preçário

Os preços da chamada foram:

Números fixos:

1,7 cent / min

Números móveis:

15 cent / min

Os preços da chamada foram:

Números fixos:

1,7 cent / min

Números móveis:

15 cent / min


Resultados: validação automática de números

Foram gerados sucessivamente números aleatórios validados de forma automática até serem concretizados manualmente 1000 contactos telefónicos.




NºS GERADOS

N (%)

NºS MARCADOS

N (%)

TOTAL 1344 (134%) 1000 (100%)





Dos 1000 números marcados, 42,6% foram fixos, e 57,4% foram móveis.

Dos 1000 números marcados, 42,6% foram fixos, e 57,4% foram móveis.

NºS GERADOS

N (%)

NºS MARCADOS

N (%)

FIXO 655 (154%)

426 (42.6%)

MÓVEL 689 (120%) 574 (57.4%)

TOTAL 1344 (134%)

1000 (100%)


Resultados: número de contactos válidos

No entanto, apenas 8,7% dos contactos fixos e 39% dos contacto móveis eram válidos, mesmo após 6 tentativas.

No entanto, apenas 8,7% dos contactos fixos e 39% dos contacto móveis eram válidos, mesmo após 6 tentativas.



Ou seja, 87% dos contactos fixos foram inválidos, sendo este valor de 27% para os contactos móveis.

Ou seja, 87% dos contactos fixos foram inválidos, sendo este valor de 27% para os contactos móveis.


Resultados: número de contactos elegíveis

Dos 262 contactos válidos, 214 (82%) eram elegíveis, sendo esta percentagem menor nos números fixos (54% vs 86%).

Dos 262 contactos válidos, 214 (82%) eram elegíveis, sendo esta percentagem menor nos números fixos (54% vs 86%).

Nº DE CONTACTOS VÁLIDOS Nº DE CONTACTOS

ELEGÍVEIS

TENTATIVAS

NºS

GERADOS

N (%)

NºS

MARCADOS

N (%)

TOTAL

(%) 1 2 3 4 5

TOTAL

N (%)

ENTREVISTAS

COMPLETAS

N (%)

FIXO 655 (154%)

426 (42.6%)

37 (8,7%) 21 8 6 2 0 20 (4,7%) 13 (3,1%)

MÓVEL 689 (120%)) 574 (57.4%) 225 (39%) 138 48 26 7 6 194 (86%) 167 (29%)

TOTAL 1344 (134%

1000 (100%)

262 (26%) 159 56 32 9 6 214 (21%) 180 (18%)



Das 1000 tentativas de contacto, foram realizadas 180 entrevistas completas. A eficiência foi 10x superior nos nos móveis.

Das 1000 tentativas de contacto, foram realizadas 180 entrevistas completas. A eficiência foi 10x superior nos nos móveis.

Nº DE CONTACTOS VÁLIDOS Nº DE CONTACTOS

ELEGÍVEIS

TENTATIVAS

NºS

GERADOS

N (%)

NºS

MARCADOS

N (%)

TOTAL

(%) 1 2 3 4 5

TOTAL

N (%)

ENTREVISTAS

COMPLETAS

N (%)

FIXO 655 (154%)

426 (42.6%)

37 (8,7%) 21 8 6 2 0 20 (4,7%) 13 (3,1%)

MÓVEL 689 (120%)) 574 (57.4%) 225 (39%) 138 48 26 7 6 194 (86%) 167 (29%)

TOTAL 1344 (134%

1000 (100%)

262 (26%) 159 56 32 9 6 214 (21%) 180 (18%)



Os motivos de não-elegibilidade tiveram a seguinte distribuição.

Os motivos de não-elegibilidade tiveram a seguinte distribuição.


Resultados: processo alternativo de validação

Numa simulação, foram considerados números válidos aqueles que, durante o processo de validação automática, retornavam um sinal de chamada.

Numa simulação, foram considerados números válidos aqueles que, durante o processo de validação automática, retornavam um sinal de chamada.

STATUS Descrição




3 FAILED Falhada

4 RINGING A tocar


6 ONHOLD Em espera


8 MISSED Falhada

9 REFUSED Recusada

10 BUSY Ocupado


STATUS Descrição




3 FAILED Falhada

4 RINGING A tocar


6 ONHOLD Em espera


8 MISSED Falhada

9 REFUSED Recusada

10 BUSY Ocupado



1 Erro genérico




5 Sessão terminada









1 Erro genérico




5 Sessão terminada










Teriam sido necessário 1,7x mais números gerados para os contactos móveis e 7x mais números gerados para os contactos fixos.

Teriam sido necessário 1,7x mais números gerados para os contactos móveis e 7x mais números gerados para os contactos fixos.

NºS GERADOS

N (%)

NºS MARCADOS

N (%)

FIXO 655 (154%) (728%)

426 (42.6%)

9 (1,8%)

MÓVEL 689 (120%) (176%) 574 (57.4%)

388 (66%)

TOTAL 1344 (134%) (339%)

1000 (100%)

397 (40%)



No entanto, a percentagem de números válidos aumenta de 8,7% para 75% nos nos fixos e 39% para 48% para nos móveis.

No entanto, a percentagem de números válidos aumenta de 8,7% para 75% nos nos fixos e 39% para 48% para nos móveis.

Nº DE CONTACTOS VÁLIDOS

TENTATIVAS

NºS GERADOS

N (%)

NºS MARCADOS

N (%)

TOTAL (%) 1 2 3 4 5

FIXO 655 (154%) (728%)

426 (42.6%)

9 (1,8%)

37 (8,7%)

6 (75%) 21

3

8

2

6

1

2

0

0

0

MÓVEL 689 (120%) (176%) 574 (57.4%)

388 (66%) 225 (39%)

188 (48%) 138

118

48

38

26

21

7

7

6

4

TOTAL 1344 (134%) (339%)

1000 (100%)

397 (40%)

262 (26%)

194 (49%) 159

121

56

40

32

22

9

7

6

4


Resultados: número de contactos inválidos

A percentagem de números não-válidos reduz-se de 71% para 49%.

A percentagem de números não-válidos reduz-se de 71% para 49%.



A percentagem de contactos elegíveis aumentou de 21% para 87%, sobretudo por maior validade dos nos fixos.

A percentagem de contactos elegíveis aumentou de 21% para 87%, sobretudo por maior validade dos nos fixos.

Nº DE CONTACTOS

VÁLIDOS Nº DE CONTACTOS ELEGÍVEIS

TENTATIVAS

NºS

GERADOS N (%)

NºS

MARCADOS N (%)

TOTAL (%)

1 2 3 4 5

TOTAL

N (%)

AGENDADOS, MAS NÃO

CONTACTADOS

ENTREVISTAS

COMPLETAS

N (%)

FALSOS-NEGATIVOS

N (%)

FIXO

655 (154%)

(728%)

426 (42.6%)

9 (1,8%)

37 (8,7%)

6 (75%) 21

3

8

2

6

1

2

0

0

0

20 (4,7%)

4 (67%)

0

0

13 (3,1%)

2 (15%)

-

16 (80%)

MÓVEL

689 (120%)

(176%)

574 (57.4%)

388 (66%) 225 (39%)

188 (48%) 138

118

48

38

26

21

7

7

6

4 194 (86%)

164 (87%)

2 (0,8%)

2 (1,1%)

167 (29%)

143 (86%)

-

30 (21%)

TOTAL

1344 (134%)

(339%)

1000 (100%)

397 (40%)

262 (26%)

194 (49%) 159

121

56

40

32

22

9

7

6

4

214 (21%)

168 (87%)

2 (0,8%)

2 (1,0%)

180 (18%)

145 (81%)

-

46 (21%)



No entanto, 80% das entrevistas a números fixos não se realizariam, enquanto esta percentagem é de 21% para os números móveis.

No entanto, 80% das entrevistas a números fixos não se realizariam, enquanto esta percentagem é de 21% para os números móveis.

Nº DE CONTACTOS


TENTATIVAS

NºS

GERADOS N (%)

NºS

MARCADOS N (%)

TOTAL (%)

1 2 3 4 5

TOTAL

N (%)

AGENDADOS, MAS NÃO

CONTACTADOS

ENTREVISTAS

COMPLETAS

N (%)

FALSOS-NEGATIVOS

N (%)

FIXO

655 (154%)

(728%)

426 (42.6%)

9 (1,8%)

37 (8,7%)

6 (75%) 21

3

8

2

6

1

2

0

0

0

20 (4,7%)

4 (67%)

0

0

13 (3,1%)

2 (15%)

-

16 (80%)

MÓVEL

689 (120%)

(176%)

574 (57.4%)

388 (66%) 225 (39%)

188 (48%) 138

118

48

38

26

21

7

7

6

4 194 (86%)

164 (87%)

2 (0,8%)

2 (1,1%)

167 (29%)

143 (86%)

-

30 (21%)

TOTAL

1344 (134%)

(339%)

1000 (100%)

397 (40%)

262 (26%)

194 (49%) 159

121

56

40

32

22

9

7

6

4

214 (21%)

168 (87%)

2 (0,8%)

2 (1,0%)

180 (18%)

145 (81%)

-

46 (21%)



Finalmente, a percentagem de entrevistas completas passa de 18% para 81% do números marcados.

Finalmente, a percentagem de entrevistas completas passa de 18% para 81% do números marcados.

Nº DE CONTACTOS


TENTATIVAS

NºS

GERADOS N (%)

NºS

MARCADOS N (%)

TOTAL (%)

1 2 3 4 5

TOTAL

N (%)

AGENDADOS, MAS NÃO

CONTACTADOS

ENTREVISTAS

COMPLETAS

N (%)

FALSOS-NEGATIVOS

N (%)

FIXO

655 (154%)

(728%)

426 (42.6%)

9 (1,8%)

37 (8,7%)

6 (75%) 21

3

8

2

6

1

2

0

0

0

20 (4,7%)

4 (67%)

0

0

13 (3,1%)

2 (15%)

-

16 (80%)

MÓVEL

689 (120%)

(176%)

574 (57.4%)

388 (66%) 225 (39%)

188 (48%) 138

118

48

38

26

21

7

7

6

4 194 (86%)

164 (87%)

2 (0,8%)

2 (1,1%)

167 (29%)

143 (86%)

-

30 (21%)

TOTAL

1344 (134%)

(339%)

1000 (100%)

397 (40%)

262 (26%)

194 (49%) 159

121

56

40

32

22

9

7

6

4

214 (21%)

168 (87%)

2 (0,8%)

2 (1,0%)

180 (18%)

145 (81%)

-

46 (21%)


Resultados: número de contactos não-elegíveis

Não houve alterações significativas dos motivos de não-elegibilidade.

Não houve alterações significativas dos motivos de não-elegibilidade.


Resultados: distribuição geográfica dos entrevistados

84% (152/180) dos entrevistados indicaram o seu código postal.

84% (152/180) dos entrevistados indicaram o seu código postal.


Resultados: tempo e custos

Por hora foram marcados:37,5 números

5 questionários de 5-10 minutos.

O custo médio de questionário completo foi:0,33 € para os números fixos

0,49 € para os números móveis

Por hora foram marcados:37,5 números

5 questionários de 5-10 minutos.

O custo médio de questionário completo foi:0,33 € para os números fixos

0,49 € para os números móveis


Conclusão:

É possível associar processos de geração de números aleatórios

A baixo custo

Com eficiência temporal

Baixa taxa de recusas (12-16%)

Processos alternativos de validação podem aumentar a eficiência, mas à custa de “falsos-negativos”

Diferentes processos de validação automática poderão ser necessários para nos fixos e nos móveis.

É possível associar processos de geração de números aleatórios

A baixo custo

Com eficiência temporal

Baixa taxa de recusas (12-16%)

Processos alternativos de validação podem aumentar a eficiência, mas à custa de “falsos-negativos”

Diferentes processos de validação automática poderão ser necessários para nos fixos e nos móveis.


Conclusão: Proposta de procedimentos

Processo de geração de nos aleatórios sucessivamente até completar as proporções esperadas

70% de números móveis30% de números fixos


70% de números móveis30% de números fixos

Distribuição do acesso ao telefone, por tipo, nos lares portugueses,

comparado com a Europa

11%27%

12%

48%

57%

5%

30%

10%

Apenas telefone móvel

Sem telefone

Com telefone fixo e móvel

Apenas telefone fixo


Conclusão: Proposta de procedimentos


Base de amostragem comunitáriaDados da distribuição sexo/idade dos participantes/residentes.

Dados da distribuição geográfica da residência

Eventual ponderação para assegurar representatividade de base comunitária (passos seguintes)

Necessária a ponderação a posteriori segundo o Censos?


Base de amostragem comunitáriaDados da distribuição sexo/idade dos participantes/residentes.


Eventual ponderação para assegurar representatividade de base comunitária (passos seguintes)

Necessária a ponderação a posteriori segundo o Censos?


Conclusão: limitações

Distorção da base demográfica e/ou geográficaPopulação com mais de 1 telemóvel

Exclusão da população não incluída no Censos?


Aleatorização ao nível do agregado familiar?Necessidade de re-agendar entrevistas?

Distorção da base demográfica e/ou geográficaPopulação com mais de 1 telemóvel

Exclusão da população não incluída no Censos?


Aleatorização ao nível do agregado familiar?Necessidade de re-agendar entrevistas?


Agradecimentos

Luísa Couceiro Alto Comissariado da Saúde, Ministério da Saúde

Noura AbukumailEntrevistadora

Laboratório Bial Parte do estudo de Prevalência e Controlo da Asma em Portugal

Financiamento

Custo e Eficiência de um Processo de Amostragem Telefónica Nacional para todos os Indicativos...

Documents

Transcript of Custo e Eficiência de um Processo de Amostragem Telefónica Nacional para todos os Indicativos...