Introdução
Perguntários totalmente auto-administrados (SAQs) não são tão comuns como os inquéritos administrados por entrevistadores no contexto de inquéritos multinacionais, multirregionais e multiculturais (‘3MC’). Entretanto, à medida que as pesquisas se tornam mais dispendiosas para administrar usando entrevistadores, seja presencialmente ou por telefone, mais pesquisadores estão considerando os modos SAQ, incluindo pesquisas por correio, pesquisas via Web e pesquisas interativas de resposta de voz (IVR) realizadas por telefone.
Um elemento importante do modo auto-administrado é que não há, por definição, nenhum entrevistador envolvido. Como discutido em detalhes na Survey Quality, o erro do entrevistador pode contribuir significativamente para o erro total da pesquisa. Ao remover o entrevistador da equação, a qualidade da pesquisa pode melhorar. Isto pode ser particularmente verdadeiro se o tema da pesquisa for sensível. Os modos auto-administrados também podem ser eficazes quando a privacidade durante a entrevista da pesquisa é difícil de obter.
No entanto, a ausência de um entrevistador também exige um instrumento de pesquisa cuidadosamente projetado que seja fácil para o entrevistado completar. Como não há entrevistador presente, não há ninguém que ajude o entrevistado a entender as instruções ou que o encoraje a preencher o questionário. As diferenças nos níveis de alfabetização entre países também devem ser consideradas na fase de desenho do questionário de instrumentos auto-administrados (veja Desenho do Questionário para mais detalhes).
Além disso, devido à falta de interação entrevistador-respondente, a não-resposta é mais difícil de avaliar, e é um desafio separar os efeitos da não-contacto, da recusa e de um quadro de amostragem deficiente. Por exemplo, a não-resposta a uma pesquisa por correspondência pode resultar de correspondência mal direcionada que nunca chegou à casa do entrevistado da amostra, correspondência mal colocada dentro da casa do entrevistado, vontade inicial de completar a pesquisa, mas posterior esquecimento, relutância em completar o questionário (ou seja, uma recusa), ou qualquer número de questões. E, num agregado familiar com várias pessoas, pode ser impossível identificar quem era o verdadeiro inquirido. Portanto, ao desenhar um SAQ, é crucial implementar estratégias para maximizar a qualidade da pesquisa.
Para mais discussões sobre as vantagens e desvantagens das pesquisas auto-administradas, veja Desenho do Estudo e Estrutura Organizacional. Para informações adicionais sobre o desenho de amostra e os desafios relacionados aos modos auto-administrados, consulte Desenho de Amostra.
⇡ Voltar ao topo
Guidelines
Goal: Atingir um projeto de coleta de dados transculturais ideal, maximizando a quantidade de informação obtida por unidade monetária gasta dentro do tempo alocado, enquanto se atinge o nível especificado de precisão e se produzem resultados comparáveis, dentro do contexto de uma pesquisa auto-administrada.
⇡ Voltar ao topo
1. Quando uma pesquisa por correio usando um instrumento baseado em papel for enviada aos respondentes, desenvolva o questionário e protocolos com consideração de que a pesquisa deve ser direta para os respondentes ao auto-administrador.
Lógica
Concertezas sobre taxas de resposta, duração da pesquisa e qualidade dos dados resultaram em uma redução no uso de pesquisas por correio nos últimos anos. No entanto, Dillman e outros argumentam que pesquisas por correio de alta qualidade com muita atenção aos detalhes podem resultar em dados precisos . A pesquisa por correio está se tornando mais difundida à medida que o custo das pesquisas administradas por entrevistadores aumenta. Se uma pesquisa por correio é o modo escolhido de coleta de dados, considere os seguintes passos ao desenvolver o instrumento.
Passos processuais
1.1 Avaliar o sistema postal no país do estudo e usá-lo para desenvolver um cronograma para coleta de dados que seja realista dado o contexto local. Em uma pesquisa 3MC, há frequentemente diferenças na confiabilidade postal, custo, possíveis transportadoras e pontualidade.
1.2 Ao projetar materiais (cartas, questionários, etc.) que serão enviados ao respondente, avalie o seguinte:
1.2.1 Níveis de alfabetização entre a população alvo.
1.2.2 Uso de idiomas e/ou dialetos regionais diferentes do(s) idioma(s) oficial(is) do país, e quaisquer implicações para a viabilidade de um questionário auto-preenchido. De facto, existem algumas línguas e dialectos que não têm um formulário escrito.
1.3 Determinar como irá ocorrer a introdução de dados dos questionários de correio devolvidos. A entrada de dados pode ocorrer manualmente, mas é mais eficiente usar um software de reconhecimento óptico ou inteligente de caracteres, no qual o computador lerá e codificará as respostas dos questionários em papel.
1.4 Antes de enviar o questionário em papel, considere o envio de uma carta prévia bem escrita para legitimar a pesquisa e tranquilizar e motivar os possíveis respondentes. O mais eficaz é uma carta curta, simples e cuidadosamente redigida .
1.5 Desenvolva uma carta de apresentação para incluir no questionário em papel, apresentando o estudo da pesquisa, explicando o propósito da pesquisa e fornecendo instruções sobre como completar o instrumento e informações de contato da organização para quaisquer perguntas que o respondente possa ter.
1.6 Desenvolva um instrumento apropriado para a modalidade e população alvo, tendo em mente que não haverá entrevistador presente para auxiliar na administração da pesquisa.
1.6.1 Avalie a alfabetização da população alvo e ajuste o texto para compreensão, se necessário.
1.6.2 Coloque as instruções claramente ao lado das perguntas da pesquisa às quais elas correspondem.
1.6.3 Torne o layout do instrumento visualmente atraente e a ordem das perguntas fácil de seguir. Use elementos visuais (por exemplo, brilho, cor, forma, posição na página) de forma consistente para definir o caminho desejado através do questionário .
1.6.4 Use padrões de pulo somente quando absolutamente necessário. Inclua instruções claras para pular padrões, e reforce com dicas visuais e gráficas, tais como boldfacing e setas.
1.6.5 Limite o número de questões em aberto.
1.6.6 Faça apenas uma questão de cada vez. A combinação de vários itens em uma questão coloca uma pesada carga cognitiva sobre os respondentes e pode impactar a qualidade dos dados.
1.7 Forneça instruções claras para devolver a pesquisa concluída para a organização da pesquisa ou outro ponto de coleta. Deve ser fornecida uma postagem adequada no envelope para que não haja custo para o respondente.
1.8 Desenvolver um sistema de gerenciamento de amostra (e procedimentos para sua execução) para processar questionários preenchidos em papel.
1.9 Protocolos do Instituto para proteger a confidencialidade dos respondentes. É comum que as organizações de pesquisa atribuam um número de identificação único a cada questionário doméstico amostra para fins de gestão da amostra, uma vez que os questionários são enviados de volta para o escritório. Isso garante que se um questionário em papel for perdido no correio ou não for devolvido à organização da pesquisa, as respostas do respondente não poderão ser vinculadas à sua identidade por terceiros.
1.10 Desenvolver um protocolo para lidar com a não-resposta, incluindo quantas tentativas de chegar aos respondentes pelo correio e/ou outros métodos possíveis serão feitas.
Aulas aprendidas
1.1 Como uma pesquisa por e-mail é autoadministrada sem a presença de um entrevistador, é crucial que o layout e o design dos elementos do questionário seja claro e fácil de seguir e que as instruções sejam visivelmente marcadas. Muitas vezes, a primeira página de um questionário por email contém um longo conjunto de instruções, que argumentam que os questionados geralmente ignoram ou não retêm ao responder o questionário. Eles aconselham a colocação das instruções relevantes para estar diretamente onde elas precisam estar.
1.2 Uma pesquisa recente por correio na Sibéria, que variou fatores experimentais entre subgrupos aleatórios de respondentes, alcançou maiores taxas de resposta quando o papel timbrado da universidade oficial foi usado na correspondência, quando houve um incentivo oferecido, e quando um número maior (vs. um número menor) de contatos com o respondente foi tentado .
1.3 As taxas de resposta esperadas para pesquisas por correio serão diferentes por país. Para um conjunto limitado de estudos que examinam as diferenças entre países nas taxas de resposta, veja , , , e .
⇡ Voltar ao topo
2. Ao administrar uma pesquisa via Web, desenvolva o questionário e os protocolos com a consideração de que a pesquisa deve ser direta para os respondentes se auto-administrarem.
Ratificação
A penetração da Internet tem aumentado constantemente em todo o mundo nos últimos anos. Dado o aumento dos custos das pesquisas administradas por entrevistadores, muitos pesquisadores estão se voltando para o uso de pesquisas baseadas na Web para chegar aos entrevistados quando um quadro de amostragem adequado está disponível. As pesquisas pela Web devem ser projetadas para que os entrevistados possam facilmente acessar e completar a pesquisa.
Passos processuais
2.1 Avaliar a infra-estrutura tecnológica de cada país de estudo para selecionar softwares apropriados para uso, dependendo dos instrumentos prevalecentes no país de estudo, para o desenvolvimento, distribuição e conclusão da pesquisa via Web.
2.1.1 Avalie a velocidade e a confiabilidade da Internet no país do estudo e o impacto potencial na facilidade de uso da pesquisa pela Web pelos questionados e projete a pesquisa de acordo com as limitações de largura de banda do país.
2.1.2 Determine qual(is) navegador(s) da Web suporta(m) totalmente o instrumento de pesquisa baseado na Web e comunique isso ao questionado. Considere incluir um link para baixar um navegador específico para facilitar a participação do questionado no questionário pela Web.
2.1.3 Considere que os questionados provavelmente usarão dispositivos diferentes para acessar o questionário, incluindo computadores desktop, computadores laptop, tablets, smartphones e outros dispositivos eletrônicos. A pesquisa pela Web deve poder ser concluída em um navegador da Web, independentemente do tipo de dispositivo. Consulte Design técnico de instrumentos para obter informações adicionais sobre como preparar folhas de estilo apropriadas para vários dispositivos.
2.1.4 Planeje o tempo adequado de programação e teste em vários dispositivos. Por exemplo, software compatível com dispositivos Android pode ter falhas em dispositivos iOS (Apple).
2.2 Determine como os questionados serão convidados a participar da pesquisa na Web.
2.2.1 Antes de disseminar o link para o instrumento de pesquisa baseado na Web, considere o envio de uma carta prévia bem escrita para legitimar a pesquisa e tranquilizar e motivar os possíveis questionados. O mais eficaz é uma carta curta, simples e cuidadosamente redigida .
2.2.2 O modo de convite será limitado pelas informações de contato do entrevistado disponíveis no quadro de amostra. Por exemplo, uma pesquisa na Web que utilize um quadro de amostragem composto apenas de endereços de e-mail não poderá enviar um convite via correio postal devido à falta de um endereço para correspondência.
2.3 Determine como os respondentes terão acesso à pesquisa. propõe o fornecimento de um limite de acesso por PIN apenas para as pessoas da amostra. Outra opção é fornecer a cada respondente uma URL única de ligação à pesquisa, que está ligada ao ID da amostra do respondente.
2.4 Desenvolver uma introdução concisa a ser apresentada no início da pesquisa na Web, introduzindo o estudo da pesquisa, explicando o propósito da pesquisa e fornecendo instruções sobre como completar a pesquisa e informações de contato da organização para quaisquer perguntas que o respondente possa ter.
2.5 Desenvolver e testar a pesquisa Web, tendo em mente que não haverá entrevistador presente para auxiliar na administração da pesquisa.
2.5.1 Avaliar a alfabetização da população alvo e ajustar o texto para compreensão se necessário.
2.5.2 A primeira questão deve ser um item que provavelmente seja interessante para a maioria dos entrevistados e fácil de responder.
2.5.3 Colocar as instruções ao lado das questões da pesquisa às quais elas correspondem.
2.5.4 Torne o layout do instrumento visualmente atraente.
2.5.5 Programe qualquer padrão de salto usado diretamente no instrumento, aliviando o questionado das decisões de navegação.
2.5.6 Mantenha a pesquisa o mais breve e envolvente possível. Quanto mais longo o questionário e maior o número de telas, maior a probabilidade de o questionado não concluir o questionário.
2.5.7 Limite o número de questões abertas.
2.5.8 Faça apenas uma questão de cada vez. A combinação de vários itens em uma questão coloca uma pesada carga cognitiva sobre os respondentes e pode impactar a qualidade dos dados.
2.5.9 Faça prompts, especialmente aqueles que pedem ao respondente para corrigir uma resposta, útil, educado e encorajador.
2.5.10 Decida se os questionados podem navegar para trás para revisar e/ou revisar itens e respostas de questionários anteriores.
2.5.11 Consulte Design técnico do instrumento para obter orientação adicional sobre o layout e o design técnico do questionário da Web.
2.6 Decida se os respondentes terão permissão para preencher o questionário em mais de uma sessão, permitindo que os dados sejam salvos no intervalo, e programe o instrumento de acordo.
2.7 Protocolos do Instituto para proteger a confidencialidade dos respondentes.
2.7.1 Certifique-se de que a transmissão eletrônica dos dados do computador do respondente para a empresa coletora dos dados seja segura.
2.8 Selecione um sistema de gerenciamento de amostras eletrônicas apropriado e desenvolva procedimentos para sua execução. Se for usado um sistema de gerenciamento de amostras eletrônicas, os centros coordenadores podem desempenhar um papel no monitoramento do trabalho de campo. Veja Desenho do Estudo e Estrutura Organizacional para detalhes.
2.9 Determine quais paradados serão coletados. Os paradados das pesquisas pela Web podem ser usados para melhorar a experiência dos entrevistados ou para entender mais sobre os entrevistados e como eles interagem com a pesquisa pela Web . Veja Paradados e Outros Dados Auxiliares para mais informações e exemplos.
2.10 Desenvolver um protocolo para lidar com a não-resposta, incluindo quantas tentativas de chegar aos entrevistados por e-mail e/ou outros métodos possíveis serão feitas.
Lições aprendidas
2.1 As pesquisas via Web são freqüentemente usadas em ondas subsequentes de pesquisas de painel após um estudo de linha de base administrado por entrevistadores, e podem ser uma escolha prática e econômica. Nesses casos, o entrevistado já está familiarizado com o estudo, e estratégias para minimizar a não-resposta podem ser executadas por telefone, correio e até mesmo visitas presenciais, pois informações completas de contato geralmente estão disponíveis.
2.2 Com um design adequado, pesquisas via Web podem alcançar taxas de resposta comparáveis a pesquisas não Web.
2.2.1 Uma experiência aleatória por telefone/Web-mode num estudo eleitoral suíço descobriu que o uso de um incentivo num inquérito Web produziu taxas de resposta comparáveis às do inquérito telefónico (que também incluía incentivos). A sondagem Web foi muito menos dispendiosa, mesmo contabilizando o custo dos incentivos, do que a sondagem por telefone .
2.2.2 No entanto, tal como as sondagens 3MC realizadas noutros modos, as sondagens Web podem produzir taxas de resposta diferentes entre países. Uma comparação dos dados coletados através de uma pesquisa via Web da Itália, França, Turquia e EUA mostrou que a França tinha a maior taxa geral de recusa, mas baixa não resposta para aqueles que participaram. A Itália e os EUA tiveram taxas de resposta e baixa não resposta de itens. Os respondentes na Turquia tiveram a menor taxa de contatos e respostas, e a maior não resposta para perguntas sensíveis .
2,3 A censura à Internet ocorre em nível nacional em pelo menos vários países não ocidentais, como a China e o Irã. Se planejar uma pesquisa em um país onde a censura ocorre, considere o tópico da pesquisa e a programação técnica e determine se a Web é uma forma aceitável de coleta de dados para o país em questão.
2.3.1 A censura por certos governos pode impactar os tipos de perguntas que são permitidas em um questionário de pesquisa Web.
2.3.2 A censura pode impactar as taxas de resposta devido a preocupações de confidencialidade e segurança entre os respondentes.
2.3.3 Se o país do estudo se envolver em censura, considere a localização do servidor que hospeda a pesquisa e se os respondentes do estudo poderão acessar o servidor em seu país hospedeiro; ou seja, se o endereço IP do site do servidor é acessível do país do estudo.
2.4 Os fornecedores de software e sites podem restringir o acesso de usuários em outros países. Independentemente de qualquer censura governamental, verifique se os respondentes no país do estudo podem acessar a pesquisa.
2.5 Aplicativos Smartphone estão sendo usados atualmente para pesquisas de uso do tempo. Por exemplo, um estudo de pesquisa na Holanda está usando um aplicativo para smartphone para coletar dados de uso de tempo em combinação com dados auxiliares. Ao exigir que os respondentes instalem um aplicativo, em vez de acessar um site para concluir a pesquisa, os pesquisadores podem garantir que os respondentes verão visualmente o instrumento exatamente como os pesquisadores pretendiam. O aplicativo não precisa de acesso permanente à Internet, pois os dados completos da pesquisa são armazenados e transmitidos conforme o acesso à Internet permite .
⇡ Voltar ao início
3. Ao administrar uma pesquisa usando IVR, desenvolva o questionário e os protocolos com a consideração de que a pesquisa deve ser direta para os respondentes se auto-administrarem.
Lógica
IVR pode ser um modo eficaz para administrar uma pesquisa a uma população onde a acessibilidade telefônica é adequada, e particularmente quando o tema da pesquisa é sensível. No entanto, como nas pesquisas por correio e Web, a ausência de um entrevistador necessita de um desenho cuidadoso do instrumento e da execução no campo.
Passos processuais
3.1 Determine qual software de URA será usado para realizar a pesquisa, incluindo se o sistema de URA aceitará chamadas telefônicas de entrada dos entrevistados e/ou iniciará chamadas de saída para os entrevistados para completar a pesquisa.
3.2 Determine como os entrevistados serão convidados a participar da pesquisa de URA. O modo de convite será limitado pelas informações de contato do entrevistado disponíveis no quadro de amostra.
3.2.1 Se os endereços postais estiverem disponíveis, os entrevistados poderão receber um convite com um número de telefone para ligar para participar.
3.2.2 Se os endereços de e-mail estiverem disponíveis, os entrevistados poderão receber um convite e telefonar por e-mail.
3.3.3 Se apenas números de telefone estiverem disponíveis, o convite para completar o IVR ocorrerá por telefone.
3.3 Se um sistema de discagem automática for usado para iniciar o contato com o respondente, avalie quaisquer restrições legais em vigor que se apliquem ao uso de tais sistemas no país do estudo.
3.4 Desenvolva uma introdução concisa a ser apresentada no início da pesquisa de URA, apresentando o estudo de pesquisa, explicando o propósito da pesquisa e fornecendo instruções sobre como completar a pesquisa e informações de contato da organização para quaisquer perguntas que o entrevistado possa ter.
3.5 Decida se deve programar o sistema de URA como toque, entrada de voz ou uma combinação dos dois.
3.5.1 Ao decidir sobre a programação, considere a população alvo. Estudos na Índia rural e no Botswana descobriram que os respondentes com menos educação e menos alfabetizados se dão melhor com o tom de toque, e citaram a privacidade para a preferência pelo tom de toque também .
3.5.2 Um estudo no Paquistão descobriu que uma interface de fala bem desenhada era mais eficaz do que um sistema de tom de toque para os respondentes independentemente do nível de alfabetização .
3.6 Dedique tempo suficiente ao desenvolvimento de um sistema de URA de alta qualidade para manter o interesse dos respondentes e a cooperação contínua.
3.6.1 O sistema de URA deve ter um registro de alta qualidade, pois é provável que o respondente interrompa a pesquisa se a qualidade for baixa.
3.6.2 Veja para um guia do desenvolvimento de um sistema de URA e as características de fala associadas que precisam ser consideradas.
3.7 Selecione um sistema de gerenciamento de amostras apropriado e desenvolva procedimentos para sua execução.
3.7.1 Se um sistema de gerenciamento de amostras eletrônicas for usado, os centros coordenadores podem desempenhar um papel no monitoramento do trabalho de campo. Veja Desenho do Estudo e Estrutura Organizacional para detalhes.
3.8 Desenvolva um protocolo para lidar com a não-resposta, incluindo quantas tentativas de alcançar os respondentes por telefone e/ou outros métodos possíveis serão feitos.
Lessons learned
3.1 Considere a voz usada para gravação.
3.1.1 Num projecto de linha de apoio à saúde no Botswana, os investigadores empregaram uma conhecida actriz local para a gravação de IVR, e os utilizadores reagiram muito positivamente .
3.1.2 Dependendo do contexto social, o uso de uma gravação de IVR de um homem para os entrevistados do sexo masculino e de uma mulher para as entrevistadas do sexo feminino pode gerar relatórios mais precisos, particularmente de informação sensível.
3.2 desenvolveu uma abordagem inovadora para o desafio que a variação dialéctica e o multilinguismo representam para as interfaces orientadas para a fala para IVR na Índia, aplicável também a outros contextos. Em sua abordagem, pessoas de aldeias específicas são gravadas durante as interações e sua fala é integrada semi-automaticamente aos modelos acústicos daquela aldeia, gerando assim os recursos linguísticos necessários para o reconhecimento automático de sua fala.
3.3 Considere um modo alternativo para o primeiro contato para informar o entrevistado sobre uma pesquisa de URA iminente, como SMS ou uma mala direta. Em um estudo na Uganda rural, a chamada da pesquisa de URA foi precedida por uma mensagem SMS sobre a próxima chamada, 24 horas antes. Em um pré-teste, os respondentes que não receberam o texto não conseguiram entender a chamada posterior da pesquisa .
3.4 Uma pesquisa com professores em Uganda resultou em uma série de considerações úteis ao projetar um sistema de URA para melhorar as taxas de resposta e a qualidade dos dados .
3.4.1 A chamada URA começou com a informação imediata de que “Esta é uma chamada registrada do Projeto X. Você não está falando com uma pessoa real”
3.4.2 A chamada URA forneceu instruções muito específicas sobre se usar o teclado ou falar.
3.4.3 Os respondentes ficaram inicialmente confusos com a automação do sistema URA. Os pesquisadores tiveram melhores resultados ao usar um toque para chamar a atenção dos entrevistados antes que a voz automatizada desse instruções.
3.4.4 Alavancar as convenções de conversas e de tomadas de decisão de conversas normais no sistema URA levou a mais sucesso do que instruções detalhadas em eliciar o comportamento desejado do usuário.
3.4.5 Um sistema de URA que projetou uma voz alta, com alertas gravados como se o falante estivesse usando uma conexão de célula ruim, resultou em uma pesquisa que foi mais fácil de ser seguida pelos entrevistados.
3.4.6 Ao produzir a gravação de URA, use a fala lenta para obter voz lenta – os correspondentes irão emular a voz, e os dados resultantes serão mais fáceis de entender.
3.4.7 A gravação IVR incluiu 3 segundos de silêncio antes dos alto-falantes gravados dizerem “obrigado” e passar para a próxima pergunta, que foi relatada como bem recebida pelos entrevistados.
⇡ Voltar ao início
⇡ Voltar ao início