módulo 3: diseño del cuestionario vídeo 1 de 6
TRANSCRIPT
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Módulo 3: Diseño del cuestionario
Vídeo 1 de 6: Presentación del módulo y longitud
Prof. Dr. Frauke Kreuter
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Al final del módulo, los participantes deberían...
• ... saber cómo estructurar un cuestionario ETAO
• ... comprender los retos cognitivos asociados a contestar
preguntas
• ... interiorizar el objetivo de que todos los encuestados entiendan
la pregunta y sean capaces de contestarla de forma fiable
• ... estar familiarizados con los efectos de las opciones de
redacción
• ... estar sensibilizados para evitar ambigüedades en la redacción,
preguntas dobles o dobles negaciones
• ... ser conscientes de los efectos del orden de las preguntas
2
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Resumen de la lectura
• Vídeo 1: presentación, del constructo a las preguntas, longitud de
la encuesta
• Vídeo 2: escribir las preguntas (hechos y actitudes)
• Vídeo 3: flujo de las secciones y preguntas
• Vídeo 4: encuestado (cognición, aspectos básicos)
• Vídeo 5: encuestado (preguntas sensibles)
• Vídeo 6: niveles, informantes, resumen
3
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Del constructo a la pregunta
Diseño del cuestionario
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Objetivo del desarrollo del cuestionario
• Desarrollar medidas que sean:
– Fiables (consistentes)
– Válidas (precisas)
– Estándar (comparables entre la gente)
– Prácticas (fáciles de gestionar)
5
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Objetivo del desarrollo del cuestionario
• Desarrollar medidas que sean:
– Fiables (consistentes)
– Válidas (precisas)
– Estándar (comparables entre la gente)
– Prácticas (fáciles de gestionar)
6
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Objetivo del desarrollo del cuestionario
• Desarrollar medidas que sean:
– Fiables (consistentes)
– Válidas (precisas)
– Estándar (comparables entre la gente)
– Prácticas (fáciles de gestionar)
7
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Objetivo del desarrollo del cuestionario
• Desarrollar medidas que sean:
– Fiables (consistentes)
– Válidas (precisas)
– Estándar (comparables entre la gente)
– Prácticas (fáciles de gestionar)
8
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Definir objetivos, constructos, conceptos
9
DEFINIR LO QUE SE DEBERÍA MEDIR
ENFOQUE BASADO EN LA TEORÍA (DESCENDENTE)
ENFOQUE BASADO EN LOS DATOS (ASCENDENTE)
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Definir objetivos, constructos, conceptos
10
Reunión con patrocinadores y expertos
Revisión bibliográfica / encuestas anteriores
Grupos focales
Observación:
siempre habrá más
solicitudes que
espacio en el
cuestionario
Observación: muchos
recursos en Internet
(Banco Mundial, RTI,
JPal, c4ed, etc.)
Observación: suele
ser beneficioso
hablar con la
población objetivo
Noviembre de 2020 Módulo 3: Diseño del cuestionario 11
Ciclo de vida de la encuesta desde una perspectiva cualitativa
Concepto
Medición
Respuesta
Población objetivo
Marcos muestrales
Muestra
Medición Representación
Encuestados
Respuesta editada Ajustes posteriores a la encuesta
Estadística de la encuesta
Validez
Error de medición
Error de procesamiento
Error de cobertura
Error muestral
Error de falta de respuesta
Error de ajuste
i
iY
iy
ipy
Y
CY
ay
ry
rwy
prwyFuente: Groves et al. (2009)
Noviembre de 2020 Módulo 3: Diseño del cuestionario 12
Ciclo de vida de la encuesta desde la perspectiva del diseño
Concepto
Medición
Respuesta
Medición
Respuesta editada
Estadística de la encuesta
Distancia social
Noviembre de 2020 Módulo 3: Diseño del cuestionario 13
«... los objetivos de investigación de muchos estudios están
sorprendentemente mal definidos. Con frecuencia, preguntarle a
un investigador qué es exactamente lo que debe medirse con una
pregunta para la que se ha creado un objetivo suele suscitar
respuestas vagas, incluso respuestas diferentes de los distintos
investigadores involucrados en el mismo proyecto».
(Schwarz 1997, p. 30)
Noviembre de 2020 Módulo 3: Diseño del cuestionario 14
Ciclo de vida de la encuesta desde la perspectiva del diseño
Concepto
Medición
Respuesta
Medición
Respuesta editada
Estadística de la encuesta
Distancia social
«La semana pasada, ¿evitó grupos de
más de 10 personas, como reuniones
familiares, fiestas, iglesias o mezquitas,
funerales, etc.?»
Noviembre de 2020 Módulo 3: Diseño del cuestionario 15
Medición
• Vinculación de conceptos teóricos a variables observables
– Formas de obtener información sobre conceptos
– Ejemplos: preguntas, observaciones, muestras de suelo, lecturas de presión
arterial
• Algunos constructos consisten en un único atributo
– P. ej., género, edad
• Algunos constructos son multidimensionales y constan de varios
atributos
– Se necesita más de una pregunta para medir el constructo
– P. ej., nivel socioeconómico, deseabilidad social
• Normalmente, hay muchas formas (contrapuestas) de medir el
constructo
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Medición
16
• Para determinar cómo piensan los miembros de la población objetivo y cómo hablan sobre un tema concreto
– ¿Qué saben o no los encuestados sobre el tema?
– ¿Qué piensan sobre este tema?
– ¿Qué consideran importante e irrelevante los encuestados?
– ¿Qué idioma utilizan los encuestados?
– ¿Hay aspectos del tema que hayamos obviado?
Noviembre de 2020 Módulo 3: Diseño del cuestionario 17
Ciclo de vida de la encuesta desde la perspectiva del diseño
Concepto
Medición
Respuesta
Medición
Respuesta editada
Estadística de la encuesta
«El lunes fui al mercado. Había mucha
gente en el puesto de comida». El
entrevistador registra 0 para «no».
Distancia social
«La semana pasada, ¿evitó grupos de
más de 10 personas, como reuniones
familiares, fiestas, iglesias o mezquitas,
funerales, etc.?»
Noviembre de 2020 Módulo 3: Diseño del cuestionario
El recorrido del constructo a la medición...
18
... puede ser largo
Comportamiento y distancia
Llevar
mascarilla
Encontrarse
con gente
Lavado de
manos
¿Con qué
frecuencia?
¿Cuánta?
¿Durante
cuánto tiempo?
Otros miembros del hogar... Encuestas de teléfonos móviles de alta frecuencia en hogares para evaluar los impactos de COVID-19 (Vol. 4): Plantilla de cuestionario (inglés). Washington, D.C.: Grupo del Banco Mundial . http://documents.worldbank.org/curated/en/567571588697439581/Questionnaire-Template
Si…………..1 No…………2No sabe……3
Si…………..1 No…………2No sabe……3
Si…………..1 No…………2No sabe……3
Todo el tiempo………..1
La mayor parte del
tiempo….2
Aproximadamente la mita del
tiempo…..3
Parte del tiempo…….4
Ninguna….5
No he estado en público
durante los últimos 7 días….6
Noviembre de 2020 Módulo 3: Diseño del cuestionario
¿Por qué breve?
• Los entrevistadores no pueden ver el entorno en que está el
encuestado
(y, por ejemplo, no pueden ver si el encuestado está distraído)
• Hablar por teléfono, en concreto por el móvil, es más difícil que
hacerlo en persona
• La duración de la batería puede limitar la duración de la
conversación
• No hay ayudas visuales que ofrecer a los encuestados (escalas,
imágenes)
• Los encuestados tienen que memorizar lo que escuchan
20
Noviembre de 2020 Módulo 3: Diseño del cuestionario
¿Cuánto debería durar una encuesta?
• Schnell (2019) recomienda:
Longitud máxima (en minutos):
21
Cara a cara
60
EPAO
60
ETAO
20
Correo
15
Correo
electrónico
15
Web
15
Noviembre de 2020 Módulo 3: Diseño del cuestionario
Objetivo <7 minutos; <30 minutos
22
Índices de abandono en encuestas web de Survey Monkey
https://www.surveymonkey.com/curiosity/survey_questions_and_completion_rates/
Las encuestas ETAO carecen de
estímulos visuales para ayudar al
encuestado a centrarse, comprender la
pregunta y recordar las categorías de
respuesta.
Sin embargo, a diferencia de las
entrevistas web, ayudan a los
encuestados a seguir participando.
Número de preguntas por encuesta
Ta
sa
de
ab
an
do
no
de
en
cu
esta
do
sd
e p
rin
cip
io a
fin