Upload
others
View
9
Download
0
Embed Size (px)
Citation preview
Leticia Sánchez Álvarez
l e t i c iasanchez@let s ta t . e s
644 18 1 166
DISEÑO Y
VALIDACIÓN DE
CUESTIONARIOS
Contenido del curso
1. Introducción a la encuesta
2. Características, objetivo y etapas de la encuesta
3. El cuestionario
4. Objetivos, ventajas y limitaciones del cuestionario
5. Tipos de cuestionarios
6. Diseño del cuestionario
7. Validación y fiabilidad del cuestionario
Introducción a la encuesta
Procedimiento de recolección de datos mediante el uso de instrumentospreviamente diseñados, aplicados a un grupo representativo de lapoblación para detectar ideas, opiniones u otros objetivos queposteriormente se analizan.
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
ENCUESTA CUESTIONARIO≠
D e f i n i c i ó n
Características y objetivo de la encuesta
o Obtención de datos de una amplia variedad de temas.
o Permite normalizar los datos para realizar posteriormente un análisisestadístico y obtener resultados que sean comparables.
o Permite ser aplicado a un gran número de personas que pueden serrepresentativas para una gran población.
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Obtener información relativa a las característicaspredominantes de una población mediante la aplicaciónde procesos de interrogación y registro de datos.
C a r a c t e r í s t i c a s
O b j e t i v o
Etapas de la encuesta
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Planteamiento de objetivos
Estudio de condiciones
Diseño de la muestra
Elección sistema de
trabajo
Elaboración instrumento de medición
Validación del instrumento
Trabajo de campo
Organización y manejo de
datos
Control de calidad de
datos
Análisis estadístico
Interpretación de resultados
El cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Instrumento de medición fundamental para la obtención de datos,formado habitualmente por un sistema de preguntas planteadas yordenadas de forma coherente.
Se debe tener en cuenta que no existen unas pautas establecidas quegaranticen la elaboración perfecta de un cuestionario.
D e f i n i c i ó n
“La elaboración de un cuestionario es más un arte que una técnica”
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
» Obtener la información pertinente, de la cual no se dispone.
» Traducir el planteamiento del problema mediante preguntas precisas.
» Distorsionar lo menos posible las respuestas de los encuestados.
» Diseñar un cuestionario atractivo que favorezca y motive lacooperación del encuestado.
» Conseguir las respuestas de los encuestados con la mayor veracidad yconfiabilidad viable.
» Conseguir datos de forma normalizada para su posterior análisis ycomparación.
O b j e t i v o s
El cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
V E N T A J A S
• Favorece el anonimato• El encuestado puede tomarse
el tiempo y el momento adecuado para cumplimentarlo
• El encuestado puede reconsiderar sus respuestas
• Permite abarcar un área geográfica muy extensa
• Facilita el alcance a un gran número de sujetos
L I M I T A C I O N E S
• Dificultades a la hora de su diseño y elaboración
• Difícilmente se logra un éxito del 100% de tasa de respuesta
• La falta de respuesta dificulta determinar con precisión el error estadístico
• La información no profundiza en exceso
• En ocasiones no es posible acceder por completo a la población
El cuestionario
Tipos de cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Diferentes clasificaciones según el grado de estructuración, el modo de recogida de los datos y la temporalidad
SEGÚN EL GRADO DE ESTRUCTURACIÓN
EstructuradosToda la información que se desea recabar se presenta deforma explícita y estandarizada para todos los sujetos porigual
Semiestructurados Supone una mezcla entre los cuestionarios estructurados yno estructurados
No estructurados
Se plantea un guión general que permite al encuestadororganizar la información que va obteniendo, asimismo,posee libertad de realizar otras preguntas que considereoportunas y realizar el cuestionario en el orden óptimo
Tipos de cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Diferentes clasificaciones según el grado de estructuración, el modo de recogida de los datos y la temporalidad
SEGÚN EL MODO DE RECOGIDA DE DATOS
Auto-administrado Cumplimentado por el propio encuestado mediante email,correo postal, web o en persona
Administrado Aplicados directamente por un encuestador de formapresencial (PAPI, CAPI, CAWI) o de forma telefónica (CATI)
PAPI: Paper and Pencil InterviewingCAPI: Computer Assisted Personal InterviewingCAWI: Computer Assisted Web InterviewingCATI: Computer Assisted Telephone Interviewing
Tipos de cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Diferentes clasificaciones según el grado de estructuración, el modo de recogida de los datos y la temporalidad
SEGÚN LA TEMPORALIDAD
DiacrónicoImplica el estudio de uno o varios fenómenos a lo largo de unperiodo, es decir, se cumplimenta el cuestionario en distintosmomentos en el tiempo
Sincrónico El cuestionario se realiza en un momento determinado en el tiempo yde una sola vez
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
» Definir temas a tratar (seleccionar un tema principal evitando temassecundarios)
» Orden en el cuestionario y tipos de preguntas
» Fijar de ante mano una duración máxima de cumplimentación
» Adaptar el lenguaje a la población que va dirigido
» Instrucciones previas de cumplimentación
» Impresión y diseño final del cuestionario
C o n s i d e r a c i o n e s p r e v i a s
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
1. Cabecera: petición de colaboración, breve resumen de los objetivosque se persiguen mediante la encuesta, y tiempo necesario para sucumplimentación
2. Instrucciones: detallar una serie de directrices que ayuden alentrevistado a cómo cumplimentar correctamente el cuestionario
3. Preguntas introductorias: cortas, interesantes y fáciles de contestar
4. Preguntas clave o más importantes para la investigación
5. Preguntas difíciles o delicadas
6. Datos personales (en caso de ser necesarios)
7. Agradecimiento por la colaboración
O r d e n
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
D i s e ñ o e n c u e s t i ó n
» Elegir una buena calidad tipográfica
» Colocar preguntas y sus respuestas en la misma página
» No incluir preguntas breves al final de cada página
» Dejar espacio suficiente para preguntas abiertas
» Numerar las preguntas para seguir un orden lógico
» Dividir en bloques específicos las preguntas de un mismo tema
» Realizar un pre-test o prueba piloto para detectar posibles errores
Fácil lectura
Sencillo registro de las respuestas
Claro, conciso, limpio y ordenado
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
R e c o m e n d a c i o n e s p a r a l a s p r e g u n t a s
» Lo más cortas y concisas posible
» Lenguaje entendible y adaptado a la población
» Si se tratan temas delicados o personales, hacerlo de forma indirecta
» Evitar la ambigüedad
» Consultar estudios ya realizados de temas similares
» Crear un comité de expertos para marcar la importancia de los ítems
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
T i p o s d e p r e g u n t a :
s e g ú n l a r e s p u e s t a q u e a d m i t e d e l e n c u e s t a d o
» Preguntas abiertas: dejan que el encuestado responda libremente loque estime oportuno
» Preguntas cerradas: fuerzan al encuestado a elegir entre un conjuntode respuestas previamente diseñadas
Distinguimos dos tipos de preguntas: según la respuesta que admite del encuestado y según la función de la pregunta
Dos vías (ejemplo: Sí/No)
Elección simple
Elección múltiple
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
T i p o s d e p r e g u n t a :
s e g ú n l a f u n c i ó n d e l a p r e g u n t a
Distinguimos dos tipos de preguntas: según la respuesta que admite del encuestado y según la función de la pregunta
» Preguntas introductorias: al principio del cuestionario» Preguntas de consistencia: comprueban la congruencia de las
respuestas» Preguntas de control: determinan la veracidad de las respuestas» Preguntas filtro: seleccionan una parte de los encuestados para
realizarles preguntas específicas para ellos» Preguntas de cambio de tema: en el caso de darse dos temas distintos» Preguntas de recuerdo: cuando se va a hacer uso de la memoria» Preguntas de acceso o delicadas: por su redacción, hacen que el
encuestado no se sienta incómodo al tratar temas comprometidos
Diseño del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
C o d i f i c a c i ó n d e l a s p r e g u n t a s y r e s p u e s t a s
Este proceso consiste en la asignación de códigos, números o claves acada uno de los ítems que posteriormente vayan a ser grabados en unabase de datos. De esta manera, se ha de crear en la base de datos almenos una variable para cada una de las preguntas del cuestionario.
Los datos codificados son comparables a datos de otras investigacionespreviamente codificados mediante el mismo sistema.
- Preguntas abiertas: codificar una vez se haya pasado el cuestionario
- Preguntas cerradas: codificar en la fase del diseño del cuestionario
Fiabilidad del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
La fiabilidad en un cuestionario está relacionada con la coherencia o consistenciainterna y la precisión de las medidas recopiladas.
- Análisis de consistencia interna: dotar de significación a las preguntas delcuestionario a través del coeficiente alfa de Cronbach.
“una medida puede ser fiable pero no válida para un cuestionario”
𝛼 =𝐾
𝐾 − 11 −
σ𝑖=1𝑘 𝜎𝑖
2
σ𝑖=1𝑘 𝜎𝑖
2 + 2σ𝑖,𝑗𝑘 𝜎𝑖𝑗
2
siendo, 𝐾 el número de preguntas o ítems,
la varianza de las puntuaciones totales
la suma de las varianzas de todos los ítems
𝑖=1
𝑘
𝜎𝑖2
𝑖=1
𝑘
𝜎𝑖2 + 2
𝑖,𝑗
𝑘
𝜎𝑖𝑗2
Los valores de este coeficiente oscilan entre 0 y 1, considerando losvalores próximos a 1 de alta fiabilidad y los cercanos a 0 defiabilidad baja.
Fiabilidad del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
“una medida puede ser fiable pero no válida para un cuestionario”
E j e m p l o e n S P S S
Fiabilidad del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
“una medida puede ser fiable pero no válida para un cuestionario”
E j e m p l o e n S P S S
El estudio de la fiabilidad arroja un valor alpha = 0.766, considerado como aceptable.
Validación del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Mediante la validación del cuestionario, se pretende obtener interpretaciones sobre elsignificado de lo que se está midiendo y sobre la utilidad del instrumento de medida. Portanto, un instrumento de medida será válido si los datos que se obtienen a través de él sonlo más exactos y relevantes posible.
– De contenido: se estima de manera subjetiva el grado de comprensión de laspreguntas, normalmente mediante un juicio de expertos o un índice de validezde contenido
– De criterio: comparación mediante una escala entre el instrumento de medicióny un criterio externo, con el objetivo de determinar si se reflejan las relacionesentre ambas
– De constructo: averiguar si los ítems representan correctamente el objetivo delcuestionario
Validación del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
V a l i d a c i ó n d e c o n s t r u c t o
Primer paso: Medida de adecuación muestral (KMO > 0,5)
Segundo paso: Prueba de esfericidad de Bartlett (p-valor ≤ 0,05)
Tercer paso: Análisis Factorial (AF) del cuestionario
Análisis Factorial Exploratorio encontrar la mejor solución
Análisis Factorial Confirmatorio confirmar el modelo definido por el investigador
Nº factores = Nº dimensiones
Factores con autovalor > 1
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
E j e m p l o e n S P S S
Validación del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
E j e m p l o e n S P S S
Validación del cuestionario
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
E j e m p l o e n S P S S
Validación del cuestionario
El rango de comunalidades estimadasoscila entre 0.656 y 0.850, nosindica que todos los ítems encajanadecuadamente en la estructurafactorial estimada.
Permite suponer la adecuación muestral para la adecuación del análisis.
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Validación y fiabilidad del cuestionario
Alta consistencia
de los resultados
Datos exactos y relevantes
Eliminar el error aleatorio CUESTIONARIO FIABLE Y VÁLIDO
1. Introducción2. Características, objetivo
y etapas de la encuesta
3, El cuestionario4, Objetivos, ventajas y
limitaciones del cuestionario5, Tipos de cuestionarios6, Diseño del cuestionario7, Validación y fiabilidad del
cuestionario
Bibliografía❖ Abad, F. J., Olea, J., Ponsoda, V., García, C. (2011). Medición en ciencias sociales y de
la salud. Madrid: Síntesis.
❖ Esteban, S., Vázquez Peña, F., Terrasa, S. (2016). Translation and cross-culturaladaptation of a standardized international questionnaire on use of alternative andcomplementary medicine (I-CAM - Q) for Argentina, BMC Complementary andAlternative Medicine.
❖ García Córdoba, F. (2009). El cuestionario: recomendaciones metodológicas para eldiseño de cuestionarios. México: Editorial Limusa.
❖ Groves, R. M., Fowler, F. J., Couper, M. P., Lepkowski, J. M., Singer, E., Tourangeau, R.(2009). Survey Methodology, 2nd Edition, Wiley.
❖ Lacave, C., Molina, A. I., Fernández, M., Redondo, M. A. (2016). Análisis de la fiabilidady validez de un cuestionario docente. ReVisión 9(1), 23-36.
❖ Navas, M. J. (2001). Métodos y diseño en investigación psicológica, UNED.
❖ Peña, D. (2002). Análisis de datos multivariantes. Madrid: McGraw-Hill.
❖ Skjong, R., Wentworth, B. (2000). Expert judgement and risk perception.
L e t i c ia Sánchez Á lvare z
l e t i c i a s a n c h e z @ l e t s t a t . e s
6 4 4 1 8 1 1 6 6
Muchas gracias por su atenciónP regun ta s , dudas , comen ta r io s