Embed Size (px)
Citation preview
Construcción de preguntas para la evaluación de resultados del
aprendizaje
Facilitadores: Lic. EDWAR SALAZAR ARANGO, MSc.Lic. CARLOS MORALES VERA, MSc.
SANTA ELENA
Objetivos
• Fortalecer las destrezas que se requieren para construir preguntas de calidad aplicadas en la medición de productos de aprendizaje.
• Contextualizar el lugar y la importancia que tiene el diseño y construcción de preguntas en la medición educativa.
¿Qué es la evaluación?
Proceso de indagación dirigido a recolectar información
cuantitativa y cualitativa con el propósito de obtener
conclusiones sobre el valor, mérito, importancia o calidad de
un programa, producto, persona, política, propuesta o plan.
¿Qué es la evaluación educativa?
Es una actividad continua e integrada que tiene por objetivo
proporcionar la mayor cantidad de información para valorarla
y tomar decisiones pertinentes respecto al objeto o sujeto de
evaluación.
4
Evaluación Estudiantil
Se entiende como evaluación estudiantil a “un proceso continuo de observación, valoración y registro de información que evidencia el logro de objetivos de aprendizaje de los estudiantes, mediante sistemas de retroalimentación que están dirigidos a mejorar la metodología de enseñanza y los resultados de aprendizaje”, según lo determina el artículo 184 del Reglamento General a la LOEI.
El Art. 211 explica que las pruebas de base estructurada son aquellas que ofrecen respuestas alternas como verdaderas y falsas, identificación y ubicación de conocimientos, jerarquización, relación o correspondencia, análisis de relaciones, completación o respuesta breve, analogías, opción múltiple y multi-ítem de base común.
¿Qué se mide?• Constructos – Atributos – Variables Latentes
La medición es un procedimiento que parte de la definición del atributo o constructo a través de conceptos y que termina con la interpretación de las puntuaciones obtenidas a través de un instrumento.
Instrumento de medición integrado por reactivos de respuesta estructurada con solución única, destinado a obtener información que sea comparable entre todos los sustentantes.
¿Pruebas Objetivas?
Problemas en la medición• No hay un procedimiento aceptado universalmente para
medir un constructo.
• Con cualquier procedimiento el test estaría constituido por una muestra limitada de ítems.
• La unidad de medida utilizada (nivel de medida) puede ser distinta en cada caso.
• Las medidas están sujetas a un cierto margen de error.
Niveles cognoscitivos
Para evaluar conocimientos y habilidades, generalmente, se
emplea la taxonomía de niveles de Benjamín Bloom, la cual
propone la siguiente jerarquía:
1. Conocimiento
3. Aplicación
4. Análisis
6. Evaluación
5. Síntesis
2. Comprensión
Recuerdo y memoria
Descifrar o decodificar información y entenderla
Empleo de la información para resolver un problema
Identificación de las partes y su relación
Agrupar, producir relaciones abstractas
realización de juicios de valor basados en criterios definidos
Taxonomía de Bloom
Tipos y características de preguntas para la medición de productos de aprendizaje.• El objetivo de la presente. es exponer y ejercitar los
diversos formatos de ítems que se emplean para las pruebas ECG y ECE.
• Opción dual o respuesta alterna• Cuestionamiento directo• Completamiento• Asociación• Ordenamiento• Elección de elementos• Relación de columnas• Preguntas de Multirreactivo
Partes de un ítem
Directrices para la construcción de
ítems de selección múltiple
Sobre el contenido1. No aumentar artificialmente la dificultad, esto es, no
elegir estímulos confusos ni que se presten a más de una interpretación.
2. No examinar contenidos intrascendentes o triviales.3. Elaborar reactivos en los que se incluya únicamente la
información necesaria y relevante para el planteamiento del problema y su solución.
4. Exponer la información de manera original.5. Evitar conceptos citados de manera textual.6. Usar una redacción clara.7. Omitir el uso del tiempo pospretérito (podría, debería,
sería).
Sobre el contenido7. Elaborar reactivos independientes unos de otros, es decir, la información contenida en uno no puede sugerir la solución de otro, ni debe ser requisito para contestar algún otro. 8. Omitir estereotipos de género o culturales.9. Incluir la referencia documental correspondiente cuando
se emplee algún material protegido por derechos de autor.
10. Ubicar datos informativos e institucionales para la prueba
11. Definir el valor cuantitativo, numérico de cada ítem
EjemploSelecciona la opción que resuelve la siguiente suma:
9 + 3
A) 12B) -12C) 6D) -6
DeficienciasPedro y María están jugando a la pelota en un parque donde hay un columpio, un tobogán y una arenera. En un momento determinado, Pedro le pide a María que le diga cuánto es el resultado de la siguiente operación:
Sobre la base1) Incluir una sola idea al elaborar el reactivo, es decir,
presentar solamente un problema.2) Incluir los elementos estrictamente necesarios para
comprender el sentido correcto de la base, de tal manera que, sin leer las opciones, el sustentante comprenda lo que debe realizar.
3) Si el reactivo requiere de una instrucción, ésta debe indicarse en la base.
Sobre la base4) Omitir términos que den claves de la respuesta
correcta.5) Redactar el enunciado en forma afirmativa. En caso de
que el dominio de la prueba solicite que el sustentante identifique elementos que no cumplan con alguna condición o regla, se deberá emplear la palabra excepto.
De los siguientes elementos, identifica el que NO es un componente básico.
Sobre las opciones de respuesta1) Verificar la correspondencia gramatical entre la base y
el inicio de cada una de las opciones: género, número y tiempo verbal.
2) Omitir el uso de sinónimos.3) Mantener similar extensión en todas las opciones.4) Asegurar su pertenencia al mismo campo semántico.5) Omitir el uso de expresiones como “todas las
anteriores”, “ninguna de las anteriores”, “A y C” o “no sé”.
Unidad 5: Construcción de Preguntas
Sobre las opciones de respuesta
87
6) Omitir las formas negativas y las absolutas (no, nunca, siempre, completamente).
7) Omitir palabras que aparecen en la base.8) Redactar en el mismo nivel de generalidad, debido a
que las que son más específicas pueden ser parcialmente correctas.
9) Ordenar las opciones numéricas, las cantidades de manera ascendente y las fechas cronológicamente.
Ejemplo
Se dice abandono del lugar de trabajo, cuando el trabajador no está en su puesto de trabajo por:
A) Por más de un díaB) Por más de dos díasC) Por más de tres días *D) Por más de cuatro días
EjemploDe las siguientes oraciones una proposición lógica es:
A) El rumor y el ir y venir incesante de las abejas. B) ¡No te vayas! C) Hoy es martes.*D) Quizá llueva mañana.
EjemploDe las siguientes oraciones una proposición lógica es:
A) El rumor y el ir y venir incesante de las abejas. B) ¡No te vayas! C) Hoy es martes.*D) Ninguna de las anteriores.
EjemploUna mujer tiene derecho a fuero maternal de:
A) Siempre de noventa días *B) Treinta díasC) Sesenta díasD) Cincuenta días
El finiquito es un documento legal que se establece entre el trabajador y empleador para dar por terminada la relación:
A) terminada la relación laboralB) terminada la relación laboral por parte del empleadorC) terminada la relación laboral por parte del empleadoD) terminada la relación laboral de mutuo acuerdo y liquidación *
Sobre la respuesta correcta1) Debe ser única.2) Debe resolver el problema o planteamiento
satisfactoriamente y ser incuestionable.3) Si es posible, debe ocupar una posición
aleatoria entre las opciones de respuesta.
Ejemplo (1)Selecciona la opción que da respuesta a la siguiente operación aritmética: 9 + 3
Sobre los distractores1) Deben ser plausibles, es decir, que no se
descarten por inferencia lógica o sentido común.2) Incluir los errores más comunes de los
sustentantes.3) Omitir distractores que puedan ser parcialmente
correctos.
EjemploSelecciona el año en que Ecuador se conformó como república:
A)1492B)1534C)1830 *D)1995
A)1809B)1822C)1830 *D)1859
Sobre la argumentación1) Todas las opciones de respuesta se deben
argumentar, es decir, se debe explicar por qué esa es la respuesta correcta o por qué es un distractor.
2) Debe contener explicaciones que hagan referencia al contenido de cada una de las opciones.
3) Si el reactivo demanda al examinado recordar o evocar información concreta sobre hechos, conceptos, principios, etcétera, entonces la argumentación de la respuesta correcta podrá ser la referencia documental que corrobore el contenido del reactivo.
Sobre las imágenes1) Deben ser necesarias para contestar el reactivo.2) Deben contener los elementos necesarios para su
interpretación.3) Deben ser claras y nítidas.4) Cuidar que el tamaño sea adecuado para el
formato de la prueba.5) Las imágenes de un mismo reactivo deben ser de
igual tamaño.6) Si la imagen no es de creación propia, es
imprescindible consignar la referencia correspondiente.
Ejemplo (1)
Selecciona la opción que da respuesta a la siguiente operación aritmética: 9 + 3
A) 12 *B) -12C) 6D) -6
TIPO DE PREGUNTASOpción dual o respuesta alternaCuestionamiento directoCompletamientoAsociaciónOrdenamientoElección de elementosEjecución simple y complejaRelación de columnasPreguntas de Multirreactivo
Preguntas opción dual o respuesta alterna
1.
Preguntas opción dual o respuesta alterna
•DIRECTRICES1. De las proposiciones presentadas deben ser, aproximadamente un 40% verdaderas y un 60% falsas.2. La colocación del ítems verdaderos y falsos debe hacerse en columna y su orden determinado al azar.3. Las proposiciones no deben ser demasiado largas y en todos los casos, claras4. Debe dejarse un espacio a la derecha para su respuesta.5. Especificar si se subraya, tacha con (x) o encierra en circulo
1.- La O.E.A. Es la organización de los Estados Americanos que se fundó para promover su unidad y defender su soberanía: ( V ) - ( F )
Preguntas de cuestionamiento directo• Son enunciados interrogativos a los que debe responderse
eligiendo una respuesta de una serie de opciones. Todas las opciones deben ser parcialmente correctas, pero sólo una lo es completamente.
Directrices1. Procurar que las opciones de respuesta no sean más extensas
que la base. 2. Incluir en la base la información necesaria para evitar que se
repitan palabras en las opciones de respuesta.3. Si la base termina en punto final o signo de interrogación, las
opciones inician con mayúscula.4. Si la base termina en dos puntos ( : ) o puntos suspensivos (…),
las opciones inician en minúsculas, a menos que sean nombres propios.
Preguntas de cuestionamiento directoVentajas• Puede aplicarse un gran número de reactivos en poco
tiempo.• Pueden evaluarse objetivos de bajo nivel.• La calificación suele ser rápida y objetiva.• Da confianza al alumno porque tiene la certeza de que la
respuesta correcta está entre las opciones.
Desventajas• Se requiere mayor tiempo para redactar los reactivos.• No son útiles para cuando se desea demostrar el trabajo.• A menudo es difícil encontrar las opciones adecuadas.• La habilidad de lectura puede influir en el desempeño.
Preguntas de cuestionamiento directo
1. Los conceptos de acciones lúdicas enfocadas al guión teatral: ejecutar la expresión lúdica, desarrollar la facultad de imitación, experimentar las posibilidades básicas motoras del cuerpo desde el juego corresponden a:
A) los sistemas de comunicación teatralB) espacios de acción del juego teatralC) objetivos del juego dramático*D) objetivos de las técnicas y ejercicios teatrales
Preguntas de CompletamientoSon preguntas que deben contestarse con una palabra, fecha,
número o una frase. Se dividen en dos tipos:• “Frases incompletas”, que sólo presentan un espacio en blanco
para contestar.• De tipo “canevá” que presentan más de un espacio en blanco
para contestar, intercalando con partes de la frase que le dan sentido.
1. No incluir más de tres espacios en blanco en un mismo reactivo.2. El enunciado debe completarse con el o los conceptos
importantes para el contenido evaluado.3. Escribir las opciones de respuesta en minúsculas, salvo en los
casos en que la puntuación del reactivo requiera utilizar letra en mayúscula.
Preguntas de Completamiento
4. El espacio en blanco no debe ir al inicio o al final de la base del reactivo.5. Nunca se debe omitir el verbo.6. Los espacios o líneas para contestar deben ser uniformes para que su tamaño no sugiera la respuesta.7. Separar las opciones de respuesta por guiones8. Tener en cuenta la singularidad y género de las
palabras
Preguntas de CompletamientoVentajas• Se reduce la posibilidad de adivinar, pues el examinado tiene
que construir una respuesta.• Es fácil escribir los reactivos.• Puede evaluarse una amplia gama de respuestas.
Desventajas• La calificación puede ser lenta.• No son útiles cuando se buscan resultados complejos o
extensos.• Se puede confundir al examinado al solicitarle información no
esencial.• Se valora la memorización.
Preguntas de CompletamientoSegún el marco legal de la recreación, ésta es un ____________, y una _____________ vital del ser humanoA) derecho - necesidad*B) principio - habilidadC) medio - oportunidadD) proceso - necesidad
La característica del clima tropical es ________________________.
A) tener una temperatura elevada durante todo el año* B) que llueve cinco de los siete días de la semana. C) mantener una humedad los primeros seis meses del año. D) que la gente va vestida con ropa ligera.
Ejemplo
Preguntas de Asociación
Por cada variable describir el porcentaje de cada sub-item y su totalidad. Eje: vale 0,25 puntos por 4, quedaría 1 punto por país; tres (3) puntos por toda la pregunta.
Preguntas de Ordenamiento• Consiste en presentar varias proposiciones (serie de
hechos, conceptos o datos) a las cuales el alumno deberá dar un orden lógico o cronológico.
1. Para su elaboración se requiere contar con un material suficientemente homogéneo.
2. El material debe referirse a un sólo tema, periodo, espacio geográfico.
3. La respuesta debe tener un orden lógico, cronológico o de jerarquización.
Preguntas de Ordenamiento4. Debe presentarse una lista de elementos que formen
parte de un proceso, procedimiento o evento histórico.
5. Los elementos en la lista son presentados al azar y la tarea del examinado es ordenar o jerarquizarlos correctamente a partir de un criterio establecido.
6. Se sugiere que el número de elementos a ordenar no exceda de siete y que sean señalados con números arábigos y ordenados en forma de columna.
Preguntas de OrdenamientoVentajas• Se puede evidenciar la capacidad de observación, de
reflexión y de asimilación de los conocimientos.• Se puede conocer el análisis y la discriminación que el
examinado realiza.
Desventajas• Se requiere tiempo y capacidad de síntesis para la
elaboración de estas preguntas.
1. A continuación usted podrá leer algunas frases que si se unen de forma correcta, semántica y contextualmente; se puede obtener el significado o definición a la Sociología de la Educación.
1. dentro de un grupo social, que en relación al sentido académico,
2. es una ciencia que estudia el comportamiento del individuo3. asocia a la pedagogía, estrategias y didácticas4. a favor de las necesidades en conocimientos básicos
A) 1 - 2 - 4 - 3B) 2 - 1 - 3 – 4 *C) 1 - 3 - 2 - 4D) 2 - 4 - 1 – 3
¿Hay un error?¿Cuál?
Ejemplo 2¿Qué opción ordena de mayor a menor los elementos químicos, según su número o masa atómica?
1. Magnesio 2. Potasio 3. Litio 4. Calcio
A) 1, 3, 4, 2 B) 2, 4, 1, 3 C) 3, 1, 2, 4 D) 4, 2, 3, 1*
Ordena de mayor a menor los siguientes elementos químicos según su masa atómica.
1. Magnesio2. Potasio3. Litio4. Calcio
A) 1, 3, 4, 2 B) 2, 1, 3, 4C) 3, 4, 1, 2 *D) 4, 2, 3, 1
Preguntas de Elección de elementos• En este formato se presenta una pregunta, instrucción o
afirmación, seguida de varios elementos que la responden o caracterizan; sin embargo, no todos los elementos son parte de la respuesta correcta, por lo que el sujeto deberá seleccionar solamente aquellos que corresponden a la consigna dada.
• Estos reactivos evalúan si el estudiante identifica elementos de una misma categoría y los clasifica o agrupa de acuerdo con un criterio dado.
Preguntas de Elección de elementos1. Emplear listas de cuatro a siete elementos.2. No mezclar elementos de diferente campo semántico en
los listados.3. Incluir en todas las opciones de respuesta el mismo
número de elementos.4. Evitar que un elemento del listado aparezca en todas las
opciones de respuesta.5. Ordenar las opciones de respuesta de manera ascendente.6. Separar los elementos de las opciones de respuesta con
coma y espacio (1, 2, 3, 4).7. Que sean señalados con números arábigos y se coloque
en forma de columna.
Preguntas de Elección de elementosVentajas• El examinado puede seleccionar entre los elementos
presentados.• Con la inclusión de varias alternativas de respuesta es
posible detectar las deficiencias mas comunes de los examinados.
Desventajas• La selección requiere de memorización.• Los reactivos evalúan una sola idea y miden con
mayor efectividad los conocimientos que no están sujetos a discusión dentro de un aprendizaje.
Ejemplo1. Un emprendedor es aquella persona que ejerce la libertad mental
para concebir nuevas formas de hacer las cosas; lo suficientemente valiente como para seguir su visión, así ello implique enfrentar posibilidades de fracaso. (Whelan y Gorman, s.f, 2006). Por lo cual éste es:
a) una persona que puede hacer cualquier cosa con visión y misión.b) una persona que resistente al cambio.d) una persona que genera, reproduce productos y/o servicios.e) una persona que innova servicios y/o productos
A) a, cB) b, cC) c, dD) a, d
¿Hay un error?¿Cuál?
1) una persona que puede hacer cualquier cosa con visión y misión.2) una persona que resistente al cambio.3) una persona que genera, reproduce productos y/o servicios.4) una persona que innova servicios y/o productos
A) 1, 3B) 2, 3C) 3, 4D) 1, 4 *
Ejemplo¿Qué palabras deben escribirse con acento en la siguiente frase?
Mi(1) tio(2) dijo(3): “De(4) modo que(5) es mia(6)”
A) 1, 2 B) 2, 6 * C) 3, 5 D) 4, 5
En la siguiente frase, selecciona las palabras que deben ir escritas con tilde:
“Mi tio dijo: “De modo que es mia”1. mi2. tio3. dijo4. de5. modo que6. es miaA) 1, 2B) 2, 6 *C) 1, 3D) 3, 4
¿Hay un error?¿Cuál?
Preguntas de ejecución simple y complejaConsiste en solicitar que el alumno realice una tarea. Si se trata de una sola acción, breve y concreta, se denomina de ejecución simple. Si la tarea comprende más de una actividad, se llama de ejecución compleja
Definir la división numérica o de puntos del modo complejo
Preguntas de Relación de columnas• En este formato dos listados de elementos han de
vincularse entre sí, conforme a ciertos criterios. Las opciones presentan distintas combinaciones entre las que el sustentante debe reconocer la que asocia correctamente los dos listados.
• Este formato evalúa objetivos de aprendizaje en los que el estudiante debe mostrar dominio en actividades tales como relacionar, vincular, clasificar, aplicar principios o inferir.
Preguntas de Relación de columnas1. Establecer un criterio de relación claro entre los
elementos de las listas.2. Construir listas en las que los elementos y relaciones
sean del mismo tipo y naturaleza.3. Asignar un título a las columnas, para que el examinado
identifique los elementos por relacionar.4. Organizar las opciones, de tal forma que siempre se
presente un elemento de la primera columna con otro u otros de la segunda.
Preguntas de Relación de columnas5. Incluir al menos un elemento más en la segunda
columna. La columna que menos elementos contenga será de dos (lado izquierdo) y la que contenga más, no deberá exceder de siete (lado derecho).
6. Utilizar números en la columna izquierda y letras minúsculas en la derecha.
7. Separar los elementos de las opciones de respuesta con coma y espacio (1a, 2b, 3c, 4d).
8. Ordenar las opciones de respuestas de manera ascendente.
Preguntas de Relación de columnasVentajas• Son una forma eficiente de obtener abundante
información.• Son fáciles de construir.• La calificación suele ser rápida y objetiva.
Desventajas• Se centra en reactivos de nivel bajo.• Se requiere temas homogéneos.
Ejemplo1. Relacione los conceptos sociológicos que se presentan a continuación con su respectiva definición:
1 Interacción Social a) Manera de sentir, pensar u obrar, capaz de ejercer sobre el individuo una coacción exterior.
2 Rol Social b) Las personas se orientan hacia otros actuando en respuesta al comportamiento de los demás.
3 Hechos Sociales c) Relaciones interpersonales que influyen el comportamiento individual.
4 Sociedad d) Funciones o papeles que se desempeñan en e) entorno social. personas asentada en un
territorio delimitado
A) 1b - 2d - 3a - 4e B) 1a - 2b - 3c - 4dC) 1c - 2a - 3b - 4eD) 1b - 2c - 3a - 4d
¿Hay un error?¿Cuál?
Relaciona los siguientes tipos de contrato con sus características principales:
1. A sueldo a. Es cuando el empleado tiene parte de las utilidades de los negocios del empleador como remuneración de su trabajo.
2. A jornal b. Es cuando el empleador y el trabajador han pactado una remuneración, teniendo como base cierta unidad de tiempo, por la prestación de un servicio o labor.
3. En participación c. La remuneración se la fija o se la pacta en base al trabajo que realiza diariamente, pagándose como máximo, semanalmente.
d. Facilita las prácticas profesionales a los trabajadores con título universitario.
A) 1c, 2b, 3a B) 1b, 2a, 3c C) 1b, 2c, 3a * D) 1c, 2a, 3b
Preguntas de Multirreactivo• Algunos reactivos están ligados unos a otros; son los
llamados multirreactivos, que consisten en un estímulo o contexto a partir del cual se desprenden algunas preguntas relacionadas con él. El estímulo puede ser un texto, una gráfica, una tabla, una imagen o un esquema, por ejemplo. Los reactivos asociados evalúan de forma integrada diversos conocimientos y habilidades.
Preguntas de Multirreactivo1. Se plantea un problema, texto gráfico, imagen
esquema, etc., a partir de éste se desprende un máximo de cinco reactivos.
2. Los reactivos son independientes aun cuando necesitan la información proporcionada por el ítem.
3. Cada reactivo puede medir un aspecto distinto del mismo tema y tener diferente nivel taxonómico.
Preguntas de Multirreactivo4. El contexto podrá incluir distintos tipos de información,
tales como:a. procedimientos realizados previamenteb. datos iniciales o diagnósticosc. datos numéricos, esquemas, diagramas, imágenes,
dibujos o tablas que complementen la descripción general
5. Los elementos del contexto deben incluir datos relevantes para comprender el sentido correcto de la situación.
Preguntas de Multirreactivo6. Debe verificarse que los reactivos estén asociados al
contexto, es decir, que solamente puedan ser respondidos a partir de la lectura del planteamiento o contexto; de no ser así, entonces el reactivo es independiente y no debe ser parte del multirreactivo.
7. Puede agregarse información complementaria sobre el problema en los reactivos, a fin de dar secuencia lógica al multirreactivo.
8. Los reactivos deben ser independientes, es decir, la información contenida en uno, no puede sugerir la solución de otro, ni debe ser requisito para contestar algún otro.
Preguntas de MultirreactivoVentajas• Evalúan conocimientos y habilidades interrelacionadas.• Desde la comprensión de conocimientos hasta la aplicación
de conocimientos.• Consta de un segmento de información y se formulan
diferentes reactivos.
Desventajas• En ocasiones es difícil encontrar textos adecuados a cada
área de conocimiento.• Puede confundir al examinado cuando las respuestas no
están implícitas en el texto.
La tabla muestra los promedios de dos escuelas secundarias en cuatro asignaturas.
1. ¿Cuál de las siguientes aseveraciones es verdadera? A) La escuela B sólo supera en Matemáticas a la escuela A B) En Inglés se observa la mayor diferencia entre las escuelas C) En ambas escuelas el mejor desempeño se presenta en Historia D) La asignatura donde hay menor diferencia entre escuelas es Español
2. El promedio total en las cuatro asignaturas de los alumnos de la escuela A es _________________ al promedio de los de la escuela B. A) Idéntico B) una centésima menor C) tres centésimas menor D) cinco centésimas mayor
