7

Click here to load reader

Analisis de Los Reactivos

Embed Size (px)

Citation preview

Page 1: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 1/7

ANALISIS DE LOS REACTIVOS

¿Qué es un buen reactivo?

Podemos decir que un buen reactivo de una prueba es confable y válido.Ayuda a dierenciar a los examinados.

Después de nuestro primer borrador de la prueba es necesario realizar unescrutinio estadístico para verifcar nuestro reactivos, a esto se le conocecomo análisis de reactivo.

ntre las !erramientas que podrían emplearlos en laboratorios de pruebaspara analizar y seleccionar reactivos se encuentran"

• índice de difcultad del reactivo

• índice de confabilidad del reactivo

• índice de la validez del reactivo

• índice de la dierenciaci#n de un reactivo

Índice de dicu!tad de! reactivo"

$e obtiene calculando la #ro#orci$n de! n%&ero tota! de 'uienesres#ondieron !a #rueba 'ue tuvieron correcto de! reactivo . $e usauna p para denotar la difcultad del reactivo y subíndice !ace reerencia aln%mero de reactivo p1.

Desde un punto de vista te#rico el valor del índice de difcultad de unreactivo puede variar del cero a uno. &' de los examinados que ueron (''tuvieron correcto el reactivo dos entonces el índice de difcultad del reactivosería i)ual a &' dividido entre ('' *'.&.

n cuanto mayor sea p para un reactivo, más ácil será este. n estadísticaaquello conocido como índice de difcultad del reactivo en el contexto de laspruebas de rendimiento en otros contextos puede !acer un índice deaprobaci#n del reactivo, como es el caso de las pruebas de personalidad.Aquí, la estadística no proporciona una medida del porcenta+e de personasque aprueban el reactivo, y no una medida del porcenta+e de personas quedi+eron sí, estuvieron de acuerdo con él o que de al)una otra manera loaprobaron.

Podemos calcular un (ndice #ro&edio de !a dicu!tad de !os reactivos

para una en particular al promediar los índices de difcultad de cada reactivocon todos los reactivos de la prueba. sto se lo)ra sumando los índices dedifcultad de cada reactivo y dividiendo la suma entre el n%mero total dereactivos que constituyen la prueba. a difcultad promedio clima de losreactivos es aproximadamente '.&

n un reactivo verdadero-also, la !abilidad de adivinar en orma correctas#lo en base a la azar s de (- '.&. Por consi)uiente la difcultad #ptima delreactivo. stá en el punto intermedio entre '.& y ( #sea './&. ste puntomedio se obtiene sumando la proporci#n del éxito al azar y lue)o dividiendola suma entre dos.

Índice de conabi!idad de! reactivo

Page 2: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 2/7

Proporciona un indicio de la consistencia interna de una nueva, entre mayorsea este índice, mayor será la consistencia interna. ste índice es i)ual alproducto de la desviaci#n estándar de la puntuaci#n del reactivo y lacorrelaci#n entre la puntuaci#n del reactivo y la puntuaci#n total de laprueba.

Análisis actorial y consistencia entre reactivos. 0na !erramienta estadística%til para determinar si los reactivos de una prueba parecen medir el mismoo los mismos ob+etos es la técnica del análisis del actor. 1ediante el usorazonable del análisis del actor, los reactivos que no están car)ados con elelemento el que redactados pueden ser revisado o eliminados.

Índice de va!ide) de! reactivo

l índice de validez del reactivo es una estadística pre2ada para dar unaindicaci#n del )rado en el que una prueba mide lo que se supone debemedir3 mientras mayor sea el índice de validez del reactivo, mayor será lavalidez en relaci#n al criterio de la prueba. l índice de validez del reactivopuede ser calculado una de que se conocen las si)uientes dos estadísticas"

• la desviaci#n estándar de la puntuaci#n del reactivo.

• la correlaci#n entre la puntuaci#n del reactivo y la puntuaci#n criterio.

a desviaci#n estándar de la puntuaci#n 4 p(5 en la si)uiente #rmula"

a correlaci#n entre la puntuaci#n en el reactivo ( y una puntuaci#n en lamedida criterio 4denotada con el símbolo r(c 5 se multiplica por la desviaci#nestándar de la puntuaci#n del reactivo para el reactivo ( 4s15 y el productoes i)ual al índice de la validez del reactivo 4s1r(c5. l cálculo del índice de lavalidez del reactivo será importante cuando la meta del elaborador seamaximizar la validez de la prueba en relaci#n con un criterio.

Índice de discri&inaci$n de reactivos

as medidas de discriminaci#n de reactivos indican que tan adecuadamentesepara o dierencia un reactivo entre quienes obtienen puntuaciones altas y

quienes obtienen puntuaciones ba+as en una prueba completa. l sentidocom%n dicta que un reactivo en una prueba de rendimiento no está!aciendo su traba+o respondido en orma correcta por quienes entiendenmenos de la materia.

l índice de di*erenciaci$n de reactivos es una medida de distribuci#n depre)untas simbolizada por una letra cursiva min%scula d 4d5 esta estimaci#nde la dierenciaci#n del reactivo en esencia, compara el desempe2o de unreactivo particular con el desempe2o de la re)i#n es superior e inerior deuna distribuci#n continua de puntuaciones de la prueba. as líneas límite#ptimas para demarcar a lo que nos reerimos como áreas superior einerior de una distribuci#n de puntuaciones son las puntuaciones dentro del/6 superior e inerior del total de la distribuci#n de puntuaciones, acondici#n de que la distribuci#n sea normal.

Page 3: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 3/7

l índice de dierenciaci#n de los reactivos es una medida de la dierenciaentre la proporci#n de altos punta+es obtenidos al contestar un reactivocorrectamente y la proporci#n de ba+os punta+es al contestar tambiéncorrectamente el reactivo3 entre mayor sea el valor de d mayor será eln%mero de puntuaciones altas al responder el reactivo correctamente. 0n

valor d ne)ativo en un reactivo en particular es una buena bandera ro+apues indica que los examinados que obtienen puntuaciones ba+as tienenmayor probabilidad de responder el reactivo en orma correcta que los queobtienen puntuaciones altas.

Análisis de alternativas de reactivo. a calidad de cada alternativa dentro deun reactivo de opci#n m%ltiple puede evaluarse con acilidad en relaci#n aldesempe2o comparativo de quienes obtienen puntuaciones superiores eineriores. Aquí en realidad no son necesarias #rmulas ni estadísticas.laborando una tabla del n%mero de examinados en los )rupos $ e 7 80eli)ieron cada alternativa, el elaborador de la prueba puede tener idea de la

eectividad de un distractor por medio de una simple mirada a o+o de buencubero.

+. pá). (/.

Caracter(sticas de! reactivo

0na orma valiosa de aprender acerca de los reactivos es practicando suscaracterísticas, lo que puede !acerse mediante la curva de característicasdel reactivo. Para al)unos de ellos pueden elaborarse una )ráfca en la quela puntuaci#n 9otal de la prueba se trata en el e+e !orizontal : ; la

proporci#n de examinados que respondieron correctamente los reactivos de)ráfca en el e+e vertical ;. la califcaci#n total de la prueba se usa como unaestimaci#n de la cantidad de ras)o en los individuos. Por lo tanto la relaci#nentre el desempe2o en un reactivo y el desempe2o en la pruebaproporciona inormaci#n acerca de que también capta el reactivo lainormaci#n que deseamos

 9razo de la )ráfca característica del reactivo. Para trazar la )ráfca esnecesario defnir las cate)orías discretas del desempe2o en la prueba. $i laprueba se administr# a muc!as personas, podríamos ele)ir que cadapuntuaci#n de prueba ormara una sola cate)oría 4<& <<.</ etc.5 utilizar

menos intervalos de clase permite que la curva toman apariencia mássuave. 0na vez que se !an defnido estas cate)orías, es necesariodeterminar qué proporci#n de personas dentro de las cate)orías respondi#correctamente cada uno de los reactivos. Por e+emplo debe determinar quéproporci#n de la )ente con puntuaci#n total de <& respondi# correctamenteal reactivo =>, qué proporci#n de la )ente con puntuaci#n total de << locorrecto es el mismo reactivo y así sucesivamente.

Teor(a de !a res#uesta a! reactivo

os enoques más modernos de la evaluaci#n basados en el análisis delreactivo consideran la probabilidad de responder reactivos particulares, ya

Page 4: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 4/7

sea correcta o incorrectamente. stos enoques actualmente conocidoscomo teoría de la respuesta al reactivo, !acen el uso del análisis delreactivo. De acuerdo con estos enoques cada reactivo de una prueba tienesu propia curva característica que describe la probabilidad de respondercada reactivo particular correcta o incorrectamente dado el nivel de

capacidad de cada persona que contesta la prueba.

xisten varios enoques en torno a la elaboraci#n de pruebas utilizando lateoría de la respuesta al reactivo. Al)unos de ellos usando dimensionesmostradas en la f)ura seis?oc!o" difcultad y discriminaci#n. @trasaproximaciones a2aden una tercera dimensi#n para la probabilidad de quelos examinados con los niveles más ba+os de capacidad obten)an unarespuesta correcta.

Criterios e+ternos

$e pueden utilizar procedimientos para comparar el desempe2o en un

reactivo con el desempe2o en un criterio externo. Por e+emplo, si estuvieraelaborando una prueba para seleccionar pilotos de aviaci#n, tal vez querríaevaluar que también predicen los reactivos individuales el éxito en elentrenamiento de pilotos pon el desempe2o de vuelo.

Reactivos #ara #ruebas re*eridas a criterio

0na prueba reerida a criterio compara el desempe2o con al)%n criterio deaprendiza+e claramente defnido. ste enoque es popular en pro)ramas deinstrucci#n individualizada. Para cada estudiante se defne un con+unto deob+etivos que establece exactamente lo que debería ser capaz de !acerdespués de la experiencia educativa. Por e+emplo, un ob+etivo para un

estudiante de ál)ebra a nivel secundaria podría ser resolver ecuacioneslineales con dos inc#)nitas. a prueba reerida criterios usaría paradeterminar si este ob+etivo se !a lo)rado.

l primer paso para desarrollar reeridas a criterio incluye especifcar losob+etivos mediante la redacci#n clara y precisa de las afrmaciones de loque el pro)rama de aprendiza+e espera lo)rar. stas explicacionesrestablecen re)ular en términos de lo que el estudiante será capaz de !acer.

Para evaluar los reactivos de la prueba reerida a criterio, deberíaadministrarse la prueba a dos )rupos de estudiantes uno que !aya sido

expuesto a la unidad de aprendiza+e y el otro que no lo !aya !ec!o.Otras consideraciones en e! an,!isis de !os reactivos #--."

Adivinaci#n. B#mo mane+ar que las personas adivinenC 0na correcci#npara las respuestas al azar debe reconocer que cuando una persona adivinauna respuesta en una prueba de rendimiento, )eneralmente no lo !acecompletamente al azar. s más razonable suponer que la adivinaci#n dequien responde se basa en al)%n conocimiento de la materia y en lacapacidad de descartar una o más alternativas distractoras. Bualquiercorrecci#n para la adivinaci#n puede sobreestimar o subestimarnotoriamente los eectos de la adivinaci#n para quienes tuvieron suerte y

para quienes no.

Page 5: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 5/7

7mparcialidad del reactivo. 0n reactivo de prueba ses)ado es un reactivoque avorece a un )rupo particular de examinados en relaci#n con otro,cuando las dimensiones de capacidad del )rupo están controladas. ascurvas de los reactivos pueden utilizarse para ver cuál de ellos estases)ado. $on ses)ados si ex!iben un uncionamiento dierencial, es decir

ormas distintas de curvas para dierentes )rupos., aun cuando los )ruposno diferen en la puntuaci#n total.

Pruebas con límite de tiempo. os análisis de pruebas para este tipo dereactivos producen resultados en)a2osos3 entre más pr#ximo está elreactivo al fnal de la prueba más diícil parece ser. sto es tan solo porquepuede ser que una persona que respondi# la prueba no !aya lle)ado a él. $ila velocidad no es un elemento importante de la capacidad que se estámidiendo y debido a que produce inormaci#n en)a2osa acerca deldesempe2o del reactivo, quien elevadora las pruebas de manera ideal,debería aplicar la prueba para ser analizada por reactivos con límites

)enerosos de tiempo para completarla.

An,!isis cua!itativo de !os reactivos"

os métodos cualitativos son técnicas de )eneraci#n y análisis datos quedependen sobre todo de procedimientos verbales más que de losmatemáticos. Alentar a los participantes para que analicen su experienciacomo examinados es obtener )enerar datos.

An,!isis cua!itativo de !os datos es un término )eneral para diversosprocedimientos no estadísticos dise2ados para explorar c#mo uncionan los

reactivos de las pruebas en orma individual. stos métodos involucran lasexploraci#n de los temas a través de medios verbales como entrevistas ydiscusiones de )rupo conducidas con examinados y otras personasrelevantes para el proceso.

/" Ad&inistraci$n de una #rueba ti#o 0#ensar en vo) a!ta1implica !acer que los respondientes verbalicen su pensamientosconorme estos les lle)an. Por e+emplo si la prueba está dise2adapara medir el rendimiento, esta técnica puede ser %til no solo parasaber los pensamientos del alumno, sino para verifcar si estáncomprendiéndolo bien y saber c#mo lo interpretan.

-" 2ane!es de e+#ertos" $e puede consultar a expertos para queanalicen los reactivos cualitativamente. a revisi#n de sensibilidad esun estudio de los reactivos de pruebas que suele !acerse durante elproceso de desarrollo de las mismas, en el cual los reactivos sonestudiados en cuanto a su imparcialidad para todos los posiblesexaminados, así como para detectar el uso de len)ua+e oensivo,estereotipos o situaciones adversas.

Bon base a la inormaci#n obtenida de los expertos o examinados elusuario o elaborador de la prueba puede ele)ir modifcarla. sto podríaimplicar cambio de redacci#n, eliminaci#n de reactivos, adici#n de

nuevos etc.

Page 6: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 6/7

Revisi$n de !a #rueba

0na vez conceptualizada la prueba nueva, construida, ensayada y con susreactivos analizados de manera cuantitativa y cualitativa, lo que resta esactuar +uiciosamente con toda la inormaci#n y moldear la prueba para suorma fnal. 0n paso importante es la revisi#n de los reactivos, la cual puedeconcluir en su eliminaci#n, modifcaci#n o sustituci#n.

l si)uiente paso es aplicar la prueba revisada ba+o condicionesestandarizadas a una apropiada se)unda muestra de examinados.

a estandarizaci#n puede verse como el proceso empleado para introducirob+etividad y uniormidad en la administraci#n, califcaci#n e interpretaci#nde la prueba. 0na muestra de estandarizaci#n es representada por el )rupoo )rupos de individuos con quienes se compara el desempe2o de losexaminados. Para las pruebas con reerencia a una norma es importanteque esta muestra sea representativa de la poblaci#n en aquellas variables

que podrían aectar el desempe2o.

Buando el análisis de los reactivos de los datos derivados de la aplicaci#n deuna prueba indica que todavía no está fnalizada, los pasos de revisi#n,nsayo, y análisis de los reactivos se repiten !asta que la prueba seasatisactoria y pueda llevarse a cabo la estandarizaci#n.

Revisi$n e #rueba en e! cic!o de vida de una #rueba e+istente"

Eo !ay re)las precisas para cuando revisa runa prueba. l APA orece lasu)erencia )eneral de que una prueba se manten)a en su orma presentemientras si)a siendo %til y que se revise cuando ocurran cambio

si)nifcativos ene l dominio representado o cuando sur+an nuevascondiciones en el uso e interpretaci#n de la prueba y que estas las !ayanvuelto inapropiada. n la pá). ( muestran al)unas condiciones paradecidir cuándo revisar una prueba.

os pasos para revisar una prueba son comparables a aquellos para crearuna nueva. n la ase de conceptualizaci#n del constructor o desarrolladordebe pensar de manera completa en los ob+etivos de la revisi#n y la me+ororma en que pueden lo)rarse. n la ase de construcci#n se eect%an loscambios propuestos. os pasos si)uientes son la etapa de revisi#n oprobanza de la prueba el análisis de los reactivos y a la %ltima revisi#n.

0n paso clave en el desarrollo de todas las pruebas nuevas o edicionesrevisadas es la va!idaci$n cru)ada"  ste términos e refere a unarevalidaci#n de una prueba en una muestra de examinados dierentes deaquellos en quienes el desempe2o de la prueba mostro ser un medio validopara pronosticar al)%n criterio se espera que !aya una reducci#n de lavalidez cuando se aplica la prueba a otra muestra de personas. Por otrolado la conva!idaci$n puede ser defnida como el proceso de validaci#n deuna prueba en base a dos o más pruebas y utilizando la misma muestra deexaminados. Buando se usa en con+unto con la creaci#n de normas o larevisi#n de normas existente este proceso también puede llamarseconormar.

Page 7: Analisis de Los Reactivos

8/19/2019 Analisis de Los Reactivos

http://slidepdf.com/reader/full/analisis-de-los-reactivos 7/7

Conr&aci$n de !a ca!idad durante !a revisi$n de !a #rueba" simportante que los examinadores se ape)uen a los procedimientosestandarizados, lo mismo puede decirse de su competencia, y puedeme+orarse dic!a calidad con la utilizaci#n de un #rotoco!o anc!a, el cual esuna prueba de protocolo califcada por un califcador de elevada autoridad

dise2ada como un modelo para califcar y un mecanismo para resolverdiscrepancias en la califcaci#n.