DE TEMS E INDICADRES CNSTRUCCIÓN DE …campusvirtualcsf.org/ovacsf/Construccion_items/Semana2/...Características y componentes de los instrumentos de evaluación de competencia laboral

Contextualización Material de formación Guía de aprendizaje Fuentes ContenidoCréditos Ayuda

Características y componentes de los instrumentos de evaluación de competencia laboral

Servicio Nacional de Aprendizaje, SENA - Reservados todos los derechos 2014

2

Pag. /621

CONSTRUCCIÓN DE ÍTEMS E INDICADORES

DE EVALUACIÓN DE LA COMPETENCIA LABORAL

Contextualización Material de formación Guía de aprendizaje Fuentes ContenidoCréditos GlosarioAyuda



2

Pag. /622








21 Características y componentes de los instrumentos de evaluación de competencia laboral

Inicio



2

Pag. /623




Contextualización 20

Material de Formación 24

Definición, principios y características de los instrumentos de evaluación de competencia laboral 29

Componentes de un Kit de instrumentos de evaluación de competencia laboral 39

Etapas de planeación para la construcción de ítems e indicadores 49

Guía de aprendizaje 60

Fuentes 62

Contenido



2

Pag. /624




Apreciado asesor metodológico

Si tiene alguna duda podrá acceder a la ayuda en cualquier momento.

Le recomendamos consultarla para que conozca la interface y así pueda aprovechar todas las herramientas.

Ayuda

?Omitir ayuda



2

Pag. /625




?

Ayuda

Ubique el puntero sobre los botones, para desplegar información.



2

Pag. /626




Ayuda

Permite ver los alcances de cada material y el resultado de aprendizaje que le corresponde.

Contextualización

Ayuda



2

Pag. /627




Permitirá ver el material de cada unidad

Material de formación

Hecho problemático

Dato historico

Ejemplo

Nota

cuando encuentre este botón, indica que se dará a conocer una problemática en torno a la temática trabajada.

Esta pantalla indica el inicio de una actividad de conocimiento.

Esta pantalla indica el inicio de sección.

Esta pantalla indica el inicio de un tema y su desarrollo.

Cuando encuentre este botón, Indica que encontrará un dato histórico.

Cuando encuentre este botón, indica que encontrará un ejemplo relacionada con la temática.

Cuando encuentre este botón, indica que encontrará información relevante a cada tema.

Cuando encuentre este botón, indica que encontrará un documento que deberá descargar y leer para poder profundizar en la temática o resolver alguna actividad.

Psicometría: tests psicométricos, confiabilidad y validez

Ayuda

Ayuda



2

Pag. /628




Ayuda

Permite ver las actividades que debe llevar a cabo y cómo serán evaluadas.

Guía de aprendizaje

Ayuda



2

Pag. /629




Ayuda

Permite profundizar en las temáticas del curso.

Aquí encontrará la referencia a los textos y sitios web consultados para la realización de este material.

Fuentes

Ayuda



2

Pag. /6210




Ayuda

Al hacer clic en cualquiera de los contenidos, podrá navegar por las temáticas planteadas para este programa de formación.

Mapa

Ayuda



2

Pag. /6211




Ayuda

Apreciado evaluador

En el glosario encontrará los términos relacionados con la temática del curso. Para acceder a cada uno de los términos encontrará, en la parte inferior, un menú con las iniciales de las letras. Así mismo, al lado de los términos encontrará un scroll con el que podrá desplazarse.

Glosario



2

Pag. /6212



Ayuda


Ayuda

Permite conocer a las personas que realizaron este curso.

Créditos

Ayuda



2

Pag. /6213




?

Ayuda

Si tiene alguna duda podrá acceder a la ayuda en cualquier momento. Le recomendamos consultarla para que conozca la interface y así pueda aprovechar todas las herramientas.

Ayuda

Ayuda



2

Pag. /6214




Ayuda

Descarga la versión pdf. de este material para leerlo en pantalla o imprimirlo.

Imprimir

Ayuda



2

Pag. /6215




Ayuda

Controla el volumen del sonido entre 0% y 100% para el caso de los materiales que contienen audio.

Sonido

Ayuda



2

Pag. /6216




Ayuda

Extiende el contenido hasta ocupar toda la pantalla de su dispositivo.

Extender pantalla

Ayuda



2

Pag. /6217




Ayuda

Avanza en el contenido de este curso.

Siguiente

Ayuda



2

Pag. /6218




Ayuda

Regresa en el contenido de este curso.

Atrás

Ayuda



2

Pag. /6219




Contextualización



2

Pag. /6220




Apreciado asesor metodológico

El éxito en la construcción de instrumentos de evaluación depende en

gran medida de la acertada planeación que se realice. Es por ello que esta

semana nos acercaremos a la apropiación de los formatos y matrices de planeación

y construcción de ítems e indicadores para evidenciar competencia laboral.

Ahondaremos en las definiciones, características de los componentes y tipologías de las matrices entendidas estas, como el andamiaje que aseguran la validez en la recolección de evidencias. Por tanto debemos centrar la atención en el reconocimiento y comprensión de cada componente de las matrices para asegurar un asertivo diligenciamiento, lo que se traduce en instrumentos de evaluación de calidad.



2

Pag. /6221



Contextualización


Resultado de aprendizajeEl resultado de aprendizaje que trabajaremos

en este material de aprendizaje será:

• Planear la construcción de ítems e indicadores de evaluación de la

competencia laboral de acuerdo con evidencias requeridas en la norma de

competencia laboral.

Los contenidos que se trabajarán en esta guía de aprendizaje son:

1. Definición, principios y características de los instrumentos de evaluación de competencia laboral

2. Componentes de un kit de instrumentos de evaluación de competencia laboral

3. Etapas de planeación para la construcción de ítems e indicadores



2

Pag. /6222



Contextualización


Las actividades de aprendizaje que llevará a cabo dentro del OVA están relacionadas con cada una de las temáticas a trabajar.

• Recuerde que es muy importante leer el material y realizar las actividades. Para cualquier duda, el instructor está dispuesto ayudarle a través del foro de dudas e inquietudes.



2

Pag. /6223



Contextualización


Material de Formación



2

Pag. /6224




Actividad de reflexión inicial



2

Pag. /6225





Lea con atención y comprenda la siguiente definición:

Norma de Competencia Laboral: Estándar reconocido por trabajadores y empresarios, que describe los resultados que un trabajador debe lograr en el desempeño de una función laboral, los contextos en que ocurre ese desempeño, los conocimientos que debe aplicar y las evidencias que debe presentar para demostrar su competencia. (Metodología para la construcción de Normas de Competencia Laboral. SENA 2003).




2

Pag. /6226





Ahora:

1. Reflexione sobre el siguiente caso:

A partir de la definición anterior, le asignan la tarea de planear la construcción de instrumentos de evaluación (ítems e indicadores de desempeño y producto) para tomar evidencia de conocimiento a un grupo de candidatos en una función laboral.

Así las cosas, aliste en orden jerárquico los 7 componentes, conceptos o nociones que debería tener en cuenta para la planeación de construcción de los instrumentos de evaluación (ítems e indicadores de desempeño y producto):




2

Pag. /6227





Matrices de Planeación y Construcción de ítems e indicadores.

Evidencias Requeridas de Conocimiento, Desempeño y Producto.

Conocimientos esenciales asociados con la evidencia.

Nivel de Titulación de la Norma de Competencia laboral.

Criterios de desempeño.

Norma de Competencia laboral.

Rangos de aplicación.

1

23

4567

Validar




2

Pag. /6228





Definición, principios y características de los instrumentos de evaluación de

competencia laboral



2

Pag. /6229





Como se advirtió en la primera parte, los instrumentos de evaluación deben responder a ciertos parámetros de construcción y garantizar

principios de validez y confiabilidad, de no ser así se podrían cuestionar los resultados obtenidos.

Lo anterior acarrearía dos consecuencias primordiales, la primera se relaciona con el otorgamiento de un certificado de competencia laboral a un trabajador

que no reúne los conocimientos y habilidades requeridas. Dimensionemos esta situación en áreas de carácter obligatorio como instaladores de redes de gases, trabajo en alturas y transporte de cargas

peligrosas, entre otras.

Definición, principios y características de los instrumentos de evaluación de competencia laboral



2

Pag. /6230





La segunda, a causa de instrumentos de medición imprecisos, se podría negar el

certificado de competencia laboral a personas que reúnen las competencias demandadas en

las normas, lo que impediría al trabajador la identificación de oportunidades laborales en el mercado, la limitación de su currículo para futura vinculación laboral y delimitación aún más las brechas de cualificación del talento

humano del país.

EjemploDato historico




2

Pag. /6231





1960

Dato historico 19601

6

98

7 543

21211

10

Uno de los primeros estudiosos del tema de la medición fue Alfred Binet (1857-1911).

Este autor refutó las teorías previas sobre la medición de la inteligencia a partir de atributos físicos como el tamaño del cráneo (frenología) por tanto, focalizó todos sus esfuerzos en proponer un método de medición de la inteligencia a partir del cálculo de la medición de tareas de comprensión, matemática y lenguaje.




2

Pag. /6232




EjemploPor ejemplo, Nicolás acaba de hacer un pastel y quiere compartir su manjar con Juan. Para este propósito Nicolás le pregunta a Juan: ¿tienes hambre? Independientemente de la respuesta de Juan (si, no, más o menos) Nicolás no podrá determinar si Juan quiere pastel ya que la pregunta no corresponde con el propósito inicial; compartir pastel.

Al sentirse frustrado por el rechazo de Juan, Nicolás concluye lo siguiente:

• A Juan no le gusta el pastel.

• El pastel tiene mal aspecto.

• Juan está lleno, por eso no quiere pastel.

Por lo tanto, el propósito de Nicolás se ve opacado y con el agravante que puede aseverar conclusiones peyorativas de la situación. Analógicamente sucede lo mismo en la recolección de evidencias de conocimiento, “una pegunta mal formulada normalmente implica una mala respuesta”.




2

Pag. /6233





Los instrumentos utilizados en los procesos de Certificación de Competencia Laboral del SENA, aunque tienen características

particulares, utilizan sus propios formatos y matrices y deben guardar estrecha línea con las directrices sugeridas para la construcción y aplicación de instrumentos de evaluación.




2

Pag. /6234





1

Actividades de conocimiento



2

Pag. /6235





Seleccione la respuesta correcta a partir del siguiente enunciado.

Los instrumentos de evaluación son herramientas de medición que utiliza un evaluador para valorar las evidencias de conocimiento, desempeño y producto

requeridas en una Norma de Competencia Laboral para determinar la competencia de

un candidato. A partir de lo anterior se puede concluir que

Actividad 1Definición, principios y características de los instrumentos de evaluación de competencia laboral



2

Pag. /6236





Validar

Por ser herramientas deben estar bien diseñadas teniendo en cuenta las matrices.

Cualquier elemento de imperfección implica perdida de validez y confiabilidad.

Tienen una función específica garantizando similares resultados en las aplicaciones.

Tienen una función específica a partir de los niveles cognitivos de los candidatos.

1

2

3

4

Definición, principios y características de los instrumentos de evaluación de competencia laboral / Actividad No. 1



2

Pag. /6237





Componentes de un kit de instrumentos de evaluación de competencia laboral



2

Pag. /6238





En los procesos de Certificación de Competencia Laboral del SENA, la planeación construcción y recolección de evidencias se desarrolla en

formatos y matrices estandarizados, los cuales permiten unicidad de criterios a nivel nacional. Suman alrededor de 15 formatos establecidos

en la versión número 2 de la guía para evaluar y certificar competencias laborales publicada en febrero de 2014. En esta versión se encuentran

formatos que van desde salvaguardar las cadenas de custodia de los instrumentos hasta las

validaciones de ítems e indicadores.

Ejemplo




2

Pag. /6239





EjemploEjemplo de los formatos:

• C cuestionario

• LD lista de chequeo del desempeño

• LP lista de chequeo del producto

• CR clave de respuestas

• HR hoja de respuestas

• AE Acta de elaboración de instrumentos

• Matrices de Planeación y construcción de Conocimiento, Desempeño y Producto

• Formatos de Verificación Técnica de ítems e indicadores

• Formatos de Verificación metodológica de ítems e indicadores

• Formatos de Validación de ítems

• Acuerdo de confidencialidad




2

Pag. /6240





Por consiguiente, se hace necesario identificar y apropiarse del protocolo documental promovido por el Banco

Nacional de Instrumentos (BNI), el cual garantiza unidad técnica y

estandarización nacional.




2

Pag. /6241





Los ítems e indicadores son presentados a los candidatos en cuestionarios y listas de chequeo, los cuales deben contener componentes similares en todo el eje nacional para cumplir estándares de

confiabilidad de las pruebas.

Como se observa, la carta de presentación de los instrumentos

se logra a través de formatos establecidos entre los que se

encuentran el Cuestionario, la Hoja de Respuesta, la hoja Clave de

Respuesta y las Listas de Chequeo para Desempeño y Producto.

Hecho problemático




2

Pag. /6242





x+8=x9

O+O.67-A=U5

O+O.67-A=U5

H2-o8

A-X9=b6

A-X9=b6

+

= =

=

Hecho problemático

Para el proceso de certificación, en aras de ofrecer transparencia, justicia y equidad es

inconcebible contemplar la posibilidad que cada centro diseñe, aplique y administre a juicio propio los instrumentos sesgando la posibilidad

de establecer objetivamente la competencia de un candidato. Por otra parte, la norma de competencia laboral está definida como un

estándar nacional, por tanto y atendiendo a pautas internacionales, la evaluación también lo debe ser.




2

Pag. /6243





2




2

Pag. /6244





En la siguiente tabla señale con una equis (X) los documentos o formatos que deben utilizar los siguientes actores del

proceso de Certificación de Competencias Laborales: constructor, asesor

metodológico, evaluador y candidato.

Actividad 2 Componentes de un kit de instrumentos de evaluación de competencia laboral



2

Pag. /6245





Constructor Asesor metodológico Evaluador Candidato

Matriz de Planeación y Construcción de Indicadores de desempeño.

Formato de verificación metodológica de ítems e indicadores.

Lista de Chequeo Desempeño/Producto.

Cuestionario.

Matriz de Planeación y Construcción de ítems.

Clave de Respuesta.

Hoja de Respuesta.

Matriz de Planeación y Construcción de Indicadores de producto.

Acuerdo de confidencialidad.

Formato de validación de ítems.Validar

Componentes de un kit de instrumentos de evaluación de competencia laboral /Actividad 1



2

Pag. /6246





Etapas de planeación para la construcción de ítems e indicadores



2

Pag. /6247





En los últimos 10 años se vislumbra el ímpetu de los trabajadores y empresarios por acceder a la Certificación

de las Competencias Laborales ofrecida por el SENA. Sin embargo, es desconocido por la opinión pública que es un proceso bastante costoso y demandante

frente a recursos físicos, presupuestales y humanos. Por mencionar un ejemplo, a nivel operativo la construcción

y recolección de evidencias demanda tiempo considerable al evaluador, sin mencionar otros aspectos

como desplazamientos y alistamientos.




2

Pag. /6248





Las matrices de planeación y construcción de ítems e indicadores facilitan a los expertos constructores información ineludible, que va desde

los insumos que demanda la Norma de Competencia Laboral como:

• Evidencia requerida del conocimiento, desempeño y producto

• Criterio de desempeño

• Conocimientos esenciales

• Rangos de aplicación




2

Pag. /6249





Hasta las características propias de los instrumentos como:

• El número de ítems necesarios

• Las habilidades del pensamiento

• Los formatos de ítems

• La justificación

• La ruta de ítems e indicadores, entre otras




2

Pag. /6250





Esta interrelación de componentes normativos y componentes de medición

consolidan una plataforma solida que señala el camino de construcción al experto, ratifica el nivel de validez

de la prueba, permite la trazabilidad y facilita las verificaciones técnicas y metodológicas. Es decir, las matrices

ofrecen el paso a paso y la ruta operativa en la construcción de ítems e indicadores.




2

Pag. /6251





3




2

Pag. /6252





A cada definición le corresponde un concepto. Relaciónelos de la

forma correcta.

Actividad 3Etapas de planeación para la construcción de ítems e indicadores



2

Pag. /6253





Validar

Etapa de elaboración de productos de medición a partir de marcos de referencia previamente establecidos. Se asume como ingeniería de diversos elementos de acuerdo a un orden parametrizado.

Construcción

Verificación

Validación

Planeación

Alistamiento

Etapa que busca confirmar mediante evidencia objetiva que se ha cumplido los requisitos específicos que aseguran la validez y confiabilidad. Comprende acciones de revisión sistemática de los productos de medición antes de la liberación para uso.

1

2tapa que contempla los recursos humanos, físicos, tecnológicos necesarios para emprender tareas de productos de medición. 3Etapa que busca confirmar mediante el suministro de evidencia objetiva tomada de grupos focales que los productos de medición han cumplido con los requisitos de validez y confiabilidad para la aplicación de los mismos. 4

Etapa que contempla las directrices, estrategias y cursos de acción a partir de insumos normativos, cognitivos y administrativos permitiendo establecer un marco de referencia para la validez y confiabilidad de los productos de medición. 5

Etapas de planeación para la construcción de ítems e indicadores /Actividad 3



2

Pag. /6254








2

Pag. /6255




En el siguiente enlace encuentra la guía de aprendizaje.

Este es un documento que le permitirá identificar el resultado de aprendizaje que debe alcanzar, así como cada una de las actividades que debe realizar, incluido

el foro temático. También encontrará referenciados los textos que debe leer para poder realizar algunas actividades. Recuerde que para complementar su formación encuentra a disposición el glosario y las

referencias bibliográficas.




2

Pag. /6256





Fuentes



2

Pag. /6257




Instructivo para la Construcción de ítems e indicadores de Evaluación de Competencias Laborales. Grupo de Certificación de Competencias laborales. Bogotá, Febrero de 2014.

Fuentes



2

Pag. /6258



Fuentes


Dirección General - Dirección Sistema Nacional de Formación para el Trabajo

Equipo de Diseño curricularCésar Leonardo Pedraza ÁvilaAída Marleny GarcíaEdgar Aurelio GelvesYobanny Andrés Holguín Pinilla

Expertos temáticosYobanny Andrés Holguín PinillaAida Marleny GarcíaEdgar Aurelio GelvezAna Maria Chavez Chaux

Regional Distrito Capital - Centro de Servicios Financieros

Líder de LíneaNelson Ruiz Gamba

Asesor pedagógico - GuionistaCarolina Santana Benavides

Diseñador gráficoCésar Augusto Arciniegas Beltrán

ProgramadorViviana Gutiérrez Marín

Créditos



2

Pag. /6259




Banco de instrumentos: Es la organización interna que el Grupo de Certificación de Competencias Laborales ha dado a la administración, gestión y custodia a los ítems, indicadores e instrumentos para la evaluación de las competencias laborales en cumplimiento de una de sus funciones.

Conocimiento y comprensión esenciales: Teorías, principios, conceptos e información relevante que sustenta y se aplica en el desempeño competente (Metodología para la construcción de Normas de Competencia Laboral SENA 2003)

Componentes normativos: Conjunto de divisiones que integran la Norma de Competencia Laboral: Criterios de desempeño, Conocimientos esenciales, Rangos de aplicación, Evidencias requeridas.

Constructor: Experto técnico constructor de instrumentos de evaluación conocedor de metodologías para la construcción de instrumentos. Puede ser interno a los procesos de certificación de competencias laboral SENA o externo mediante alianzas con empresas y/o organizaciones del sector productivo.

Criterio de desempeño: Hace referencia a la aplicación del conocimiento en un contexto laboral, es un saber hacer con el conocimiento, por consiguiente el conocimiento esencial siempre debe estar relacionado o afín con el criterio de desempeño. Responde a la acción.

Evidencias requeridas: Pruebas necesarias y suficientes definidas en una norma de competencia laboral colombiana, que debe presentar una persona para ser evaluado y juzgado su desempeño.

Habilidades de pensamiento: Son las habilidades requeridas al candidato a través de los ítems, las cuales están directamente relacionadas con el nivel de cualificación de la titulación laboral.

Instrumentos de evaluación: Son herramientas con características particulares destinadas a evidenciar el desempeño, verificar los conocimientos y evaluar los productos de acuerdo con un estándar de competencia laboral en el que se establecen los criterios que un candidato debe demostrar para determinar las competencias y actitudes en el ejercicio de una acción laboral determinada.

Glosario



2

Pag. /6260




Lista de chequeo de desempeño: es un instrumento que permite al evaluador recolectar datos observables del candidato en un ejercicio laboral, verificando de una manera estructurada y procesual el cumplimiento de los requisitos establecidos en la norma de competencia laboral.

Lista de Chequeo de Producto: es un instrumento que permite al evaluador recolectar información de los resultados del desempeño del candidato en una práctica laboral, verificando de una manera estructurada y procesual el cumplimiento de los requisitos establecidos en la norma de competencia laboral.

Matriz de Planeación para la Construcción de ítems: Es el andamiaje fundamental del instrumento y guía para la construcción de ítems, ya que contempla de manera sistematizada varios ejes interdependientes que involucran, desde las características de la norma hasta los procesos cognitivos y tipos de ítems intencionados por el experto técnico.

Norma de Competencia Laboral: Estándar reconocido por trabajadores y empresarios, que describe los resultados que un trabajador debe lograr en el desempeño de una función laboral, los contextos en que ocurre ese desempeño, los conocimientos que debe aplicar y las evidencias que debe presentar para demostrar su competencia. (Metodología para la construcción de Normas de Competencia Laboral. SENA 2003).



2

Pag. /6261




Conocimiento

Fin de presentación



2

Pag. /6262




Documents

DE TEMS E INDICADRES CNSTRUCCIÓN DE …campusvirtualcsf.org/ovacsf/Construccion_items/Semana2/...Características y componentes de los instrumentos de evaluación de competencia laboral