Magda Chia, Ph.D. Stanford University, UL/SCALE
IncrementodelaaccesibilidadenunSistema
NacionaldeEvaluacióndelaSiguienteGeneración
Seminariointernacional"Evaluaciónydiversidad:jus7ciay
equidadenlaevaluacióneduca7va”Sep9embre22-23,2016
CiudaddeMéxico,México1
Programa
• Estudiodecaso,Antecedentes• LaClaridaddesdeelPrincipio• SistemaPersonalizable:PreservarelConstructoDes9nado,EnfocándoseIndividualmenteenlosEstudiantes• MarcodeReferenciayEjemplosdeRecursosdeAccesibilidad• InclusiónySostenibilidad• LeccionesAprendidas• ReferenciasyRecursosenLínea
2
Estudio de caso, Antecedentes
3
El Consorcio • GrupodeEstadosqueaprovechanlosrecursos(financieros,humanos)paracrearsistemasdeevaluaciónbasadosenun(os)obje9vo(s)común(es)demedición.• EstándaresEstatalesdeNúcleoComún(CCSS)*Gobernadoresconexpertoseneltema,educadoresyotraspartesinteresadas.*LosEstados9enenlaopcióndeadoptarestasuotrasnormasqueestánalineadosparalapreparaciónuniversitariayprofesional.• CarreraalaCima,BecaFederal*Elgobiernofederalproveelosfondos,decisiónlocalaunirse*Losestándaresmatemá9cos,degrados3-8ydesecundaria*LenguajeInglés,artes/alfabe9zación,degrados3-8ydesecundaria*~$350MMpordosconsorcios• PARCCySmarterBalanced*ElusodelSmarterBalancedcomounestudiodecaso 4
Smarter Balanced, Especificaciones
5
• Estadosyterritorios,AgenciadeEducaciónIndígena*Estadosgobernantes,Estadosafiliados*Implementanunsistemadeevaluacióncompletaoparcial• SistemadeEvaluación(atravésdeunlenteaccesible)*Evaluacionesacumula9vas
*Altasapuestas*Grados3-8,escuelasecundaria*Matemá9casylenguajeinglésartes/alfabe9zación)
*Evaluacionesprovisionales*Lafuncionalidadycontenidosreflejanevaluacionesacumula9vas*Elmaestroseleccionael9empoyeluso-noparaaltasapuestas
*Evaluaciónforma9va,desarrollodelaprofesióndocente*Libreríadigital*Reunionesenpersona
La Claridad desde el Principio
6
Constructos ObjeGvo
• Estándaresquepermitenalosdesarrolladoresdeevaluacioneselderivarhabilidadesyconocimientosasermedidos.*Diferenciarentreelcurrículoylosestándaresdeinstrucciónyelenfoqueselec9vodemedición.*Examinarlosestándaresatravésdeellentedeldesarrollodellenguaje-ú9lparalaadquisicióndeunsegundoidioma,asícomoeldesarrollodecontenidos.*Examinarlosestándaresatravésdelalentedelasdiscapacidades.
7
Constructos ObjeGvo
• Losobje9vosclarosdemediciónpermitenlaflexibilidadylacomprensióncomúndelosrecursosdeaccesibilidad.*Cambiodevistapolí9coyprác9codelosestudiantesdelidiomainglés.*Posibilidaddeincluirmásrecursosdeaccesibilidad,adisposicióndemásestudiantes(p.e.,apoyosdelenguajesoncompa9bleparalasmatemá9cas)*Vistociertosrecursosdemaneradiferente(p.e.,glosarioseninglés)• Másfácilparatomardecisionesbasadaseninves9gación• Másfácildecrearequiposmul9disciplinariosqueapoyaneldiseñoydesarrollo. 8
Sistema Personalizable: Preservar el Constructo DesGnado, Enfocándose Individualmente en cada Estudiante
9
Siendo Menos RestricGvos • Debenestardisponiblesparalosestudiantesrecursosadecuados*Nohayevidenciadequelosrecursosinterfieranconlamediciónespecíficadelítemdelconstructoquesepretendemedir*Algunasinves9gacionesdeberíancontribuiralaeficaciadelosrecursos• Losrecursosdebenserrestringidosúnicamentesiexistenrazonesdepeso*Medición(validezdeconstructo)*Posiblesdañosalosestudiantes(cargacogni9va,fa9gadelaprueba)*Seguridaddelaprueba*Capacidadhumanayfinanciera• Codificadoenundocumentodepolí9cadirigidaalmiembroquesehamejoradoanualmenteconbaseenlasrecomendacionesdelosmiembrosyexpertosexternos*Ciclodevidaparasurevisión,examinarlanuevainves9gaciónylatecnología
10
El Estudiante Individual
• Reconocelaheterogeneidaddentrodelossubgrupos• Proporcionaadultosconconocimientoslaautoridadparaencenderyapagarlosrecursospermi9dos.• Cadaestudiante9enelaposibilidaddeelegirsideseaonou9lizarelrecurso• Man9enelaindependenciaylaconfidencialidaddelosestudiantes• Revisarlosrecursosdisponiblesparaunestudianteenpar9cularporlomenosunavezalaño• Requiereformaciónsobreherramientasyprocesosparaunamejoraplicación• Man9enealtasexpecta9vasdetodoslosestudiantes
11
Marco de Referencia y Ejemplos de Recursos de Accesibilidad
12
Marco de Referencia
13
14
Ejemplo, Herramienta Universal (incrustado)
15
Tachado
Ejemplo, Soporte Diseñado (incrustado)
16
Ejemplo, Soporte Diseñado (incrustado)
17
Ejemplo, Soporte Diseñado (incrustado)
18
Ejemplo, Soporte Diseñado (incrustado)
19
Ejemplo, Acomodación (incrustado)
20
Ejemplo, Herramienta Universal (incrustado) solamente en ciertos ítems
21
Ejemplo de InvesGgación – Smarter Balanced
22
Inclusión y Sostenibilidad
23
El Comité de Usabilidad, Accesibilidad y Acomodación
24
Person State Primary Area of Expertise
Secondary Area of Expertise
1 Hawaii ELA SWD 2 California ELA ELL 3 Oregon Math SWD 4 Nevada Math -- 5 Delaware ELL Math 6 Michigan ELL ELA 7 North Dakota SWD ELA 8 Oregon SWD ELA 9 Connecticut Access Tech SWD
10 California Access Tech ELA
Lecciones Aprendidas
25
Lecciones
• Equilibrioentrelasmateriasylapsicometría• Equilibrioentrelasmateriasylaaccesibilidad• Ítemscontecnologíamejorada:usoconmoderación(acceso)?• Amenudo,losestudiantestendránmúl9plesdiscapacidadesynecesidades• Necesidaddedesarrolloprofesionalparaeducadores,líderesdelaeducación(anivelnacional,local,escuela)• Trabajarconexpertosentecnologíadeasistencia(p.e.,disposi9vosdeconversióndetextoavozyvozatexto,pantallasactualizablesBraille)• Recabaropinionesdetodaslaspartesinteresadas:estudiantes,educadores,gruposdedefensa,responsablesdepolí9cas
26
Referencias
27
Chia,M.,&Kachchaf,R.(InPress).Designing,Developing,andImplemen9nganAccessibleComputer-BasedNa9onalAssessmentSystem.InElliok,S.,Kekler,R.J.,Beddow,P.&Kurtz,A.(Eds.).HandbookofAccessibleInstruc9onandTes9ngPrac9ces:Issues,Innova9ons,andApplica9ons.NewYork:Springer.
Solano-Flores,G.,&Chia,M.(InPress).Mul9plelanguageversionsoftests.InK.Ercikan&J.Pellegrino(Eds.),Valida&onofscoremeaninginthenextgenera&onofassessments.
Chia,M.&Kachchaf,R.(2016).ApplyingtheTheoryofTestTransla&onErrortotheDevelopmentofaNa&onalNextGenera&onAssessment.Paperpresentedatthe10thInterna9onalTestCommissionConference,Vancouver,Canada,July1-4,2016.
Chia,M.(2013).Crea&nganaccessibilityframeworkandguidelinesfortheSBACassessmentsystem:AddressingaccessibilityissuesforEnglishlanguagelearners.Paperpresentedatdivisionalsymposium,ValidityinELLAssessment:Exploringissuesandopportuni9esinassessingEnglishlearners’languageproficiencyandacademiccontentknowledgeusingnext-genera9onassessmentsattheAnnualConferenceoftheNa9onalCouncilonMeasurementinEduca9on,SanFrancisco,CAApril2013.
Extra: Recursos en Línea
28
29
Páginadeaccessibilidadalwebsite:hkp://www.smarterbalanced.org/assessments/accessibility-and-accommoda9ons/
30
Páginadeaccessibilidadalwebsite,ISAAP: