Magda Chia, Ph.D. Stanford University, UL/SCALE

IncrementodelaaccesibilidadenunSistema

NacionaldeEvaluacióndelaSiguienteGeneración

Seminariointernacional"Evaluaciónydiversidad:jus7ciay

equidadenlaevaluacióneduca7va”Sep9embre22-23,2016

CiudaddeMéxico,México1

Programa

• Estudiodecaso,Antecedentes• LaClaridaddesdeelPrincipio• SistemaPersonalizable:PreservarelConstructoDes9nado,EnfocándoseIndividualmenteenlosEstudiantes• MarcodeReferenciayEjemplosdeRecursosdeAccesibilidad•  InclusiónySostenibilidad• LeccionesAprendidas• ReferenciasyRecursosenLínea

2

Estudio de caso, Antecedentes

3

El Consorcio • GrupodeEstadosqueaprovechanlosrecursos(financieros,humanos)paracrearsistemasdeevaluaciónbasadosenun(os)obje9vo(s)común(es)demedición.•  EstándaresEstatalesdeNúcleoComún(CCSS)*Gobernadoresconexpertoseneltema,educadoresyotraspartesinteresadas.*LosEstados9enenlaopcióndeadoptarestasuotrasnormasqueestánalineadosparalapreparaciónuniversitariayprofesional.•  CarreraalaCima,BecaFederal*Elgobiernofederalproveelosfondos,decisiónlocalaunirse*Losestándaresmatemá9cos,degrados3-8ydesecundaria*LenguajeInglés,artes/alfabe9zación,degrados3-8ydesecundaria*~$350MMpordosconsorcios•  PARCCySmarterBalanced*ElusodelSmarterBalancedcomounestudiodecaso 4

Smarter Balanced, Especificaciones

5

•  Estadosyterritorios,AgenciadeEducaciónIndígena*Estadosgobernantes,Estadosafiliados*Implementanunsistemadeevaluacióncompletaoparcial•  SistemadeEvaluación(atravésdeunlenteaccesible)*Evaluacionesacumula9vas

*Altasapuestas*Grados3-8,escuelasecundaria*Matemá9casylenguajeinglésartes/alfabe9zación)

*Evaluacionesprovisionales*Lafuncionalidadycontenidosreflejanevaluacionesacumula9vas*Elmaestroseleccionael9empoyeluso-noparaaltasapuestas

*Evaluaciónforma9va,desarrollodelaprofesióndocente*Libreríadigital*Reunionesenpersona

La Claridad desde el Principio

6

Constructos ObjeGvo

•  Estándaresquepermitenalosdesarrolladoresdeevaluacioneselderivarhabilidadesyconocimientosasermedidos.*Diferenciarentreelcurrículoylosestándaresdeinstrucciónyelenfoqueselec9vodemedición.*Examinarlosestándaresatravésdeellentedeldesarrollodellenguaje-ú9lparalaadquisicióndeunsegundoidioma,asícomoeldesarrollodecontenidos.*Examinarlosestándaresatravésdelalentedelasdiscapacidades.

7

Constructos ObjeGvo

• Losobje9vosclarosdemediciónpermitenlaflexibilidadylacomprensióncomúndelosrecursosdeaccesibilidad.*Cambiodevistapolí9coyprác9codelosestudiantesdelidiomainglés.*Posibilidaddeincluirmásrecursosdeaccesibilidad,adisposicióndemásestudiantes(p.e.,apoyosdelenguajesoncompa9bleparalasmatemá9cas)*Vistociertosrecursosdemaneradiferente(p.e.,glosarioseninglés)• Másfácilparatomardecisionesbasadaseninves9gación• Másfácildecrearequiposmul9disciplinariosqueapoyaneldiseñoydesarrollo. 8

Sistema Personalizable: Preservar el Constructo DesGnado, Enfocándose Individualmente en cada Estudiante

9

Siendo Menos RestricGvos •  Debenestardisponiblesparalosestudiantesrecursosadecuados*Nohayevidenciadequelosrecursosinterfieranconlamediciónespecíficadelítemdelconstructoquesepretendemedir*Algunasinves9gacionesdeberíancontribuiralaeficaciadelosrecursos•  Losrecursosdebenserrestringidosúnicamentesiexistenrazonesdepeso*Medición(validezdeconstructo)*Posiblesdañosalosestudiantes(cargacogni9va,fa9gadelaprueba)*Seguridaddelaprueba*Capacidadhumanayfinanciera•  Codificadoenundocumentodepolí9cadirigidaalmiembroquesehamejoradoanualmenteconbaseenlasrecomendacionesdelosmiembrosyexpertosexternos*Ciclodevidaparasurevisión,examinarlanuevainves9gaciónylatecnología

10

El Estudiante Individual

• Reconocelaheterogeneidaddentrodelossubgrupos• Proporcionaadultosconconocimientoslaautoridadparaencenderyapagarlosrecursospermi9dos.• Cadaestudiante9enelaposibilidaddeelegirsideseaonou9lizarelrecurso• Man9enelaindependenciaylaconfidencialidaddelosestudiantes• Revisarlosrecursosdisponiblesparaunestudianteenpar9cularporlomenosunavezalaño• Requiereformaciónsobreherramientasyprocesosparaunamejoraplicación• Man9enealtasexpecta9vasdetodoslosestudiantes

11

Marco de Referencia y Ejemplos de Recursos de Accesibilidad

12

Marco de Referencia

13

14

Ejemplo, Herramienta Universal (incrustado)

15

Tachado

Ejemplo, Soporte Diseñado (incrustado)

16

Ejemplo, Soporte Diseñado (incrustado)

17

Ejemplo, Soporte Diseñado (incrustado)

18

Ejemplo, Soporte Diseñado (incrustado)

19

Ejemplo, Acomodación (incrustado)

20

Ejemplo, Herramienta Universal (incrustado) solamente en ciertos ítems

21

Ejemplo de InvesGgación – Smarter Balanced

22

Inclusión y Sostenibilidad

23

El Comité de Usabilidad, Accesibilidad y Acomodación

24

Person State Primary Area of Expertise

Secondary Area of Expertise

1 Hawaii ELA SWD 2 California ELA ELL 3 Oregon Math SWD 4 Nevada Math -- 5 Delaware ELL Math 6 Michigan ELL ELA 7 North Dakota SWD ELA 8 Oregon SWD ELA 9 Connecticut Access Tech SWD

10 California Access Tech ELA

Lecciones Aprendidas

25

Lecciones

• Equilibrioentrelasmateriasylapsicometría• Equilibrioentrelasmateriasylaaccesibilidad•  Ítemscontecnologíamejorada:usoconmoderación(acceso)?• Amenudo,losestudiantestendránmúl9plesdiscapacidadesynecesidades• Necesidaddedesarrolloprofesionalparaeducadores,líderesdelaeducación(anivelnacional,local,escuela)• Trabajarconexpertosentecnologíadeasistencia(p.e.,disposi9vosdeconversióndetextoavozyvozatexto,pantallasactualizablesBraille)• Recabaropinionesdetodaslaspartesinteresadas:estudiantes,educadores,gruposdedefensa,responsablesdepolí9cas

26

Referencias

27

Chia,M.,&Kachchaf,R.(InPress).Designing,Developing,andImplemen9nganAccessibleComputer-BasedNa9onalAssessmentSystem.InElliok,S.,Kekler,R.J.,Beddow,P.&Kurtz,A.(Eds.).HandbookofAccessibleInstruc9onandTes9ngPrac9ces:Issues,Innova9ons,andApplica9ons.NewYork:Springer.

Solano-Flores,G.,&Chia,M.(InPress).Mul9plelanguageversionsoftests.InK.Ercikan&J.Pellegrino(Eds.),Valida&onofscoremeaninginthenextgenera&onofassessments.

Chia,M.&Kachchaf,R.(2016).ApplyingtheTheoryofTestTransla&onErrortotheDevelopmentofaNa&onalNextGenera&onAssessment.Paperpresentedatthe10thInterna9onalTestCommissionConference,Vancouver,Canada,July1-4,2016.

Chia,M.(2013).Crea&nganaccessibilityframeworkandguidelinesfortheSBACassessmentsystem:AddressingaccessibilityissuesforEnglishlanguagelearners.Paperpresentedatdivisionalsymposium,ValidityinELLAssessment:Exploringissuesandopportuni9esinassessingEnglishlearners’languageproficiencyandacademiccontentknowledgeusingnext-genera9onassessmentsattheAnnualConferenceoftheNa9onalCouncilonMeasurementinEduca9on,SanFrancisco,CAApril2013.

Extra: Recursos en Línea

28

29

Páginadeaccessibilidadalwebsite:hkp://www.smarterbalanced.org/assessments/accessibility-and-accommoda9ons/

30

Páginadeaccessibilidadalwebsite,ISAAP: