Ernesto Treviño Asesor LLECE Septiembre 21, 2011- Cartagena de Indias, Colombia

1. Evaluación del aprendizaje de estudiantes indígenas en América Latina: Desafíos de medición, interpretación y estudio de factores asociados en contextos de diversidad cultural y desigualdad social • Ernesto Treviño • Asesor LLECE • Septiembre 21, 2011- Cartagena de Indias, Colombia

2. Agenda • Antecedentes • Uso de exámenes estandarizados en contextos de diversidad cultural • Propósitos y usos de la evaluación • Tensión entre evaluación estandarizada y diversidad cultural • Conocimiento, enseñanza y aprendizaje entre grupos indígenas • Validez, Cultura y Equidad al Medir el Aprendizaje en Poblaciones Indígenas • Equidad y medición en contextos indígenas • Factores asociados y educación intercultural bilingüe • Modelo CIPP en América Latina y el Caribe • Modelo CIPP y educación intercultural bilingüe

3. Antecedentes • América Latina • Graves desigualdades sociales • Marginación de los grupos indígenas • Marginación y estereotipos de los grupos indígenas • Reconocimiento constitucional de la diversidad cultural, étnica y lingüística en distintos países • Expansión de la aplicación y uso de exámenes estandarizados sin necesariamente considerar esta diversidad

4. Uso de exámenes estandarizados • Tensión entre evaluación estandarizada y diversidad cultural • Reconocimiento de la diversidad • Uso más extenso de evaluaciones estandarizadas • Exámenes de ingreso a niveles educativos pueden afectar gravemente las oportunidades educativas • Incapacidad del desarrollo científico y de la evaluación educativa para considerar la diversidad cultural • Es necesario invertir muchos recursos • Desacuerdos en la forma escrita de lenguas indígenas • Falta de recursos humanos especializados

5. Uso de exámenes estandarizados • Propósitos de exámenes estandarizados • Conocer niveles de logro de los estudiantes en distintas áreas (pruebas de bajo impacto o sin consecuencias) • Tomar decisiones que afectan a individuos o instituciones en base a los resultados de los exámenes (pruebas de alto impacto o con consecuencias) • Usos de los exámenes estandarizados • Monitoreo de política pública • Evaluación de programas • Identificación de escuelas que necesitan apoyo • Usos con problemas de causalidad • Asignación de incentivos o castigos • Estimulación de la competencia entre escuelas • Sanción social a las escuelas de bajo logro

6. Uso de exámenes estandarizados • Conocimiento, enseñanza y aprendizaje entre grupos indígenas • Psicología transcultural • Educación formal: • Trabajo individual • Pensamiento analítico • Uso intensivo de la lengua • Marco estricto de tiempo • Aprendizaje de contenidos escolares • Evaluación individual de los estudiantes

7. Uso de exámenes estandarizados • Conocimiento…(continuación) • Enseñanza y aprendizaje en contextos indígenas: • Visión más colectivista de la organización social y de la enseñanza y el aprendizaje • Formas culturalmente apropiadas para participar en el aprendizaje • Estrategias pedagógicas • Medición del desempeño • Pensamiento holístico • Estrategias observacionales y participación práctica para aprender • Aprendizaje a lo largo de la vida y habilidad se adquiere a través de la práctica • Adultos actitud no intervencionista • Espacio para errores • No existe posibilidad de fracaso público: responsabilidad compartida por los resultados

8. Uso de exámenes estandarizados • Validez, Cultura y Equidad al Medir el Aprendizaje en Poblaciones Indígenas • Validez • Propiedad de la inferencia, y es válida si está alineada con los objetivos de la prueba • Evidencia de validez • Contenido del examen • Proceso de respuesta • Estructura interna de la prueba • Relación con otras variables • Consecuencias de las pruebas • Validez cultural • Características culturales para interpretar el mundo, solucionar problemas e impactar los resultados • Universalidad de los constructos

9. Uso de exámenes estandarizados • Validez…(continuación) • Sesgo • Diferencia sistemática en la validez de la inferencia, de tal modo que es menos válida para un grupo en comparación a otro • Diferencia sistemática, evidencia necesaria pero no suficiente • Acompañada de evidencia sustantiva respecto de la prueba • En América Latina los estudiantes indígenas muestran diferencias sistemáticas que afectan a los grupos indígenas • Sesgo cultural y verbal en pruebas estandarizadas • Impacto adverso • Examen podría no estar sesgado pero afectar desproporcionadamente a grupos de bajo rendimiento

10. Uso de exámenes estandarizados • Validez…(continuación) • Tensión entre diversidad y equidad • Interculturalidad y bilingüismo • Lengua dominante es vehículo de movilidad educativa • Estructuras sociales valoran lengua dominante • Avance en normalización de las lenguas • No desconocer la discriminación

11. Uso de exámenes estandarizados • Equidad y medición en contextos indígenas • Región más desigual del mundo • Uso de exámenes estandarizados con consecuencias • Medición para retroalimentación de políticas y programas • Evaluación para la mejora • Evaluación estandarizada y evaluación de aula

12. Factores asociados América Latina Modelo CIPP UNESCO, 2010

13. Datos demográficos (Indígena vs. no indígena) • Cantidad de población • Tamaño del hogar • Distribución por sexo • Distribución etárea • Información socioeconómica (indígena vs. no indígena) • Ingreso promedio • Quintil de ingreso autónomo • Indicadores educacionales • Tasa de analfabetismo • Escolaridad media • Cobertura educacional • Número y tamaño de establecimientos • Nº docentes por establecimiento • Nº alumnos por profesor • Contexto sociolingüístico • Autoadscripción étnica • Número de hablantes competentes de la lengua • Aprendizaje de la lengua indígena • Uso de la lengua indígena • Aceptación rechazo EIB • Percepción directores de disposición apoderados • Percepción profesores de disposición apoderados • Actitud/ disposición cognitiva padres • Actitud/disposición afectiva padres • Actitud/disposición conativa padres Factores asociados EIB: Contexto

14. Recursos pedagógicos • Textos: Escolares/ no escolares, Forma de elaboración, contenidos culturales abordados • Material didáctico por lengua, recursos audiovisuales, computadores. • Formación inicial docente • Nivel educacional docentes • Formación y competencias en contenidos culturales • Formación y competencias en lengua indígena • Formación y competencias en didáctica contenidos tradicionales • Formación y competencias en didáctica lengua indígena • Formación y competencias en didáctica lengua castellana • Recursos pecuniarios e Institucionalidad escolar • Recursos pecuniarios: Cantidad de fondos entregados, idoneidad en las fechas de entrega, fluidez en los procesos de entrega • Presencia de instrumentos de adecuación curricular: Proyecto Educativo Institucional (PEI) y Planes y Programas Propios (PPP). Actores involucrados en su creación, forma de actualización. • Definición de roles y apoyo de autoridades a la EIB Factores asociados EIB: Insumo

15. Prácticas docentes • Prácticas de aula: • Prácticas de organización escolar: Forma en que la planta docente asume labores EIB/ Forma de actualización de los PPP • Implementación de enseñanza de segunda lengua y enfoque intercultural • Mediación comunidad- escuela • Gestión directiva • Gestión interna: Gestión de los instrumentos de adecuación curricular: PPP/ PEI/ Nivel de compromiso y motivación • Gestión externa: Relación con autoridades del sistema escolar • Relación con la comunidad (Grado de inclusión de la comunidad en el desarrollo el programa) • Relación comunidad- escuela • Participación en dinámicas locales • Celebración de tradiciones en la escuela • Participación de la comunidad en adecuaciones curriculares y su implementación Factores asociados EIB: Procesos

16. Aprendizajes • Comunicación oral en lenguaje indígena • Comunicación escrita en lengua indígena • Efectos en otros aprendizajes • Prácticas interculturales en la escuela • Valoración de la diversidad étnica por la comunidad escolar • Visibilización de la interculturalidad en la escuela • Participación de la comunidad en programas de EIB • Convivencia armoniosa entre los miembros de origen indígena y no indígena • Valoración de la cultura indígena • Mejora en la autoestima de los estudiantes indígenas • Aumento de ámbitos de utilización y fomento de la lengua (Utilización de la lengua en espacios públicos, utilización en la escuela) • Revitalización de lenguas • Número de hablantes de cada lengua indígena por edad, sexo yubicación geográfica • Recuperación o pérdida intergeneracional de la lengua materna Factores asociados EIB: Productos

17. Conclusiones y recomendaciones • Exámenes estandarizados • Inferencias relacionadas con el propósito del examen • Sirven para conocer los logros en un sistema escolar • Ayudan a monitorear programas y políticas • En contextos de diversidad cultural problemas de: • Validez • Sesgo • Impacto adverso

18. Conclusiones y recomendaciones • Evaluación educativa • Diferencias culturales y lingüísticas entre grupos indígenas y no indígenas • No ha incorporado cultura ni lengua indígena • Uso más extendido de los exámenes con consecuencias • ¿Deberíamos evaluar en lengua indígena a pesar de que no sea la lengua usada en la enseñanza? • Factores asociados • Listas consistentes de factores asociados al aprendizaje • EIB • Diferentes objetivos y medición de resultados • Evidencia empírica insuficiente de factores

19. ¡Gracias!ernesto.trevino@mail.udp.cl