Mostrando entradas con la etiqueta accountability. Mostrar todas las entradas
Mostrando entradas con la etiqueta accountability. Mostrar todas las entradas

El Ecuador en las pruebas del LLECE (SERCE y TERCE)


Foto UNICEF Ecuador. Cristóbal Corral

LLECE es el Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación, coordinado por la Oficina Regional de la UNESCO (UNESCO-OREALC), con sede en Santiago. SERCE es el Segundo Estudio Regional Comparativo y Evaluativo (aplicado en 2006). TERCE es el Tercer Estudio Regional Comparativo y Explicativo (aplicado en 2013).

SERCE y TERCE evaluaron cuatro asignaturas (Lectura, Escritura, Matemáticas y Ciencias Naturales) en dos grados de primaria (3º y 6º, equivalentes en el Ecuador a 4º y 7º de educación básica). Ciencias Naturales solo se evalúa en 6º. Escritura se evaluó por primera vez en el TERCE. Los estudios del LLECE también aplican cuestionarios para comprender el contexto y circunstancias en que se da el aprendizaje ("factores asociados").


El TERCE se aplicó en 15 países de América Latina: Argentina, Brasil, Chile, Colombia, Costa Rica, Ecuador, Guatemala, Honduras, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana y Uruguay, y en el estado mexicano de Nuevo León.

El Ecuador mejoró puntajes en Lectura, Escritura y Matemáticas entre el SERCE y el TERCE (no tomó la prueba de Ciencias Naturales en el SERCE, de modo que en este área no hay con qué comparar).


En los resultados del TERCE el Ecuador se ubicó en la media regional, y por debajo de la media regional en Lectura y Escritura de 6º (7º de básica). Ver tabla de la UNESCO.


UNESCO hizo una alerta roja en lectura: "Ecuador presenta puntajes que no difieren del promedio regional en casi todas las pruebas. La excepción es lectura en sexto grado, donde el promedio del país es significativamente menor al promedio regional" (Ficha de logro de aprendizaje Ecuador, p. 2).


Hubo desinformación en la difusión que hizo el gobierno ecuatoriano de los resultados del TERCE.
En el Informe a la Nación 2007-2017, en el capítulo sobre Educación, Rafael Correa escribió: "Como evidencia de la calidad en el sistema educativo, el país obtuvo resultados por encima del promedio regional en evaluaciones de desempeño estudiantil (SERCE y TERCE)" (p. 151).

Antes, en
el informe de Rendición de Cuentas 2014 del Ministerio de Educación (p. 6) el ministro de educación Augusto Espinosa había afirmado:
"El Ecuador se ubicó entre los países de la región con los mejores resultados en todas las áreas evaluadas (Lenguaje, Matemática y Ciencias Naturales), así como entre los que más avances tuvo en educación, ocupando posiciones por encima de la media; en comparación con las últimas pruebas del Segundo Estudio Comparativo y Explicativo (SERCE), que se realizaronen en 2006, cuyos resultados situaron a Ecuador en los últimos puestos".

La primera parte de esta afirmación es falsa: el Ecuador no se ubicó en el TERCE entre los países de la región con mejores resultados. La segunda parte es parcialmente cierta: el Ecuador fue uno de los países de la región que más avanzó entre el SERCE y el TERCE.

Correa y todos los personeros y medios del gobierno repitieron información falsa o inexacta al respecto, y ocultaron la información acerca de los malos resultados en lectura. Los medios contribuyeron a la desinformación limitándose a repetir los mensajes gubernamentales.

Abajo una explicación más amplia del LLECE y del desempeño del Ecuador en el SERCE y el TERCE. (El Ecuador no participó en el primer estudio, PERCE, aplicado en 1997).


Para una panorámica regional ver: América Latina y las pruebas LLECE
Ubicación del Ecuador en el TERCE en el contexto regional

Cita sobre el Ecuador en el TERCE
(en Informe Mundial sobre Educación para Todos 2000-2015)

"Dos importantes estudios, uno del Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) y otro de la OCDE, permiten medir los avances y la desigualdad en los resultados del aprendizaje de las evaluaciones transnacionales. El LLECE, fundado en 1994, realizó su Primer Estudio Regional Comparativo y Evaluativo (PERCE) en 1997, el segundo estudio trasnacional (SERCE) en 2006 y el tercero (TERCE) en 2013. El TERCE, que abarcó a 15 países y a un estado de México, evaluó las matemáticas, la lectura, la expresión escrita y las ciencias. Los datos obtenidos permiten evaluar los componentes organizativos, curriculares y de antecedentes familiares del desempeño académico, así como los progresos generales del país, incluidos los realizados en la eliminación de la desigualdad y, por ejemplo, muestran que muchos países - entre los que destaca el Ecuador - mejoraron significativamente las puntuaciones medias nacionales".
(En: La Educación para Todos en el Mundo 2000-2015: Logros y Desafíos, Informe de Seguimiento de la Educación para Todos en el Mundo, p. 224-225).

UNESCO-OREALC y el TERCE

(UNESCO-OREALC, Santiago, 30 julio 2015)

"La segunda entrega de resultados de esta pesquisa sobre logros de aprendizaje indica avances en casi todos los países participantes, pero la mayoría de los estudiantes sigue concentrándose en niveles bajos de desempeño en lenguaje (lectura y escritura), matemática y ciencias naturales".
"El TERCE evidencia que si bien el puntaje promedio regional de logros de aprendizaje mejoró en todos los grados y áreas evaluados, la mayoría de los estudiantes sigue concentrándose en los niveles más bajos de desempeño (I y II) y son pocos los que se ubican en el nivel superior (IV). Esto indica el desafío al que se enfrentan los países de la región: lograr en los estudiantes aprendizajes que les permitan un mejor dominio de los conocimientos y el desarrollo de habilidades avanzadas en matemática, lenguaje y ciencias naturales". 
"El estudio TERCE describe lo que los estudiantes saben y son capaces de hacer en función de su propio currículo y situarlos en niveles de desempeño de acuerdo a las propias metas de aprendizaje nacionales. Es esta mirada la que puede movilizar a los sistemas escolares hacia la mejora interna y no hacia la competencia".
A nivel nacional, los resultados de cada área se organizan en cuatro niveles de desempeño:
- los niveles I y II son considerados de desempeño insuficiente;
- el nivel IV equivale a desempeño óptimo.

La mayoría de estudiantes evaluados por el TERCE se ubica en los niveles I y II, la minoría en el nivel IV.

A nivel regional, los países se distribuyen en tres grupos según la posición respecto del promedio regional en cada una de las áreas y grados evaluados:
- países cuya media es estadísticamente igual al promedio regional
- países que tienen un puntaje significativamente mayor al promedio regional
- países que tienen puntajes significativamente menores al promedio regional. 

Países que obtuvieron los mejores resultados en el TERCE: Chile, Costa Rica y México, seguidos de Argentina, Uruguay y el estado mexicano de Nuevo León. (Ver distribución de países según resultados en áreas y grados y comparación con la media regional).

SEGUNDO ESTUDIO REGIONAL COMPARATIVO Y EXPLICATIVO (SERCE) - 2006
Resultados Ecuador

- Se ubicó en el grupo de países con más bajas puntuaciones en todas las áreas y en todos los grados evaluados.
- Participó en las pruebas de Lenguaje y Matemáticas (3er y 6º grados), no en la de Ciencias Naturales (6º grado), que era optativa.
- Los alumnos de 3er grado en escuelas privadas obtuvieron mejores resultados que los de escuelas públicas. En 6º grado desapareció la diferencia privado/público.
- Los alumnos indígenas obtuvieron los peores resultados en todas las áreas y grados evaluados.
Aquí un resumen de los factores asociados.

Resultados América Latina y el Caribe

Cuba obtuvo los mejores resultados - con gran diferencia respecto de los demás países participantes - en todos los niveles y áreas evaluadas.

Matemáticas 3er grado: Países con puntuación inferior al promedio de los países participantes en el SERCE: Guatemala, Ecuador, El Salvador, Nicaragua, Panamá, Paraguay, Perú y República Dominicana.

Lectura 3er grado: Países con puntuación inferior al promedio: Ecuador, Guatemala, Nicaragua, Panamá, Paraguay, Perú y República Dominicana.

Matemáticas 6º grado: Países con puntuación media inferior al promedio: Ecuador, El Salvador, Guatemala, Nicaragua, Panamá, Paraguay y República Dominicana.

Lectura 6º grado: Países con puntuación inferior al promedio: Ecuador, El Salvador, Guatemala, Nicaragua, Panamá, Paraguay, Perú y República Dominicana.

Matemáticas 3º: Como caso excepcional, en República Dominicana las niñas obtienen más altas puntuaciones que los niños.

Matemáticas 6º grado: En Cuba las niñas obtienen significativamente mejores puntuaciones que los niños.


TERCER ESTUDIO REGIONAL COMPARATIVO Y EXPLICATIVO (TERCE) - 2013
"El objetivo del TERCE no es el ránking de los países. No busca detectar ganadores o perdedores en la región". Informe TERCE, UNESCO.
Comparación de resultados entre SERCE y TERCE para todos los países participantes.

Cabe aclarar que Cuba - que obtuvo los mejores resultados en el SERCE - no participó en el TERCE.
Chile fue el país mejor evaluado en el TERCE y tuvo también los mayores avances en Matemáticas. En cada prueba, Chile supera el promedio de la región en más de 50 puntos.

Ecuador: comparación entre resultados del SERCE y el TERCE

El Ecuador es uno de los países que más mejoró puntajes en Lectura y Matemáticas respecto del SERCE, junto con Chile, Perú, Guatemala y República Dominicana.
- Lectura 3er grado (4º básica): segundo país que más mejoró, después de R. Dominicana, seguido de Guatemala y Perú.
- Lectura 6º grado (7º básica): el que más mejoró, seguido de R.Dominicana, Guatemala y Perú.
- Matemática 3er grado (4º básica): cuarto que más mejoró, después de Perú, Chile y R. Dominicana.
- Matemática 6º grado (7º básica): segundo que más mejoró, después de Chile y seguido de Perú y México.
- El Ecuador no participó en la prueba de Ciencias Naturales en el SERCE, por lo que no es posible comparar ni definir avances.
- Tampoco es posible determinar avances en el área de Escritura pues ésta se incorporó por primera vez en el TERCE.
Ver Informe TERCE p. 57-59

Ecuador: Resultados de aprendizaje en el TERCE
En el TERCE el Ecuador apareció ubicado así (ver tabla más abajo):
- promedio regional: Lectura 3er grado, Matemática 3er grado, Matemática 6º grado, Ciencias Naturales 6º grado, Escritura 3er grado;
- por debajo del promedio regional: Lectura y Escritura 6º grado, "significativamente menor al promedio regional", lo que es preocupante.
- por encima del promedio regional: ninguno.
- Perú, que en el SERCE estaba entre los países por debajo del promedio regional en Lectura 6º grado, es el único país que logró ubicarse en el promedio regional en el TERCE.


Aspectos generales y situación países participantes en América Latina

El análisis de factores asociados al aprendizaje se realiza con información recogida a través de cuestionarios dirigidos a distintos actores del sistema educativo en los países participantes.
El TERCE indaga tres ámbitos principales:
a) las características de los estudiantes y sus familias;
b) las características del docente, prácticas pedagógicas y recursos en el aula; y
c) las características de las escuelas que se relacionan con el aprendizaje.
Los logros de aprendizaje se relacionan positivamente con el nivel socioeconómico de las familias, el apoyo de los padres, la asistencia a la educación preescolar, la práctica de la lectura dentro y fuera del sistema escolar, la disponibilidad de recursos de enseñanza-aprendizaje en las escuelas y las condiciones básicas de infraestructura. Los estudiantes que tienen hábitos de lectura fuera de la escuela logran mejores desempeños.
A nivel de aula, los factores asociados que inciden positivamente en los resultados de aprendizaje son la asistencia y puntualidad de los docentes; la disponibilidad de cuadernos y libros; el entorno escolar y las buenas prácticas docentes.
El ausentismo escolar está negativamente asociado al aprendizaje, igual que la violencia escolar en sus múltiples formas. El uso recreativo del computador entre estudiantes de sexto grado tiene una relación negativa con el aprendizaje.
Ser indígena es una condición desfavorable para el aprendizaje. Los niños de grupos indígenas tienen consistentemente logros de aprendizaje más bajos en todos los países. Esto aparece no solamente asociado a nivel socio-económico, lo que sugiere que el tratamiento educativo que se da a estos grupos sigue siendo inadecuado e insuficiente. En Perú, Paraguay, Panamá y Nicaragua se da la mayor relación entre el logro y la pertenencia a un pueblo originario, medida a través de la ascendencia materna y uso de la lengua indígena en el hogar.
El análisis de las escuelas permite afirmar que en general los sistemas escolares en la región son segregadores y poco inclusivos socioeconómicamente: es difícil que estudiantes provenientes de diferentes estratos socio-económicos coincidan en la misma escuela. La segregación social y residencial sigue siendo fuerte.
"En términos generales, las escuelas ecuatorianas alcanzan resultados promedio entre el primer y segundo nivel de desempeño". (TERCE, Ecuador, Factores Asociados).
Estrato socio-económico Los niños que provienen de entornos socioeconómicos más favorecidos muestran mejor desempeño en las áreas evaluadas. A medida que aumenta el nivel socioeconómico promedio en las escuelas se incrementa el desempeño de los estudiantes en lectura. "La influencia de la composición socioeconómica del estudiantado habitualmente es mayor en el área de Lectura que en Matemática y Ciencias Naturales, debido a que mientras las características socioculturales de la familia tienen fuerte incidencia en el desarrollo del lenguaje de los niños, el conocimiento sobre Matemática y Ciencias suele provenir mayoritariamente de la escuela".

Subsidios, bonos
"Los estudiantes cuyas familias reciben transferencias monetarias condicionadas a su asistencia a la escuela o a controles de salud, suelen desempeñarse por debajo de sus pares, aunque este resultado no necesariamente es atribuible a los programas de transferencias".

Entorno y violencia En el Ecuador, el grado de violencia en el barrio donde se inserta el establecimiento escolar es clave para comprender las diferencias en los resultados. "Las escuelas ubicadas en comunidades con altos niveles de violencia suelen mostrar menores progresos en el rendimiento en ciencias naturales".

Público/Privado
Los estudiantes que van a escuelas privadas obtienen mejores resultados en 3er grado en Lenguaje y en Matemática. Los establecimientos públicos muestran mejores resultados en la prueba de Matemáticas de 6º grado.

Rural/urbano No se registran diferencias de rendimiento entre escuelas públicas rurales y urbanas.

Indígena Igual que en el SERCE, "las niñas y niños indígenas consiguen resultados de aprendizaje más bajos que el resto de la población, en todas las áreas y grados evaluados". (Perú, Paraguay, Panamá y Nicaragua son los países en que se da la mayor relación entre logro y pertenencia a un pueblo originario).

Género Las diferencias niño/niña en términos de logros de aprendizaje no son significativas. Tampoco lo eran en el SERCE.

Educación preescolar formal  Los niños que han asistido a educación preescolar tienen mejor desempeño.

Altas expectativas  Los niños cuyos padres tienen expectativas de que alcancen la educación superior tienen mejor desempeño.

Contexto educativo del hogar Afecta fuertemente los aprendizajes en Lenguaje y Matemáticas tanto a estudiantes de escuela pública como privada.

Infraestructura y equipamiento escolar
Los estudiantes que asisten a establecimientos con  adecuada infraestructura y servicios se desempeñan mejor en Lectura en 3er grado y en Matemáticas y Ciencias Naturales en 6º.

Clima escolar Afecta fuertemente los aprendizajes en Lenguaje y Matemáticas tanto a estudiantes de escuela pública como privada.

Lectura fuera de la escuela  Los estudiantes que leen con mayor frecuencia fuera de la escuela tienen mejores resultados en 6º grado en todas las áreas evaluadas. (La incidencia de la lectura solo se evaluó para 6º grado).

Materiales escolares  Disponibilidad de libros de texto y cuadernos se asocia a mejores desempeños en Lectura en 3º y 6º grados.

Computadoras Más uso de la computadora fuera de la escuela se traduce en un mejor desempeño. Pero más uso recreativo de la computadora se asocia a peor desempeño.

Repetición
Los estudiantes que han repetido el año tienen peores resultados que los que no han repetido, tanto en Lectura como en Matemática.

Trabajo infantil El trabajo infantil se asocia a resultados inferiores en 3er grado.


Ecuador: Tratamiento comunicacional de los resultados del TERCE 

Recogemos aquí ejemplos del tratamiento comunicacional del informe de resultados comparativos del SERCE y el TERCE divulgados por UNESCO-OREALC el 4 diciembre de 2014.

Las primeras noticias mostraron lo que sería tendencia dominante en la región: presentar los resultados de cada país en relación a los demás países participantes en el TERCE antes que en relación a los resultados obtenidos por el mismo país en el estudio anterior, el SERCE, como recomendó la UNESCO, evitando la competencia entre países y los ránkings.
 


■ "Ecuador se posiciona en la región como uno de los 6 primeros países en ciencias". Cuenta en Twitter del director del Instituto Nacional de Evaluación del Ecuador (INEVAL).
- Elabora un ránking de puntajes en la prueba de Ciencias Naturales, en la que el país se ubica en 6º lugar (de 15 países que tomaron la prueba), contrariando el espíritu del TERCE, que evita rankear a los países.
- El titular habla de "región" y de "ciencias". La región de América Latina la integran 20 países, 15 participaron en el TERCE. La prueba es de Ciencia Naturales.
- El tuit se puso con copia al Presidente de la República y al Ministro de Educación.

"Ecuador mejoró su sistema educativo", El Comercio, Ecuador, 4 dic. 2014
El titular es vago, inexacto y desinforma. El TERCE evaluó solo 2 grados de primaria.

  "UNESCO calificó a Ecuador como uno de los países que más creció en calidad de la educación". Ecuador en Positivo @ECenPositivo,  5 dic. 2014. Este titular o similares pasaría a convertirse en tónica dominante entre los medios de gobierno.

"Ecuador, uno de los países que más creció en calidad de la educación, según estudio de la Unesco". Andes, Ecuador, 4 diciembre 2014.

"La calidad de la educación ecuatoriana es reconocida regionalmente", El Ciudadano, Ecuador, 4 diciembre 2014. Misma nota publicada en la agencia oficial Andes.

"La UNESCO reconoce al Ecuador por sus avances en la educación" y "UNESCO reconoce la calidad educativa asegura Mashi Rafael". El Ciudadano, Enlace presidencial 402 (13 dic. 2014). El primero incluyó una nota y un video elaborados por el Ministerio de Educación.

«Rendición de cuentas» no es un monólogo con Powerpoint

Rosa María Torres

Foto: Enlace Ciudadano, Ecuador, 2016.

La rendición de cuentas - deber del Estado, derecho de la ciudadanía - viene extendiéndose en los países con concepciones, rituales y dinámicas muy similares (como muestra una búsqueda de textos e imágenes en Internet con la frase 'rendición de cuentas').

Bueno que se haga; malo que esté aún lejos de ser un ejercicio democrático con participación ciudadana. Por lo general monólogo burocrático-tecnocrático parapetado en Powerpoints, con escenario y con público. Muchas veces show costoso, con despliegue de luces, pantallas, cocktails, arreglos florales, animaciones artísticas ... A menudo, invitados de la propia institución y de otras entidades del Estado, así como de organismos internacionales y del cuerpo diplomático - cuando se trata de informes de la Presidencia de la República u otras altas dignidades - antes que de las organizaciones y movimientos sociales.

Este listado de NOs se inspira en la experiencia latinoamericana y especialmente en la experiencia ecuatoriana. Inicialmente tuits que circulé en Twitter al iniciarse la temporada anual de rendiciones de cuentas en el Ecuador, convertidos aquí en un post (con las ampliaciones que permite un blog en comparación con el reducido espacio de Twitter), confiando en que quizás anime algún tipo de reflexión tanto entre los rendidores de cuentas como entre los rendidos ...

La rendición de cuentas a la ciudadanía:

■ NO cabe hacerla en hoteles cinco estrellas o en auditorios con gran parafernalia en espacios cerrados o bien al aire libre. Este es un mal uso de los recursos públicos, que revela el tono de la gestión y contradice el espíritu de un evento de rendición de cuentas de cara a quienes lo financian: los ciudadanos.


■ NO requiere necesariamente presentaciones en Powerpoint. La ciudadanía llana de no está familiarizada con estos instrumentos (gráficos, infografías, etc.), con su lógica y ritmo. Lo importante es asegurar comunicación. Se trata de ofrecer información más que datos.

■ NO se trata de contar anécdotas personales sino de transparentar información relevante para la ciudadanía.
Los ciudadanos quiren y tienen derecho a saber en todo momento qué se hace con su dinero (el que proviene de su trabajo y del pago de impuestos), cómo se gasta, cómo beneficia su calidad de vida o la de las personas y grupos menos favorecidos de la sociedad.

■ NO consiste solo en informar. Requiere explicar. Esto requiere, a su vez, agendas holgadas, con tiempo para exponer y para interactuar. Supone deshacerse de la jerga, evitar las siglas, huir de los gráficos complejos.
■ NO tiene que ver solo con el uso del dinero (la palabra cuentas confunde). Quien rinde cuentas debe explicar qué se hizo, por qué, cómo, con quiénes, en qué tiempos, con qué resultados, a qué costo, con qué fuentes de financiamiento; qué se cumplió de lo anunciado y qué no; qué pudo hacerse mejor o de otro modo; qué pudo hacerse a menor costo, con similares o incluso mejores resultados. Se trata de someter a consideración pública las políticas, estrategias y medidas adoptadas, su generación, implantación, resultados e impactos.
■ NO se resuelve con un monólogo. Al contrario: supone diálogo, participación, interacción, preguntas y respuestas. La ciudadanía no es público; es interlocutor. No es sujeto pasivo; es sujeto deliberante, con derecho a ser informado, a preguntar, reclamar, hacer sugerencias y recomendaciones. El feedback ciudadano es esencial para el Estado y para la (re)formulación de la política pública.

■ NO es un acto de
propaganda. Debe ser fiel a la verdad, respaldarse con datos, indicar fuentes de información y proveer mecanismos de verificación de dicha información. Demasiado a menudo nos encontramos con que el informe de rendición de cuentas dora los hechos, falsea y oculta datos, en el afán de "quedar bien".

■ NO se limita a exponer logros. Debe informar y hacerse cargo honesta y autocríticamente de los errores cometidos, los problemas encontrados, las limitaciones de la gestión, la superposición o duplicación de esfuerzos, el dinero mal usado o despilfarrado, los casos identificados de corrupción, etc.

■ NO debe verse como un ejercicio de defensa. Es, fundamentalmente, un ejercicio de responsabilización pública de lo hecho desde la respectiva entidad y función, y de las consecuencias - sociales, financieras, etc. - de esa actuación.

■ NO basta con colocar datos o informes en un sito web institucional. El Estado debe asegurar que dicha información se ubique fácilmente, sea relevante y esté actualizada. Y alentar a la ciudadanía a buscarla y a usarla.


■ NO es un acto que se realiza una vez al año. Debe ser un proceso permanente, presencial o virtual, a través de los medios y aprovechando las herramientas digitales disponibles en la actualidad (sitios web, redes sociales, correo electrónico, etc.), alimentado a su vez desde un proceso ciudadano permanente de vigilanca, monitoreo y contraloría social para asegurar dicha rendición de cuentas.

■ NO es un ejercicio necesariamente festivo. Entendida como obligación del Estado y como derecho ciudadano, como sinceramiento de la gestión, la rendición de cuentas es un ejercicio de comunicación responsable y crítico, que implica ceder la palabra y el protagonismo a la ciudadanía, con todas las consecuencias que puede tener un proceso democrático de esta naturaleza.

Para saber más
» No hay errores metodológicos; son errores ideológicos
» El Ecuador en las pruebas del LLECE (SERCE y TERCE)
» Rankings y ranking-manía

Informes de seis meses de gestión


LinkWithin

Related Posts Plugin for WordPress, Blogger...