Mostrando entradas con la etiqueta PIAAC. Mostrar todas las entradas
Mostrando entradas con la etiqueta PIAAC. Mostrar todas las entradas

PISA o PIAAC




Hay muchos equívocos en torno a la prueba internacional PISA de la OCDE, uno de ellos creer que PISA permite identificar a los "países con la mejor educación del mundo". Afirmamos en este artículo que esto no es así. Afirmamos también que, en todo caso, la prueba PIAAC, también de la OCDE, permite una visión panorámica de la educación en un país, mucho mejor que la prueba PISA.


PISA


PISA evalúa tres competencias - lectura, matemáticas y ciencias - entre estudiantes de 15 años. La prueba se hace cada 3 años y viene aplicándose desde el año 2000. Más de 90 países han participado hasta el momento en PISA.

PISA-D (PISA for Development - PISA para el Desarrollo) fue creada por la OCDE en 2014 como una iniciativa orientada a atraer a la prueba a países de ingresos bajos y medios. 7 países participaron en la primera aplicación de PISA-D, en 2017: Camboya, Ecuador, Guatemala, Honduras, Paraguay, Senegal y Zambia. Los informes nacionales de los países participantes en PISA-D pueden encontrarse aquí.

A partir de una prueba que mide tres competencias entre jóvenes de 15 años no es posible determinar la calidad de la educación de un país y mucho menos determinar cuáles son "los países con la mejor educación del mundo".

Hay que notar que el sistema educativo abarca desde la educación inicial hasta la educación superior, incluyendo a esta última; que el currículo escolar (el prescrito y el real, actuado en las aulas) comprende muchas áreas y asignaturas, no solo las tres evaluadas por PISA; que la educación no se limita al sistema formal y que continúa más allá de los 15 años de edad.


PIAAC


PIAAC
(Programa para la Evaluación Internacional de las Competencias de los Adultos, más conocido como "PISA para Adultos"), también de la OCDE, capta mejor que PISA la situación de la educación en un país.

PIAAC se aplica a la población de 16 a 65 años y evalúa tres competencias cognitivas:
Comprensión lectora  Capacidad de comprender y utilizar la información escrita en diversos contextos para lograr distintas metas y desarrollar conocimientos y potencialidades. Se incluye la capacidad de leer textos digitales. Estudios muestran que la compresión lectora está estrechamente vinculada a la obtención de resultados positivos en el trabajo, así como a la participación social y el aprendizaje a lo largo de la vida.

Capacidad de cálculo Capacidad de utilizar, aplicar, interpretar y comunicar información matemática e ideas.
Capacidad para resolver problemas en contextos informatizados Capacidad de utilizar la tecnología para resolver problemas y realizar tareas complejas. No es una medida de "alfabetización informática" sino de las competencias cognitivas que se requieren en la era de la información. Se evalúan tanto competencias de orden superior como competencias básicas.
PIAAC recaba información sobre cómo usan las personas adultas estas habilidades en el hogar, en el trabajo y en la comunidad.
  • La entrevista a las personas se realiza en sus hogares, 5.000 personas en cada país.
  • Las preguntas de la prueba pueden contestarse en la computadora o en papel
La prueba se aplicó por primera vez en 2011. 39 países han participado hasta hoy en PIAAC, en tres rondas:
Ronda 1: 24 países (2011-2012)
Alemania, Australia, Austria, Bélgica, Canadá, Corea, Dinamarca, España, Estados Unidos, Estonia, Federación Rusa, Finlandia, Francia, Irlanda, Italia, Japón, Noruega, Países Bajos, Polonia, República Checa, República de Eslovaquia, Suecia, Reino Unido (Inglaterra e Irlanda del Norte),

Ronda 2: 9 países (2014-15)
Chile, Eslovenia, Grecia, Indonesia, Israel, Lituania, Nueva Zelanda, Singapur, Turquía

Ronda 3: 7 países (2017)
Ecuador, Hungría, Kazakhstan, México, Perú, Estados Unidos. 

Los informes de las diversas rondas del PIAAC pueden verse aquí.
El último informe (2019) puede verse aquí.
La información de cada país participante puede verse aquí.

Lastimosamente, la mayoría de publicaciones están en inglés, hay pocos materiales traducidos al español.

La información provista por el PIAAC ayuda a visualizar mejor:
  • El aprendizaje (educación, formación, capacitación) como un continuo a lo largo de la vida, desde la juventud hasta la edad adulta (16-65 años).
  • Diversos niveles y dimensiones de analfabetismo entre personas que se consideran alfabetizadas o son dadas por alfabetizadas. 
  • Los niveles de compatibilidad o incompatibilidad entre la demanda de competencias laborales y las competencias efectivas. 
  • Uso de las competencias evaluadas en el hogar, el trabajo y la comunidad. 
  • Los niveles de equidad en el acceso a la educación y a los aprendizajes.  
  • La movilidad intergeneracional.
  • La transición de la educación al trabajo.
  • Una mejor y más clara identificación de los grupos vulnerables o en riesgo.
  • La relación entre las competencias cognitivas y variables tales como el nivel de educación, la salud, el trabajo, etc.
Textos relacionados en OTRAƎDUCACION
- Artículos sobre PISA (compilación)


El Ecuador en las pruebas internacionales de educación



Reviso aquí los resultados de tres pruebas internacionales de educación en las que ha participado el Ecuador:

1) SERCE y TERCE (Segundo y Tercer Estudio Regional Comparativo y Explicativo, respectivamente) del Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) coordinado por UNESCO-OREALC y aplicadas a estudiantes de 4º y 7º de educación básica. Evalúan lectura, matemáticas y ciencias naturales. En el TERCE se agregó escritura. El SERCE se aplicó en 2006 y el TERCE en 2013;

2) PISA-D de la OCDE, aplicada a jóvenes de 15 años en 2017, evalúa las mismas competencias de PISA: lectura, matemáticas y ciencias y sus resultados son comparables con los de PISA; y

3) PIAAC (Programa para la Evaluación Internacional de las Competencias de los Adultos), de la OCDE, aplicada a personas de 16 a 65 años en 2017. PIAAC evalúa tres competencias: comprensión lectora, capacidad de cálculo y resolución de problemas en entornos informáticos.

Las tres pruebas dan una visión panorámica del estado de la educación en el país incluyendo la educación básica (SERCE y TERCE), jóvenes de 15 años en educación secundaria (PISA-D) y población adulta de 16 a 65 años (PIAAC).

En el caso de las pruebas de la OCDE, me interesa comparar al Ecuador no con los países de la OCDE (sabemos que las distancias en los puntajes son muy grandes) sino con otros países latinoamericanos.


1. SERCE y TERCE / UNESCO-OREALC: 4º y 7º de educación básica (2006 y 2013)

Antes de que apareciera PISA, en el año 2000, en América Latina se había iniciado un proceso de evaluación comparativa a nivel regional mediante las pruebas del Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE), coordinado por la oficina regional de la UNESCO, con sede en Santiago. Dichas pruebas se aplican en educación primaria y evalúan tres áreas: lenguaje, matemáticas y ciencias naturales. 
Los estudios del LLECE también aplican cuestionarios para comprender el contexto y circunstancias en que se da el aprendizaje ("factores asociados").
▸ Primer estudio (PERCE, 1997). Se aplicó en 3º y 4º grados. Lenguaje y Matemáticas. Participaron 13 países.
▸ Segundo estudio (SERCE, 2006). Se aplicó en 3º y 6º grados. Se agregó Ciencias Naturales para 6º grado (opcional). Participaron 16 países y el estado mexicano de Nuevo León.
▸ Tercer estudio (TERCE, 2013). Se aplicó en 3º y 6º grados, igual que el SERCE. Participaron 15 países: Argentina, Brasil, Chile, Colombia, Costa Rica, Ecuador, Guatemala, Honduras, México, Nicaragua, Panamá, Paraguay, Perú, República Dominicana y Uruguay, y en el estado mexicano de Nuevo León. La información del TERCE es comparable con la del SERCE, de modo que es posible ver el avance, estancamiento o retroceso de los sistemas escolares desde 2006. (Ver, en este blog: América Latina y las pruebas del LLECE).

▸ Cuarto estudio (ERCE, 2019). Se aplicará en 18 países y dará a conocer sus resultados en 2020.
El Ecuador no participó en el PERCE. En el SERCE se ubicó en el grupo de países con niveles más bajos de logro (junto con El Salvador, Guatemala, Nicaragua, Panamá, Paraguay y República Dominicana). Los resultados del TERCE mostraron mejoras en los puntajes de Lenguaje y Matemáticas (no se pueden analizar comparativamente los resultados en Ciencias Naturales pues el Ecuador no tomó esa prueba en el SERCE). pero en el cuadro regional se ubicó en la media regional en Lectura en 3º y en Matemática en 3º y 6º; bajo la media en Lectura y Escritura en 6º (7º de básica); y ningún área sobre la media.

En el TERCE el Ecuador se ubicó en la media regional, por debajo de la media regional en Lectura y Escritura de 6º (7º de básica), y ningún área sobre la media. Ver esta tabla de la UNESCO.


La UNESCO puso una alerta roja en Lectura en los resultados del TERCE:
"Ecuador presenta puntajes que no difieren del promedio regional en casi todas las pruebas. La excepción es lectura en sexto grado, donde el promedio del país es significativamente menor al promedio regional" (Ficha de logro de aprendizaje Ecuador, p.2)
2. PISA-D / OCDE: estudiantes de 15 años (2017)

La prueba internacional PISA, de la OCDE, se aplica cada 3 años, desde el año 2000, a jóvenes de 15 años. Evalúa tres competencias: lectura, cálculo y ciencias, cada una organizada en 6 niveles: el nivel 1 se subdivide en 1a, 1b y 1c. El nivel 2 es considerado el nivel básico de habilidades para poder desenvolverse en el ámbito educativo y social.

PISA-D es un proyecto de la OCDE creado en 2014 para países de ingresos bajos y medios. En la primera aplicación participaron 7 países, 3 de ellos de América Latina: Camboya, Ecuador, Guatemala, Honduras, Paraguay, Senegal y Zambia.

La decisión de participar en PISA-D la tomó en 2014 el gobierno de Rafael Correa. Las pruebas piloto se hicieron en 2016 y el estudio principal en octubre de 2017. Su implementación estuvo a cargo del Instituto Nacional de Evaluación Educativa (INEVAL) conjuntamente con la OCDE.

En el Ecuador las pruebas se aplicaron a más de 6.100 estudiantes de 15 años en 173 planteles educativos, fiscales, fiscomisionales, privados y municipales, elegidos de manera aleatoria, Los estudiantes se encontraban cursando entre 8° de Educación General Básica y 3° de Bachillerato. Las pruebas no se vinculan con el currículo escolar del Ecuador; se basan en competencias comparables a nivel internacional.

El 11 de diciembre de 2018 la OCDE dio a conocer mundialmente los resultados de PISA-D, en un acto realizado en Quito con la presencia de Andreas Schleicher, director de PISA. Aquí se presentó el informe internacional elaborado por la OCDE (PISA para el Desarrollo, Resultados en Foco, Pisa en Foco #91, dic. 2018) y el informe nacional elaborado por la OCDE y el INEVAL.

El BID hizo asimismo un resumen y un análisis de los resultados de PISA-D (Nota PISA #13. ¿Qué aprendizajes nos deja PISA para el Desarrollo?, 2018) y específicamente del caso del Ecuador (Nota PISA #17 Ecuador: ¿Se pueden cerrar las brechas de aprendizaje que existen en el país?, 2019).

Algunos resultados y conclusiones de PISA-D en el Ecuador:

- Los estudiantes ecuatorianos obtuvieron los siguientes puntajes
:
Matemática 377 puntos (nivel 1a), hasta 379 nivel 1
Ciencia 399 puntos (nivel 2), hasta 398 nivel 1
Lectura 409 puntos (nivel 2), hasta 406 nivel 1

El promedio de ALC fue de 379, 406 y 398 en cada uno de los campos evaluados, respectivamente. El promedio de la OCDE es 490, 493 y 493.

• Lectura: 49.4% de los estudiantes ecuatorianos alcanzó el nivel mínimo (nivel 2) de habilidades en Lectura. Las mujeres obtuvieron mejores resultados que los hombres, como en todos los países.

• Matemáticas: 29.1% de los estudiantes ecuatorianos alcanzó el nivel mínimo (nivel 2) de habilidades en Matemáticas. La brecha de género en Matemáticas fue pronunciada (20 puntos).

• Ciencias: 47,3% de los estudiantes ecuatorianos alcanzó el nivel mínimo (nivel 2) de habilidades en Ciencias. En Ecuador, Guatemala, Honduras y Paraguay, el nivel 1a fue el nivel promedio de competencia científica entre los estudiantes.

El Objetivo de Desarrollo Sostenible 4 (ODS 4) prevé que para 2030 todos los niños y jóvenes alcancen al menos el nivel 2 en Lectura y en Matemáticas al terminar la educación secundaria inferior.

- El factor que más influye sobre el
resultado de los estudiantes ecuatorianos es el socioeconómico, con una diferencia de alrededor de 100 puntos entre los que asisten a colegios con más y menos recursos, lo que equivale a una diferencia de más de 3 años de escolaridad según el marco conceptual de PISA y PISA-D.


- Los resultados en el Ecuador están más estrechamente asociados al nivel socioeconómico que en el promedio de los países de la OCDE. Esto significa que en el Ecuador los estudiantes tienden a asistir a escuelas en las que la mayoría de sus compañeros pertenecen al mismo grupo socioeconómico.

- Hay una diferencia significativa en Lectura (19 puntos) entre el desempeño de los estudiantes de escuelas urbanas y rurales.

- El Ecuador obtuvo los mejores resultados en el grupo de países participantes en PISA-D; en relación a América Latina se ubicó dentro de la media y muy por debajo de los países de la OCDE en las tres áreas evaluadas.

3. PIAAC / OCDE: personas de 16 a 65 años (2017)


Países participantes en PIAAC (2008-2019)
Ronda 1
(2008-2013)
Alemania, Australia, Austria, Bélgica, Canadá, Corea del Sur, Dinamarca, España, Estados Unidos, Estonia, Finlandia, Francia, Irlanda, Italia, Japón, Noruega, Países Bajos, Polonia, Eslovaquia, República Checa, Rusia, Reino Unido, Suecia
Ronda 2
(2012-2016)
Chile, Eslovenia, Grecia, Indonesia, Israel, Lituania, Nueva Zelanda, Singapur, Turquía
Ronda 3
(2017-2018)
Hungría, Kazajstán, Perú, México, Ecuador
Fuente: OECD 2019

El Programa para la Evaluación Internacional de las Competencias de los Adultos (PIAAC) es una suerte de PISA para adultos; se aplica a personas de 16 a 65 años de edad. Evalúa tres competencias: comprensión lectora (6 niveles), capacidad de cálculo (6 niveles) y resolución de problemas en contextos informáticos. Además, se analiza qué tanto usan las personas estas competencias en el trabajo y en la vida diaria.

La decisión de participar en el PIAAC se tomó en el gobierno de Rafael Correa, a través del Ministerio Coordinador del Conocimiento y Talento Humano. La prueba fue aplicada en octubre de 2017 y estuvo a cargo del INEVAL (Instituto Ecuatoriano de Evaluación Educativa).

39 países han participado hasta ahora en el PIAAC, 4 de ellos de América Latina: Chile, Ecuador, México y Perú. Chile participó en la ronda 2 (2014-2015); los otros tres participaron en la ronda 3 (2017-2018).

El informe consolidado de las tres rondas fue dado a conocer por la OCDE en noviembre de 2019 (Skills Matter. Additional Results from the Survey of Adult Skills, OCDE, París, 2019, en inglés) así como una Nota de País sobre el Ecuador también preparada por la OCDE (Country Note Ecuador 2019, en inglés). Aquí el informe nacional preparado por el INEVAL y la OCDE (Resultados PIAAC. Competencias de la población adulta en el Ecuador - 2019, en español).

El informe nacional presenta y compara los resultados solo de los países participantes en la Ronda 3; Ecuador, Hungría, Kazajistán, Perú y México. Ignoramos por qué se tomó esta decisión. El informe internacional de la OCDE (en inglés) presenta y compara los resultados de los 39 países participantes en las tres rondas del PIAAC. Como tal, resulta de hecho mucho más interesante e informativo. Varios de los datos que incluimos aquí son tomados del informe internacional.

Perfil de las personas evaluadas en el Ecuador:
- 44,0% hizo la evaluación en la computadora y 53,8% la hizo en papel.
- 47% tiene educación secundaria incompleta, 32% tiene educación secundaria completa y 21% tiene educación superior.

En casi todos los países participantes hay una brecha importante entre el grupo más joven (16 a 25 años) y el grupo de mayor edad (55 a 65 años).

Los cuatro países latinoamericanos participantes en el PIAAC se ubicaron a la cola de la lista de países. El Ecuador ocupa el último lugar en comprensión lectora y en capacidad de cálculo.

• Comprensión lectora: El PIAAC define comprensión lectora como la habilidad para entender, evaluar, utilizar y relacionar textos escritos. 71.2% está en el nivel 1 o bajo el nivel 1.

• Capacidad de cálculo: El PIAAC define la capacidad de cálculo como la habilidad para acceder, utilizar (computar/medir), interpretar y comunicar información matemática; involucra además la gestión de las demandas en matemática que se presentan en la  vida diaria. 77% está en el nivel 1 o bajo el nivel 1; 3% alcanza el nivel 3.

• Resolución de problemas en contextos informáticos: 90% está bajo el nivel 1 o en el nivel 1 (60% bajo el nivel 1 y 30% en el nivel 1). Solo 5,2% alcanza los niveles 2 y 3. 32.9% dice no tener experiencia en el uso de la computadora.

Se observa asimismo discrepancias entre el nivel educativo alcanzado por las personas y las competencias en los tres dominios evaluados. En otras palabras, hay muchas personas con estudios de primaria, secundaria y hasta universitaria que tienen bajo desempeño en las tres áreas evaluadas.
Informe OCDE: PIAAC, comprensión lectora, personas de 16 a 65 años, niveles 1 a 5.

Informe OCDE: PIAAC, capacidad numérica, personas de 16 a 65 años, niveles 1 a 5.

Informe OCDE: PIAAC, resolución de problemas, personas de 16 a 65 años, niveles 1 a 3.

Para saber más

- Instituto Nacional de Evaluación Educativa del Ecuador (INEVAL)
- Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE)
- OECD, PISA
- BID, América Latina y el Caribe en PISA
- BID/CIMA, Nota PISA 17: ¿Se pueden cerrar las brechas de aprendizaje que existen en el país?, 2018

¿PISA para qué? El Ecuador en PISA-D


Rosa María Torres





Escribí este artículo en 2014, a raíz de que el gobierno de Rafael Correa (2007-2017) anunció su decisión de participar en la prueba internacional PISA (Programme for International Student Assessment- Programa para la Evaluación Internacional de Alumnos) de la Organización para la Cooperación y el Desarrollo Económicos (OCDE). Concretamente, la participación sería en  PISA for Development  ("PISA para el Desarrollo" PISA-D), una iniciativa de la OCDE para países de ingresos medios y bajos.

Discutí la necesidad y la conveniencia de participar en dicha prueba.
A contracorriente, me opuse a que el Ecuador ingresara a PISA y expliqué por qué. El gobierno, con gran triunfalismo, anunciaba por entonces que ¡en el año 2018 tendríamos uno de los mejores sistemas educativos de América Latina y del mundo!

 7 países participaron finalmente en PISA-D:
Camboya, Ecuador, Guatemala, Honduras, Paraguay, Senegal y Zambia.

71% de los estudiantes ecuatorianos de 15 años obtuvo bajo desempeño en Matemáticas, 57% en Ciencias y 51% en Lectura. En PISA, bajo desempeño se considera por debajo del Nivel 2.
Este es el informe nacional. Este el informe de la OCDE. Y éste un análisis del BID.



Las pruebas PISA de la OCDE

PISA, de alcance mundial, mide competencias en tres áreas: lectura, matemáticas y ciencias, y viene aplicándose desde el año 2000, cada tres años, a jóvenes de 15 años de edad. En los países de la OCDE, los jóvenes a esa edad están próximos a concluir la educación obligatoria. En los llamados "países en desarrollo" muchos jóvenes a esa edad están fuera del sistema educativo, ya porque nunca accedieron a éste, ya porque lo abandonaron.

Más de 70 países han participado en PISA. 10 países de América Latina y el Caribe participaron en PISA 2015: Argentina, Brasil, Colombia, Costa Rica, Chile, México, Perú, República Dominicana, Trinidad y Tobago, y Uruguay (En Argentina, la prueba cubrió solo el 55% de los jóvenes de 15 años, por lo que no se reportaron datos a nivel nacional sino solamente para la ciudad de Buenos Aires).

Los resultados de PISA vienen ubicando reiteradamente en los primeros lugares a los países asiáticos, a los escandinavos en Europa, y a Canadá. A su vez, los países latinoamericanos vienen ubicándose en los últimos lugares del ranking mundial de PISA, con Chile en primer lugar, seguido de Uruguay.  

PISA para el Desarrollo (PISA-D)


El Ecuador participó por primera vez en PISA a través de PISA-D, una iniciativa de la OCDE pensada para atraer a países de ingresos bajos y medios. Los países que manifestaron inicialmente interés en participar fueron: Camboya, Ecuador, Guatemala, Mongolia, Punjab (Pakistán), Senegal, Sri Lanka y Zambia. (Ver reunión técnica, junio 2013). Finalmente confirmaron su participación nueve países: Bután y Camboya (Asia); Ecuador, Guatemala, Honduras, Panamá y Paraguay (América Latina); Senegal y Zambia (Africa). (Ver, en este blog: PISA para 'países en desarrollo').
 

El Instituto Nacional de Evaluación Educativa (INEVAL), creado en nov. 2012, fue el encargado de implementar PISA-D en el Ecuador. Posteriormente anunció que el país participará en otra prueba de la OCDE, el PIAAC, que evalúa competencias en personas de 16 a 65 años de edad. El PIAAC se aplicó en octubre de 2017; la OCDE dio a conocer sus  resultados en noviembre de 2019.

El gobierno de Correa anunció entusiasmado el ingreso del Ecuador a PISA-D. No compartí el entusiasmo. He dado seguimiento a PISA desde sus inicios, en el año 2000. Cada nueva aplicación, y la creciente expansión e influencia de PISA en el mundo y en esta región específicamente me ha vuelto cada vez más crítica y escéptica sobre sus virtudes y utilidad. Expongo aquí mis razones y la referencia específica al caso del Ecuador.

1. Creciente cuestionamiento mundial a las pruebas estandarizadas 

- Las pruebas estandarizadas - nacionales e internacionales - se caracterizan entre otros por su homogeneidad y masividad. Se asume que todas las instituciones, los alumnos o los profesores (de un país, de un conjunto de países, del mundo) aprenden o deben aprender lo mismo y ser evaluados del mismo modo. Absurdo. En realidad, "la educación del siglo 21" no existe: difiere grandemente entre países, entre grupos sociales, entre culturas.


- En los últimos años viene produciéndose un doble movimiento a nivel internacional: más pruebas estandarizadas y más crítica a dichas pruebas, especialmente en los países del Norte y en aquellos que las crearon y popularizaron. En Estados Unidos ha venido extendiéndose el rechazo y el boicot. En América Latina, Chile, pionero en evaluación educativa y con cuya asesoría se crearon los sistemas nacionales de evaluación en muchos países, puso en el banquillo al SIMCE (Sistema de Medición de la Calidad de la Educación), creado en 1988 y referente por muchos años dentro y fuera de la región. (Ver: Campaña ¡Alto al SIMCE!).

- Los más pobres, y sobre todo el mundo indígena, son los más perjudicados con las pruebas estandarizadas. A los problemas de un sistema educativo que irrespeta las realidades, las especificidades culturales y lingüísticas, y los derechos de los pueblos indígenas, se agregan las pruebas, con los mismos problemas de pertinencia y relevancia. Si añadimos la pobreza y la discriminación que padecen los indígenas, puede entenderse por qué obtienen sistemáticamente los peores resultados escolares. El gobierno ecuatoriano llegó a anunciar que las pruebas PISA-D se aplicarían también en la educación intercultural bilingüe y que las traducirían a lenguas indígenas (!).

- Si se busca la comparación internacional entre países, las pruebas del Laboratorio. Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) de la UNESCO, que vienen aplicándose en la región desde 1997, están más cercanas a las realidades de América Latina y el Caribe que la OCDE y las suyas. (Ver: Cinco razones para ser parte del estudio TERCE)

2. Crecientes cuestionamientos a PISA 

Son cada vez más las voces críticas de PISA en el mundo y cada vez más las voces críticas de PISA en América Latina. Educadores, académicos y expertos, en el Norte y en el Sur, vienen levantando interrogantes y cuestionamientos de orden técnico, social, pedagógico, financiero, político e ideológico, tanto desde la perspeciva del proceso como de sus resultados e impacto.

▸ Un sistema de evaluación pensado desde y para la OCDE  PISA fue creada por la OCDE y para los países de la OCDE (los países ricos, desarrollados, industrializados). Las competencias que mide (en lectura, matemáticas y ciencias) se consideran indispensables para preparar a los jóvenes para el futuro y para la 'sociedad del conocimiento'. "Jóvenes", "necesidades", "futuro", "sociedad del conocimiento" están pensados desde las realidades y la cosmovisión del Norte.

- Los países del Sur que han venido incoporándose a PISA aceptan esos parámetros; es más, aceptan que son posibles (¿necesarios?) parámetros y estándares comunes de evaluación de aprendizajes para todos los países del mundo. De un tiempo a esta parte, y sobre todo a medida que han venido sumándose "países en desarrollo", PISA ha venido diversificando algunas preguntas.

Una visión de los países del Sur desde una concepción simplista, homogénea y lineal de rezago con respecto a los países del Norte  Las interpretaciones de los resultados de PISA concluyen que los países con puntajes más bajos están "retrasados" equis número de años de escolaridad con respecto a los países con puntajes más altos.

A
partir de los resultados de PISA 2015 el BID calculó y concluyó, por ejemplo, que América Latina tenía en promedio un rezago de 2.5 años de escolaridad respecto de los países de la OCDE. La tarea de mejora para los países del Sur se plantea, así, en términos de alcanzar a los países que se ubican en la cúspide de PISA. No importan las diferencias entre los países (económicas, culturales, sociales, aspiracionales, etc.) ni cuáles han sido las estrategias seguidas por los países ubicados en el top de PISA para lograr esos resultados.
"México tiene una diferencia de 80 puntos con el promedio de la OCDE, lo que equivale a que los estudiantes mexicanos tienen el equivalente de dos años menos de educación que sus contrapartes" (Gabriela Ramos, Directora de Gabinete de la OCDE. Países latinoamericanos copan los últimos puestos de la lista de educación Pisa)

"Chile, el más aventajado de los países del grupo latinoamericano, exhibe un rendimiento promedio que equivale a un año menos de escolarización que en España y Portugal, 2 años menos que en Suiza y 3 años menos que en Singapur. Son brechas sustanciales que es imprescindible enfrentar" (José Joaquín Brunner. Prueba Pisa: ¿por qué a los países de América Latina les va tan mal?)
 Fuente: BID, ¿Cómo le fue a América Latina en PISA 2015?, Washington, D.C., 2016

Si las pruebas fuesen diseñadas desde las realidades y cosmovisiones de los países del Sur los países del Norte podrían encontrarse en "desventaja" en varios aspectos. Lo que saben y saben hacer millones de quinceañeros en América Latina, Africa o Asia dejaría tal vez mal parados a jóvenes de países con necesidades básicas satisfechas y con parámetros de vida muy diferentes.

▸ Obsesión con los rankings y fomento de la competencia entre escuelas y entre países  La carrera tras puntajes y ránkings exacerba la competencia entre estudiantes, profesores, planteles, países. Prepararse para las pruebas y aprobarlas con los puntajes más altos se convierte en objetivo, más que el aprendizaje propiamente tal. En varios países se prepara a los alumnos para las pruebas, con lo cual éstas no reflejan realmente lo que saben los alumnos sino lo que han logrado aprender ejercitándose para tomar dichas pruebas. El tiempo dedicado en cada país y en cada plantel a prepararse para las pruebas es preocupante. Mejorar puntajes entre una prueba y otra pasa a ser asunto de vida o muerte. En las diferencias - que pueden ser de pocos puntos y hasta decimales - se juegan percepciones y juicios definitorios sobre los estudiantes, las familias, los profesores, los sistemas escolares, los aprendizajes, los conocimientos, los países.

- Cuando Finlandia cayó en el ranking en PISA 2012, hubo alarma mundial. No obstante, Finlandia continúa siendo un modelo educativo ejemplar. Y al revés: entre los "top 10" hay países en los que esos puntajes y rankings se consiguen con sufrimiento, infelicidad y suicidio adolescente, como es el caso de varios países asiáticos que se ubican en la cima de PISA, especialmente Corea del Sur, donde PISA identifica los niveles más bajos de satisfacción estudiantil. Todos se fijan en el resultado, el puntaje, el ránking; pocos se preguntan cómo se llega ahí, a qué costo personal, familiar y social. (Ver en este blog: ¿China, Corea del Sur o Finlandia?)

Los puntajes en PISA como criterio definitorio para determinar el nivel y la 'calidad' de la educación en cada país  La idea de que los puntajes en PISA definen el nivel educativo de un país es tan generalizada como absurda.

PISA:


- se centra en los jóvenes de 15 años. El PIAAC (Programa de Evaluación de Competencias de los Adultos), también de la OCDE, abarca a la población de 16 a 65 años, y tiene mucho más que decir sobre el nivel educativo de un país.

- se centra en el sistema educativo formal.
Fuera de PISA está el vasto mundo de los aprendizajes informales, los saberes prácticos, los conocimientos ancestrales, un mundo de conocimientos y competencias que no se dejan ver ni medir fácilmente y que son parte del capital cultural que cultiva y desarrolla toda persona a lo largo de su vida.

- capta una pequeña parte del currículo escolar. Fuera de PISA quedan las ciencias sociales, las artes, la literatura, "los saberes humanísticos necesarios para ejercer la ciudadanía". (Ver en este blog: Una prueba no prueba nada)


▸ Los impactos de la información arrojada por PISA sobre los países participantes 

- La divulgación, cada tres años, de los resultados de PISA levanta gran revuelo y una guerra de interpretaciones de los datos y de atribuciones de culpa en cada país, pero pasado el evento mediático a menudo no siguen políticas y medidas coherentes con dichos resultados (Ver, en este blog: Pruebas PISA: Seis conclusiones y una pregunta).

- Entre una aplicación y otra no se observan avances en los países, como sería de esperar, o bien dichos avances son mínimos, siendo más frecuentes el estancamiento y hasta el retroceso.


- Para los países que se ubican en los últimos lugares, los impactos domésticos de PISA son devastadores. Nadie disfruta esperando, cada tres años, volver a colocarse a la cola, con magros avances para mostrar o, peor aún, con retrocesos que explicar. Lo usual es endilgar la responsabilidad a los profesores. 
 
- La carrera por mejorar los puntajes y el ránking en la siguiente prueba instala verdaderas cruzadas en cada país. En algunos se elaboran manuales para profesores y directivos, se rediseñan currículos y textos escolares, se crea toda una red paralela de instituciones que ofrecen "preparar para PISA" en función de mejorar los resultados en la próxima prueba. El gran negocio detrás de las pruebas, y de PISA específicamente, es otro flanco de la crítica.


- Está asimismo el creciente papel de la OCDE como organismo que evalúa, orienta y asesora a los países en materia de políticas educativas y para la educación. La dependencia de la OCDE en estas funciones tiende a acentuarse en los 'países en desarrollo'.

- En junio 2013, los ministros de educación del MERCOSUR, reunidos en Uruguay, redactaron y enviaron una carta a Andreas Schleicher, director de PISA, planteándole una serie de preocupaciones y la necesidad de "latinoamericanizar" PISA. (El director de INEVAL, representando al Ecuador y presente en la reunión, no firmó la carta).

3. La actual reforma educativa global infectada por el GERMen de la competencia, la evaluación, las pruebas estandarizadas, los rankings, la 'excelencia'

- En un artículo que traduje al español - Un GERMen infecta a los sistemas escolares - el especialista finlandés Pasi Sahlberg escribió sobre el GERM (Global Education Reform Movement - Movimiento Global de Reforma Educativa) y algunas de sus características prominentes: evaluación, competencia, estandarización, pruebas estandarizadas, excelencia. Este GERMen infecta hoy a la mayoría de sistemas escolares y reformas educativas en el mundo. Finlandia es, justamente, un país anti-GERMen: rechaza las pruebas estandarizadas, fomenta la colaboración antes que la competencia, privilegia la equidad sobre la excelencia (Ver en este blog: Sobre la educación en Finlandia). 

- El Ecuador es actualmente un país fuertemente contagiado por el GERMen. La evaluación y los ránkings (de los alumnos, de los docentes, de los planteles) se expanden a todos los niveles. Se da por "mejores" sin más, a quienes obtienen los mejores puntajes; mejor puntaje, a su vez, se asocia - erradamente - con talento o inteligencia superior. (Ver en este blog: ¿Buen estudiante es el que saca buenas notas?). De los puntajes obtenidos en las pruebas dependen el ingreso a la universidad y a la carrera elegida, el acceso a becas y a una serie de incentivos y premios.

- La búsqueda de 'excelencia' aparece como bandera y norte. La posesión de títulos, sobre todo de Ph.D., vertebra la reforma universitaria y la noción de 'meritocracia'. La experiencia y el expertise en un campo - que solo se adquiere con años de estudio/investigación/trabajo - pierden valor.

- La cúpula política y técnica asume como incuestionable (y así lo transmite al país) algo que viene siendo puesto en tela de juicio por las investigaciones y por la propia evaluación de las evaluaciones: la evaluación por sí misma no mejora la educación. Son viejas las constataciones de que la evaluación a menudo no realimenta la política educativa y tiene más bien efectos perversos sobre la enseñanza y los aprendizajes, tensionando relaciones, tiempos, ritmos, y entorpeciendo, antes que estimulando, el aprendizaje. Sabido es que el aprendizaje significativo parte de adentro, de motivaciones propias, de esfuerzos sostenidos en la curiosidad, en la pasión, en el placer de la búsqueda. 

- En este clima hiper-competitivo e hiper-evaluador, PISA contribuirá a reforzar la competencia y el aprender para la prueba. En PISA-D el primer nivel de competencia es con países con sistemas escolares de bajo rendimiento y enseguida con el conjunto de países participantes en PISA a nivel mundial.

- ¿Por qué y para qué engrosar la cola de los países latinoamericanos en PISA? Para comparaciones internacionales de logros de aprendizaje, ya tenemos el LLECE. Bien nos viene compararnos con los que están más próximos, pero igualmente distantes, en el contexto latinoamericano.

- El Ecuador tiene pendientes batallas fundamentales como son la batalla por la calidad, por la equidad y por el aprendizaje, más allá del acceso y la permanencia; por el Aprendizaje a lo Largo de la Vida; por una pedagogía renovada; por un país que lee y escribe; por la adquisición de otras lenguas desde la infancia; por una educación familiar, comunitaria y ciudadana más allá de los saberes y canales formales; por una educación libre de violencia y abuso en las aulas; por una educación inter- y pluricultural, diversificada y propia, inspirada en y orientada hacia el Buen Vivir (Sumak Kawsay).


- En todo caso, lo que debería seguir a una evaluación en el marco de PISA-D no es una carrera por incrementar puntajes y mejorar el ranking en PISA, carrera que - como hemos visto - implicaría años de penosos esfuerzos para cualquier país no-OCDE, y sin ninguna garantía de éxito. Es una carrera para transformar la educación dentro y fuera del sistema educativo en aquellos aspectos que la evaluación ratifique como esenciales para avanzar en calidad, relevancia, equidad y aprendizaje en los propios términos, aspiraciones y ritmos de cada sociedad nacional.

Para saber más

» PISA: Preguntas Frecuentes
»
"The PISA for Development initiative moves forward: Have my wishes been fulfilled?" , 2 Feb. 2015.

» El TERCE se diferencia de otros estudios similares como PISA, entrevista con Jorge Sequeira, Director Regional de Educación para América Latina y el Caribe, OREALC-UNESCO, Santiago, 2 abril 2014.
» Informe PISA: Pobre Finlandia, Enrique Bethencourt, 2 abril 2014.
» ¿Déficit democrático en los informes PISA?, Josep M. Vallès, El País, 22 abril 2014
» “How Does PISA Put the World at Risk”, Dr. Yong Zhao .
» Ítems liberados de pruebas de evaluación y otros recursos, INEE, España
» "Los niños educados en casa sacan mejores resultados en PISA": Manel Moles. Por Anna Flotats, Publico.es, 19 abril, 2014.
» ¿Para qué sirve PISA?, Eduardo Andere, Educación Futura, 14 abril 2014.
» Mal parados, Eduard Punset, 20 abril 2014
» América Latina en PISA 2012 - Brief 6: ¿Cómo se desempeñan los estudiantes pobres y ricos?, BID, marzo 2014
» América Latina en PISA 2012 - Brief 9 ¿Cómo se relaciona el aprendizaje estudiantil con los recursos que se invierten en educación?, BID, abril 2014
» Bárbara Figueroa critica la Prueba PISA porque mide asuntos 'ajenos a la realidad educativa chilena', Terra, 3 abril 2014
» Chile: Ocho de cada 10 directores adecuan pruebas de sus colegios para preparar el SIMCE,  La Tercera, 12 abril 2014
» Lo que oculta el informe Pisa, Carlos Manuel Sánchez, XL Semanal, 27 abril 2014

Textos relacionados en
OTRAƎDUCACION
» Sobre evaluación en educación | On Evaluation in Education

» Artículos sobre PISA | Articles on PISA

» Sobre la educación en Finlandia
» ¿China, Corea del Sur o Finlandia?
» Repensando el entusiasmo evaluador y las pruebas
» Una prueba no prueba nada

» Glosario mínimo sobre la educación en Finlandia

» Cuba y Finlandia

» Malos resultados escolares, ¿quién tiene la culpa? 
» ¿Qué es educación de CALIDAD?

» El absurdo de la repetición escolar
» Un GERMen infecta a los sistemas escolares
» No existe "la educación del siglo 21"
» Voces críticas de PISA en América Latina
» Reformas educativas en América Latina, hoy 
» "La calidad de la educación empieza con el buen trato" 
» El Ecuador en las pruebas internacionales de educación

LinkWithin

Related Posts Plugin for WordPress, Blogger...