See English text: Now comes PISA for "developing countries"
Muchos cuestionamientos vienen haciéndose a la prueba internacional PISA (Programa Internacional de Evaluación de los Almunos) de la OCDE (Organización para la Cooperación y el Desarrollo Económicos), la cual evalúa competencias en lectura, matemáticas y ciencias entre jóvenes de 15 años. Las pruebas se aplicaron por primera vez en el 2000 y desde entonces cada tres años. Algunos de los cuestionamientos se refieren a la inadecuación de dichas pruebas para los llamados "países en desarrollo".
Los países latinoamericanos participantes en PISA vienen ubicándose a la cola de los resultados de esta prueba, todos ellos lejos de los puntajes de los "países desarrollados" o "países OCDE" (México, Chile y Colombia han sido incorporados oficialmente como países OCDE).
Diseñadas y pensadas por la OCDE y para los países OCDE (los "países ricos"), las pruebas han venido incorporando poco a poco a "países en desarrollo", "países pobres", países no-OCDE (Ver: lista de países que han participado en PISA)
Los cuestionamientos sobre la inadecuación o inutilidad de PISA para los países no-OCDE se han referido entre otros a:
» la necesidad de contextualizar las pruebas, atendiendo a la gran heterogeneidad (socio-económica, cultural, etc.) de los países, y de los "países en desarrollo" específicamente;
» muchos jóvenes de 15 años están fuera del sistema escolar o lo han abandonado (las tasas de abandono, sobre todo en la educación secundaria, son altas);
» no hay capacidad técnica en la mayoría de estos países para conducir pruebas estandarizadas masivas como PISA;
» muchos países participan ya en pruebas comparativas a nivel internacional (como las pruebas LLECE de la UNESCO en el caso de América Latina);
» los efectos devastadores que tiene al interior de los países, cada tres años, la publicación de los bajos resultados y de los ránkings comparativos a nivel internacional;
» la enorme atención que dedican los gobiernos a mejorar puntajes y ránkings entre una prueba y otra, lo que distrae tiempo y recursos de cuestiones fundamentales y del objetivo del aprendizaje en cuanto tal.
Algunos de estos cuestionamientos se han expresado en cartas abiertas a la OCDE tales como la enviada en 2013 por un grupo de Ministros de Educación, desde América Latina (Los Ministros de Educación del MERCOSUR y la prueba PISA) o la enviada en 2014 por 92 académicos y especialistas de Estados Unidos y otros países desarrollados (¡Paren PISA!). También se han planteado cuestionamientos en Chile (Bárbara Figueroa critica la Prueba PISA porque mide asuntos 'ajenos a la realidad educativa chilena') y desde el Ecuador a propósito de la conveniencia o no de que este país se incorpore a PISA (¿PISA para qué? El Ecuador en PISA-D). (Ver: Voces críticas de PISA desde América Latina).
PISA para el Desarrollo (PISA-D): Hacia una globalización de PISA
En respuesta a estos y otros cuestionamientos, la OCDE propuso PISA for Development (PISA para el Desarrollo PISA-D), una iniciativa para países de ingresos bajos y medios. La idea es ampliar la participación de estos países en PISA, en el marco de una estrategia de globalización de PISA.
Se espera que los resultados de aprendizaje en los países de ingresos bajos y medios sean inferiores a los de los países de ingresos altos. En los "países ricos" la mayoría de resultados de aprendizaje se ubica en y a partir de los niveles 3 y 4 de competencia en las tres áreas evaluadas: lectura, matemáticas y ciencias. En los "países pobres" los resultados de aprendizaje se ubican en la base, entre los niveles 1 y 2. Cada área tiene 6 niveles; el nivel 6 refleja la competencia más alta y el nivel 1 la competencia más baja. El nivel 2 se considera básico.
Siete países - de Africa, Asia y América Latina - decidieron participar en esta primera aplicación de PISA-D: Camboya (Asia); Ecuador, Guatemala, Honduras y Paraguay (América Latina); Senegal y Zambia (Africa). Ver mapa abajo (Ver: Reunión técnica, junio 2013; OECD Call for Tender 100000990, August 2014).
PISA-D puede ser administrado tanto dentro como fuera del sistema escolar. En 6 países se aplicó PISA-D fuera del sistema escolar: Guatemala, Honduras, Panamá, Paraguay, Senegal y Zambia.
Los países latinoamericanos participantes en PISA vienen ubicándose a la cola de los resultados de esta prueba, todos ellos lejos de los puntajes de los "países desarrollados" o "países OCDE" (México, Chile y Colombia han sido incorporados oficialmente como países OCDE).
Diseñadas y pensadas por la OCDE y para los países OCDE (los "países ricos"), las pruebas han venido incorporando poco a poco a "países en desarrollo", "países pobres", países no-OCDE (Ver: lista de países que han participado en PISA)
Los cuestionamientos sobre la inadecuación o inutilidad de PISA para los países no-OCDE se han referido entre otros a:
» la necesidad de contextualizar las pruebas, atendiendo a la gran heterogeneidad (socio-económica, cultural, etc.) de los países, y de los "países en desarrollo" específicamente;
» muchos jóvenes de 15 años están fuera del sistema escolar o lo han abandonado (las tasas de abandono, sobre todo en la educación secundaria, son altas);
» no hay capacidad técnica en la mayoría de estos países para conducir pruebas estandarizadas masivas como PISA;
» muchos países participan ya en pruebas comparativas a nivel internacional (como las pruebas LLECE de la UNESCO en el caso de América Latina);
» los efectos devastadores que tiene al interior de los países, cada tres años, la publicación de los bajos resultados y de los ránkings comparativos a nivel internacional;
» la enorme atención que dedican los gobiernos a mejorar puntajes y ránkings entre una prueba y otra, lo que distrae tiempo y recursos de cuestiones fundamentales y del objetivo del aprendizaje en cuanto tal.
Algunos de estos cuestionamientos se han expresado en cartas abiertas a la OCDE tales como la enviada en 2013 por un grupo de Ministros de Educación, desde América Latina (Los Ministros de Educación del MERCOSUR y la prueba PISA) o la enviada en 2014 por 92 académicos y especialistas de Estados Unidos y otros países desarrollados (¡Paren PISA!). También se han planteado cuestionamientos en Chile (Bárbara Figueroa critica la Prueba PISA porque mide asuntos 'ajenos a la realidad educativa chilena') y desde el Ecuador a propósito de la conveniencia o no de que este país se incorpore a PISA (¿PISA para qué? El Ecuador en PISA-D). (Ver: Voces críticas de PISA desde América Latina).
PISA para el Desarrollo (PISA-D): Hacia una globalización de PISA
En respuesta a estos y otros cuestionamientos, la OCDE propuso PISA for Development (PISA para el Desarrollo PISA-D), una iniciativa para países de ingresos bajos y medios. La idea es ampliar la participación de estos países en PISA, en el marco de una estrategia de globalización de PISA.
Se espera que los resultados de aprendizaje en los países de ingresos bajos y medios sean inferiores a los de los países de ingresos altos. En los "países ricos" la mayoría de resultados de aprendizaje se ubica en y a partir de los niveles 3 y 4 de competencia en las tres áreas evaluadas: lectura, matemáticas y ciencias. En los "países pobres" los resultados de aprendizaje se ubican en la base, entre los niveles 1 y 2. Cada área tiene 6 niveles; el nivel 6 refleja la competencia más alta y el nivel 1 la competencia más baja. El nivel 2 se considera básico.
Siete países - de Africa, Asia y América Latina - decidieron participar en esta primera aplicación de PISA-D: Camboya (Asia); Ecuador, Guatemala, Honduras y Paraguay (América Latina); Senegal y Zambia (Africa). Ver mapa abajo (Ver: Reunión técnica, junio 2013; OECD Call for Tender 100000990, August 2014).
PISA-D puede ser administrado tanto dentro como fuera del sistema escolar. En 6 países se aplicó PISA-D fuera del sistema escolar: Guatemala, Honduras, Panamá, Paraguay, Senegal y Zambia.
 |
| Mapa tomado del sitio del Instituto Nacional de Evaluación Educativa (INEVAL), Ecuador |
La OCDE ve las siguientes ventajas a obtenerse con PISA for Development:
"PISA for Development busca incrementar la relevancia de PISA para las políticas de los países en desarrollo, mediante instrumentos mejorados que sean más relevantes a los contextos de los países en desarrollo pero que produzcan puntajes en las mismas escalas de la evaluación de PISA. El proyecto también desarrollará un enfoque y una metodología para incluir a jóvenes que están fuera de la escuela. Los objetivos del proyecto se cumplirán en un período de 36 meses, en una alianza tripartita que involucra a la OCDE, a socios del desarrollo interesados (miembros del DAC - Comité de Asistencia para el Desarrolo de la OCDE -además del Banco Mundial, la UNESCO y otros organismos de Naciones Unidas y organizaciones regionales) y países participantes del mundo en desarrollo".
- En: OECD Post-2015, Element 2, Paper 1: The OECD's contribution on education to the post-2015 framework: PISA for Development (Nuestra traducción del inglés).
- "Una referencia única respecto de la cual determinar el grado de progreso en las metas de calidad y equidad en educación.
- Una medición comparable y robusta de progreso que permita a todos los países – independientemente de su punto de partida – ubicarse en una trayectoria de mejoramiento a fin de lograr metas internacionales comunes.
- Resultados creíbles y comparables: PISA requiere que los países participantes sigan estándares técnicos, institucionales y administrativos comunes en la evaluación.
- Una oportunidad para ayudar a construir capacidad institucional. Los países son los responsables de supervisar la ejecución de PISA; por tanto, la participación en PISA también puede llevar a mejoras en las instituciones".
La toma de conciencia en torno a la llamada "crisis global de aprendizaje" (millones de niños y niñas en el mundo que no están aprendiendo a leer, escribir y calcular después de pasar cuatro o más años en la escuela), que por primera vez reconoció la precariedad del aprendizaje tanto en el marco de la EPT como de los ODM, centradas en el acceso, han puesto la medición de los aprendizajes como un tema central y a la OCDE/PISA como un actor y un aliado clave.
"Desarrollar una medida universal de éxito educativo" es uno de once puntos con los cuales la OCDE se plantea contribuir a la Agenda Post-2015 (Beyond the MDGs: Towards an OECD contribution to the post-2015 agenda). La OCDE se propone establecer UNA definición de éxito educativo y UNA manera de medirlo en todo el mundo. PISA-D es la estrategia y el instrumento para incorporar a esa "otra parte del mundo" que aún no ha entrado a la pista de la evaluación, las pruebas estandarizadas y los ránkings.
Un actor mayor y viejo entusiasta de la evaluación como el Banco Mundial bendice la evaluación global de aprendizajes y la recomienda especialmente para los "países en desarrollo".
"En una economía global, el primer indicador de éxito ya no es la mejora de estándares nacionales sino los sistemas con mejor rendimiento a nivel internacional. (Dicho esto, también es importante que los países establezcan y midan metas de aprendizaje que reflejen sus propias prioridades y valores nacionales). Esto significa usualmente participar en uno de los muchos programas internacionales de evaluación que miden matemáticas, ciencias, resolución de problemas u otras competencias de los estudiantes del mismo grado o de la misma edad en los diferentes sistemas educativos en el mundo. Los países - particularmente los países en desarrollo y las economías emergentes - pueden sentirse en desventaja en esta comparación global, pero deben tener en cuenta que lo importante es la mejora continua a lo largo del tiempo" (Education: Measuring for Success in Today’s World, 9 May 2014).PISA-D: Cuestiones que necesitan mayor atención y discusión
Las siguientes cuestiones se mencionaban en el artículo "The PISA for Development initiative moves forward: Have my wishes been fulfilled?" (2 Feb. 2015):
» Una prueba con preguntas que puedan responder efectivamente los jóvenes de 15 años en los países en desarrollo.
El plan original de la OCDE era utilizar solamente las 337 preguntas de su repertorio para crear la prueba de PISA-D. No obstante, un año y medio más tarde, la OCDE empezó a explorar la posibilidad de complementar las preguntas de PISA con otras usadas en evaluaciones regionales e internacionales. La idea es asegurar que las preguntas puedan ser efectivamente contestadas por los jóvenes de 15 años en estos países.
» Una prueba que pueda ser costeada por los países en desarrollo.
El piloto de PISA-D cuesta el doble que la aplicación de la prueba regular de PISA, puesto que hay mucho trabajo adicional que desarrollar, entre otros, adaptar el cuestionario a los contextos de estos países y diseñar una metodología para incluir a los jóvenes que están fuera del sistema escolar. Donantes como el Banco Mundial han provisto considerable financiamiento a fin de facilitar la participación de estos países. En cualquier caso, es esencial tener en cuenta la sustentabilidad a largo plazo de PISA-D, si los países van a tener que cubrir sus costos.
» Una prueba que contribuya al aprendizaje de todos.
El piloto enfrenta el desafío de recolectar datos de toda la cohorte de 15 años en un país, lo que incluye también a quienes están fuera del sistema escolar: población que nunca fue a la escuela o que se retiró.
Agregamos, además, el reto de llegar a grupos que no hablan la lengua oficial o que tienen dificultades en su manejo escrito.
Los resultados de PISA-D a nivel escolar son comparables con los resultados de los países que han venido participando en PISA.
Ver: Michael Ward, "Making PISA more relevant to more of the world", OCDE, 6 Dec. 2018.
Ver: Michael Ward, "Making PISA more relevant to more of the world", OCDE, 6 Dec. 2018.
Resultados de PISA-D
La OCDE dio a conocer los resultados de PISA-D el 11 de diciembre de 2018, en Quito.
Los resultados incluyen a 7 países:
Camboya
Ecuador
Guatemala
Honduras
Paraguay
Senegal
Zambia
Camboya
Ecuador
Guatemala
Honduras
Paraguay
Senegal
Zambia
Textos relacionados en OTRAƎDUCACION
- Sobre evaluación en educación | On Evaluation in Education
- Artículos sobre PISA | Articles on PISA
