El Foro Económico Mundial y la calidad de la educación


Rosa María Torres






La Agencia Pública de Noticias del Ecuador y Sudamérica (Andes) publicó una nota titulada "Ecuador lidera ranking de calidad en educación primaria de Suramérica" (25 abril 2014). La nota citaba el Informe Global de Competitividad 2013-2014 del Foro Económico Mundial. El Ecuador aparecía en la posición 74 (3.8 puntos) en calidad de la educación primaria. Costa Rica aparecía en la posición 32 (4.8 puntos), es decir, primero en América Latina. (Ver la tabla de ránkings, al pie) Los mismos valores vuelven a repetirse en informes de competitividad más recientes del FEM.

El rankeo de "calidad de la educación primaria" del Foro Económico Mundial me llamó la atención. Por un lado, la presencia (o ausencia) de varios países del mundo entre los primeros 74 lugares; por otro lado, los valores asignados a países de América Latina. Esto no coincide con el estado del conocimiento al respecto en esta región ni con los resultados de aprendizaje en educación primaria medidos por las pruebas del Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE) de la UNESCO, las cuales evalúan aprendizajes en Lenguaje y Matemática (3º y 6º grados) y Ciencias de la Naturaleza (6º grado). Cuba sobresalió en en el primer estudio (PERCE, 1997). En el segundo estudio (SERCE, 2006) Cuba, Chile, Costa Rica, México y Uruguay se ubicaron por encima del promedio regional; Ecuador, Guatemala, Nicaragua, Panamá, Paraguay, Perú y República Dominicana se ubicaron por debajo del promedio regional (Ver Informe completo y Resumen Ejecutivo del SERCE). En el tercer estudio (TERCE), aplicado en 2013, el Ecuador se ubicó en la media y por debajo de la media regional. (Ver: El Ecuador en las pruebas del LLECE: SERCE y TERCE).

Por eso decidí investigar cómo define calidad educativa el Foro Económico Mundial y cómo establece los ránkings. Descubrí que se trata de una Encuesta de Opinión (Opinion Survey) - "La Voz de la Comunidad de Negocios". (110 informantes en Costa Rica; 118 en el Ecuador, para los diversos tópicos). Descubrí también que lo que la encuesta pregunta no es acerca de la calidad de la educación sino acerca de la calidad de las escuelas. Lo que no es lo mismo.

Como puede verse en la Tabla 4.9 sobre Quality Primary Education, la pregunta dice:


En su país, ¿cómo evaluaría usted la calidad de las escuelas primarias?
1 = extremadamente pobre - entre las peores del mundo. 
7 = excelente - entre las mejores del mundo.

* nuestra traducción del inglés


Surgen varias inquietudes:

a) El Foro Económico Mundial no aclara que el indicador 'calidad de la educación' se refiere a  percepciones y opiniones, no a resultados objetivos de investigación o evaluación.

b) La "comunidad de negocios" no es necesariamente una voz especializada en el campo educativo y en el de la calidad educativa específicamente. Calidad de la educación (en cualquier nivel, de cuaquier tipo) es un concepto complejo y muy debatido, que depende de muchos factores. Definirlo y categorizarlo requiere conocimiento especializado e informado. Por otra parte, los Institutos Asociados (Partner Institutes), como se los denomina en el informe, pueden tener vínculos con el gobierno, lo que hace difícil una opinión independiente; 

c) La calidad de la educación está esencial y finalmente relacionada con los procesos y los resultados de aprendizaje.  Instrumentos y medidas específicas se han desarrollado a nivel nacional e internacional para evaluar dichos procesos y resultados;

d) La pregunta se refiere a escuelas primarias, no a educación primaria. Esto puede llevar a prestar atención a cuestiones como la infraestructura o el equipamiento más que a la educación, la pedagogía y el aprendizaje;

e) En América Latina y en otras regiones "en desarrollo" persisten a menudo grandes brechas entre escuelas rurales y urbanas así como entre escuelas indígenas y no-indígenas, lo que hace muy difícil juzgar escuelas primarias en general;

f) Es ampliamente conocido, y ratificado por investigaciones, que el nivel de satisfacción con la educación y los sistemas escolares está estrechamente relacionado con el nivel educativo de la población o de quienes opinan. Sociedades menos educadas tienden a estar satisfechas con la educación que reciben, mientras que sociedades más educadas están más insatisfechas y tienen posiciones más críticas. De este modo se reproduce el círculo vicioso de la mala calidad educativa. 

Un estudio realizado por el Banco InterAmericano de Desarrollo (BID) en 2007 agregando preguntas a la Encuesta Mundial Gallup, concluyó que América Latina tiene una "satisfacción excesiva" en relación a los servicios de salud y de educación, dada la objetiva calidad de dichos servicios. Esto es especialmene cierto en el caso de la educación. Disciplina, seguridad e infrastructura tienden a ser valoradas por los latinoamericanos más que la enseñanza y el aprendizaje en las aulas. Las percepciones sobre la calidad están muy distantes de la realidad. Solo Argentina mostró un nivel de satisfacción más realista. Ver: Calidad de vida: Más allá de los hechos, Eduardo Lora (ed.), BID, 2007.

De hecho, la misma situación se da con las pruebas PISA (aplicada a jóvenes de 15 años). A pesar de que los países latinoamericanos participantes en la prueba ocupan sistemáticamene los últimos lugares en las tres áreas evaluadas (lectura, matemáticas, ciencias), la pregunta acerca de si "soy feliz en la escuela" arrojó respuestas inesperadas en PISA 2012. La paradoja bajos resultados / alta satisfacción es prominente en el caso de América Latina. Nuevamente, Argentina es al menos más coherente: bajos resultados y alumnos menos felices. (ver gráfico abajo)

En conclusión: los valores y ránkings del Foro Económico Mundial referidos a calidad de la educación no deben ser tenidos en cuenta como indicadores válidos.




RANK         COUNTRY/ECONOMY              VALUE

1 Finland ........................................... 6.8
2 Belgium ......................................... 6.3
3 Singapore ...................................... 6.0
4 Barbados ....................................... 6.0
5 Switzerland .................................... 6.0
6 New Zealand ................................ 5.8
7 Lebanon ........................................ 5.7
8 Ireland ............................................ 5.7
9 Malta ............................................. 5.7
10 Netherlands ..................................5.7
11 Qatar ............................................5.6
12 Cyprus ..........................................5.6
13 Canada .........................................5.5
14 Taiwan, China  ..............................5.4
15 Iceland ..........................................5.4
16 Bosnia and Herzegovina...............5.4
17 Brunei Darussalam........................5.3
18 Estonia ..........................................5.2
19 United Arab Emirates ...................5.2
20 Slovenia ........................................5.1
21 Japan ...........................................5.1
22 Australia ........................................5.0
23 Korea, Rep...................................5.0
24 Sweden ........................................5.0
25 Germany .......................................5.0
26 Lithuania .......................................5.0
27 Montenegro ..................................5.0
28 Austria ..........................................4.9
29 Norway .........................................4.9
30 Hong Kong SAR ...........................4.9
31 United Kingdom ............................4.9
32 Costa Rica.....................................4.8
33 Malaysia ........................................4.8
34 Latvia ............................................4.8
35 France ..........................................4.7
36 Guyana .........................................4.7
37 Ukraine .........................................4.7
38 Croatia ..........................................4.7
39 Luxembourg .................................4.7
40 Italy ...............................................4.7
41 United States ................................4.7
42 Denmark .......................................4.7
43 Sri Lanka......................................4.6
44 Jordan ..........................................4.6
45 Trinidad and Tobago ......................4.6
46 Portugal ........................................4.5
47 Mauritius .......................................4.5
48 Bhutan ..........................................4.5
49 Seychelles .....................................4.4
50 Gambia, The.................................4.4
51 Czech Republic............................4.3
52 Hungary ........................................4.3
53 Albania ..........................................4.3
54 Slovak Republic............................4.3
55 Indonesia ......................................4.3
56 China ............................................4.3
57 Oman ...........................................4.2
58 Poland ..........................................4.2
59 Saudi Arabia.................................4.2
60 Bulgaria ........................................4.1
61 Russian Federation.......................4.1
62 Swaziland .....................................4.1
63 Zimbabwe .....................................4.1
64 Bahrain .........................................4.0
65 Iran, Islamic Rep...........................4.0
66 Spain ............................................4.0
67 Botswana .....................................4.0
68 Suriname ......................................4.0
69 Kazakhstan ...................................3.9
70 Macedonia, FYR...........................3.9
71 Israel .............................................3.9
72 Tunisia ..........................................3.9
73 Cape Verde..................................3.9
74 Ecuador ........................................3.8

SOURCE: World Economic Forum, Executive Opinion Survey


Textos relacionados en este blog
» 
Sobre evaluación en educaciónOn Evaluation in Education

»  Buena escuela pública: LAPOP versus TERCE 


The World Economic Forum and educational quality

Rosa María Torres


The Ecuadorian Public News Agency (Andes) published the note "Ecuador leads the primary education quality ranking in South America" ("Ecuador lidera ranking de calidad en educación primaria de Suramérica", 25 April 2014). The note quoted the Global Competitiveness Index 2013-2014  of the World Economic Forum (WEF). Ecuador appears in position number 74 (3.8 points) in this category. Andes refers to South America - and not to Latin America - since Costa Rica (located in Central America) appears in position 32 (4.8 points), thus with a leading position in the region. (See table at the bottom)

WEF's ranking on educational quality took us by surprise as well as the values attributed to Latin American countries. In the regional context, Cuba occupies a prominent position in the two studies conducted so far by UNESCO's Latin American Laboratory for Assessment of the Quality of Education (LLECE). LLECE tests assess Language and Mathematics in third and sixth grades, and Natural Sciences in sixth grade. 16 countries participated in the second study (SERCE, 2006). Cuba, Chile, Costa Rica, Mexico and Uruguay were above the regional average; Ecuador, Guatemala, Nicaragua, Panama, Paraguay, Peru and the Dominican Republic appeared below the regional average. (See SERCE's Executive Summary).

The presence (or absence) of other countries in the world in the first 74 positions of quality primary education, also called our attention. Thus, we decided to find out how WEF defines quality education and establishes the rankings. It turns out that they result from an Opinion Survey - "The Voice of the Business Community" (110 respondents in Costa Rica; 118 in Ecuador, for the various topics).

As seen on Table 4.9 on Quality Primary Education, the question asked was:


In your country, how would you assess the quality of primary schools?
1 = extremely poor - among the worst in the world.
7 = excellent - among the best in the world.


Several concerns arise:

a) WEF does not indicate that the 'quality of education' indicator is related to perceptions and opinions, rather than to objective research.

b) The business community is not necessarily a specialized voice in the field of education and in he topic of educational quality. Also, Partner Institutes - as they are called in the report- may be linked to the government in ways that make it difficult to have an independent opinion. Quality of education (of any level and sort) is a complex and much debated concept, dependant on many factors. Dealing with it requires specialized and well-informed knowledge;

c) Quality of education is essentially and ultimately related to learning processes and outcomes. Specific measures and instruments have been developed nationally and internationally in order to assess such processes and outcomes, beyond opinions;

d) The question asks about primary schools - not about primary education. This leads to pay attention to issues such as infrastructure or equipment, disregarding education as such, pedagogy and learning;

e) In Latin America and in other "developing regions" there are often huge and persistent gaps between rural and urban schools, and between indigenous and non-indigenous schools, thus making it very difficult to judge quality of primary schools in general;

f) It is widely acknowledged and confirmed that less educated societies or segments of the population tend to be the ones that are most satisfied with their school systems and the education they receive, while more educated societies or social segments tend to be more dissatisfied and critical. This reinforces the vicious circle of low quality education.

A study conducted by the InterAmerican Development Bank (IDB), adding specific questions to the Gallup World Survey, concluded that Latin America has "excessive satisfaction" vis a vis health and education services, given the objective quality of such services. This was and remains true especially in the case of education. Discipline, security and infrastructure tend to be valued by Latin Americans much more than teaching, learning, and effective learning outcomes. Perceptions of quality are particularly distant from realities. See: Beyond Facts, Understanding Quality of Life, Eduardo Lora (ed.), IDB, 2007.

The same applies to PISA international tests. Despite the fact that participating Latin American countries systematically occupy the last positions in the three areas assessed (reading, mathematics and science), students are quite happy with their schools (question asked: "Am I happy in school?"). The low results/high satisfaction paradox is prominent in Latin America.

In conclusion: we should not consider WEF's values and rankings attributed to quality of education as reliable and useful indicators.




RANK         COUNTRY/ECONOMY              VALUE

1 Finland ........................................... 6.8
2 Belgium ......................................... 6.3
3 Singapore ...................................... 6.0
4 Barbados ....................................... 6.0
5 Switzerland .................................... 6.0
6 New Zealand ................................ 5.8
7 Lebanon ........................................ 5.7
8 Ireland ............................................ 5.7
9 Malta ............................................. 5.7
10 Netherlands ..................................5.7
11 Qatar ............................................5.6
12 Cyprus ..........................................5.6
13 Canada .........................................5.5
14 Taiwan, China  ..............................5.4
15 Iceland ..........................................5.4
16 Bosnia and Herzegovina...............5.4
17 Brunei Darussalam........................5.3
18 Estonia ..........................................5.2
19 United Arab Emirates ...................5.2
20 Slovenia ........................................5.1
21 Japan ...........................................5.1
22 Australia ........................................5.0
23 Korea, Rep...................................5.0
24 Sweden ........................................5.0
25 Germany .......................................5.0
26 Lithuania .......................................5.0
27 Montenegro ..................................5.0
28 Austria ..........................................4.9
29 Norway .........................................4.9
30 Hong Kong SAR ...........................4.9
31 United Kingdom ............................4.9
32 Costa Rica.....................................4.8
33 Malaysia ........................................4.8
34 Latvia ............................................4.8
35 France ..........................................4.7
36 Guyana .........................................4.7
37 Ukraine .........................................4.7
38 Croatia ..........................................4.7
39 Luxembourg .................................4.7
40 Italy ...............................................4.7
41 United States ................................4.7
42 Denmark .......................................4.7
43 Sri Lanka......................................4.6
44 Jordan ..........................................4.6
45 Trinidad and Tobago ......................4.6
46 Portugal ........................................4.5
47 Mauritius .......................................4.5
48 Bhutan ..........................................4.5
49 Seychelles .....................................4.4
50 Gambia, The.................................4.4
51 Czech Republic............................4.3
52 Hungary ........................................4.3
53 Albania ..........................................4.3
54 Slovak Republic............................4.3
55 Indonesia ......................................4.3
56 China ............................................4.3
57 Oman ...........................................4.2
58 Poland ..........................................4.2
59 Saudi Arabia.................................4.2
60 Bulgaria ........................................4.1
61 Russian Federation.......................4.1
62 Swaziland .....................................4.1
63 Zimbabwe .....................................4.1
64 Bahrain .........................................4.0
65 Iran, Islamic Rep...........................4.0
66 Spain ............................................4.0
67 Botswana .....................................4.0
68 Suriname ......................................4.0
69 Kazakhstan ...................................3.9
70 Macedonia, FYR...........................3.9
71 Israel .............................................3.9
72 Tunisia ..........................................3.9
73 Cape Verde..................................3.9
74 Ecuador ........................................3.8

SOURCE: World Economic Forum, Executive Opinion Survey

Related texts in this blog
Sobre evaluación en educaciónOn evaluation in education

PISA ¿para qué? ¿El Ecuador en PISA?


Rosa María Torres



Discuto aquí la importancia y la conveniencia de participar en la prueba internacional PISA y de hacerlo, específicamente, en los 'países en desarrollo'. Analizo el tema desde la perspectiva del Ecuador, que en 2014 decidió incorporarse al proyecto piloto PISA for Development  ("PISA para el Desarrollo"), una iniciativa de la OCDE orientada a países de ingresos medios y bajos. Nueve países decidieron participar en este proyecto: Bután, Camboya, Ecuador, Guatemala, Honduras, Panamá, Paraguay, Senegal y Zambia. Los resultados estarán disponibles en 2018. 

No soy fan de PISA. Me he opuesto a que el Ecuador ingrese a PISA y explico aquí por qué. Para saber más, ver en este blog:
Voces críticas de PISA en América Latina

Una prueba no prueba nada
Reformas educativas en América Latina, hoy

El secreto finlandés es hacer todo al revés


Las pruebas PISA - OCDE

En febrero 2014 el gobierno ecuatoriano anunció la decisión de participar en la prueba internacional PISA (Programme for International Student Assessment- Programa para la Evaluación Internacional de Alumnos) de la Organización para la Cooperación y el Desarrollo Económicos (OCDE). 


PISA, de alcance mundial, mide competencias en tres áreas: lectura, matemáticas y ciencias, y viene aplicándose desde el año 2000, cada tres años, a estudiantes de 15 años de edad. En los países de la OCDE, los jóvenes a esa edad están próximos a concluir la educación obligatoria.

Más de 70 países han participado hasta la fecha en PISA. De América Latina y el Caribe han participado: Argentina, Brasil, Colombia, Costa Rica, Chile, México, Panamá, Perú, República Dominicana, Trinidad y Tobago, y Uruguay. Los resultados de PISA vienen ubicando reiteradamente en los primeros lugares a los países asiáticos, a los escandinavos en Europa, y a Canadá. Los países latinoamericanos aparecen una y otra vez en los últimos lugares. Ver, por ejemplo 

Resultados PISA 2012

▸ Los diez punteros:
Shanghái (613 puntos)
Singapur (573)
Hong Kong (561)
Taipei (560)
Corea del Sur (554)
Macao (538)
Japón (536)
Liechtenstein (535)
Suiza (531)
Holanda (523)

▸ Entre los últimos:
Chile (lugar 51 con 423 puntos)
México (lugar 53 con 413 puntos)
Uruguay (lugar 55 con 409 puntos)
Costa Rica (lugar 56 con 407 puntos)
Brasil (lugar 58 con 391 puntos)
Argentina (lugar 59 con 388 puntos)
Colombia (lugar 62 con 376 puntos)
Perú (último, lugar 65 con 368 puntos)

Las pruebas del LLECE - UNESCO


Antes de que apareciera PISA, en América Latina se había iniciado un proceso de evaluación comparativa a nivel regional mediante las pruebas del Laboratorio Latinoamericano de Evaluación de la Calidad de la Educación (LLECE), coordinado por la oficina regional de la UNESCO en Santiago. Dichas pruebas vienen aplicándose en educación primaria y evalúan tres áreas: lenguaje, matemáticas y ciencias naturales.
▸ El primer estudio (PERCE, 1996) se aplicó en 3º y 4º grados, Lenguaje y Matemáticas. Participaron 13 países.
▸ El segundo estudio (SERCE, 2006), se aplicó en 3º y 6º grados. Se agregó Ciencias Naturales para 6º grado (opcional). Participaron 16 países y el estado mexicano de Nuevo León. Resumen Ejecutivo.
▸ El tercer estudio (TERCE, 2013), se aplicó en 3º y 6º grados, igual que el SERCE. Participaron 15 países. La información del TERCE es comparable con la del SERCE, de modo que es posible ver el avance, estancamiento o retroceso de los sistemas escolares desde 2006. (Ver, en este blog: América Latina y las pruebas LLECE).
El Ecuador no participó en el primer estudio. En el SERCE, resultó ubicado en el grupo de países con niveles más bajos de logro escolar (junto con El Salvador, Guatemala, Nicaragua, Panamá, Paraguay y República Dominicana). Los resultados del TERCE mostraron mejoras en los puntajes de Lenguaje y Matemáticas (no se pueden analizar comparativamente los resultados en Ciencias Naturales pues el Ecuador no tomó esa prueba en el SERCE) pero en el cuadro regional resultó ubicado en la media regional en Lectura en 3er grado y Matemática 3º y 6º; bajo la media en Lectura y Escritura en 6º grado (7º de básica); y ningún área sobre la media.

Están, además, las pruebas nacionales que han venido aplicándose: Aprendo (1996 a 2007), SER (desde 2008), Ser Bachiller (desde 2015); ENES (Examen Nacional de Educación Superior) entre 2012 y 2016.

PISA for Development
- PISA para el Desarrollo


El Ecuador participará por primera vez en PISA en el proyecto piloto PISA for Development (PISA para el Desarrollo), una iniciativa de la OCDE pensada para países de ingresos bajos y medios. Los países que manifestaron inicialmente interés en participar son: Camboya, Ecuador, Guatemala, Mongolia, Punjab (Pakistán), Senegal, Sri Lanka y Zambia. (Ver reunión técnica, junio 2013). Finalmente confirmaron nueve países: Bután y Camboya (Asia); Ecuador, Guatemala, Honduras, Panamá y Paraguay (América Latina); Senegal y Zambia (Africa). (Ver, en este blog: PISA para 'países en desarrollo').
 

El INEVAL (Instituto Nacional de Evaluación Educativa, creado en nov. 2012) anunció que "el Ecuador competirá oficialmente en PISA en 2016". Posteriormente anunció que participará en otra prueba de la OCDE, el PIAAC, que evalúa competencias entre personas de 15 a 65 años de edad, y el cual hará una tercera ronda en 2014-2018. En octubre de 2017 se aplicarán las pruebas dentro del marco del proyecto "PISA para el Desarrollo".

El gobierno de Rafael Correa (2007-2017) anunció con entusiasmo el ingreso a PISA. Sin conocer mucho sobre el tema, la sociedad secundó el discurso oficial y se unió a la celebración.

No comparto ese entusiasmo. Soy investigadora y asesora internacional en políticas de educación y aprendizaje. He dado seguimiento a las sucesivas aplicaciones de PISA, lo que me ha vuelto cada más vez más crítica y escéptica al respecto. Expongo aquí mis razones y la referencia específica al caso del Ecuador.

1. Creciente cuestionamiento mundial a las pruebas y especialmente a las pruebas estandarizadas 


Las pruebas estandarizadas - nacionales e internacionales - se caracterizan entre otros por su homogeneidad y masividad. Se asume que todas las instituciones, los alumnos o los profesores (de un país, de un conjunto de países, del mundo) aprenden o deben aprender lo mismo y ser evaluados del mismo modo. Absurdo. En realidad, "la educación del siglo 21" no existe: difiere grandemente entre países, entre grupos sociales, entre culturas.


En los últimos años viene produciéndose un doble movimiento a nivel internacional: más pruebas estandarizadas y más crítica a dichas pruebas, especialmente en los países del Norte y en aquellos que las crearon y popularizaron. En Estados Unidos se extiende un movimiento de rechazo y de boicot. En América Latina, Chile, pionero en evaluación educativa y con cuya asesoría se crearon los sistemas nacionales de evaluación en muchos países, ha puesto en el banquillo al SIMCE (Sistema de Medición de la Calidad de la Educación), creado en 1988 y referente por muchos años dentro y fuera de la región. (Ver: Campaña ¡Alto al SIMCE!).

Los más pobres, y sobre todo el mundo indígena, son los más perjudicados por las pruebas estandarizadas. A los problemas de un sistema escolar que irrespeta las realidades, las especificidades culturales y lingüísticas, y los derechos de los pueblos indígenas, se agregan las pruebas, con los mismos problemas de pertinencia y relevancia. Si añadimos la pobreza y la discriminación que siguen afectando a los sectores indígenas, puede entenderse por qué obtienen generalmente los peores resultados escolares. El gobierno ecuatoriano anunció que las pruebas de PISA for Development se aplicarán también en la educación intercultural bilingüe.

Las pruebas del LLECE de la UNESCO están más cercanas a las realidades y necesidades de América Latina y el Caribe, que la OCDE y las suyas. (Ver: Cinco razones para ser parte del estudio TERCE)

» Repensando el entusiasmo evaluador y las pruebas
» Una prueba no prueba nada

2. Crecientes cuestionamientos a PISA 


Son cada vez más las voces críticas de PISA en el mundo y cada vez más las voces críticas de PISA en América Latina. Educadores, académicos y expertos, en el Norte y en el Sur, vienen levantando interrogantes y cuestionamientos de orden técnico, social, pedagógico y financiero, tanto desde la perspeciva del proceso como de sus resultados e impacto.

PISA fue creada desde y para los países de la OCDE (los países ricos, desarrollados, industrializados). Las competencias que mide (en lectura, matemáticas y ciencias) se consideran indispensables para preparar a los jóvenes para el futuro y para la 'sociedad del conocimiento'. "Jóvenes", "necesidades", "futuro", "sociedad del conocimiento" están pensados desde la cosmovisión del Norte.

Los países del Sur que han venido incoporándose a PISA aceptan esos parámetros como válidos y deseables; es más, aceptan que son posibles (¿necesarios?) parámetros y estándares comunes de evaluación de aprendizajes para todos los países del mundo. De un tiempo a esta parte, y sobre todo a medida que han venido agregándose "países en desarrollo", PISA ha venido diversificando algunas preguntas.

Típicamente, las interpretaciones de los resultados concluyen que los países con puntajes más bajos están "retrasados" X número de años respecto de los países con puntajes más altos.
"México tiene una diferencia de 80 puntos con el promedio de la OCDE, lo que equivale a que los estudiantes mexicanos tienen el equivalente de dos años menos de educación que sus contrapartes". (Gabriela Ramos, Directora de Gabinete de la OCDE. Países latinoamericanos copan los últimos puestos de la lista de educación Pisa)

"Chile, el más aventajado de los países del grupo latinoamericano, exhibe un rendimiento promedio que equivale a un año menos de escolarización que en España y Portugal, 2 años menos que en Suiza y 3 años menos que en Singapur. Son brechas sustanciales que es imprescindible enfrentar". (José Joaquín Brunner. Prueba Pisa: ¿por qué a los países de América Latina les va tan mal?)
¿Qué pasaría si las pruebas y los ítems fuesen diseñados desde las realidades y cosmovisiones de los países del Sur? Los del Norte podrían encontrarse en una situación similar de "desventaja" en muchos aspectos. Lo que saben y los problemas que son capaces de resolver millones de quinceañeros en países de América Latina, Africa o Asia, dejarían tal vez mal parados a jóvenes de países con necesidades básicas satisfechas y con parámetros de vida muy diferentes.

La carrera por puntajes y ránkings exacerba la competencia entre estudiantes, profesores, planteles, países. Prepararse para las pruebas y aprobarlas con los puntajes más altos posibles se convierte en objetivo, más que el aprendizaje propiamente tal. El tiempo dedicado en cada país, en cada plantel, a prepararse para las pruebas es motivo de creciente preocupación. Mejorar puntajes y rankings entre una prueba y otra pasa a ser asunto de vida o muerte. En las diferencias - que pueden ser de pocos puntos y hasta decimales - se juegan percepciones y juicios definitorios sobre los estudiantes, las familias, los profesores, los sistemas escolares, los aprendizajes, los conocimientos, los países.

Cuando Finlandia bajó escalones en PISA 2012, hubo alarma mundial. No obstante, Finlandia continúa siendo un modelo educativo - no solo escolar - ejemplar. Y al revés: entre los "top 10" hay países en los que esos puntajes y rankings se pagan con sufrimiento, infelicidad y altos índices de suicidio adolescente, como es el caso de varios de los países asiáticos que se ubican en la cima de PISA, muy especialmente Corea del Sur, donde PISA ubica los niveles más bajos de satisfacción estudiantil. Todos se fijan en el resultado, el puntaje, el ránking; pocos se preguntan cómo se llega ahí, a qué costo personal, familiar y social. (Ver en este blog: ¿China, Corea del Sur o Finlandia?)

La idea de que los puntajes en PISA definen el nivel educativo de un país es tan generalizada como absurda. Las pruebas PISA - como cualquier prueba - captan solo una pequeña parte del currículo, de las enseñanzas y de los aprendizajes en el medio escolar, de lo que saben y saben hacer los estudiantes en la vida real. Fuera de PISA queda un mundo de conocimientos y competencias que no se dejan ver ni medir fácilmente. Fuera de PISA quedan los aprendizajes informales, los saberes prácticos, los conocimientos ancestrales, las ciencias sociales, las artes, la literatura, "los saberes humanísticos necesarios para ejercer la ciudadanía". (Ver en este blog: Una prueba no prueba nada)

Hay insatisfacción entre los países participantes en PISA, en el Norte y en el Sur, por la escasa atención prestada por los gobiernos a sus resultados. Su divulgación, cada tres años, levanta gran revuelo y una guerra de interpretaciones de los datos, pero luego no siguen medidas coherentes con dichos resultados. Asimismo, a partir de los resultados de las pruebas, la OCDE interviene crecientemente como organismo que orienta, asesora y controla las políticas educativas de los países

Para los países ubicados en los últimos lugares, los impactos domésticos de PISA son devastadores. Nadie disfruta esperando, cada tres años, volver a colocarse a la cola, a la vista de todos, con magros "avances" a los que aferrarse o, peor aún, con retrocesos que explicar. Lo usual: endilgar la responsabilidad a los profesores. Luego, la carrera por mejorar los puntajes y el ránking en la siguiente prueba instala verdaderas cruzadas en cada país. En algunos se distribuyen manuales para profesores y directivos, se rediseñan currículos y textos escolares, se crea toda una red paralela de instituciones que ofrecen "preparar para PISA" en función de mejorar los resultados en la próxima prueba. El gran negocio detrás de las pruebas, y de PISA específicamente, es otro flanco de la crítica.

En junio 2013, los ministros de educación del MERCOSUR, reunidos en Uruguay, redactaron y enviaron una carta a Andreas Schleicher, director de PISA, planteándole una serie de preocupaciones y la necesidad de "latinoamericanizar" PISA. (El director de INEVAL, representando al Ecuador y presente en la reunión, no firmó la carta). De hecho, ninguno de los países que la firmó está entre los que participan en PISA for Development

3. Ecuador: Un país infectado por el GERMen de la competencia, la evaluación, las pruebas estandarizadas, los rankings, la 'excelencia', los títulos

En un artículo que traduje al español - Un GERMen infecta a los sistemas escolares - el especialista finlandés Pasi Sahlberg escribe sobre el GERM (Global Education Reform Movement - Movimiento Global de Reforma Educativa) y algunas de sus características prominentes: evaluación, competencia, estandarización, pruebas estandarizadas, excelencia. Este GERMen infecta hoy a muchos sistemas escolares y reformas educativas en el mundo. Finlandia es, justamente, un país anti-GERMen: rechaza las pruebas estandarizadas, fomenta la colaboración antes que la competencia, privilegia la equidad sobre la excelencia. (Ver en este blog: Sobre la educación en Finlandia). 

El Ecuador actual es un país fuertemente contagiado por el GERMen. La evaluación y los ránkings (de los alumnos, de los docentes, de los planteles) se expanden a todos los niveles. Se da por "mejores" sin más, a quienes obtienen los mejores puntajes; mejor puntaje, a su vez, se asocia - erradamente - con talento o inteligencia superior. (Ver en este blog: ¿Buen estudiante es el que saca buenas notas?). De los puntajes obtenidos en las pruebas dependen el ingreso a la universidad y a la carrera elegida, el acceso a becas y a una serie de incentivos y premios.

La búsqueda de 'excelencia' aparece como bandera y norte en todos los campos. La posesión de títulos, sobre todo Ph.D., vertebra la reforma universitaria y la noción misma de 'meritocracia'. La experiencia y el expertise en un campo - que solo se adquiere con años de estudio/investigación/trabajo - tienen poco valor.

La cúpula política y técnica asume como incuestionable (y así lo transmite al país) algo que, de hecho, viene siendo puesto en tela de juicio por las investigaciones y por la propia evaluación de las evaluaciones: la evaluación por sí misma no mejora la educación. Son viejas y vigentes las constataciones de que la evaluación rara vez realimenta la política educativa; a menudo tiene más bien efectos perversos sobre la enseñanza y los aprendizajes, tensionando relaciones, tiempos, ritmos, y entorpeciendo, antes que estimulando, el aprendizaje. Sabido es que el aprendizaje significativo parte de adentro, de motivaciones propias, de esfuerzos sostenidos en la curiosidad, en la pasión, en el placer de la búsqueda. 

En este clima hiper-competitivo e hiper-evaluador, la adopción de PISA contribuirá a reforzar los comportamientos proclives a la trampa, al memorismo y al "calentar" para la prueba tan arraigados en la educación y en la cultura escolar de los ecuatorianos. En PISA for Development la competencia es con países con sistemas escolares de bajo rendimiento, entre ellos algunos que no lograron la meta de la educación primaria universal (4 años de escolaridad) dentro de los Objetivos del Milenio (ODM). Más adelante, la competencia será a nivel mundial.

¿Por qué y para qué engrosar la cola de los países latinoamericanos y, en general, de los "países en desarrollo", en PISA? Para comparaciones internacionales de logros de aprendizaje, ya tenemos al LLECE. Bien nos viene compararnos con los que están más próximos, pero igualmente distantes, en el contexto latinoamericano.

El Ecuador tiene pendientes batallas fundamentales como son la batalla por la calidad y por el aprendizaje, más allá del acceso y la permanencia; por el Aprendizaje a lo Largo de la Vida; por una pedagogía renovada; por un país que lee y escribe; por la adquisición de otras lenguas desde la infancia; por una educación familiar, comunitaria y ciudadana más allá de los saberes y canales formales; por una educación libre de violencia y abuso en las aulas; por una educación inter- y multicultural, diversificada y propia, inspirada en y orientada hacia el Sumak Kawsay.


Para saber más

» PISA: Preguntas Frecuentes
» "The PISA for Development initiative moves forward: Have my wishes been fulfilled?" , 2 Feb. 2015.
» El TERCE se diferencia de otros estudios similares como PISA, entrevista con Jorge Sequeira, Director Regional de Educación para América Latina y el Caribe, OREALC-UNESCO, Santiago, 2 abril 2014.
» Informe PISA: Pobre Finlandia, Enrique Bethencourt, 2 abril 2014.
» ¿Déficit democrático en los informes PISA?, Josep M. Vallès, El País, 22 abril 2014
» “How Does PISA Put the World at Risk”, Dr. Yong Zhao .
» Ítems liberados de pruebas de evaluación y otros recursos, INEE, España
» "Los niños educados en casa sacan mejores resultados en PISA": Manel Moles. Por Anna Flotats, Publico.es, 19 abril, 2014.
» ¿Para qué sirve PISA?, Eduardo Andere, Educación Futura, 14 abril 2014.
» Mal parados, Eduard Punset, 20 abril 2014
» América Latina en PISA 2012 - Brief 6: ¿Cómo se desempeñan los estudiantes pobres y ricos?, BID, marzo 2014
» América Latina en PISA 2012 - Brief 9 ¿Cómo se relaciona el aprendizaje estudiantil con los recursos que se invierten en educación?, BID, abril 2014
» Bárbara Figueroa critica la Prueba PISA porque mide asuntos 'ajenos a la realidad educativa chilena', Terra, 3 abril 2014
» Chile: Ocho de cada 10 directores adecuan pruebas de sus colegios para preparar el SIMCE,  La Tercera, 12 abril 2014
» Lo que oculta el informe Pisa, Carlos Manuel Sánchez, XL Semanal, 27 abril 2014

Textos relacionados en
OTRAƎDUCACION

» Sobre evaluación en educación | On Evaluation in Education
» Artículos sobre PISA | Articles on PISA
» Sobre la educación en Finlandia
» ¿China, Corea del Sur o Finlandia?
» Repensando el entusiasmo evaluador y las pruebas
» Una prueba no prueba nada

» Glosario mínimo sobre la educación en Finlandia

» Cuba y Finlandia

» Malos resultados escolares, ¿quién tiene la culpa? 
» ¿Qué es educación de CALIDAD?

» El absurdo de la repetición escolar
» Un GERMen infecta a los sistemas escolares
» No existe "la educación del siglo 21"
» Voces críticas de PISA en América Latina
» Reformas educativas en América Latina, hoy 
» "La calidad de la educación empieza con el buen trato" 

LinkWithin

Related Posts Plugin for WordPress, Blogger...