You are on page 1of 53

Cooperacin internacional en

evaluacin de la educacin en
Amrica Latina y el Caribe

Anlisis de la situacin
y propuestas de actuacin

Alejandro Tiana Ferrer

Banco Interamericano de Desarrollo


Washington, D.C.
Serie de informes tcnicos del
Departamento de Desarrollo Sostenible

Catalogacin (Cataloging-in-Publication) proporcionada por


Banco Interamericano de Desarrollo
Biblioteca Felipe Herrera

Tiana Ferrer, Alejandro.


Cooperacin internacional en evaluacin de la educacin en Amrica Latina y el Caribe :
anlisis de la situacin y propuestas de actuacin / Alejandro Tiana Ferrer.
p. cm. (Sustainable Development Department Technical papers series ; EDU-115)
Includes bibliographical references.
1. Education--Latin America--Evaluation. 2. EducationCaribbean Area--Evaluation.
3. International cooperation. I.Inter-American Development Bank. Sustainable Development
Dept. Education Unit. II. Title. III. Series.

379.174 T453 --dc21


Alejandro Tiana Ferrer es el actual presidente de la Asociacin Internacional para la Evaluacin del Logro Educativo (International Association for the Evaluation of Educational
Achievement, IEA) y profesor y Vice Rector de la Universidad Nacional de Educacin a
Distancia (UNED) de Espaa. Este estudio, que representa parte del seguimiento de la Cumbre
de Santiago, fue encargado por el Banco Interamericano de Desarrollo y financiado con fondos
fiduciarios espaoles.
Las opiniones expresadas son del autor y no representan necesariamente la posicin oficial del
Banco Interamericano de Desarrollo.
diciembre de 2000
Esta publicacin (Nro. de referencia EDU-115) puede obtenerse dirigindose a:
Unidad de Educacin, Publicaciones
Banco Interamericano de Desarrollo
1300 New York Avenue, N.W.
Washington, D.C. 20577
Correo electrnico:
Telefax:
Sitio de Internet:

sds/edu@iadb.org
202-623-1558
www.iadb.org/sds/edu

Prlogo
El presente trabajo trata sobre la naturaleza y el alcance de la participacin de los pases latinoamericanos
en programas regionales e internacionales de evaluacin educativa, tratando de identificar sus puntos
fuertes y dbiles. Finaliza con un conjunto de propuestas, entre las cuales se incluyen la formacin y la
asistencia tcnica, para aumentar la cooperacin internacional. Tambin sostiene que una mayor cooperacin entre pases conducir a una calidad tcnica ms alta y a una mejor utilizacin de las evaluaciones
educativas basadas en los pases.
El autor de este informe, Alejandro Tiana Ferrer, es el actual presidente de la International Association for
the Evaluation of Educational Achievement (IEA) y profesor en la Universidad Nacional Abierta de Espaa, adems de ser una reconocida autoridad en la materia.
Encargado por el Banco Interamericano de Desarrollo, este estudio fue financiado con fondos fiduciarios
espaoles. Fue presentado en una reunin organizada por el Gobierno de Brasil y el Banco en marzo de
2000, como parte del seguimiento a la Cumbre de Santiago.
Actualmente, casi todos los pases de la regin estn llevando a cabo programas de evaluacin de resultados educativos. A travs de su programa de prstamos, as como tambin de asistencia tcnica, el Banco
Interamericano de Desarrollo coopera con muchos de estos pases para fortalecer sus sistemas de evaluacin educativa, ya sea tcnicamente y por medio de una mejor utilizacin de los resultados. Al brindar la
razn y justificacin para una mayor cooperacin internacional, este informe contribuye en forma importante al proceso de mejorar la medicin del logro de los objetivos educativos, lo cual es fundamental para
aumentar la calidad de la educacin en la regin.

Claudio de Moura Castro


Asesor Senior en Educacin
Unidad de Educacin
Departamento de Desarrollo Sostenible

Blank page

Indice

Resumen

El auge de los sistemas de evaluacin de la calidad


de la educacin en Amrica Latina y el Caribe

La participacin de los pases de Amrica Latina y


el Caribe en proyectos internacionales de evaluacin educativa

Perspectivas para la cooperacin internacional de los pases de


Amrica Latina y el Caribe en proyectos de evaluacin educativa

20

Alternativas de actuacin existentes para la cooperacin internacional


en proyectos de evaluacin educativa

29

Propuesta de prioridades futuras

36

Referencias

39

Anexo

41

Blank page

Resumen

Casi todos los pases de Amrica Latina y el Caribe han comenzado a instituir programas de
evaluacin del aprendizaje y logro estudiantil, al
mismo tiempo que varios grupos regionales e
internacionales tambin han iniciado o expandido programas de carcter internacional. Este
trabajo analiza la situacin con respecto a la cooperacin internacional en las evaluaciones educativas y propone que tal cooperacin mejorar
en forma significativa la calidad de las evaluaciones basadas en los pases.

El Programa de Indicadores Mundiales de la


Educacin de la Organizacin para la Cooperacin y el Desarrollo Econmico (OCDE) cre un
estricto conjunto de indicadores comparativos de
la educacin, ahora incluye un grupo de pases
en desarrollo, entre los que se incluyen seis de la
regin. UNESCO/OREALC est procurando
desarrollar un programa complementario para la
regin.
El Programa para la Evaluacin Internacional
del Estudiante (The Program for International
Student Assessment, PISA) de la OCDE, que
comenz en 1998, busca medir las habilidades y
aptitudes de estudiantes de 15 aos de edad en
trminos de sus necesidades en el mundo del
trabajo. Eventualmente, cubrir adems lectoescritura, matemtica y ciencias.

Entre los programas regionales e internacionales


actuales, se encuentran varios. El Programa de
Evaluacin de la Calidad de la Organizacin de
Estados Iberoamericanos (OEI) est principalmente enfocado en el entrenamiento y el intercambio de informacin. En diferentes reuniones
se han discutido cuestiones tales como el anlisis
de los instrumentos evaluativos y la evaluacin
de maestros. Se ha brindado asistencia tcnica a
algunos de los pases ms pequeos.

La Asociacin Internacional para la Evaluacin


del Logro Educativo (The International Association for the Evaluation of Educational
Achievement, IEA), un programa de cooperacin internacional, ha realizado evaluaciones
del aprendizaje desde 1959 y, recientemente, ha
auspiciado la Tercera Encuesta Internacional
sobre Matemtica y Ciencias. Tambin se estn
llevando a cabo programas en las reas de alfabetizacin, educacin cvica y lectura, as como
tambin de seguimiento en el campo de las
ciencias y la matemtica.

El Laboratorio Latinoamericano para la Evaluacin de la Calidad de la Educacin de UNESCO/


OREALC ha realizado una prueba regional de
logros en matemtica y lenguaje en el 3 y 4
grado, para luego analizar los resultados, especialmente en relacin a los factores asociados
con el aprendizaje. Se espera que UNESCO/
OREALC se concentre cada vez ms en el apoyo a la cooperacin internacional y en cuestiones
relacionadas con la utilizacin de evaluaciones.

Los pases latinoamericanos muy probablemente participen en los programas regionales


pero solamente unos pocos, en especial aquellos
ms grandes y avanzados, han tomado parte en
los programas internacionales. Es importante
notar que los programas regionales tienen intereses que se superponen y que, hasta ahora, no
han coordinado sus actividades en forma adecuada.

El Grupo de Trabajo sobre Estndares y Evaluacin Educativa del Programa de Reforma Educativa en Amrica Latina y el Caribe (PREAL),
recientemente establecido, ha estado tratando de
crear una red de profesionales que trabajan en el
rea con el fin evaluar la calidad de las evaluaciones y para abrir el debate sobre el impacto
que las evaluaciones tienen sobre el aprendizaje.
1

En el futuro ser muy posible que se d una


mayor participacin de los pases latinoamericanos en programas regionales e internacionales
ya que existe un mayor entendimiento de la importancia de participar en estos esfuerzos como
una forma de fortalecer las capacidades de los
pases. La cooperacin internacional puede
contribuir en la definicin de estndares, el establecimiento de cifras de referencia y en la
identificacin de los factores asociados con el
aprendizaje. Otras reas de importancia son la
formacin profesional, la elaboracin de indicadores y el desarrollo de centros regionales de
excelencia. Se espera que UNESCO, la OEI y

PREAL continen con sus labores en la regin


y que aumenten la cooperacin, mientras que la
IEA est procurando involucrar a ms pases en
desarrollo en sus programas.
Con respecto a la organizacin, es importante,
ms bien, fortalecer la coordinacin entre los
grupos que estn trabajando en este rea
(UNESCO/OREALC, OEI y PREAL). Tambin
ser importante considerar en qu forma instituciones como la IEA pueden estimular programas
regionales que estn ligados a otros de carcter
internacional.

El auge de los sistemas de evaluacin


de la calidad de la educacin en
Amrica Latina y el Caribe
La concepcin y puesta en marcha de sistemas
de evaluacin de la calidad de la educacin en
Amrica Latina y el Caribe es un fenmeno que
se ha dejado sentir claramente durante la ltima
dcada. Aunque ya con anterioridad al ao 1988,
se iniciaron experiencias pioneras en la regin,
esa fecha puede considerarse como el verdadero
punto de arranque de la nueva tendencia, puesto
que fue entonces cuando algunos pases como
Chile o Brasil comenzaron a dar los primeros
pasos para poner en funcionamiento sus actuales
sistemas nacionales de evaluacin. A comienzos
de los aos noventa se iniciara el proceso en
Honduras (1990), Colombia (1991), Repblica
Dominicana (1992), Argentina (1993) y El Salvador (1993), pases a los que seguiran ms
adelante otros como Mxico (1994), Costa Rica
(1995), Paraguay (1995), Venezuela (1995) o
Bolivia (1996). Cuando llegamos al final de la
dcada, puede afirmarse que la preocupacin por
la evaluacin de la educacin ha llegado a extenderse ampliamente por toda la regin (Arancibia, 1997; Wolff, 1998).

es el caso de las leyes generales de educacin


con rango orgnico o constitucional de Colombia, Brasil o Chile. En conjunto puede decirse
que, si bien los pases de Amrica Latina y el
Caribe se han sumado slo recientemente a esta
tendencia que se aprecia a escala universal, lo
han hecho con decisin y empuje. Ello no quiere
decir, obviamente, que los sistemas implantados
no tengan algunas deficiencias ni que su funcionamiento sea plenamente coherente. Pero, considerado en su conjunto, la sensacin dominante
es la de un proceso pujante y llamado a seguir
desarrollndose.
El propio nombre de sistemas de evaluacin de
la calidad que se ha extendido en la regin es
significativo. En efecto, la puesta en marcha de
mecanismos de evaluacin ha ido estrechamente
ligada a la prioridad poltica concedida en la
misma poca a la mejora de la calidad de la educacin. Frente a las polticas de expansin y acceso a la educacin de pocas anteriores, la dcada de los noventa se ha caracterizado por el
nfasis puesto en la calidad de la educacin. Si
bien la Conferencia que celebr la UNESCO en
Jomtien, en 1990, estuvo dedicada al tema de
Educacin para todos, la reunin de ministros
de Educacin de la OCDE de ese mismo ao
tuvo como lema el de Una educacin y una
formacin de calidad para todos. Ese giro no es
simplemente lingstico, sino que responde a
una nueva definicin de prioridades. La nueva
orientacin poltica que comenz aprecindose
ya a finales de los ochenta entre los pases ms
desarrollados, ha acabado afectando a todos,
tambin a los de Amrica Latina y el Caribe,
segn avanzaban los noventa.

Pero del mismo modo que podemos hablar de la


relativa novedad de este fenmeno, al menos en
comparacin con el largo proceso desarrollado
en otros pases del continente americano, como
Estados Unidos o Canad, o incluso con el seguido por algunos pases europeos, tambin podemos hablar de su indudable empuje. En efecto,
no slo es destacable la rpida expansin que
han experimentado los sistemas de evaluacin
de la calidad de la educacin, sino tambin la
decisin con que ese proceso se ha llevado a
cabo. Asimismo, la voluntad poltica que han
mostrado los responsables de la educacin a la
hora de poner en marcha dichos sistemas, se ha
visto reflejada en la inclusin de los mismos en
varios textos legales de gran importancia, como

De acuerdo con esa nueva tendencia, la puesta


en marcha de sistemas de evaluacin est ligada
3

a la preocupacin por el mejoramiento de la calidad. La evaluacin es concebida como un poderoso instrumento al servicio de la mejora cualitativa de la educacin, gracias al conocimiento
valorativo que proporciona sobre la realidad.
Estrictamente hablando, no se puede decir que
evaluar sea sinnimo de mejorar, pero s puede
considerarse una condicin necesaria para la
mejora, ya que permite estimar el grado de logro
de los objetivos propuestos e identificar las principales fortalezas y debilidades de las acciones
desarrolladas. Por otra parte, tambin hay que
destacar la conexin que se ha establecido entre
evaluacin y seguimiento de los procesos de
reforma educativa, en un periodo en que tantos
pases de la regin se encuentran sumergidos en
ambiciosas transformaciones de sus sistemas de
educacin y formacin (Alvarez H. y RuizCasares, 1997). A travs de esa doble conexin
con la mejora de la calidad y con el pilotaje de
los procesos de cambio, la evaluacin se ha convertido en un recurso de primer orden al servicio
de un nuevo estilo de hacer poltica educativa,
como se pona de relieve en el seminario celebrado en Ro de Janeiro en 1997.

bierno brasileo y la UNESCO, o el que tuvo


lugar en Buenos Aires en 1998, por iniciativa del
gobierno argentino y la OEI, en los que participaron representantes de la mayora de los pases
latinoamericanos.
El objetivo de este documento no es otro que el
de analizar la situacin de la cooperacin internacional en materia de evaluacin educativa en
los pases de Amrica Latina y el Caribe, tratando de identificar sus puntos fuertes y dbiles, as
como las posibilidades que plantea. El propsito
de dicho anlisis es avanzar algunas reflexiones
que sirvan para debatir acerca de las prioridades
que deberan establecerse en este campo para el
futuro prximo.
Con la intencin de responder a esos planteamientos, el documento comienza por analizar la
participacin de los pases de la regin en los
diversos proyectos internacionales actualmente
en desarrollo, as como las caractersticas principales de stos. A continuacin analiza las perspectivas actuales y las posibles lneas de accin
que se abren de cara al futuro, para terminar valorando las principales alternativas existentes y
sugiriendo algunas propuestas concretas que
deben someterse a discusin. Para elaborar el
trabajo, se ha consultado diversa documentacin
producida por los programas analizados, al
tiempo que se ha contado con la colaboracin de
un buen nmero de informantes cualificados y
de actores destacados en el campo de la evaluacin educativa. No obstante, es necesario subrayar que las ideas y opiniones aqu expresadas
corresponden exclusivamente al autor del documento y no reflejan necesariamente los puntos
de vista ni las opiniones de los informantes. An
con mayor razn, no pueden entenderse como
vinculantes para los principales agentes en este
campo.

La expansin de los sistemas nacionales de


evaluacin de la calidad de la educacin ha ido
acompaada de un creciente inters por la cooperacin internacional en este campo. As, en los
ltimos aos se han iniciado en la regin algunos programas de cooperacin internacional en
materia de evaluacin, entre los que destacan
especialmente los desarrollados por la Organizacin de Estados Iberoamericanos para la Educacin, la Ciencia y la Cultura (OEI) y por la Oficina Regional de Educacin para Amrica Latina y el Caribe (OREALC) de la UNESCO.
Adems, se han celebrado algunos encuentros
internacionales que han atrado la atencin de
los especialistas, como el mencionado de Ro de
Janeiro en 1997, celebrado por iniciativa del go-

La participacin de los pases de Amrica Latina


y el Caribe en proyectos internacionales
de evaluacin educativa
A medida que ha ido creciendo el inters de los
pases latinoamericanos y caribeos por la evaluacin de la calidad de la educacin, tambin ha
ido aumentando su participacin en proyectos de
cooperacin internacional en ese mbito. No
obstante, como se ver en este apartado, el grado
de participacin general es an limitado y presenta lagunas, si bien parece estar llamado a crecer en los prximos aos.

cos responsables de dichos programas y a la


produccin de materiales de apoyo.
De acuerdo con su concepcin general, el programa pretende ponerse al servicio tanto de los
pases cuyos sistemas de evaluacin estn en
fase de desarrollo, como de los que se encuentran en fase de consolidacin. Ms que realizar
estudios comparativos de rendimiento, lo que no
entra por el momento en sus previsiones, el programa quiere acomodarse a la diversidad existente de situaciones nacionales, favoreciendo y
potenciando el desarrollo de los sistemas de
evaluacin de los pases asociados.

Los proyectos de cooperacin internacional en


que actualmente estn participando los pases de
la regin son diversos y tienen diferentes propsitos y cobertura: algunos tienen un carcter estrictamente regional, mientras que otros abarcan
reas geogrficas ms amplias; unos promueven
la realizacin de estudios comparativos de rendimiento, mientras que otros tienen como objetivo prestar apoyo de diverso tipo para el desarrollo de los sistemas nacionales de evaluacin. A
continuacin se analizan los cuatro programas
considerados ms importantes, centrndose sobre todo en la incidencia que tienen en la regin.
Aunque puedan existir algunos otros proyectos
transnacionales de evaluacin educativa, el anlisis aqu realizado se ha circunscrito a los que
tienen mayor envergadura y una presencia internacional ms destacada.

Debido a ese carcter amplio y flexible, el programa ha conseguido contar con la participacin
de un gran nmero de pases iberoamericanos,
aunque hay que reconocer que no todos ellos
adoptan un papel igualmente activo. Los pases
actualmente participantes son los siguientes:
Argentina, Bolivia, Brasil, Colombia, Costa Rica, Cuba, Chile, Ecuador, El Salvador, Espaa,
Guatemala, Honduras, Mxico, Nicaragua, Panam, Paraguay, Per, Repblica Dominicana,
Uruguay y Venezuela. Dado su carcter gubernamental, participan en el programa distintas
instituciones vinculadas a los Ministerios de
Educacin de los pases asociados, o bien designadas por ellos. Cuenta, por lo tanto, con una
amplia representacin de los responsables de los
sistemas de evaluacin de la calidad de los pases iberoamericanos. Es necesario sealar que,
dada la definicin iberoamericana de la OEI, el
programa no abarca a los pases anglfonos ni
francfonos de Amrica Latina y el Caribe, al
tiempo que incluye a Espaa.

PROGRAMA DE EVALUACION DE
LA CALIDAD DE LA EDUCACION (OEI)
Este programa fue iniciado como resultado de la
Asamblea General de la OEI celebrada en 1994,
siendo aprobado posteriormente por la Cumbre
Iberoamericana de Jefes de Estado y de Gobierno en 1995. Est orientado hacia el desarrollo y
la consolidacin de los sistemas de evaluacin
de la calidad de la educacin de los pases iberoamericanos, para lo cual concede especial importancia a la capacitacin de los equipos tcni-

Los gastos originados por el funcionamiento del


programa son cubiertos mediante las aportaciones de los pases participantes, existiendo diver5

sas modalidades de contribucin. Adems, algunos pases realizan una aportacin especial y la
OEI tambin contribuye con su propio presupuesto y con sus recursos materiales y personales.

instrumentos de evaluacin, la evaluacin de


los docentes y los centros escolares, o los
factores asociados al rendimiento. Mientras
que algunas de esas reuniones contaron con
la participacin de todos los pases asociados, otras estuvieron encaminadas a capacitar a los tcnicos de algunas regiones con
mayores carencias, como es el caso de Centroamrica y el Caribe. Por ejemplo, en abril
de 1996 se celebr una reunin de capacitacin en San Jos de Costa Rica, para los pases centroamericanos, y en noviembre de ese
mismo ao se celebr otra en Santa Cruz de
la Sierra (Bolivia), para los andinos.

El objetivo general del programa consiste en


potenciar el desarrollo de los sistemas nacionales de evaluacin de los pases participantes.
Para alcanzarlo, se han establecido varios objetivos especficos, entre los que merece la pena
destacar los siguientes:

Facilitar el intercambio de experiencias nacionales y la cooperacin entre los pases


iberoamericanos en materia de evaluacin.

Apoyar, mediante su capacitacin, la formacin y consolidacin de equipos tcnicos.

Asistir tcnicamente en el diseo y aplicacin de modelos y metodologas de evaluacin que respondan a las caractersticas de
cada uno de los pases participantes.

Desarrollar alternativas metodolgicas que


permitan mejorar progresivamente los diversos aspectos del proceso evaluativo.

Promover la utilizacin eficiente y el aprovechamiento de la informacin producida


por los sistemas nacionales de evaluacin.

2. Asistencia tcnica: El programa ha desarrollado diversas misiones de asistencia tcnica,


tanto bilateral como multilateral, de la que
se han beneficiado pases como Paraguay,
Bolivia, Venezuela, Per, Honduras o El
Salvador. Con el paso del tiempo, esta lnea
de actuacin se ha convertido en una de las
principales, concedindosele una importancia creciente. Como medio para asegurar un
mejor desarrollo de esta lnea de trabajo, el
programa ha elaborado un directorio de expertos y de instituciones que pueden colaborar en las tareas de asistencia tcnica.
3. Produccin editorial: El programa ha editado un conjunto de materiales relativos a la
evaluacin de la calidad de la educacin. La
mayora de ellos consisten en las actas o
memorias de las actividades celebradas, pero
tambin ha editado un cierto nmero de documentos preparados por encargo, algunos
de los cuales estn tambin disponibles a
travs de Internet. Las lneas de publicacin
son varias, abarcando anlisis comparativos
de los sistemas nacionales de evaluacin,
repertorios bibliogrficos, mtodos y tcnicas para la construccin de instrumentos y
polticas de difusin y uso de los resultados
de la evaluacin.

En realidad, no todos esos objetivos especficos


se han alcanzado por igual. Los dos ltimos han
quedado en buena medida en el terreno de las
formulaciones, inspirando solamente algunas
acciones ms o menos tmidas, mientras que los
tres primeros han trazado las directrices principales de su plan de actuacin. Eso puede observarse al contrastar la formulacin de objetivos
con las cuatro lneas de accin seguidas hasta el
momento:
1. Capacitacin: Una de las actividades principales del programa ha sido la celebracin de
seminarios, talleres de trabajo, reuniones
consultivas y otros encuentros similares,
orientados a mejorar la formacin de los
equipos responsables de los sistemas nacionales de evaluacin. En esas reuniones se
han abordado temas como el anlisis de los

4. Bancos de informacin: El programa se ha


propuesto elaborar un banco de informacin
bibliogrfica sobre evaluacin, otro que recoja los instrumentos de evaluacin utilizados en los pases participantes y un tercero
que incluya la relacin de los expertos y especialistas de la regin en estos temas. No
6

obstante, hay que sealar que esta cuarta lnea de actuacin ha producido menos resultados concretos hasta el momento que las
tres anteriores, especialmente en la tercera
de las orientaciones mencionadas.

cativas. Todos esos programas pretenden servir


al desarrollo de nuevas estrategias orientadas
hacia la mejora de la calidad de la oferta educativa. Al mismo tiempo, pretenden desarrollar
mtodos que permitan percibir los resultados del
esfuerzo que los pases realizan en materia de
educacin. Por lo tanto, tambin para este programa la evaluacin es considerada un elemento
clave para la formulacin de polticas educativas, as como para el seguimiento y la ejecucin
de las mismas.

El programa entiende la evaluacin como una


herramienta para la gestin de las polticas educativas y como un instrumento de informacin
pblica, teniendo siempre como meta la mejora
cualitativa de la educacin. Por lo tanto, este
Programa subraya siempre su conexin con la
formulacin y anlisis de las polticas educativas
de los pases iberoamericanos. Es importante
sealar que, en las diversas declaraciones de las
asambleas de la OEI, el logro de una mejora de
la calidad est ntimamente ligado a la consecucin de una mayor equidad en materia educativa.
De acuerdo con esa concepcin, calidad y equidad son dos caras de una misma moneda, que
deben marchar estrechamente unidas. La muestra ms clara de ese planteamiento se encuentra
en la denominacin del nuevo programa de la
OEI previsto para el prximo bienio, que lleva
por ttulo Calidad y equidad de la educacin.
En su componente de calidad, el programa
pretende continuar con las actuaciones emprendidas en la etapa anterior en torno a la evaluacin de la calidad de la educacin. Aunque sea
de pasada, es necesario sealar que esa estrecha
conexin entre calidad y equidad es una caracterstica de otros programas desarrollados en la
regin, como es el caso de los promovidos por
OREALC, siguiendo sin duda los principios trazados en el Informe Delors para el siglo XXI
(Delors, 1996).

El laboratorio es concebido como una red de


sistemas de medicin y evaluacin de la calidad,
de carcter gubernamental y coordinado desde la
oficina de OREALC en Santiago de Chile. Su
primera actuacin importante consisti en la
realizacin del Primer estudio internacional
comparativo sobre lenguaje, matemtica y factores asociados en tercero y cuarto grado. Dicho proyecto se bas en la aplicacin de unos
cuestionarios de contexto y unas pruebas de
matemticas y de lengua (espaola y portuguesa,
segn los pases) a una muestra de alumnos de
tercero y cuarto grados de enseanza bsica, as
como la aplicacin de cuestionarios a sus familias, a sus profesores y a los directores de los
centros educativos. Las pruebas y cuestionarios
se aplicaron entre los meses de junio y noviembre de 1997 y el primer informe se hizo pblico
en 1998 (Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educacin, 1998).
El estudio adopt los criterios tcnicos habitualmente aplicados en este tipo de proyectos
internacionales. La elaboracin de las pruebas se
llev a cabo como resultado de un proceso de
anlisis curricular y de la construccin de unas
matrices de objetivos curriculares, realizados de
manera cooperativa entre los pases participantes. Los coordinadores del proyecto consideran
que el anlisis curricular previo tuvo una homogeneidad notable, como consecuencia del sustrato cultural comn de este grupo de pases, lo
que en su opinin redundara en favor de la validez de las pruebas y habra facilitado su proceso
de elaboracin.

LABORATORIO LATINOAMERICANO
DE EVALUACION DE LA CALIDAD DE
LA EDUCACION (OREALC-UNESCO)
El Laboratorio fue creado en 1994 por la Oficina
Regional de Educacin para Amrica Latina y el
Caribe (OREALC) de la UNESCO y constituye
la concrecin operativa de uno de sus programas
estratgicos, genricamente denominado Evaluacin de la calidad de los aprendizajes.
OREALC cuenta con otros dos programas estratgicos que tienen que ver con la evaluacin
educativa, denominados respectivamente Sistema de estadsticas e indicadores en educacin
y Evaluaciones comparativas de reformas edu-

El estudio tuvo carcter muestral, abarcando en


cada pas a una muestra representativa del conjunto nacional y de los estratos previamente definidos. En total, fueron examinados 48.688 ni7

os y nias de los grados tercero y cuarto de la


educacin bsica, 41.088 familiares suyos, 3.675
de sus profesores y 1.387 directores escolares.
Los anlisis estadsticos realizados se basaron en
procedimientos estandarizados, aunque quizs se
podra avanzar ms en el anlisis mediante la
aplicacin de tcnicas estadsticas ms innovadoras.

nas variables de entrada y de proceso relativas a


aspectos como los siguientes: gestin y poltica,
currculo planificado y realizado, directivos y su
gestin, profesor y su desempeo, familia y su
compromiso educacional, alumnos y sus caractersticas. El anlisis del efecto de dichos factores
sobre los resultados alcanzados, debe permitir
sobrepasar el simple estadio de la medicin del
rendimiento educativo y entrar en un plano interpretativo, mucho ms prometedor para la elaboracin de polticas educativas. En estos momentos se est completando un segundo informe
que examina en detalle estos factores asociados.

En el estudio participaron 13 pases, aunque los


datos del informe publicado correspondan slo
a 11 de ellos (Argentina, Bolivia, Brasil, Colombia, Cuba, Chile, Honduras, Mxico, Paraguay, Repblica Dominicana y Venezuela). Los
datos de los otros dos pases que participaron en
el estudio (Costa Rica y Per) no fueron incluidos en el informe por motivos diferentes. Los
resultados de este estudio pueden verse en los
Cuadros 2 y 3 del Anexo. El estudio muestra
como los resultados obtenidos por los estudiantes cubanos estn significativamente ms altos
que los resultados obtenidos por los estudiantes
de los dems pases participantes.

Adems de los informes bsicos del estudio realizado, el laboratorio ha editado una serie de publicaciones denominada Documentos del Laboratorio Latinoamericano de Evaluacin de la
Calidad de la Educacin. Entre dichos trabajos
se encuentran los relativos a los modelos conceptuales aplicados y a las principales hiptesis
planteadas. En conjunto, constituyen una serie
valiosa de publicaciones, que se diferencian de
las editadas por la OEI en el hecho de estar centradas sobre todo en el propio estudio y en las
tcnicas que le sirven de fundamento. Desde ese
punto de vista, su objetivo es ms modesto, si
bien algunos de los ttulos abordan cuestiones
generales sobre los sistemas de evaluacin de la
educacin.

La financiacin del estudio se ha asegurado a


travs de varias vas. Por una parte, los pases
participantes han contribuido siquiera parcialmente a cubrir el presupuesto mediante sus propios recursos y sus aportaciones econmicas.
Por otra parte, algunos organismos internacionales, como el BID, y algunas fundaciones privadas, como la Fundacin Ford, han cubierto
una buena parte del presupuesto de gastos. Por
ltimo, la propia OREALC-UNESCO ha contribuido con sus recursos materiales y personales.

Adems de esta coincidencia parcial en la poltica de publicaciones, existen otras superposiciones dignas de atencin entre el Programa de la
OEI y el Laboratorio de OREALC. En efecto, si
bien este ltimo est centrado en la evaluacin
del rendimiento educativo, por medio de la realizacin de estudios comparativos y la generacin de estndares regionales, con el paso del
tiempo tambin ha ido orientndose hacia el
apoyo tcnico a los pases, tanto en recursos
humanos como en bases de datos, y hacia la
constitucin de un foro de discusin tcnicopoltica sobre el aprendizaje y las variables que
en l influyen. Al producirse una superposicin
parcial de intenciones y objetivos entre ambas
iniciativas, cabra quizs esperar una mayor cooperacin o coordinacin entre ambas de la que
efectivamente ha tenido lugar hasta el momento.
Esta cierta dispersin de actuaciones, a la que se
aludir ms extensamente, se traduce en un
aprovechamiento menos efectivo de lo que sera

Uno de los principales mritos del proyecto consiste en que se trata del primer estudio internacional de rendimiento que cubre un nmero significativo de pases latinoamericanos y caribeos. Los restantes estudios de este tipo que aqu
se analizan apenas han contado con participacin de los pases de la regin, como podr verse
ms adelante. Y el Programa de la OEI, que
tambin abarca un nmero importante de pases
de la regin y realiza anlisis comparativos, no
contempla la realizacin de estudios de rendimiento.
Los autores del estudio conceden gran importancia a la realizacin del anlisis de los que denominan factores asociados, consistentes en algu8

deseable de los limitados recursos existentes en


la regin.

vidades conjuntas con PREAL, ya que se trata


de un rea en la cual este organismo ha desarrollado acciones significativas. Del mismo modo,
parece conveniente buscar un acuerdo con los
pases de Amrica Central, con el fin de aprovechar al mximo la experiencia que han desarrollado desde hace algn tiempo en lo que se refiere a la determinacin de estndares.

En el momento actual se est procediendo al


inicio de la segunda fase de los trabajos del Laboratorio. En esta etapa se trabajar eficientemente en cooperacin y estrecha coordinacin
con los dems entes multilaterales que desarrollan acciones relacionadas con la evaluacin
educativa y de igual manera, con aquellos que se
orientan a actividades complementarias en la
regin. En el primero de los aspectos sealados,
ya se han logrado acuerdos preliminares para
establecer y reforzar lazos con PREAL y con
OEI. Para el caso de los organismos que realizan
actividades complementarias, es necesario asegurar una adecuada articulacin con el Programa
regional de indicadores y estadsticas educativas
emprendido por UNESCO/OREALC. Tales aspectos, as como otros a ser sealados ms adelante, han sido discutidos como parte de la Lnea
Dos del seguimiento de la Cumbre de la Amricas, en materia de educacin.

En cuanto a la tercera lnea de accin, es conveniente continuar avanzando en el desarrollo del


Estudio cualitativo de escuelas con resultados
destacables, financiado por la Fundacin Ford,
con el doble objetivo de complementar los resultados del anlisis de factores asociados y de
proporcionar elementos que contribuyan a dirigir
ms adecuadamente un programa de investigacin evaluativa ligado a polticas educativas. Por
otra parte, sera provechoso mantener presente la
necesidad de realizar o al menos estimular, la
realizacin de estudios sobre la base de datos
existente, para lograr un mayor aprovechamiento
del trabajo realizado. La disponibilidad de los
datos para el dominio pblico contribuir indudablemente a este ltimo propsito.

Las lneas de accin inicialmente consideradas


para el proyecto del Laboratorio son:

Realizacin de estudios internacionales.

Fomento de la determinacin de estndares


de calidad educativa.

Impulso de un programa de investigacin


evaluativa ligado a polticas educativas.

Desarrollo de un programa de fortalecimiento de los sistemas nacionales de evaluacin de los pases miembros.

Respecto a la cuarta, y ltima, lnea de accin,


se est buscando una financiacin para la realizacin de un taller sobre la aplicacin de modelos jerrquicos y tambin para el anlisis de los
datos de cada pas participante en el primer estudio. El taller estar destinado no solamente al
anlisis de los datos mencionados, sino tambin
a la produccin de los informes de factores asociados por pas.
Complementariamente, existen otras lneas de
accin que se podran resumir en dos aspectos.
En primer lugar, la actuacin de la Coordinacin
del Laboratorio para apoyar a los pases que
eventualmente consideren integrarse a evaluaciones internacionales, tales como las patrocinadas por IEA o por la OCDE. En segundo lugar,
la participacin del Laboratorio en la generacin
de los bancos de tems y otros instrumentos necesarios para llevar a cabo tales evaluaciones
con el fin de brindar un contexto sobre las caractersticas educativas de nuestra regin y garantizar as su relevancia para nuestros pases.
Para el desarrollo de estos proyectos, se ha recibido un apoyo de financiacin por parte del
Banco Interamericano de Desarrollo.

Con respecto a la realizacin de estudios latinoamericanos y teniendo en cuenta que la posibilidad de un segundo estudio no es una opcin
para el corto plazo, UNESCO/OREALC est
trabajando en completar el primer estudio con
los datos de los pases que faltan, as como la
incorporacin de Amrica Central por medio de
un proyecto ad-hoc, y que sera financiado por
fuentes alternativas que ya se han contactado.
En cuanto al fomento de la determinacin de
estndares de calidad educativa, es pertinente
considerar el desarrollo de un programa de acti9

mas nacionales de medicin del rendimiento


estudiantil existentes en Amrica Latina. Asimismo, se ha publicado y distribuido por va
electrnica, un informe sobre las principales
mejoras que deben introducirse en las pruebas
nacionales y un estudio de caso sobre el reciente
desarrollo exitoso de un sistema nacional. De
igual manera, se ha empezado a revisar el debate
actual en la regin sobre estndares nacionales y
el grado en el cual los gobiernos y otros actores
sociales relevantes reciben datos y anlisis adecuados de los resultados de las pruebas, que podran contribuir efectivamente al mejoramiento
de las polticas educativas. Tambin se ha seleccionado y traducido al castellano, un conjunto de
lecturas bsicas sobre estndares y evaluacin y
se ha empezado a desarrollar un registro de recursos de entrenamiento y asistencia tcnica en
estas dos reas, los cuales estarn prximamente
disponibles en su pgina web (www.preal.cl y
www.grade.org.pe/gtee-preal) bajo grupo de
trabajo en evaluacin y estndares

GRUPO DE TRABAJO SOBRE


ESTANDARES Y EVALUACION
EDUCACIONAL DEL PREAL
El Programa de Promocin de la Reforma Educativa en Amrica Latina y el Caribe (PREAL)
es un proyecto conjunto del Dilogo Interamericano de Washington, D.C. y la Corporacin de
Investigaciones para el Desarrollo (CINDE) de
Santiago de Chile, en cuyo marco se ha desarrollado una red hemisfrica de individuos y organizaciones interesadas en promover la revitalizacin de la educacin en las Amricas. Su propsito es impulsar un dilogo regional informado
sobre poltica y reforma educativa.
De igual manera, a fines de 1998 se empez a
conformar un grupo de trabajo sobre estndares
y evaluacin (GTEEPREAL), coordinado desde
GRADE, en Lima, Per. Su misin consiste en
promover la consideracin y la adopcin o fortalecimiento de dos elementos clave para el xito
de las reformas educativas, es decir: la determinacin de metas claras de logros de aprendizaje
y la medicin del progreso efectivamente logrado. Los objetivos generales del grupo de trabajo
son: 1) contribuir al mejoramiento, legitimacin
y mejor utilizacin de las pruebas de rendimiento escolar en Amrica Latina, y 2) promover la discusin y el consenso sobre la conveniencia de establecer polticas relativas a los estndares educativos, apoyando eventualmente el
desarrollo de estndares de contenidos y desempeo en la regin.

El plan de actividades del GTEEPREAL para los


aos 2000-2001 propone:
1. Desarrollar una base de datos sobre las caractersticas y evolucin de los sistemas nacionales de evaluacin del rendimiento escolar en Amrica Latina, el tipo de informes
que se producen y cmo son utilizados para
mejorar las escuelas, as como informacin
sobre polticas referidas o vinculadas al tema
de estndares. Esta informacin se usar para producir informes peridicos y como insumo para el observatorio de progreso educativo regional que produce PREAL en forma bienal.

Para lograr estos objetivos, el grupo est estableciendo una red regional de especialistas interesados en comprender las cuestiones principales
sometidas actualmente a debate, as como difundir y criticar nuevas ideas al respecto y generar
recomendaciones prcticas de polticas sobre
estos asuntos, basndose en sus esfuerzos colectivos. Hasta el momento, se han identificado
cerca de 100 profesionales en 15 pases cuyo
trabajo, tanto en instituciones pblicas como en
organizaciones no gubernamentales y universidades, est vinculado al desarrollo o aplicacin
de polticas de estndares y evaluacin. El grupo
ha organizado dos seminarios internacionales
(en Honduras y El Salvador) sobre la importancia y usos de estndares nacionales en educacin
y un taller en Lima sobre la calidad de los siste-

2. Continuar identificando, traduciendo y distribuyendo textos sobre polticas de estndares y evaluacin a los miembros de la red
vinculada al GTEE y a otros interesados en
el tema, as como producir, publicar y distribuir por va electrnica o impresa una serie
de libros, documentos, boletines y resmenes de polticas sobre estos temas.
3. Producir una serie de resmenes de polticas
(policy briefs) sobre estndares y evaluacin, destinados a una audiencia conformada
por ciudadanos no especialistas, pero que
10

desempean roles importantes en la determinacin de polticas educativas.

cialistas como de audiencias generales y lderes de opinin.

4. Llevar a cabo un estudio comparativo en


cuatro pases sobre la oferta y demanda de
informacin sobre los logros de aprendizajes
escolares. Durante una primera fase se revisarn las estrategias de difusin vigentes en
la regin, as como la cobertura periodstica
dada a los resultados de las pruebas nacionales. Luego el GTEE producir cuatro estudios de caso nacionales, explorando cmo
los representantes de grupos sociales clave
interpretan los informes y derivan implicancias de polticas a partir de ellos. El objetivo
es formular propuestas para mejorar la difusin y la utilizacin de los resultados de las
pruebas.

9. Organizar intercambios profesionales y fomentar el aprovechamiento de oportunidades


de capacitacin para profesionales del rea,
promoviendo visitas a los sistemas regionales ms establecidos, as como a programas
vigentes en los Estados Unidos o el Canad.
PROYECTO INTERNACIONAL DE
INDICADORES DE LA EDUCACION
(INES, CERI-OCDE) Y WORLD
EDUCATION INDICATORS
(WEI, OCDE-UNESCO)
El Proyecto Internacional de Indicadores de la
Educacin (Proyecto INES) se puso en funcionamiento a finales de los aos ochenta, por iniciativa del Centre for Educational Research and
Innovation (CERI) de la OCDE. Desde su inicio,
su propsito ha sido el de elaborar, publicar y
difundir un conjunto significativo de indicadores
de la educacin, cubriendo una amplia variedad
de campos, relativos al contexto, los insumos,
los procesos y los productos de los sistemas
educativos. Los indicadores elaborados pretenden ser de utilidad tanto para los especialistas
como para los responsables polticos de la educacin.

5. Producir una revisin de la evidencia disponible sobre el impacto de las pruebas internacionales de rendimiento escolar sobre las
polticas educativas y las prcticas pedaggicas en los pases participantes, con el objetivo de proporcionar criterios que puedan
guiar la toma de decisiones sobre la participacin de los pases latinoamericanos en
esos esfuerzos, relativamente novedosos en
la regin.
6. Promover una serie de tesis doctorales sobre
el desarrollo e impactos de los sistemas nacionales de medicin del rendimiento en
Amrica Central, complementando una serie
de estudios ya realizados sobre los pases del
Cono Sur. El GTEE trabajara con profesores de universidades estadounidenses y canadienses para desarrollar los estudios.

Para llevar a cabo el proyecto se pusieron en


marcha varios grupos de trabajo, que han desarrollado o vienen desarrollando sus tareas respectivas de manera diversificada, mediante procedimientos y planes de trabajo especficos, con
el objetivo de producir indicadores en los diversos campos previamente definidos. Como resultado de esos trabajos, se ha editado la serie de
publicaciones anuales conocidas como Education at a Glance / Regards sur lducation, el
primero de cuyos volmenes se public en 1993
y que actualmente tambin se distribuye en formato CD-ROM. Estas publicaciones recogen los
datos correspondientes a cada uno de los pases
de la OCDE para cada uno de los indicadores
elaborados. El proyecto se complet posteriormente con la preparacin de unos documentos
de anlisis, que llevan por ttulo Education Policy Analysis y que tambin aparecen con periodicidad anual. Asimismo, el proyecto ha producido adems otras publicaciones de carcter ms

7. Establecer y mantener una lista de discusin


electrnica en espaol sobre sistemas de
evaluacin y estndares, as como una pgina web que se convierta en un recurso de
utilidad para especialistas y no especialistas
interesados en el tema.
8. Organizar, en colaboracin con instituciones
locales y organismos regionales o internacionales, seminarios nacionales sobre polticas de estndares y evaluacin, incorporando la participacin adecuada tanto de espe-

11

terico, hasta el punto de constituir una completa biblioteca especializada en el dominio de


los indicadores de la educacin.

ral, contexto demogrfico, currculo, ingresos,


matrcula, graduados, personal, financiacin,
renta, series temporales). Los datos correspondientes a esta segunda fase del proyecto aparecern publicados en una prxima edicin.

Los pases que participaron inicialmente en el


proyecto INES fueron nicamente los miembros
de la OCDE. En el momento del inicio de los
trabajos, el continente americano tan slo estaba
representado en la Organizacin por Estados
Unidos y Canad; en la actualidad debe tambin
aadirse a Mxico. No obstante, la poltica inicial de restringir la participacin en el proyecto a
los pases miembros de la OCDE se ha ido modificando con el paso del tiempo, debido a las
demandas procedentes de algunos pases y a la
actuacin de varios organismos internacionales,
y se ha concretado sobre todo en dos proyectos
especficos que pueden considerarse:

Aunque en la actualidad slo son 18 los pases


participantes en el proyecto, est previsto que se
aadan algunos ms en un futuro prximo. Entre
los que participan en el proyecto WEI desde su
inicio, estn incluidos varios pases latinoamericanos, como es el caso de Argentina, Brasil,
Chile, Paraguay y Uruguay, estando prevista la
prxima incorporacin de Venezuela y Per. La
ampliacin efectuada en el proyecto INES por
medio del proyecto WEI ha permitido que los
indicadores publicados anualmente por la OCDE
cubran un conjunto de pases que representan
aproximadamente los dos tercios de la poblacin
mundial. No obstante, en el rea latinoamericana
se aprecian muchas ausencias, incluso de regiones enteras como Centroamrica y el Caribe.

World Education Indicators (WEI)


El primero de stos es el denominado World
Education Indicators (WEI), cuyo objetivo no es
otro que la incorporacin progresiva de varios
pases no miembros de la OCDE al clculo y
publicacin de los indicadores de la educacin.
De acuerdo con esa meta, el proyecto WEI puede considerarse como un programa que se desarrolla en paralelo al proyecto INES, aunque con
unos objetivos a ms largo plazo. Gracias a la
colaboracin de la UNESCO y a la financiacin
del Banco Mundial (asegurada al menos hasta
finales del ao 2000), estn participando actualmente en dicho proyecto un total de 18 pases no
miembros de la OCDE.

La comparacin de los indicadores recogidos


mediante el proyecto WEI con los correspondientes a los pases miembros de la OCDE
con un mayor grado de desarrollo econmico,
aporta una informacin interesante para entender
y valorar la situacin educativa de los pases
participantes. Es interesante sealar que las diferencias son ciertamente reducidas en el caso de
algunos pases y de ciertos indicadores, pero
bastante acusadas en otros casos. El anlisis de
tales semejanzas y diferencias resulta muy revelador de la situacin educativa y permite estudios enfocados sobre reas clave.

En la edicin de 1998 de Education at a Glance


/ Regards sur lducation aparecieron por primera vez publicados los datos correspondientes a
varios indicadores para 13 de esos 18 pases.
Aunque la publicacin de ese ao recoga datos
acerca de un total de 36 indicadores, los pases
mencionados tan slo completaron 17 de ellos,
si bien es cierto que algunos indicadores tenan
varias subdivisiones (CERI, 1998: 29-32). Desde
1999 todos los pases del proyecto WEI participan en el clculo anual de indicadores, estando
previsto ampliar el nmero de stos y su campo
de cobertura a medida que las circunstancias lo
permitan. En la actualidad los 18 pases estn
recolectando informacin sobre 20 indicadores,
organizados en diez categoras (contexto gene-

En trminos generales y aunque la elaboracin


de indicadores de la educacin no sea el objeto
central de anlisis en este documento, no puede
dejar de sealarse que el proyecto WEI ha
abierto una lnea de trabajo muy prometedora
para el futuro, de la que podran beneficiarse un
mayor nmero de pases latinoamericanos y caribeos. La experiencia de ms de una dcada de
desarrollo del proyecto INES confirma la necesidad que tienen los pases de renovar sus sistemas de informacin y sus mecanismos estadsticos tradicionales, si quieren construir nuevos
modos de administracin y gestin en el mbito
educativo, as como las posibilidades efectivas
que el ejercicio de elaboracin y clculo de indi12

cadores ofrece para el logro de esa transformacin. Mirando hacia el futuro prximo, an no
est claro cmo habr de completarse el desarrollo del proyecto WEI, pero todo apunta hacia
una mayor autonoma del mismo respecto del
proyecto INES, as como hacia una incorporacin creciente de otros pases y regiones. La colaboracin estrecha entre la OCDE, la UNESCO
y el Banco Mundial permite aventurar la continuidad y expansin del proyecto.

so del Laboratorio de OREALC o los estudios


de la IEA, que acentan su componente de interpretacin e investigacin. Ello hace que se trate
de un proyecto que cobra su pleno sentido en el
marco de la construccin de un sistema internacional de indicadores de la educacin. En otro
supuesto diferente, el estudio puede resultar algo
limitado en sus aportaciones.
Por otra parte, hay que subrayar que se trata de
un proyecto concebido y dirigido por una organizacin internacional, pero realizado por un
consorcio externo, seleccionado como resultado
de un concurso pblico. Ello permite el desarrollo de capacidades en diversas regiones y pases
y no slo en el organismo responsable del proyecto. Esta caracterstica es digna de atencin en
un contexto como el latinoamericano, falto de un
mayor desarrollo profesional e investigador en el
rea de la evaluacin de la calidad de la educacin.

Programme for International Student


Assessment (PISA)
La segunda iniciativa a la que debe hacerse
mencin la denominada Programme for International Student Assessment (PISA), est
orientada a la obtencin de indicadores de rendimiento educativo, a travs de la aplicacin de
pruebas a los jvenes de 15 aos de edad de los
pases participantes. El proyecto PISA fue concebido en el marco del proyecto INES, con el
objetivo de obtener indicadores de resultados
educativos de una manera regular y sistemtica.
Hasta ese momento los nicos indicadores de
ese tipo procedan de los estudios desarrollados
por otras organizaciones, como la IEA.

En el proyecto PISA participan 33 pases miembros de la OCDE, adems de algunos otros pases no miembros que se han incorporado recientemente. Entre los primeros figuran Estados
Unidos, Canad y Mxico, mientras que entre
los segundos se cuenta Brasil. Como puede
apreciarse, la participacin de los pases del
continente americano es limitada y an ms de
los latinoamericanos y caribeos. Esta tendencia
no es previsible que cambie de signo en el futuro
prximo, pues la OCDE ha expresado ciertas
reservas acerca de la ampliacin ilimitada de los
pases participantes, dadas las dificultades de
todo tipo que ello provocara para la gestin del
proyecto. Por lo tanto, no es previsible que pueda aumentar notablemente la participacin de los
pases latinoamericanos, pese a su indudable
inters. En el mejor de los casos, podra pensarse
en la incorporacin al proyecto de algunos de los
pases ms avanzados en este campo y an as
no es seguro que esa sea la poltica institucional
de la OCDE.

El proyecto PISA se concibi en 1997 y se puso


en marcha al ao siguiente. Los indicadores que
pretende construir corresponden a tres reas escolares prioritarias: matemticas, ciencias y lenguaje. Los indicadores son de dos tipos, unos
bsicos, con datos sobre conocimientos, habilidades y competencias de los estudiantes en un
momento determinado, y otros de carcter longitudinal, que permiten analizar las tendencias
detectadas. Adems, el proyecto recoge informacin sobre el contexto de los alumnos y las
escuelas en que stos estudian, lo que permitir
el clculo de otros indicadores de contexto y de
proceso. La primera recogida de datos se ha realizado en el ao 2000 y a partir de entonces tendr una periodicidad trienal, mediante un sistema de rotacin en las reas prioritarias.

INTERNATIONAL ASSOCIATION FOR


THE EVALUATION OF EDUCATIONAL
ACHIEVEMENT (IEA)

Entre las caractersticas ms destacables de este


proyecto, en relacin con el tema central de este
documento, hay que destacar dos. Por una parte,
el estudio est ms encaminado a la obtencin
de indicadores que los trabajos desarrollados por
otros organismos o asociaciones, como es el ca-

La International Association for the Evaluation


of Educational Achievement (IEA) es una asociacin internacional formada por centros de
13

investigacin y evaluacin educativa, que desarrolla estudios comparativos de rendimiento escolar a escala internacional. A diferencia de las
organizaciones anteriormente mencionadas, la
IEA no tiene carcter gubernamental. No obstante, sus miembros son representantes oficiales
de sus pases o sistemas educativos respectivos,
motivo por el cual una gran proporcin de ellos
son instituciones vinculadas a las autoridades
educativas correspondientes o auspiciadas por
ellas.

grupos de referencia considerados relevantes. En


segundo lugar, pretenden analizar los motivos
que explican las diferencias encontradas. Con
esa intencin, realizan dos tipos de comparaciones, una derivada directamente de las puntuaciones obtenidas y otra basada en la relacin existente entre el currculo prescrito, el efectivamente impartido en las escuelas y los logros de
los alumnos.
La IEA ha desarrollado diversos estudios centrados en diferentes materias escolares. En lneas
generales, han sido las materias consideradas
bsicas, fundamentalmente el lenguaje, las ciencias y las matemticas, las que han centrado su
atencin, aunque no hay que olvidar otras reas,
como la educacin preescolar, la educacin cvica o el uso de las nuevas tecnologas de la informacin en la escuela. Una de las novedades
que ha introducido recientemente es la concepcin de un ciclo de estudios, que permite la
realizacin de anlisis y comparaciones longitudinales en ciertas reas prioritarias, a lo largo del
tiempo. Esa idea, que sin duda resulta atractiva
para los responsables polticos de la educacin
por la posibilidad de integrar estos estudios en
un mecanismo ms amplio de pilotaje del sistema educativo, ha sido tambin incorporada por
el Proyecto PISA de la OCDE y est presente en
la concepcin general del Laboratorio Latinoamericano.

La IEA cuenta en la actualidad con 56 pases


miembros, pertenecientes a los cinco continentes. El continente americano tan slo cuenta con
cinco miembros Brasil, Canad, Chile, Mxico y Estados Unidos, si bien algunos otros
pases participan o han participado en algunos de
sus estudios, posibilidad que est prevista en sus
estatutos. El presupuesto de gastos de la asociacin proviene de las contribuciones de los pases
miembros y por las aportaciones que algunos
organismos han realizado para el desarrollo de
determinados estudios. La lista de las instituciones que han colaborado en la financiacin de los
estudios es amplia y abarca tanto organizaciones
internacionales (caso del Banco Mundial), como
organismos nacionales (NSF y NCES de Estados
Unidos, Ministerio de Educacin de Holanda,
DFG de Alemania, entre otros).
La IEA fue fundada en 1959 y lleva, por tanto,
cuarenta aos desarrollando estudios internacionales de tipo comparativo sobre el rendimiento
de los sistemas educativos en diversas reas:
lectura, escritura, matemticas, ciencias, educacin preescolar, educacin cvica o nuevas tecnologas son algunas de las ms destacables
(Degenhart, 1990). El rendimiento educativo es
valorado tomando en consideracin diversas
variables de contexto y de proceso, con el objetivo de buscar explicaciones e interpretaciones a
las diferencias de rendimiento y no limitarse
solamente a la construccin de indicadores o a la
difusin de tablas de clasificacin de los pases
participantes.

Para desarrollar sus estudios, la IEA se ha enfrentado a la necesidad de elaborar pruebas internacionalmente vlidas y aceptadas por los
pases participantes. Dichas pruebas suelen ir
acompaadas de cuestionarios de contexto, dirigidos a los alumnos, profesores y directores escolares, que cumplen el objetivo de recoger de
manera rigurosa y fiable la gran diversidad de
condiciones y situaciones existente entre unos y
otros pases. Debido a ese trabajo de largos aos,
la IEA ha conseguido desarrollar y aplicar unos
procedimientos tcnicos contrastados y avanzados, que han sido posteriormente adoptados por
otros proyectos internacionales. Algunos de los
conceptos que ha elaborado, como el de oportunidad de aprender, han abierto nuevas vas a
la evaluacin del rendimiento y a la investigacin educativa.

De acuerdo con ese planteamiento general, los


estudios de la IEA tienen dos propsitos prioritarios. En primer lugar, pretenden proporcionar
informacin significativa acerca de los logros de
los diversos sistemas educativos, en relacin con
14

La principal caracterstica de los estudios de la


IEA, que ha tenido una gran influencia internacional, consiste en que estn basados en detallados anlisis curriculares previos. Es muy conocida entre los especialistas la distincin que ha
establecido entre tres niveles de desarrollo del
currculo prescrito, impartido y alcanzado,
que sirve de base para establecer el marco conceptual de dichos estudios. Lgicamente, ste es
a la vez uno de sus mayores retos, puesto que
exige la construccin de instrumentos de evaluacin abiertos a la diversidad cultural y a la multiplicidad de enfoques y proyectos curriculares.

En el TIMSS participaron 41 pases, incluyendo


Estados Unidos, Canad y Colombia. El Cuadro
1 del Anexo muestra los resultados obtenidos
por estudiantes de octavo grado. De los 41 pases participantes, solamente Sudfrica obtuvo
resultados ms bajos que Colombia. Aunque
Mxico tambin particip en el estudio, los rendimientos de los estudiantes mexicanos no fueron incluidos en el informe final. Argentina particip en la fase inicial del estudio, pero no lleg
a aplicar las pruebas. La participacin colombiana es digna de resear, puesto que como resultado de la misma se publicaron en 1997 tres libros
(Ministerio de Educacin Nacional de Colombia, 1997a, 1997b, 1997c) que analizaban los
resultados obtenidos por el pas en el contexto
internacional, en matemticas, en ciencias y en
las pruebas de habilidades. Cada uno de los volmenes analiza los resultados obtenidos en las
distintas reas temticas abordadas en el estudio,
as como los tipos de desempeo.

Los estudios ms importantes recientemente


realizados por la IEA o actualmente en curso de
realizacin son los siguientes:
Tercer Estudio Internacional en
Matemticas y Ciencias (TIMSS)
El TIMSS es el estudio internacional ms importante de rendimiento en matemticas y ciencias desarrollado hasta el momento actual, adems de ser el mayor de los estudios realizados
por la IEA a lo largo de su historia. Como indica
su ttulo, constituye la continuacin de varios
estudios previos centrados en el rendimiento en
matemticas y en ciencias, realizados por separado. La principal novedad es que en esta ocasin se han abordado ambas reas conjuntamente.

El TIMSS es el primer informe de la IEA que


desarrolla un ciclo completo de estudios. A la
aplicacin de 1995 ha seguido una segunda en
1999 (TIMSS-R) y est prevista una tercera en
el ao 2003. La secuencia de esas fases, cada
cuatro aos, igual a los aos existentes entre las
edades de sus destinatarios, permitir a los pases participantes extraer conclusiones acerca de
la evolucin y las tendencias principales en los
resultados escolares en esas reas. En TIMSS-R,
que es la denominacin del estudio realizado en
1999, participaron 38 pases, entre los cuales se
cuentan Canad, Chile y Estados Unidos.

Se trata de un proyecto ambicioso, que no slo


pretende estudiar el rendimiento de los estudiantes, sino tambin ponerlo en relacin con el
currculo prescrito e impartido, as como con
una serie de variables de contexto, con la intencin de identificar algunos factores asociados al
rendimiento. El estudio se ha desarrollado en
tres niveles diferentes: a los nueve aos de edad,
a los catorce aos y al final de la educacin secundaria. En cada uno de ellos se han aplicado
unas pruebas de matemticas y ciencias y unos
cuestionarios de contexto. Las pruebas han incluido cuestiones de eleccin mltiple, preguntas de respuesta libre, e incluso pruebas de habilidades (performance tasks). La aplicacin de las
pruebas y la recoleccin de datos tuvieron lugar
en el ao 1995.

Estudio sobre Comprensin de la Lectura


(RLS) y Estudio Internacional de Avance en
Comprensin de la Lectura (PIRLS)
La IEA tambin lleva a cabo estudios en el rea
del lenguaje. Aunque en el pasado tambin realiz estudios sobre la capacidad de expresin
escrita, los estudios ms recientes de la IEA se
han centrado en la aptitud para comprender la
lectura. En 1991 se aplicaron las pruebas del
RLS, estudio en el que participaron 32 pases y
que encontr una buena acogida. En la actualidad se estn desarrollando las primeras fases del
PIRLS, cuya aplicacin de pruebas y cuestionarios est prevista para el ao 2001. La comprensin de la lectura se transformar as en la se15

gunda de las reas en que se aborde un ciclo de


estudios completo. De los pases de la regin,
Trinidad y Tobago y Venezuela participaron en
RLS, mientras que Colombia ha anunciado su
participacin en el PIRLS. Por su parte, Estados
Unidos y Canad participaron en el RLS y participarn en el PIRLS.

alarse la escasa participacin de los pases latinoamericanos y caribeos en este tipo de proyectos.
De la tabla se desprende que existe un grupo
significativo de pases que no participa en ninguno de los proyectos internacionales actualmente en desarrollo. Se trata precisamente de los
pases que no aparecen en la tabla, entre los que
se destacan dos grupos. Por una parte, hay que
resear la baja tasa de participacin de los pases
de lengua no espaola o portuguesa: en la tabla 1
slo aparece un pas anglfono (Trinidad y Tobago) y no figura ninguno francfono. Por otra
parte, destaca la baja participacin de los pases
caribeos, de los que aparecen solamente tres
(Cuba, Repblica Dominicana y Trinidad y Tobago).

Segundo Estudio sobre Educacin Cvica


(CES) y otros temas
La IEA no slo se ha interesado por las materias
consideradas bsicas en el currculo, sino que
tambin ha extendido su inters a otras reas.
Entre ellas destaca especialmente la educacin
cvica, que se ha convertido en un tema de preocupacin para las personas responsables de formular la poltica educacional de prcticamente
todos los pases. La IEA ha llevado a cabo recientemente un estudio sobre la educacin cvica
cuyo marco conceptual es ms completo y cuya
metodologa es ms avanzada que los de un estudio anterior que tuvo lugar hace varios aos.
Este estudio se encuentra en sus ltimas fases y
ya han comenzado a producirse los primeros
informes. En l participaron 22 pases, entre los
que se cuentan Colombia y Estados Unidos.

En el extremo opuesto, hay que resear la destacada presencia internacional de pases como
Colombia, Brasil, Chile o Venezuela y, en menor medida, de Argentina, Paraguay o Per. En
general, como puede observarse, los pases del
Cono Sur y algunos pases andinos muestran una
mayor tendencia a participar en estos estudios.
El caso ms evidente es el de Colombia.

Adems, la IEA est actualmente elaborando


otros dos en los que no participa ningn pas de
la regin. Se trata del Estudio de Educacin Preescolar (PPP) y el Segundo Estudio sobre Tecnologas de la Educacin en la Educacin (SITES). El primero viene desarrollndose desde
1986 y tiene un claro componente longitudinal,
mientras que los datos iniciales para el segundo
se recogieron en 1998.

En una situacin intermedia entre ambos grupos


se encuentra otra serie de pases, que incluye
todos los centroamericanos y los tres caribeos
citados, una parte de los andinos (Ecuador y Bolivia) y uno del Cono Sur (Uruguay). Se trata de
pases con una participacin limitada en proyectos internacionales, si bien se encuentran
asociados a alguno de los dos proyectos regionales.

VALORACION DE LA PARTICIPACION
DE LOS PAISES DE AMERICA LATINA Y
EL CARIBE EN LOS PROYECTOS INTERNACIONALES DE EVALUACION
EDUCATIVA

En conjunto, como puede apreciarse, la participacin en proyectos internacionales de evaluacin es limitada y desigual. Sin duda, hay factores ligados al grado de desarrollo social, econmico y educativo de los pases que explican esas
diferencias, pero no se puede ignorar que tambin intervienen otros factores diferenciales ligados a la voluntad poltica o a la prioridad concedida a la evaluacin de la calidad de la educacin por las autoridades nacionales.

A partir de la exposicin que se acaba de realizar


acerca de los principales proyectos internacionales desarrollados en el campo de la evaluacin
educativa, pueden extraerse algunas conclusiones y valoraciones generales. En primer lugar y
como puede apreciarse en el Cuadro 1, debe se-

16

Cuadro 1.
Pases americanos participantes en diversos proyectos internacionales de
evaluacin de la educacin
OCDE

Programa

Laboratorio

OEI

OREALC

INES-WEI

Argentina

Bolivia

Brasil

Pases

Canad
Colombia

Costa Rica

Cuba

Chile

Ecuador

El Salvador

EE. UU.

IEA
PISA

Guatemala

Honduras

Mxico

Nicaragua

Panam

Paraguay

Per

Repblica
Dominicana

TIMSS(-R)

RLSPIRLS

CES

Trinidad y
Tobago

Uruguay

Venezuela

X
X

En una situacin intermedia entre ambos grupos


se encuentra otra serie de pases, que incluye
todos los centroamericanos y los tres caribeos
citados, una parte de los andinos (Ecuador y Bolivia) y uno del Cono Sur (Uruguay). Se trata de
pases con una participacin limitada en proyectos internacionales, si bien se encuentran

asociados a alguno de los dos proyectos regionales.


En conjunto, como puede apreciarse, la participacin en proyectos internacionales de evaluacin es limitada y desigual. Sin duda, hay factores ligados al grado de desarrollo social, econ-

17

mico y educativo de los pases que explican esas


diferencias, pero no se puede ignorar que tambin intervienen otros factores diferenciales ligados a la voluntad poltica o a la prioridad concedida a la evaluacin de la calidad de la educacin por las autoridades nacionales.

latinoamericanos y caribeos. Eso se aprecia al


comparar las cifras de pases participantes en el
Programa de la OEI con los del Laboratorio de
OREALC y con los proyectos de la OCDE (especialmente PISA) y de la IEA. Si se combina
esta observacin con la que se haca anteriormente, podra afirmarse que la participacin latinoamericana y caribea tiende a descender
cuando el estudio tiene por objeto la evaluacin
del rendimiento y una cobertura geogrfica ms
amplia.

En segundo lugar, hay que sealar que los proyectos estricta o mayoritariamente latinoamericanos han conseguido alcanzar mayor participacin que los de cobertura geogrfica ms amplia.
As, es significativo que sean el Programa de la
OEI y el Laboratorio de OREALC los que
cuentan con una participacin mayor de los pases de la regin. Estos dos proyectos son los
nicos que adems alcanzan una representacin
significativa de las distintas subregiones. No
obstante, sera importante destacar que la participacin de los pases centroamericanos es mayor en el Programa de la OEI que en el Laboratorio de OREALC y que la participacin de los
pases caribeos en ambos es limitada.

Este fenmeno se explica de varias maneras.


Hay quienes creen que el alto costo de los estudios de rendimiento habra impedido la participacin de muchos pases dada la escasez de recursos econmicos y personales disponibles en
la regin. Otros consideran que la falta de participacin puede deberse al temor de que los resultados coloquen al pas en un puesto muy bajo
en el rango, lo cual ha sido el caso de los pases
de la regin que participaron en estudios previos
de la IEA. Esto tambin explicara la preferencia
por participar en proyectos de mbito regional,
donde el riesgo de ocupar un puesto bajo en el
rango comparativo es menor. Una explicacin
adicional se encontrara, para algunos informadores, en el bajo nivel medio de capacitacin
para desarrollar estos trabajos, circunstancia que
se deja sentir con especial agudeza en algunos
pases de la regin.

Por otra parte, los pases latinoamericanos y caribeos tienden en muy pequea medida a participar en proyectos internacionales no estrictamente regionales. Tan slo Argentina, Brasil,
Colombia, Chile, Mxico, Paraguay, Per, Trinidad y Tobago, Uruguay y Venezuela han participado o participan en los proyectos auspiciados por la IEA o la OCDE. Y no debe olvidarse
que algunos de estos pases han participado anteriormente en estudios internacionales, pero ya no
lo hacen, mientras que otros han expresado su
voluntad de participar, pero an no lo han hecho
efectivamente.

Aunque estas explicaciones son legtimas, debe


tambin considerarse las distintas prioridades
polticas de los pases. De no ser as, sera difcil
comprender por qu existe tanta variacin en la
participacin de pases cuyos recursos y grado
de desarrollo educativo son similares. Adems,
hay que tener en cuenta que la participacin de
otras regiones, como Europa oriental y Asia
central, cuyas condiciones econmicas y educativas son semejantes a las latinoamericanas, va
en aumento. Esto nos obliga a tomar en cuenta
otro tipo de factores. Tampoco puede ignorarse
el hecho de que la participacin de un mayor
nmero de pases latinoamericanos y caribeos
en estos estudios contribuira a eliminar los sesgos sealados.

En concreto, llama la atencin la escasa participacin de estos pases en los estudios de la IEA,
dado su carcter abierto a sistemas educativos de
los cinco continentes, con grados de desarrollo
muy diversos y caractersticas muy diferentes
entre s. Si el carcter ms restrictivo, en trminos de participacin, de los estudios de la OCDE
explica las bajas cifras que aparecen en dichos
proyectos, ese no es el caso de la IEA, que podra contar con la implicacin de ms pases de
la regin.
En tercer lugar, debe destacarse el hecho de que
los estudios comparativos de rendimiento sean
los que han atrado a un menor nmero de pases

La exigua representacin de los pases de Amrica Latina y el Caribe en cotejos internacionales

18

de rendimiento educativo son, sin duda, un tema


que debe tratarse en el futuro.

ratorio de OREALC fue proporcionar apoyo especfico a los grupos nacionales que deban realizar el estudio. Sin embargo, con el pasar del
tiempo, el apoyo se extendi a otras reas ms
ligadas al desarrollo general de los sistemas de
evaluacin. As es como comenzaron a surgir
superposiciones en las actividades de las dos
entidades. Teniendo en cuenta la disponibilidad
limitada de recursos en la regin, sera necesario
establecer mecanismos de coordinacin entre
estos dos proyectos y otros que pudieran emprenderse. De lo contrario, esta situacin dara
lugar a un aprovechamiento ineficaz de recursos.
Afortunadamente, las organizaciones pertinentes
ya han puesto en marcha un proceso de coordinacin.

En cuarto lugar, hay que sealar un problema


que puede comprometer el futuro de la cooperacin internacional en este campo en Amrica
Latina y el Caribe. Se trata de la superposicin
parcial de los campos de actuacin de los diferentes proyectos que estn llevndose a cabo
actualmente, lo cual puede frenar su expansin
en los prximos aos.
Los dos grandes proyectos que estn realizndose en la regin latinoamericana el Programa
de la OEI y el Laboratorio de OREALC, no
han, hasta el pasado reciente, coordinado sus
actividades de documentacin, publicacin y
capacitacin tcnica. Esto no ocasionara problemas si no fuera por el hecho de que los campos originales de accin de los dos proyectos no
hubiesen experimentado cambios que dieron
lugar a una situacin de solapamiento. En un
principio, el objetivo del Programa de la OEI fue
la consolidacin de los sistemas nacionales de
evaluacin, lo cual se ha llevado a cabo por medio de acciones de apoyo a los equipos responsables. Por su parte, el objetivo inicial del Labo-

Tambin puede surgir una superposicin de acciones entre los estudios regionales de evaluacin del rendimiento y los de cobertura ms amplia. En concreto, el riesgo surge ante un hipottico incremento de la participacin latinoamericana en los proyectos de la OCDE y de la IEA.
En ese caso, tomara mayor relevancia la cuestin de la necesaria coordinacin entre el Laboratorio y dichos proyectos, por idnticos motivos
que los apuntados.

19

Perspectivas para la cooperacin internacional de


los pases de Amrica Latina y el Caribe
en proyectos de evaluacin educativa
Si bien es cierto que la participacin actual de
los pases latinoamericanos y caribeos en proyectos internacionales de evaluacin educativa
puede calificarse de limitada o tmida en trminos generales, todo parece apuntar hacia su intensificacin en los prximos aos. Teniendo en
cuenta que tanto los sistemas nacionales de
evaluacin como los proyectos latinoamericanos
de cooperacin en esta rea son relativamente
recientes, la hiptesis de la intensificacin no
resulta en modo alguno aventurada. Por otra
parte, esa cooperacin creciente no se realizar
en un vaco, sino que se centrar en una serie de
reas y campos prioritarios, en los que existe una
mayor necesidad de profundizacin. Los avances registrados hasta el momento permiten suponer los mbitos fundamentales de cooperacin
para los prximos aos. Por ltimo, la posicin
que mantengan los organismos internacionales
sobre los proyectos de evaluacin educativa
condicionar, en buena medida, su desarrollo.
En este apartado se detallan estos tres aspectos
fundamentales con vistas a la posterior elaboracin de una propuesta concreta de actuacin.

cin pone de manifiesto que los pases de la regin reconocen la importancia de la coordinacin en este campo.
Sin duda, la mejora de los niveles educativos
generales de los pases de la regin, el desarrollo
socioeconmico experimentado durante los ltimos aos, la integracin en redes y entidades
supranacionales, el surgimiento de nuevas demandas de transparencia en la administracin
pblica y el nfasis en las polticas encaminadas
a la mejora de la calidad de la educacin, habrn
de impulsar a las autoridades educativas a participar en mayor medida en proyectos internacionales. Es ms, ya se perciben seas abundantes
de ese inters de un nmero creciente de pases.
No obstante, el hecho de que los proyectos ms
generales cuenten con una mayor participacin
que los proyectos especficos de evaluacin del
rendimiento refleja cierta renuencia a avanzar
demasiado rpidamente en un campo que genera
dificultades y dudas. Esta observacin se ve confirmada por la decisin de algunos pases de no
hacer pblicos los resultados obtenidos en algunos de los estudios en que participaron. Dicho de
otro modo, la tendencia favorable a la participacin latinoamericana en proyectos internacionales de evaluacin no implica que no existan dificultades ni obstculos. Estos factores deben tenerse en cuenta a la hora de reflexionar acerca
de las estrategias a seguir en el futuro.

PUEDE PREVERSE
UNA INTENSIFICACION DE
LA COOPERACION INTERNACIONAL
EN EVALUACION EDUCATIVA
En el panorama latinoamericano actual, existen
varios factores que permiten adelantar la hiptesis de una intensificacin de la cooperacin internacional en materia de evaluacin educativa
en los prximos aos. En primer lugar, debe observarse el nmero considerable de pases que se
han asociado a los dos proyectos regionales analizados anteriormente. En conjunto, stos suman
veinte los pases que estn participando en el
Programa de la OEI y algunos menos en el Laboratorio de OREALC. Este nivel de participa-

Un segundo factor que contribuye a la intensificacin de la participacin latinoamericana en los


proyectos de evaluacin educativa consiste en
los esfuerzos que estn realizando diversos organismos y asociaciones internacionales. Durante los ltimos aos, la UNESCO, la OEI, el
Banco Mundial, el BID, la Cumbre Iberoamericana, la Cumbre de las Amricas, la Fundacin
20

Ford, la OCDE y la IEA, entre otras, han impulsado la participacin de los pases de la regin.
Todo indica que esto se traducir en hechos concretos en los prximos aos.

afrontar los riesgos de compararse con


pases de alto desarrollo, porque esos
riesgos entraan a la vez la ventaja de
poder saber dnde estn nuestras virtudes y dnde nuestros defectos, ms
la ventaja de poder aprender de muchos pases de todos los continentes,
pero sobre todo, de aprender de nuestras propias fallas y aciertos. (...) Esta
informacin es vital para disear programas y acciones de mejoramiento a
todo nivel. La comparacin internacional puede ser el hecho menos relevante, pero s lo son los resultados que
nos dan un primer indicador de las
realidades que tenemos en la educacin en matemticas y ciencias en
Colombia, donde existen grandes diferencias entre el currculo propuesto, el
currculo desarrollado en el aula de
clase y el currculo logrado por los
alumnos. El TIMSS para Colombia
(Ver Anexo Cuadro 1) nos deja una
fuente de datos importantes para investigar los principales factores que
estn determinando el bajo rendimiento y baja eficiencia de la educacin en ciencias y matemticas en el
pas (Ministerio de Educacin Nacional, 1997a).

Un tercer factor en apoyo de la hiptesis de la


participacin creciente de los pases de Latinoamrica y el Caribe consiste en la percepcin
de los beneficios que pueden esperarse de la cooperacin internacional. Como muestra de ese
nuevo sentir, pueden citarse las palabras que
aparecan en el documento base de discusin
para la reunin de Ro de Janeiro. All se deca
expresamente que la rpida evolucin que experimenta la actividad evaluativa en la actualidad obliga a las autoridades educativas a explorar nuevas vas de actuacin, a reflexionar sobre
las experiencias desarrolladas y a extraer sus
propias conclusiones a partir de las mismas. Uno
de los procedimientos ms fructferos para llevar
a cabo dicha reflexin consiste precisamente en
contrastar las propias ideas e iniciativas con las
de otros. El debate internacional proporciona
una oportunidad inigualable para aumentar
nuestro conocimiento sobre el modo de resolver
los problemas que encontramos en el mbito
nacional y de mejorar nuestra prctica (Tiana,
1998: 26).
Otro ejemplo muy significativo es el aportado
por las autoridades colombianas en la publicacin que presenta y analiza los resultados obtenidos por ese pas en el TIMSS. En las pginas
introductorias de ese trabajo se exponen abiertamente y de manera directa los argumentos que
avalan la participacin en estudios comparativos
de rendimiento:

La posicin de las autoridades colombianas se


ha caracterizado por una actitud irrevocable en
favor de la participacin en proyectos internacionales. Pero las palabras anteriores estn lejos
de aplicarse exclusivamente al caso colombiano;
podran tambin aplicarse a otros pases de la
regin. De hecho, comienza a manifestarse entre
los pases de mayor desarrollo educativo de la
regin un inters explcito por incrementar su
participacin en proyectos internacionales, lo
que contribuye a reforzar la tendencia que aqu
se apunta.

La suerte del mundo se decide hoy


en los salones de clase de las escuelas
y de las universidades y en los laboratorios de investigacin, que tanto dependen de aquellos semilleros. Por
ello, el pas no ha rehuido tampoco las
evaluaciones internacionales. Fue as
como participamos en una evaluacin
internacional, junto a otros 40 pases,
sobre la enseanza y los aprendizajes
en ciencias y en matemticas. Sabamos de antemano que no nos ira muy
bien al principio, como se corrobor
en los resultados. Pero era necesario

En todo caso, aunque sea razonable anticipar un


incremento futuro de la cooperacin internacional en materia de evaluacin educativa en Amrica Latina, no pueden negarse las dificultades
del proceso. Uno de los mayores problemas que
puede suscitarse es el eventual efecto negativo
de la participacin en los pases de menor desarrollo relativo. Ese riesgo es puesto de mani21

fiesto por Kellaghan (1997: 30-31): Existe el


peligro de que la informacin sobre los resultados obtenidos por los alumnos (cuando se comparan con los de otros pases, pero no slo en ese
caso) sea desalentadora para los pases de menor
desarrollo econmico donde los recursos disponibles para la educacin son mucho ms limitados que en los pases ms ricos y con mejores
resultados acadmicos. Si la adquisicin de mayor informacin sobre los logros obtenidos por
los estudiantes lleva al fatalismo o al pesimismo,
no se habr cumplido con el cometido. Debemos
sopesar este riesgo contra el valor de obtener
una base realista para hacer frente a los problemas del sistema educativo (Kellaghan, 1997).

Evaluacin de los resultados de


la educacin
En general, la evaluacin de los resultados de la
educacin es percibida como una de las reas
prioritarias de trabajo para los prximos aos, no
slo desde una perspectiva nacional, sino tambin en el plano internacional. Algunos autores
han llegado a calificarla como una de las reas
de informacin y evaluacin que son crticas
para la poltica social de los pases (Alvarez H.
y Ruiz-Casares, 1997: 12). Los argumentos en
favor de esa tarea quedaban muy claramente
expuestos en la cita que antes se recoga de las
autoridades colombianas, por lo que no merece
la pena volver a insistir en ellos.

Si se confirma la hiptesis que aqu se aventura


acerca de la intensificacin de la participacin
latinoamericana en proyectos internacionales de
evaluacin, la cuestin que se plantear ser la
de articular dichos proyectos y establecer prioridades para su desarrollo, tanto en el plano nacional como en el regional. Sobre ese asunto se
volver ms adelante, con la intencin de presentar alguna propuesta concreta de actuacin
para los prximos aos.

De todos modos, es necesario reconocer que,


aunque la preocupacin e inters por esa rea
han ido en aumento, la informacin y los recursos disponibles en la regin son en general insuficientes para responder a las necesidades detectadas. Las dificultades que se plantean son, al
menos de tres tipos: conceptuales, metodolgicas y tcnicas.
Desde el punto de vista conceptual se plantean al
menos dos cuestiones problemticas. Por una
parte, es necesario definir adecuadamente el
rendimiento, lo que implica determinar cules
deben ser los resultados que hay que evaluar.
Este es un campo que ha exhibido cambios importantes en los ltimos aos. La incidencia en
Amrica Latina de los modelos curriculares de
base constructivista y el desplazamiento del inters desde la valoracin de los conocimientos
adquiridos hacia el anlisis de las capacidades
desarrolladas por los estudiantes, han obligado a
reconceptualizar los modelos de evaluacin y a
explorar nuevos mtodos y procedimientos para
llevar a cabo esa tarea. En realidad, son todava
pocos los proyectos que se han orientado decididamente hacia la evaluacin de las capacidades,
debindose citar el proyecto Definition and Selection of Competencies (DeSeCo), que forma
parte del proyecto INES, como uno de los intentos ms destacables en esa direccin. El
TIMSS tambin ha avanzado hacia la evaluacin
de las habilidades de los alumnos, por medio de

POSIBLES AREAS Y TEMAS PARA


LA COOPERACION INTERNACIONAL
El anlisis que se ha realizado acerca de los
principales proyectos internacionales en el campo de la evaluacin educativa nos puede ayudar
a identificar algunas de las reas y de los temas
que reclamarn una atencin prioritaria en los
prximos aos. En trminos generales, puede
decirse que dichos campos y reas estn relacionados con los dos enfoques fundamentales que
se aprecian en este mbito de cooperacin. Por
una parte, existe la necesidad de continuar apoyando el desarrollo y la consolidacin de los
sistemas nacionales de evaluacin de la calidad.
Por otra parte, resulta necesario desarrollar estudios comparativos del rendimiento educativo.
Por lo tanto, en la relacin que a continuacin
aparece se encontrarn elementos que guardan
relacin con uno u otro enfoque o con ambos a
la vez.

22

pruebas prcticas diseadas al efecto (performance tasks). Pero los proyectos de mbito latinoamericano, han sido en general ms tradicionales en la definicin del rendimiento, o al menos no han logrado plasmar todava las nuevas
ideas en instrumentos de evaluacin. De ah el
inters por profundizar en estos temas.

valorar el rendimiento en diversas reas educativas. Como se indic en el Seminario de Ro, el


ejercicio de establecer referencias es una operacin compleja de carcter simultneamente tcnico y poltico, que puede cambiar bastantes
concepciones sobre el papel de la evaluacin.
Habra que subrayar el inters que tiene este tipo
de operacin con vistas al establecimiento de
nuevas prescripciones curriculares. Las experiencias realizadas en este sentido son an muy
limitadas en los pases desarrollados y prcticamente inexistentes en Amrica Latina. Aunque
el Laboratorio de OREALC ha incluido entre sus
objetivos el establecimiento de estndares regionales, an no ha llegado a presentar resultados
concretos en ninguna rea. Sin duda, se trata de
un tema que exigir atencin en los prximos
aos.

Por otra parte, es necesario vincular el rendimiento educativo con los factores que contribuyen a explicarlo. Aunque la mayor parte de los
estudios nacionales e internacionales del rendimiento pretenden valorar la incidencia de los
denominados factores asociados, son pocos
los casos concretos en que ese estudio se ha hecho con rigor y menos an los que han alcanzado resultados definitivos. Las ambiciosas declaraciones de intenciones no suelen corresponder
con los resultados conseguidos. En ese sentido,
existe un claro inters en el desarrollo de medidas como la de oportunidad de aprender, algunas de las cuales han sido elaboradas de manera
bastante rigurosa con ocasin del TIMSS
(Schmidt y otros, 1996), aunque todava estn
poco aplicadas en la prctica. Como se sealaba
anteriormente, los estudios que lleva a cabo la
IEA han desarrollado unos anlisis bastante rigurosos de la relacin existente entre los resultados y el currculo, lo que sirve de base para
plantear acciones de mejora.

Desde el punto de vista tcnico, el tema que


plantea mayores problemas consiste en el desarrollo de instrumentos de evaluacin adecuados
a las nuevas perspectivas conceptuales y metodolgicas. Este es un asunto clave para el desarrollo de los sistemas nacionales de evaluacin y
al que algunas actividades de capacitacin e intercambio de informacin han sido dedicadas,
sin desconocer que an queda mucho trabajo por
hacer.
As pues, estamos ante un rea tan importante
como problemtica. No debe por tanto sorprender que la sealemos como una de las prioritarias para los prximos aos. El trabajo a desarrollar debera adoptar dos direcciones complementarias: por una parte, habra que apoyar a los
sistemas nacionales de evaluacin para dar respuesta a los problemas tcnicos y a los desafos
conceptuales y metodolgicos que se les presentan en la actualidad; por otra parte, habra
que desarrollar los embrionarios proyectos internacionales actuales de evaluacin del rendimiento educativo, adecundolos a los nuevos
planteamientos que ya circulan en el mbito internacional.

Desde el punto de vista metodolgico, esta rea


plantea otras dos dificultades que merece la pena
considerar. Por una parte, los pases de la regin
han mostrado su inters por la realizacin de
comparaciones justas. Ello implica tomar en
consideracin las situaciones de partida de los
estudiantes, de las escuelas o de los sistemas
educativos que se hayan de comparar. Utilizando
una expresin que ha hecho fortuna, se trata de
desarrollar mtodos que permitan estimar el
valor aadido de la educacin. Pero, si bien
abundan las declaraciones en que se reclama la
necesidad de calcular dicho parmetro, son pocos los proyectos que han desarrollado mtodos
y tcnicas avanzadas para efectuar ese clculo.
De ah el inters de trabajar en este tema en los
prximos aos.

Desarrollo profesional de los especialistas en


evaluacin educativa

Por otra parte, tambin existe la necesidad de


desarrollar mtodos para establecer estndares y
escalas de referencia (benchmarks) que permitan

Esta rea tambin ha sido identificada como una


de las prioritarias para la regin en los prximos
aos. Tanto el Laboratorio de OREALC como el
23

Programa de la OEI han insistido reiteradamente


en este asunto y le han dedicado acciones especficas. Adems, en las reuniones regionales que
han tenido lugar en los ltimos aos, la mayora
de los pases ha subrayado la necesidad de organizar y capacitar adecuadamente a los equipos
tcnicos responsables de los sistemas nacionales
de evaluacin. Esta demanda es especialmente
fuerte entre los pases con un menor nivel de
desarrollo de la evaluacin educativa.

cin de instrumentos de evaluacin, tcnicas


analticas avanzadas para el estudio del rendimiento y de sus factores asociados, manejo de
tcnicas para el clculo del valor aadido y para
la construccin de escalas de rendimiento, combinacin de mtodos cuantitativos y cualitativos
para la evaluacin de la calidad, entre algunos de
los principales.
En general, podra decirse que los pases de la
regin tienen un dficit de formacin en la aplicacin de mtodos avanzados para realizar una
evaluacin a gran escala. Ese dficit es especialmente llamativo en lo que respecta a los
mtodos ms complejos de investigacin cuantitativa. Mientras que las tcnicas estadsticas
clsicas son relativamente bien conocidas, las
ms avanzadas lo son poco: se habla de ellas,
pero se conoce poco acerca de su manejo y su
utilizacin eficaz. En consecuencia, habra que
insistir en la necesidad de capacitacin en todas
las reas relativas a la evaluacin cuantitativa de
gran escala, donde se aprecian vacos notables,
as como desfases importantes entre unos pases
y otros. Eso es especialmente cierto en lo que se
refiere a la elaboracin de pruebas de rendimiento alternativas o complementarias de las
tradicionales de eleccin mltiple.

En respuesta a esa demanda, el documento base


del seminario de Ro afirmaba que es necesario
seguir mejorando la formacin de los profesionales que trabajan en este campo. La situacin
actual pone de manifiesto que existen sectores
reducidos de especialistas altamente cualificados, pero que todava faltan suficientes expertos
bien formados para afrontar las crecientes demandas de evaluacin. Adems conviene revisar
la componente relativa a la evaluacin dentro de
los programas de formacin inicial y continua
del profesorado (Tiana, 1998: 31).
El apoyo al desarrollo profesional y a la formacin permanente de los especialistas en evaluacin implica la atencin a dos reas complementarias. Por una parte, hay que asegurar una
capacitacin bsica de carcter general, en la
que estn interesados la mayora de los pases de
la regin; por otra, hay que facilitar una capacitacin avanzada de carcter especializado, encaminada a reforzar los equipos tcnicos de pases con demandas especficas de formacin o
que se encuentran en niveles ms altos de desarrollo. Esta idea, seguir siendo vlida en los
prximos aos. Un aspecto complementario de
los anteriores y del que no suele hablarse mucho,
pese a su importancia, consiste en la concepcin
y la puesta en marcha de polticas de retencin
del personal formado, evitando que marchen a
otros puestos o instituciones y se pierda as parte
de la inversin realizada.

Un asunto muy importante de cara al futuro consiste en asegurar que los pases latinoamericanos
y caribeos se apropien de las nuevas tendencias que se apuntan en el campo de la evaluacin. Es ste un campo en rpida transformacin, que debe captarse como una realidad compleja y dinmica y no como un conjunto de tcnicas cristalizadas e inamovibles. El principal
desafo consiste en incorporarse al movimiento
actual de investigacin sobre la evaluacin educativa y no limitarse solamente a recibirlo. Ese
principio es fundamental para la construccin de
modelos de evaluacin adaptados a las necesidades propias de cada pas.

El desarrollo profesional de los especialistas en


evaluacin necesita ser especialmente atendido
en aquellas reas tcnicas que se han manifestado ms deficitarias. Los diversos temas que se
han analizado en el punto anterior pueden muy
bien servir de resumen de las reas que requieren mayor atencin: delimitacin y definicin
operativa de los resultados educativos, construc-

Al tratar de entrar en esa dinmica de apropiacin, tropezamos con un problema real de escasez de instituciones y organizaciones realmente
avanzadas en materia de evaluacin educativa en
los pases latinoamericanos. Si bien existen algunos centros de evaluacin que avanzan a buen
ritmo, en general an queda bastante camino por
recorrer. De ah se deduce el inters de desarro24

llar trabajos conjuntos con otras instituciones


semejantes de pases americanos o europeos, ya
que la formacin se adquiere en buena medida a
travs de la participacin en diversos proyectos
concretos. Desde ese punto de vista, un asunto
clave para el futuro consistira en el fortalecimiento de las principales instituciones dedicadas
a la evaluacin educativa, a ser posible tambin
las de carcter independiente y no slo las vinculadas a las autoridades educativas, ayudando
as al desarrollo de centros de excelencia, que
permitan capitalizar la inversin realizada.

Utilizacin de la evaluacin para el desarrollo


institucional de los centros educativos
Segn declaraciones reiteradas de las autoridades encargadas de los sistemas de evaluacin en
Latinoamrica, uno de los propsitos de los
mismos es el de compartir la informacin recogida con los maestros y las escuelas, permitindoles as mejorar su organizacin, funcionamiento y procesos de enseanza y aprendizaje.
Ahora bien, este propsito requiere una instrumentacin adecuada. La experiencia internacional demuestra que para mejorar la calidad se
requiere un compromiso activo por parte de los
centros educativos. Sin embargo, tambin comprueba que la simple diseminacin de los informes finales no es suficiente para suscitar mejoras. La experiencia de Argentina y Colombia
demuestra que es un factor para tener en cuenta,
pero no el fundamental.

Construccin de sistemas de indicadores


de la educacin
Otra de las reas principales de cooperacin futura es la que se refiere a la construccin de sistemas de indicadores de la educacin y a la participacin en los principales proyectos internacionales que se desarrollan con ese objetivo.
Aunque este documento no tenga como objetivo
central el anlisis de este campo de trabajo, no
pueden dejar de hacerse algunas observaciones
generales al respecto.

En consecuencia, todo apunta al inters de desarrollar nuevos proyectos encaminados a fomentar y facilitar el uso de los resultados de la evaluacin por parte de los centros escolares. Como
indicaba el documento base del seminario de
Ro, "las investigaciones recientes sobre los
factores que contribuyen a la mejora de la calidad de la educacin coinciden en conceder un
papel central a la propia escuela. Si bien no se
puede desdear el efecto producido por las polticas nacionales o locales adoptadas, la mejora
cualitativa se dirime finalmente en cada institucin educativa. De ah la creciente importancia
que se concede a la evaluacin de los centros
educativos como instrumento de mejora de la
educacin" (Tiana, 1998: 28). La extensin de
una cultura de la evaluacin es tambin un elemento a tomar en consideracin desde esa perspectiva.

Como ha podido apreciarse en la seccin anterior, los proyectos de mbito especficamente


latinoamericano no se han centrado prioritariamente en la construccin de sistemas de indicadores. Concretamente, en 1997, el Programa de
la OEI, celebr un seminario sobre este asunto,
que en realidad estuvo concebido como un intercambio de informacin y una presentacin por
expertos en el tema
Sin duda, la construccin de sistemas de indicadores debe constituir una de las reas prioritarias
de cooperacin en el futuro, pero es difcil separarla de las principales iniciativas internacionales en este campo, sobre todo del proyecto WEIINES. En la actualidad UNESCO/OREALC ha
propuesto desarrollar un programa de indicadores regiones que se complementara con los esfuerzos de la OCDE. Para este caso, podra pensarse en alguna iniciativa como la llevada a cabo
por la Unin europea respecto a los indicadores
nacionales de educacin. Estos complementan a
los indicadores establecidos por la OCDE.

No cabe duda de que sta es una de las reas en


que comienza a apreciarse un mayor inters. Eso
coincide con lo que est ocurriendo en otras regiones, como es el caso de los pases europeos.
Se trata de un campo al que se deber prestar
atencin en los prximos aos. Algunos ejemplos recientemente desarrollados en la Unin
europea, como el Proyecto piloto de evaluacin
de la calidad en la enseanza escolar, podran
servir de referencia, tanto por sus aciertos como
por sus errores.
25

En este contexto, habr que prestar atencin en


los prximos aos a la conexin entre la evaluacin y otras medidas, como la supervisin eficaz
y la participacin de los diversos agentes educativos en el uso de la evaluacin, as como la
concepcin y puesta en marcha de planes de
mejoras escolares. As mismo, ser necesario
establecer una conexin entre este tema y el establecimiento de escalas de logro, de modo tal
que puedan servir de referencia para las escuelas
y al igual que para los investigadores y las autoridades educativas.

POSICION DE LOS PRINCIPALES


ORGANISMOS Y
AGENCIAS INTERNACIONALES
Anteriormente se haca referencia al apoyo y al
impulso que los distintos organismos y agencias
internacionales estn dando a la participacin de
los pases latinoamericanos y caribeos en proyectos internacionales de evaluacin educativa,
considerndolo uno de los factores que influyen
en la previsible intensificacin de la misma que
se producir en los prximos aos. Por lo tanto,
el anlisis de la posicin que adopten dichas organizaciones para sostener o apoyar el desarrollo
de actuaciones en este campo resulta fundamental para establecer un plan adecuado de accin para el futuro.

Otras reas de cooperacin internacional


Por ltimo, a las cuatro reas mencionadas como
prioritarias para la cooperacin internacional
futura podran aadirse algunos otros temas de
menor importancia, pero que merecen cierta
atencin. El primero de ellos sera el contraste y
la armonizacin de las polticas nacionales en
materia de evaluacin.

Este anlisis no es sencillo de realizar, pues estos organismos no siempre adoptan posiciones
de antemano. En muchos casos, stas se adoptan
y modifican como resultado de la interaccin
con las iniciativas que surgen en la regin o en
un plano internacional ms amplio. Si bien las
posiciones actuales son generalmente claras y
explcitas, no se pueden dar por definitivas, pues
la experiencia ensea que suelen adaptarse con
el paso del tiempo. No obstante, en la fecha en
que se escribe este documento, se perciben unas
perspectivas bastante ntidas que deben tomarse
en consideracin. La posicin de las distintas
organizaciones y agencias que actan en la regin puede clasificarse en cuatro grupos diferentes:

El segundo de dichos temas es la evaluacin de


la calidad de las universidades. Varios pases
han demostrado su inters por esta rea y vienen
desarrollando programas de evaluacin. Entre
ellos se cuentan Argentina y Brasil, dos casos
concretos y claros de la importancia que est
cobrando este tema. Sin duda alguna, sta se
anuncia como un rea importante para el futuro.
Quizs por eso sorprenda la relativa lentitud con
que se desarrollan programas de cooperacin e
intercambio en dicha materia. La experiencia de
la Unin europea, donde se ha puesto en marcha
un proyecto coordinado de evaluacin de la calidad de las universidades, puede servir de ejemplo para posibles actuaciones futuras en el mbito latinoamericano.

1. La OEI promueve y sostiene el Programa de


evaluacin de la calidad de la educacin con
fondos propios, la contribucin de los pases
participantes y aportaciones especiales de
algunos de ellos. El programa tiene una buena base presupuestaria, al estar incluido en
el programa plurianual de la OEI y tener la
cobertura institucional de la Cumbre Iberoamericana. Ello quiere decir que la organizacin, a travs de su sede de Buenos Aires, cubre en buena medida los costos de la
coordinacin internacional del proyecto. Por
otra parte, el tipo de acciones que promueve
tiene costos limitados y parte de los mismos
son asumidos por los pases participantes.
Por lo tanto, la vida del programa parece
asegurada para los prximos aos, siempre

El tercero de los temas que se apuntan para el


futuro es el de la evaluacin de los docentes.
Aunque no se trata de un tema en el que se
cuente con la experiencia prctica de muchos
pases, no cabe duda que es un rea que puede
reclamar mayor atencin en el futuro. La iniciativa de las autoridades mexicanas puede servir
de orientacin para una mayor cooperacin internacional en dicho campo.

26

que se mantenga un tipo de actuaciones semejantes a las actuales. Los planes de la OEI
son los de mantener un funcionamiento del
programa similar al que ha desarrollado en
los ltimos aos y continuar cubriendo sus
gastos.

cin. Por lo tanto, los estudios son dirigidos


por la propia asociacin, pero contando para
ello con algunos de los centros participantes,
a travs de un proceso de concurso pblico.
Esa diversidad de centros coordinadores de
los estudios ha favorecido el desarrollo profesional de sus equipos responsables y estimulado la adquisicin de experiencia en este
campo.

2. La UNESCO ha apoyado de diversos modos


la cooperacin internacional en Amrica
Latina y el Caribe. Pero su tarea fundamental es la desarrollada a travs del Laboratorio
Latinoamericano de Evaluacin de la Calidad de la Educacin, que coordina
OREALC. Sin embargo, OREALC no est
en disposicin de cubrir los gastos del Laboratorio por si misma ni contando con la contribucin limitada que realizan los pases. Es
cierto que aporta algunos recursos personales, materiales y econmicos, pero no cubre
totalmente los gastos del Laboratorio. Para
el desarrollo del proyecto, precisa de la colaboracin de otras agencias internacionales.
Si en la primera fase del proyecto dicho
apoyo presupuestario ha conseguido asegurarse a travs del BID y de algunas fundaciones privadas, la situacin es ms incierta
para la siguiente fase que ahora comienza.
Dada esta situacin, el BID est brindando
una asistencia adicional aunque relativamente modesta. Lo mismo hacen otros donantes como la Fundacin Ford y posiblemente el Gobierno de Canad.

4. El Banco Mundial y el BID han actuado tradicionalmente como organismos que financian los trabajos de evaluacin desarrollados
en la regin. Casi todos los proyectos financiados por dichas instituciones incluyen
componentes de evaluacin educativa. Concretamente, el BID proporcion un fuerte
respaldo econmico al primer estudio del
Laboratorio, y continuar apoyando sus actividades. Adems, la estrategia del BID sobre la reforma de la educacin primaria y
secundaria en Amrica Latina que fue emitida recientemente, hace mencin especfica
del apoyo que brindar el Banco a los proyectos internacionales de evaluacin educativa (BID, 2000). Al igual que el BID, la
adopcin por parte del Banco Mundial de
una nueva estrategia educativa tambin ha
redundado en una actuacin muy importante
de ese organismo durante los ltimos aos
(Banco Mundial, 1995). Sin embargo, se
est registrando actualmente un giro en el
estilo de actuacin de ambas organizaciones.
La estrategia de facilitar por medio de la financiacin directa la participacin de los
pases menos desarrollados de la regin en
proyectos como los de OREALC o la IEA,
ha dado lugar a una que favorece la participacin sin proporcionar fondos especiales
para su cumplimiento. Es decir, en la actualidad, la estrategia de estos organismos tiende a dejar en manos de los propios pases la
decisin de participar o no en los proyectos
internacionales, as como el costo de hacerlo. Por el contrario, requieren que parte de
los prstamos para el desarrollo educativo
sea dedicado a la consolidacin de los sistemas nacionales de evaluacin y a la participacin en estudios internacionales.

3. La IEA se encuentra en una posicin parecida a la de OREALC. Como en el caso del


Laboratorio, los estudios que promueve han
de ser financiados por medio de las contribuciones de sus miembros y de donaciones
externas. En los ltimos aos la asociacin
ha desarrollado una estrategia de gestin de
los estudios que ha dado buenos resultados y
ha conseguido asentar una base econmica
anteriormente muy precaria. La consecuencia de esa situacin para el futuro prximo
es una mayor certidumbre acerca de la probabilidad de que sus proyectos logren ser
llevados a cabo y, sobre todo, de cumplir su
objetivo de completar ciclos de estudios.
La principal diferencia con OREALC estriba
en que sta es una organizacin gubernamental, mientras que la IEA es una asociacin de centros de investigacin y evalua-

Como puede verse, todos los organismos que


actan en la regin requieren un compromiso
27

explcito de los pases participantes en los proyectos internacionales, no slo en trminos de


inversin de tiempo y energas, sino generalmente tambin en trminos presupuestarios.
Adems, cuanto ms complejo es el proyecto,
mayor es esa exigencia. Por lo tanto, el plantea-

miento actual para estimular la cooperacin consiste en convencer a los pases acerca de los beneficios que pueden obtener a travs de su participacin en proyectos internacionales, ms que
en atraerles con una donacin econmica.

28

Alternativas de actuacin existentes para la cooperacin


internacional en proyectos de evaluacin educativa
Como pudo apreciarse en el apartado anterior,
existen en la actualidad unas perspectivas bastante ms favorables que las que existan hace
unos aos para la intensificacin de la participacin de los pases de Amrica Latina y el Caribe
en proyectos internacionales de evaluacin educativa. An ms, podra decirse que estos pases
deberan plantearse con urgencia el incremento
de su presencia en esos foros y proyectos internacionales, si no quieren correr el riesgo de quedar marginados de las nuevas tendencias que se
aprecian en los pases desarrollados. Aun cuando
dicha incorporacin haya de producirse en condiciones que favorezcan la apropiacin a la
que se aluda ms arriba, parece aconsejable dar
pasos decididos en esa direccin, generando el
conocimiento, las competencias profesionales y
los modos de organizacin que permitan beneficiarse de las posibilidades que encierra la evaluacin educativa.

nal en proyectos de evaluacin educativa en


Amrica Latina y el Caribe son diversas, unas
ms exigentes que otras en trminos de esfuerzo
e inversin. En efecto, es posible pensar en acciones ms o menos espordicas y poco comprometidas, pero tambin se pueden concebir
otras que exijan una mayor continuidad y compromiso por parte de los pases participantes. A
continuacin se presentan las principales modalidades de actuacin que aparecen en este campo
y se analizan las caractersticas de cada una de
ellas. Es necesario sealar, antes de entrar en la
presentacin y anlisis de dichas alternativas,
que no deben considerarse como excluyentes,
puesto que la agenda de trabajo para los prximos aos deber necesariamente incluir acciones
de esos diversos tipos.
Asistencia tcnica
Un primer tipo de acciones que ya estn ponindose en marcha (y que debern seguir aplicndose) son las que estn orientadas a prestar asistencia a los pases de la regin para la consolidacin de sus sistemas nacionales de evaluacin.
Aunque son realmente notables los esfuerzos
realizados para impulsar dichos sistemas, continan existiendo reas deficitarias y mbitos que
exigen especial atencin, algunos de los cuales
ya han sido analizados. Las expectativas acerca
de los resultados que pueden lograr los sistemas
nacionales de evaluacin no siempre guardan
relacin con su capacidad institucional, lo que
puede originar algunas decepciones.

Pero si las perspectivas son en general favorables, las formas de llevarlas a cabo son variadas.
Existe toda una serie de alternativas de actuacin
que son importantes de considerar en detalle,
puesto que las decisiones que se adopten condicionarn sin duda el futuro. En este apartado se
analizan, en primer lugar, las posibles acciones
que podran desarrollarse en los prximos aos.
A continuacin, se valoran las distintas condiciones organizativas en que dichas acciones
pueden llevarse a la prctica. Dicho anlisis servir de base para la propuesta de una agenda
concreta de actuacin.

Varios problemas institucionales han sido detectados en los sistemas de evaluacin, entre
ellos, los principales son: la falta de una capacitacin suficiente de los equipos tcnicos de algunos pases, la corta experiencia evaluativa de

POSIBLES ACCIONES
A DESARROLLAR
Las acciones que pueden desarrollarse en el
marco de una creciente cooperacin internacio-

29

muchos de ellos, el limitado dominio de los


principales mtodos y las tcnicas de la evaluacin a gran escala, y los inadecuados mecanismos de tratamiento y uso de la informacin producida o su insuficiente desarrollo institucional.

la existencia de un cierto equilibrio de situaciones entre los pases participantes. En efecto, en


el caso de un acusado desequilibrio, las acciones
de intercambio de informacin tendran un carcter asimtrico, probablemente ms cercano al
de asistencia tcnica que a un verdadero intercambio. Por lo tanto, hay que considerar cuidadosamente las dimensiones y la cobertura de
cada una de las acciones de este tipo que se emprendan.

Como es lgico, esos problemas no se presentan


con la misma crudeza en todos los pases de la
regin. Puede afirmarse que algunos pases estn
en una situacin claramente ms avanzada que
otros. La fecha de creacin de cada sistema nacional de evaluacin, la prioridad poltica que se
le haya concedido, los recursos materiales y presupuestarios invertidos, la tradicin acadmica
en este campo, y el nivel general de desarrollo
socioeconmico y educativo de cada pas, influyen decisivamente sobre los logros conseguidos
o las carencias an existentes. Si en trminos
generales puede hablarse de algunas insuficiencias notables, la diversidad de situaciones es
patente.

El intercambio y contraste de informacin supone un primer grado de compromiso en favor de


la cooperacin internacional, que la mayora de
los pases de la regin estn en disposicin de
realizar. La prueba ms palpable de esa actitud
favorable se encuentra en la diversidad de iniciativas de este tipo que se han puesto en marcha
en la regin recientemente. En consecuencia, la
dificultad no estriba tanto en iniciar acciones de
este tipo, cuanto en conseguir que sean lo ms
efectivas posibles. Las iniciativas en este campo
pueden resultar muy valiosas, pero tambin pueden resultar ineficaces o simplemente imposibles
de realizar. De ah la necesidad de considerarlas
con atencin.

As pues, en los prximos aos an ser necesario proporcionar asistencia tcnica en esta rea a
los pases de la regin. sta puede tener carcter
general, cuando se trate de apoyar a los pases
con mayores carencias, pero ser necesario
orientar la asistencia a temas ms especializados
para cubrir reas deficitarias concretas. Por lo
tanto, hay que pensar en una diversidad de acciones de asistencia tcnica, que debern estar
relacionadas con los objetivos especficos prioritarios y las condiciones concretas de cada sistema nacional de evaluacin.

Entre las acciones de este tipo desarrolladas en


los ltimos aos o que convendra emprender en
los prximos, pueden distinguirse varias modalidades. Una primera modalidad consiste en la
celebracin de reuniones y seminarios con el fin
de poner en comn y contrastar las experiencias
nacionales, bien en trminos generales, bien en
algn mbito concreto. Si en un primer momento este tipo de reuniones desempearon un
papel importante para la puesta en comn y el
contraste de las experiencias desarrolladas y para el establecimiento de relaciones personales y
profesionales entre los responsables de los sistemas nacionales de evaluacin, parece llegado
el momento de dar un paso ms all y reconsiderar el carcter de dichas actuaciones. En concreto, la experiencia adquirida aconseja aplicar
la metodologa de talleres o grupos de trabajo,
ms que de reuniones con un formato fundamentalmente expositivo. Adems, convendra
dedicar dichas reuniones al tratamiento de aspectos especficos y no solamente de asuntos
generales. Al haberse generalizado los sistemas
nacionales de evaluacin, se plantea la necesidad
de abordar las cuestiones que preocupan a los

Hasta el momento, la asistencia tcnica ha sido


realizada o promovida en la regin por muy diversos organismos internacionales. En concreto,
a las acciones financiadas por el Banco Mundial
y el BID en los ltimos aos debe sumarse el
Programa de la OEI, tambin constituye una experiencia valiosa. Las acciones futuras deben
tomar en cuenta estas experiencias.
Intercambio y contraste de informacin
Un segundo tipo de acciones de cooperacin
internacional que deberan llevarse a cabo en los
prximos aos son las encaminadas al intercambio y al contraste de informacin entre los sistemas nacionales de evaluacin de los pases de
la regin. Esta modalidad de actuacin implica

30

pases, descendiendo a un mayor grado de detalle. Las organizaciones que estn trabajando ms
activamente en este campo parecen haber tomado conciencia del cambio que es necesario introducir y estn adaptando sus planes de actuacin.
Habra que apoyar ese giro e insistir en su necesidad.

apunta a que esta modalidad flexible de intercambio que pone en contacto a los especialistas
de diversos pases se ir imponiendo como uno
de los medios ms eficaces de establecer contactos en el futuro. Por supuesto, las redes de
esta naturaleza pueden concebirse con carcter
regional, reforzando los lazos entre los pases de
una misma rea cultural y geogrfica, pero no
convendra olvidar la conveniencia de integrarse
en redes ms amplias, de carcter no solamente
regional. La globalizacin de los conocimientos
en el campo de la evaluacin, revisten de mayor
importancia a una integracin ms estrecha, no
slo en el mbito intrarregional, sino tambin en
el interregional. Una de las modalidades concretas que pueden adoptar este tipo de redes es la
de foros de intercambio y discusin. La generalizacin del acceso a Internet debe facilitar notablemente la creacin de estos foros y redes. Hay
que sealar que las organizaciones internacionales que trabajan en Amrica Latina y el Caribe
no han promovido esta lnea de actuacin de
manera sistemtica. Sin embargo, tanto PREAL
como UNESCO/ OREALC han dado a conocer
planes que se encaminan en esta direccin.

Una segunda modalidad de intercambio de experiencias consiste en la recogida sistemtica de


informacin de diverso tipo y su organizacin en
diversas bases de datos. Esta lnea de actuacin
ha sido tambin desarrollada por diversas organizaciones y ha dado lugar a iniciativas que, sin
embargo, no producen completa satisfaccin. En
efecto, no todas las bases de datos que han intentado construirse han dado el fruto esperado.
En aquellos campos en que exista una mayor
tradicin en su elaboracin, por ejemplo, en el
mbito bibliogrfico y documental, los resultados han sido ms satisfactorios. Pero en los
campos caracterizados por su movilidad, su amplitud y su novedad por ejemplo, las bases de
datos de especialistas o de instrumentos de evaluacin, los resultados han sido menos interesantes. Se aprecia una tendencia hacia la creacin de numerosas bases de datos, muchas de las
cuales son de escasa utilidad y limitada calidad
tcnica. Es necesario subrayar que la elaboracin
y, sobre todo, el mantenimiento y la actualizacin de una base de datos son tareas que requieren recursos especializados y una atencin
constante, lo que no siempre est disponible. La
buena voluntad no basta, aunque muchas veces
sea lo que ms abunda. Por lo tanto, aun respaldando la conveniencia de seguir trabajando en
esta direccin, debe advertirse que existen varias
consideraciones importantes en cuanto al propsito de la base de datos. Entre stas es de especial importancia asegurar que no existan otras
bases de datos que cubren la misma informacin
y que estn disponibles los recursos necesarios
para mantenerla al da.

Son varias las organizaciones que fomentan el


intercambio de informacin por medio de la publicacin de estudios e informes. En principio, la
idea de publicar los trabajos que se realizan debe
apoyarse. Pero el principal problema que surge
es el de asegurar una difusin adecuada de los
materiales producidos. Es justamente en este
sentido en que se perciben algunas deficiencias.
Dado que el esfuerzo personal y econmico que
significa la realizacin de estudios no siempre
reciben una divulgacin adecuada, convendra
reconsiderar las polticas de publicacin. Por
ejemplo, podra estudiarse la posibilidad de que
varias organizaciones trabajen en conjunto para
asegurar la difusin adecuada de sus publicaciones. El uso de Internet ofrece una plataforma
ideal para diseminar artculos en formato PDF
de fcil extraccin. Similarmente, varios sitios
web contienen vnculos a otras fuentes de informacin. Tanto UNESCO/OREALC como
PREAL han enfocado sus esfuerzos de distribucin de publicaciones hacia esta direccin. An
ms, cabra pensar en establecer acuerdos de
coedicin con empresas editoras, capaces de
lograr una mayor penetracin en el mercado
editorial y de difundir ms eficazmente los tra-

Una tercera modalidad de intercambio consiste


en la creacin de redes de expertos y de instituciones. Esta lnea de trabajo todava no se ha
utilizado al mximo en la regin, quizs porque
exige una masa crtica de experiencia y de especialistas, por debajo de la cual los contactos son
directos y personales, y no es necesario establecer este tipo de mediaciones. Sin embargo, todo

31

bajos publicados. Y sobre todo, sera de gran


beneficio romper los lmites regionales, expandiendo la presencia latinoamericana en los principales foros internacionales. Esta perspectiva
ms amplia favorecera indudablemente el desarrollo de la evaluacin educativa en la regin

cipal inconveniente radica precisamente en lo


limitado de su mbito de comparacin.
En efecto, para algunos pases como los de mayor desarrollo relativo antes mencionados, el
grupo de referencia con el que les interesara
compararse es ms amplio que el estrictamente
regional e incluira tanto Estados Unidos y Canad como algunos pases europeos y quizs
algunos asiticos. El mejor modo posible de dar
respuesta a esta demanda de ampliacin sera la
participacin en estudios de cobertura mundial.
Entre stos, los ms desarrollados y asentados
son los de la IEA, asociacin que est desarrollando nuevos planteamientos que deben permitir la realizacin de estudios de carcter regional,
vinculados a estudios de carcter mundial. Esa
posibilidad puede resultar ciertamente interesante para algunos pases de la regin y especialmente atractiva si la participacin se extiende a un grupo de al menos cuatro o cinco pases,
como podra ser el caso.

Estudios y proyectos conjuntos


La realizacin conjunta de estudios y proyectos
de evaluacin educativa es una actividad que
merece mayor atencin. Los estudios y proyectos conjuntos pueden llevarse a cabo de varias
maneras. Una primera posibilidad es la constituida por los estudios comparativos de evaluacin del rendimiento educativo, del estilo de los
realizados por el Laboratorio Latinoamericano,
por la IEA o por el proyecto PISA. Puede afirmarse sin lugar a dudas que es sta un rea claramente deficitaria en la actualidad. En efecto,
como se observaba en un apartado anterior, el
nico estudio internacional de rendimiento que
ha contado con la participacin de los pases
latinoamericanos y caribeos fue el realizado
por OREALC. Los estudios auspiciados por la
IEA, por su parte, han tenido una representacin
regional muy baja. Sin embargo, esa situacin
puede haber empezado a cambiar como lo demuestra el caso de Colombia, Brasil, Chile, Mxico y Argentina, pases que ya han manifestado
su inters por ampliar su participacin en estas
actividades. De igual manera, la experiencia del
Laboratorio ha hecho presente en la regin una
mayor conciencia de las ventajas de la participacin en este tipo de estudios. Desde ese punto de
vista, la contribucin que ha realizado puede
considerarse muy importante.

La combinacin de un estudio mundial con otro


regional es una alternativa interesante que habr
que contemplar en el futuro. Las posibilidades
institucionales de combinacin de ambas perspectivas son diversas, e iran desde la organizacin de dichos estudios por un solo organismo,
como podra ser la IEA, hasta la colaboracin de
dicha asociacin con OREALC u otras organizaciones para la vinculacin del estudio regional
con el mundial. En este campo an no hay nada
definido y est prcticamente todo por hacer.
Una tercera alternativa, que se sita entre las
otras dos, sera la utilizacin de los recursos generados por la IEA y el Laboratorio para iniciar
estudios comparativos, de carcter limitado, que
podran ser despus ampliarse. As, por ejemplo,
con los tems hechos pblicos del TIMSS y la
eventual colaboracin de la IEA, los pases interesados podran realizar algunos estudios parciales que les permitieran llevar a cabo una
comparacin internacional de su rendimiento
educativo. Se trata de una posibilidad menos
atractiva, pero que exige menores recursos.

Por lo tanto, es importante fomentar la participacin en este tipo de estudios. Para esto existen
varias posibilidades. La primera alternativa es la
de continuar realizando los estudios del Laboratorio u otros similares, reducidos al mbito
latinoamericano y caribeo, aunque mejorando
progresivamente su metodologa y su capacidad
de anlisis. La ventaja que esta posibilidad ofrece es la relativa homogeneidad de situaciones
nacionales, lo que facilita la comparacin. Adems, facilita la incorporacin de pases con menor grado de desarrollo, como pudiera ser el caso de los centroamericanos y caribeos. El prin-

En lo que se refiere a los niveles educativos para


llevar a cabo estudios de rendimiento, hay dos
que resultan especialmente adecuados. Son los
correspondientes al final de la educacin prima-

32

ria (en torno a los 11 a 12 aos) y al final de lasecundaria inferior (en torno a los 15 aos). El
inters de ambos momentos es puesto de manifiesto claramente por los especialistas: Las
evaluaciones de primaria pueden identificar deficiencias en un momento temprano del sistema
educativo, poniendo de manifiesto la necesidad
de emprender una accin correctiva. La informacin obtenida hacia finales de la escolaridad
obligatoria, o en un momento en que gran parte
de los jvenes todava asisten a la escuela, puede
tambin ser til si proporciona alguna indicacin
de qu tan bien preparados estn los alumnos
para la vida una vez abandonen la escuela. En
muchos pases en vas de desarrollo esto sucede
en primaria (Kellaghan, 1997: 38).

evaluacin de los centros escolares y la evaluacin de las universidades.


En efecto, son cada vez ms los pases latinoamericanos y caribeos que estn comenzando a
implantar polticas educativas propias en estos
dos campos, como consecuencia de su preocupacin por la mejora de la calidad de la educacin y de la creciente integracin supranacional
que plantea la cuestin de la homologacin de
los estudios realizados. Estados Unidos, Canad
y la Unin europea cuentan con amplia experiencia en estos campos, la cual podra emplearse como base para realizar proyectos piloto. En
concreto, las iniciativas emprendidas durante los
ltimos aos en la Unin Europea constituyen
un buen ejemplo de cooperacin internacional
en el sentido que aqu se propone. Es este el
momento adecuado para implantar un proyecto
piloto, aunque sea modesto, en uno de los dos
campos propuestos.

En relacin con las reas a estudiar, parece


aconsejable comenzar centrndose en las consideradas nucleares en el currculo, que son habitualmente la lengua, las matemticas y las ciencias. Adems de su carcter central, tienen la
ventaja de que existe una mayor experiencia internacional. No obstante, tambin se podra
contemplar la posibilidad de estudiar el rendimiento en ciencias sociales, aunque hay que reconocer su mayor dificultad. Y an ms inters
tendra el estudio de otras dimensiones o temas
transversales al currculo, de las cuales la educacin cvica constituye un buen ejemplo, aunque
se podran explorar otros. En todo caso, dada la
novedad de estos ltimos campos, parece aconsejable que el estudio de los mismos se emprendiera con cautela y con carcter experimental.

Una actividad que se presta a los estudios en


conjunto es la elaboracin de bancos regionales
de preguntas o items de pruebas de rendimiento.
Las organizaciones que trabajan en el mbito
latinoamericano, como OREALC, PREAL y
OEI han propuesto acciones de este tipo. El intercambio de items puede servir tanto como
ejemplo ilustrativo (aprender de lo que otros
hacen) como prctico (utilizar la informacin
producida por otros). El primero de estos ejemplos es fcil de comprender, pero no as el segundo. En efecto, la experiencia internacional
indica que cuando las pruebas tienen una relacin estrecha con el currculo prescrito, como es
el caso de la mayora de las elaboradas por los
sistemas nacionales de evaluacin, se dificulta
ms la transmisin de informacin. Es decir, la
transferencia de informacin slo puede llevarse
a cabo cuando el contenido de los exmenes presenta un sesgo cultural o nacional limitado. En la
prctica, esto significa que los datos ms fciles
de utilizar son los que corresponden a materias
como lenguaje, matemticas y ciencias, mientras
que datos sobre las ciencias sociales, historia,
geografa y otras materias semejantes son ms
difciles de transferir. Son precisamente los datos que han sido aplicados en pruebas internacionales (como las de la OREALC o la IEA) los
que, por haber pasado por filtros mucho ms
exigentes, pueden compararse ms fcilmente.

Es necesario sealar que los objetivos de quienes


participan en un estudio concreto pueden ser
muy diversos entre s. Por ese motivo, los estudios internacionales deberan contemplar la posibilidad de abarcar opciones nacionales, regionales o de otro tipo, que permitiesen adecuar el
estudio a los fines expresados por cada pas participante. Por otra parte, habra que contemplar
la posibilidad de ligar las evaluaciones nacionales con las internacionales para aprovechar sus
beneficios al mximo.
Tambin podran llevarse a cabo proyectos piloto en reas diferentes a la del rendimiento educativo. En concreto, entre los campos que estn
cobrando importancia en la regin y que podran
ser sujetos de proyectos piloto se destaca la

33

Por lo tanto, la utilidad de los bancos de preguntas o items basados en las pruebas nacionales
es muy limitada fuera del propio pas donde se
elabor. As pues, no parece que merezca la pena dedicar muchos recursos internacionales a su
elaboracin, la cual exigira adems una actualizacin permanente para contrarrestar la tendencia a la obsolescencia. La alternativa sera la
puesta en comn de los bancos nacionales, all
donde existan, facilitando su comunicacin por
otras vas.

cos de los sistemas nacionales de evaluacin.


Las tareas de formacin y capacitacin no deberan concebirse como una serie adicional de actividades sino, ms bien, deberan constituir una
componente transversal de las tres actividades
mencionadas con anterioridad.
En efecto, a travs de la asistencia tcnica, del
intercambio y cotejo de informacin y de la realizacin de estudios internacionales se crean
oportunidades para la formacin continua, sin
necesidad de pensar nicamente en programas
especficos de formacin o perfeccionamiento.
Esta idea merece apoyo e impulso dado que se
ha comprobado que la participacin en proyectos internacionales constituye un medio fundamental de formacin en este campo tan dinmico.

Por ltimo, habra que indicar que la realizacin


de estudios como los aqu propuestos tendra
adems la gran ventaja de impulsar la creacin y
el desarrollo de consorcios, que puede ser una
actividad que produzca muy buenos rendimientos en el futuro. La idea del establecimiento de
consorcios ha sido defendida por diversos especialistas de la regin, basndose en consideraciones sobre la capacidad tcnica e institucional
que existe en los pases y en los costos de estas
operaciones. Alvarez y Chesterfield (1997: 366367) han manifestado que estos consorcios
ayudan a unos pases a aprender de la experiencia de otros y desarrollar consensos sobre elementos crticos de cualquier reforma educativa
tales como los indicadores de xito o los mecanismos de evaluacin. Tambin permiten a los
pases conocer las mejores prcticas que pueden inspirar innovaciones en otros contextos, los
tipos de trabajo estudiantil que se consideran de
alta calidad o la manera como se solucionan los
problemas de informacin. Pero estos consorcios
requieren compromisos a largo plazo y apoyo
poltico tanto nacional como internacional. Por
otra parte, la puesta en marcha de este tipo de
empresas cooperativas permitir fomentar nuevas instituciones de excelencia en este terreno y
reforzar las ya existentes y el reforzamiento de
instituciones de excelencia en el terreno de la
evaluacin, de las que est necesitada la regin.
Sin duda, el establecimiento de consorcios se
apunta como una opcin muy recomendable para el futuro, sobre todo si se toma en consideracin el beneficio que pueden producir en relacin con su coste.

En todo caso, la carencia de un nmero adecuado de personal bien formado en el mbito de la


evaluacin y la falta de actualizacin cientfica y
tcnica de muchos de los profesionales que trabajan en este campo se reconoce en la regin.
Esto no es sorprendente dada la juventud del
mbito profesional y acadmico de la evaluacin
educativa en Amrica Latina, lo cual no permite
esperar que cuenten con una gran capacitacin y
dominio tcnico. Esto no significa que no existan especialistas bien preparados en la regin,
slo que, en ocasiones, no llegan a constituir una
masa crtica que permita un crecimiento institucional sostenido.
Por lo tanto, an se requieren programas concretos de formacin y capacitacin para especialistas. De acuerdo con lo expuesto anteriormente, parece aconsejable que los programas de
formacin estn estrechamente relacionados con
acciones de otro tipo, en particular con la participacin en proyectos internacionales. As se
asegurar la coherencia de las acciones y el desarrollo profesional.
Por ltimo, puede comentarse que las reas que
deberan ser prioritarias para estas tareas de formacin y capacitacin, bien sean especficas o
integradas en otras actuaciones, se encuentran en
la determinacin de campos y reas deficitarias
que se examinaban con anterioridad. Aquel listado, aunque no tena pretensiones de estar com-

Capacitacin y formacin
Otra accin importante es la capacitacin y formacin de los integrantes de los equipos tcni-

34

pleto, puede servir para disear actividades de


formacin para los prximos aos.

necesidad de definir los espacios institucionales


propios.

CARACTERISTICAS
INSTITUCIONALES

Por ltimo, debera considerarse seriamente la


participacin en organismos ya presentes en el
mbito mundial, pero con coordinacin regional.
La participacin en proyectos como WEI o los
desarrollados por la IEA tendra la virtud de ampliar el marco geogrfico de actuacin y de permitir una participacin verdaderamente internacional. Actualmente se est empujando la posibilidad de realizar arreglos regionales para el
desarrollo de los estudios, especialmente en el
caso de la IEA. Esto significa que los pases de
la regin que deseen participar en estos estudios
podran establecer condiciones comunes y beneficiarse de anlisis regionales. Por el mismo
motivo, sera posible establecer algn tipo de
acuerdo entre dichas iniciativas y las que vienen
siendo desarrolladas por las organizaciones regionales, evitando la competencia entre ellas y la
dispersin de esfuerzos. Esta ltima lnea de
actuacin merecera ser considerada atentamente, pues parece una alternativa realista para el
desarrollo de la evaluacin educativa en la regin. OREALC ha propuesto explcitamente
brindar este tipo de coordinacin con IEA, as
como tambin con WEI.

Las actividades que aqu se describen pueden


llevarse a cabo segn arreglos institucionales
diversos. Por ejemplo, podra mantenerse el sistema actual de organizacin, pero ste tiene varias deficiencias que deben corregirse. Por una
parte, se han apreciado lagunas importantes en
algunos mbitos de actuacin, como el de la
evaluacin del rendimiento escolar. Por otra, se
ha observado cierto grado de superposicin entre
las diversas iniciativas, en campos como la capacitacin o la creacin de bases de datos. Asimismo, algunas iniciativas pblicas han tenido
muy poca coordinacin. Por ltimo, la apertura
hacia el exterior de la regin es muy limitada.
Estas consideraciones llevan a la conclusin de
que el status quo no es una opcin atractiva.
Una segunda posibilidad consistira en fortalecer
la coordinacin entre las organizaciones internacionales que actualmente operan en Amrica
Latina y el Caribe. Ello implica, por una parte, a
OREALC, la OEI y el PREAL y, por otra, al
Banco Mundial y al BID. Dado que estas instituciones estn llevando a cabo las iniciativas de
mayor envergadura en la regin, cabra esperar
una mejor coordinacin. Para lograr este fin debera considerarse la creacin de un foro de encuentro y coordinacin para estas organizaciones. Es decir, deben establecerse mecanismos de
cooperacin permanentes entre los responsables
del Laboratorio Latinoamericano y el Programa
Cumbre de Evaluacin de la Calidad de la Educacin, dado que son los principales actores en
la regin. Como resultado de este informe y de
una reunin de complementacin llevada a cabo
en ocasin previa a la Cumbre, ha incrementado
la cooperacin entre OREALC, OEI y PREAL.

As pues, en lo que se refiere a las condiciones


organizativas para la intensificacin de la cooperacin internacional en este campo, podran
aconsejarse dos lneas de actuacin complementarias. La primera sera fomentar decididamente la coordinacin entre las organizaciones
que trabajan en la regin en el mbito de la
evaluacin educativa, evitando traslapes y la
dispersin de esfuerzos. En coherencia con ese
principio, debera desaconsejarse la proliferacin
de nuevas organizaciones de este tipo en la regin, procurando ms bien canalizar las nuevas
iniciativas a travs de las ya existentes. La segunda lnea de actuacin sera la de intensificar
la presencia latinoamericana y caribea en las
organizaciones internacionales de cobertura ms
amplia, fomentando la presencia regional de
manera articulada, lo que sera posible siempre
que se lograse una tasa de participacin adecuada.

Tambin podra considerarse la posibilidad de


establecer organizaciones propias para el desarrollo de nuevas actividades. Sin embargo, sta
no es una solucin ptima ya que la experiencia
seala que la proliferacin de organizaciones
puede agravar la falta de coordinacin, dada la

35

Propuesta de prioridades futuras


Esta seccin recoge y sintetiza el anlisis de la
situacin actual, las perspectivas para el futuro y
las posibles lneas de actuacin que se presentaron en el documento para esbozar algunas prioridades para los prximos aos. Las propuestas
que aqu se adelantan son fruto del trabajo de
anlisis realizado, que ha intentado ser lo ms
completo posible, pero no pueden en modo alguno descartarse limitaciones, lagunas o defectos de apreciacin. Se trata de una propuesta
realizada por el autor del documento y responde
por tanto a su percepcin personal, por lo cual
slo representa sugerencias que deben someterse
a discusin para elaborar una agenda razonable
de actuacin.

Sistematizar y profundizar las tareas de


asistencia tcnica para estimular el
desarrollo rpido de la evaluacin educativa
en los pases en que est ms atrasada.
Teniendo en cuenta que la creacin de los sistemas nacionales de evaluacin en la regin es
reciente y que muchos pases an no han logrado
un desarrollo suficiente, la segunda prioridad es
la continuacin de la asistencia tcnica. En
efecto, ms que de una simple continuacin de
este tipo de acciones, se requiere una sistematizacin y profundizacin en las mismas. Como se
indic con anterioridad, la experiencia adquirida
es muy valiosa, pero ha llegado el momento de
reflexionar sobre el tema y optimizarla. No obstante, deben tomarse en consideracin dos matizaciones. La primera consiste en que la asistencia tcnica no debera concebirse como una actividad aislada puesto que son ms eficaces las
que estn directamente relacionadas con el desarrollo de los trabajos nacionales o internacionales. Por lo tanto, habra que conectar dichas acciones con la realizacin de trabajos concretos.
La segunda matizacin consiste en que la asistencia tcnica tambin debe ir ligada a acciones
de capacitacin, tanto general como especfica,
para asegurar su continuidad una vez finalizada
la accin concreta.

As pues, las prioridades para los prximos aos


podran organizarse en seis grandes grupos:
Mejorar la coordinacin entre las acciones
desarrolladas actualmente por el
Laboratorio de OREALC, el Programa de la
OEI y las acciones de PREAL.
La primera tarea para la regin consiste en mejorar la coordinacin de los tres grandes programas de cooperacin en evaluacin educativa que
estn llevndose a cabo. Si se tiene en cuenta
que sus objetivos estn claramente deslindados
en sus formulaciones iniciales, cabe pensar que
la coordinacin no debe resultar excesivamente
difcil. Todo hace pensar que la falta relativa de
coordinacin que ha existido hasta ahora se debe
a una falta de comunicacin o de canales efectivos de coordinacin, ms que a un conflicto de
metas u objetivos. Teniendo en cuenta que los
participantes que representan a los pases en dichos programas son muchas veces los mismos,
habra que enfatizar an ms la coordinacin.
Afortunadamente, ya se vislumbra un grado ms
intenso de coordinacin.

Desarrollar acciones de capacitacin tcnica y


desarrollo profesional de mbito regional.
En el estado actual del desarrollo de la evaluacin educativa en Amrica Latina y el Caribe,
sigue siendo una prioridad la capacitacin tcnica y el desarrollo profesional de los especialistas
y tcnicos que trabajan en el rea. Aunque es un
campo que se ha venido atendiendo en estos ltimos aos, podra decirse aqu lo mismo que en
el punto anterior, respecto de la necesidad de

36

revisar el estilo de actuacin adoptado y reforzar


sus puntos fuertes. Un aspecto que requiere especial atencin es el de conectar las tareas de
capacitacin y formacin con las polticas de
retencin de los especialistas formados para
evitar la ineficacia. Una parte significativa de
esta asistencia tcnica y capacitacin puede ser
proporcionada virtualmente gracias al aumento
del acceso al Internet.

Fomentar la constitucin de consorcios de


instituciones de evaluacin educativa, en los
que puedan participar instituciones de la regin conjuntamente con otras externas.
En el futuro cercano debe hacerse hincapi sobre
la importancia de crear consorcios de instituciones para la realizacin de las acciones aqu propuestas. Las ventajas de este tipo de organizaciones son muchas; en este caso, sin embargo,
vale deben subrayarse las ventajas en cuanto a
lar relacin costo-beneficio y la sinergia que se
crea. El establecimiento de consorcios es adems
un medio privilegiado de formacin, capacitacin y desarrollo profesional, existiendo una
amplia experiencia internacional al respecto. En
concreto, habra que fomentar la creacin de
consorcios en que instituciones de la regin participasen conjuntamente con otras norteamericanas o europeas, beneficindose de la experiencia
existente en otros lugares. As mismo, habra
que apoyar especialmente a las instituciones ms
destacadas de la regin, con el fin de promover
el desarrollo de algunas instituciones de excelencia con presencia internacional.

Fomentar la participacin de los pases de


la regin en estudios internacionales de
evaluacin del rendimiento, intentando
que se den las condiciones para llevar a
cabo opciones regionales.
Otra prioridad que puede marcarse para el futuro
prximo consiste en fomentar la participacin de
los pases de la regin en estudios internacionales de evaluacin del rendimiento. Entre las opciones existentes, la ms realista parece ser la
participacin en los estudios de la IEA, dadas las
limitaciones de participacin que se plantean en
el proyecto PISA. Tras haber desarrollado una
experiencia valiosa de evaluacin del rendimiento en la regin, a travs del Laboratorio de
OREALC, parece llegado el momento de dar un
paso ms all y participar en estudios de carcter
mundial. Hasta ahora, el nmero de pases latinoamericanos que haba manifestado su inters
por dicha participacin era tan limitado, que ese
elemento actuaba como un freno en general. En
la actualidad, dado el aumento en el nmero de
pases interesados, parece llegado el momento
de dar ese paso adelante. Hay que tener adems
en cuenta la apertura de la IEA al desarrollo de
estudios con una componente regional y la aplicacin de un ciclo de estudios que permite calcular medidas de avance, lo que encierra interesantes posibilidades. De igual manera, hay que
tener en cuenta que no todos los pases de la regin pueden participar de los programas internacionales dada la fuerte demanda frente a los limitados recursos humanos dentro de este campo.
Por lo tanto, cada pas necesita definir claramente sus prioridades relacionndolas con la
importancia de participar en los programas internacionales.

Promover el inicio de algn proyecto piloto de


cooperacin internacional en el campo de la
evaluacin de los centros escolares o de las
universidades.
Por ltimo, podra tambin darse prioridad a la
elaboracin de proyectos piloto de tipo cooperativo en uno de los campos que ms preocupan a
las autoridades educativas y que ms incidencia
prctica pueden tener para la mejora de la calidad de la educacin. Se trata de la evaluacin de
los centros escolares o de las universidades. En
ambos campos existen experiencias en otros pases e incluso se podra considerar la posibilidad
de emprender algn proyecto de esa naturaleza
con algn pas norteamericano o europeo. La
experiencia adquirida a travs de la cooperacin
podra resultar muy valiosa para los pases participantes, como ha ocurrido en otros casos.
As pues, estas propuestas para los prximos
aos deberan ser discutidas y valoradas antes de
establecer un plan de cooperacin internacional

37

en materia de evaluacin educativa para Amrica Latina y el Caribe. Como se indicaba al comienzo del documento, los sistemas nacionales
de evaluacin de la calidad de la educacin estn
pasando por un rpido proceso de crecimiento,
pudiendo beneficiarse considerablemente de la

cooperacin y la experiencia internacionales.


Pero para que dicho beneficio sea el ptimo es
necesario reflexionar y adoptar las mejores opciones posibles. Facilitar dicha reflexin y dicha
toma de decisiones es el propsito central de
este documento.

38

Referencias
Alvarez H., B. y Ruiz-Casares, M., eds. 1997. Evaluacin y reforma educativa. Opciones de poltica. Washington, D.C., y Santiago de Chile: PREAL.
Alvarez H., B. y Chesterfield, R. 1997. Dilemas y opciones de poltica para la evaluacin educativa. En
Evaluacin y reforma educativa. Opciones de poltica, eds. H. Alvarez y Ruiz-Casares. Washington,
D.C., y Santiago de Chile: PREAL.
Arancibia, V. 1997. Los sistemas de medicin y evaluacin de la calidad de la educacin. Documentos
del Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educacin, N 2. Santiago de
Chile: UNESCO/OREALC.
Banco Interamericano de Desarrollo. 2000. Reforma de la educacin primaria y secundaria en Amrica
Latina y el Caribe: Una estrategia del BID. Serie de informes de polticas y estrategias sectoriales del
Departamento de Desarrollo Sostenible (EDU-113).
Banco Mundial. 1995. Priorities and Strategies for Education. A World Bank Review. Washington, D.C.:
Banco Mundial.
CERI. 1998. Education at a Glance. OECD Indicators. 1998. Pars: OECD.
Degenhart, R.E., ed. 1990. Thirty Years of International Research. An Annotated Bibliography of IEA
Publications (1960-1990). La Haya: IEA.
Delors, J., dir. 1996. Leducation, un trsor est cach dedans. Pars: UNESCO y Odile Jacob.
Kellaghan, T. 1997. Seguimiento de los resultados educativos nacionales. En Evaluacin y reforma educativa. Opciones de poltica, eds. H. Alvarez y Ruiz-Casares. Washington, D.C., y Santiago de Chile:
PREAL.
Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educacin. 1998. Primer estudio internacional comparativo sobre lenguaje, matemtica y factores asociados en tercero y cuarto grado. Santiago de Chile: UNESCO.
Ministerio de Educacin Nacional de Colombia. 1997a. Anlisis y resultados de las pruebas de matemticas TIMSS Colombia. Santaf de Bogot: Ministerio de Educacin Nacional.
__________. 1997b. Anlisis y resultados de las pruebas de ciencias TIMSS Colombia. Santaf de
Bogot: Ministerio de Educacin Nacional.
__________. 1997a. Habilidades en ciencias y matemticas: una alternativa para desarrollar la creatividad TIMSS Colombia. Santaf de Bogot: Ministerio de Educacin Nacional.
Schmidt, W.H. y otros. 1996. Characterizing Pedagogical Flow. An Investigation of Mathematics and
Science Teaching in Six Countries. Boston: Dordrecht. Londres: Kluwer Academic Publishers.
Tiana, A. 1998. Introduccin al dossier. Perspectivas, Vol. XXVIII, N 1.
Wolff, L. 1998. Las evaluaciones educacionales en Amrica Latina: Avance actual y futuros desafos.
Washington, D.C., y Santiago de Chile: PREAL.
39

40

Anexo

41

Blank page

42

Cuadro 1
Resultados en matemticas
Tercer Estudio Internacional de Matemtica y Ciencia
Resultados en
Matemticas
Pas
8 grado*
Singapur
643
Corea
607
Japn
605
Hong Kong
588
Blgica (Fl)
565
Repblica Checa
547
Suiza
545
Austria
539
Francia
538
Hungra
537
Eslovenia
541
Federacin Rusa
535
Holanda
541
Bulgaria
540
Canad
527
Irlanda
527
Blgica (Fr)
526
Austria
530
Tailandia
522
Israel
522
Suecia
519
Alemania
509
Nueva Zelandia
508
Inglaterra
506
Noruega
503
Estados Unidos
500
Dinamarca
502
Escocia
498
Letonia (LSS)
493
Espaa
487
Islandia
487
Grecia
484
Rumania
482
Lituania
477
Chipre
474
Portugal
454
Irn, Re.p Islmica
428
Kuwait
392
Colombia
385
Sudfrica
384

Nivel del
10% superior+
45
34
32
27
17
12
11
11
7
11
11
10
10
6
7
9
6
11
7
6
5
6
6
7
4
5
4
5
3
2
1
3
3
1
2
0
0
0
0
0

Nivel de la
mitad superior+
94
82
83
80
73
64
65
61
63
60
61
60
63
58
58
57
58
57
54
56
53
49
48
48
46
45
47
44
40
36
37
37
36
34
34
19
9
3
4
2

Diferencia de
resultados entre
7 y 8 grados
42
30
34
24
8
39
40
30
46
35
43
35
25
26
33
28
19
32
28
-41
25
36
30
43
24
37
36
32
39
27
44
27
49
28
31
27
-16
7

(*) Media de 500 y desviacin estndar de 100 para 7y 8 grado.


(+)Porcentaje de estudiantes que logran el nivel del marcador internacional, 8grado.
Fuente: Mathematics Achievement in the Middle School Years: IEA's Third International Mathematics and Science
Study (TIMSS) (Chestnut Hill, Mass.: Boston College / TIMSS International Study Center, 1996).

43

Cuadro 2
Resultados del Primer Estudio Comparativo Internacional
Laboratorio Latinoamericano de Evaluacin de la Calidad
de la Educacin (UNESCO-OREALC)
Pas

Media matemtica (4to grado)*

Cuba
Argentina
Brasil
Chile
Colombia
Mxico
Paraguay
Bolivia
Rep. Dominicana
Honduras
Venezuela
(*) Media de 250 y desviacin estndar de 50.
Fuente: UNESCO (1998).

353
269
269
265
258
256
248
245
234
231
226

Cuadro 3
Resultados del Primer Estudio Comparativo Internacional
Laboratorio Latinoamericano de Evaluacin de la Calidad de
la Educacin (UNESCO-OREALC)
Pas
Media lenguaje (4to grado)*
Cuba
349
Chile
286
Argentina
282
Brasil
277
Colombia
265
Mxico
252
Paraguay
251
Venezuela
249
Honduras
238
Bolivia
233
Rep. Dominicana
232
(*) Media de 250 y desviacin estndar de 50.
Fuente: UNESCO (1998).

44

Otras publicaciones de la Unidad de Educacin


La educacin superior en Amrica Latina y el Caribe. Documento de estrategia. Diciembre 1997, N
EDU-101. (disponible en ingls, espaol y portugus)
Institutional Reform in Mexican Higher Education: Conflict and Renewal in Three Public Universities,
por Rollin Kent. Febrero 1998, N EDU-102. (en ingls solamente)
Estadsticas educativas en Amrica Latina y el Caribe, por R.W. McMeekin. Enero 1998, N EDU-104.
(disponible en ingls y espaol)
The Stubborn Trainers vs. the Neoliberal Economists: Will Training Survive the Battle?, por Claudio de
Moura Castro. Junio 1998, N EDU-106. (en ingls solamente)
Trinta anos de FINEP: Banco ou mecenas, fomento ou balco?, por Maria Helena de Magalhes Castro y
Eva Stal. Agosto 1998, N EDU-107. (en portugus solamente)
Cost-Effectiveness of Education Policies in Latin America: A Survey of Expert Opinion, por Ernesto
Schiefelbein, Laurence Wolff y Paulina Schiefelbein. Diciembre 1998, N EDU-109. (en ingls
solamente)
Proyecto Joven: New Solutions and Some Surprises, por Claudio de Moura Castro. Julio 1999, N EDU110. (en ingls solamente)
Secondary Education in Latin America and the Caribbean: The Challenge of Growth and Reform, por
Laurence Wolff y Claudio de Moura Castro. Enero, 2000, N EDU-111. (en ingls solamente)
Las escuelas de secundaria en Amrica Latina y el Caribe y la transicin al mundo del trabajo, por Claudio de Moura Castro, Martin Carnoy and Laurence Wolff. Febrero, 2000, N EDU-112. (disponible en espaol e ingls)
Reforma de la educacin primaria y secundaria en Amrica Latina y el Caribe: Documento de estrategia.
Mayo 2000, N EDU-113 (disponible en espaol e ingls).
Teacher Training in Latin America: Innovations and Trends, por Juan Carlos Navarro y Aimee Verdisco.
Agosto 2000, N EDU-114 (en ingls solamente).
La educacin superior en Amrica Latina - Testimonios de un seminario de rectores, Salvador Malo and
Samuel Morley, editores. (en espaol solamente)
A revoluco silenciosa: Autonoma financiera da USP e UNICAMP, por Mara Helena Magalhes Castro.
Diciembre 1996, N SOC96-102. (en portugus solamente)
Cerrando la brecha, por Romn Mayorga. Enero 1997, N SOC97-101. (disponible en espaol e ingls)
Inversin en la calidad de la educacin pblica en el Per y su efecto sobre la fuerza de trabajo y la pobreza, por Jaime Saavedra. Marzo 1997, SOC97-104. (en espaol solamente)
La reforma educativa en Amrica Latina - Actas de un seminario, Claudio de Moura Castro y Martin
Carnoy, editores. Agosto 1997, SOC97-102. (en espaol solamente)

45

Libros:
Education in the Information Age, Claudio de Moura Castro, editor. (disponible en ingls y espaol) Puede obtenerse a travs de la librera del BID, telfono (202) 623-1753, e-mail: idbbooks@iadb.org.
Economa poltica de la reforma educacional en Chile. La reforma vista por sus protagonistas, por Viola
Espnola y Claudio de Moura Castro, editores. 1999. En espaol solamente. Puede obtenerse a
travs de la librera del BID, telfono (202) 623-1753, e-mail: idb-books@iadb.org.
Perspectivas sobre la reforma educativa. Amrica Central en el contexto de polticas de educacin en las
Amricas, por Juan Carlos Navarro, Katherine Taylor, Andrs Bernasconi and Lewis Tyler, editores. 2000. Publicado por la Agencia para el Desarrollo Internacional de los Estados Unidos, el
Instituto para Desarrollo Internacional de la Universidad de Harvard y el Banco Interamericano
de Desarrollo.
Myth, Reality, and Reform. Higher Education Policy in Latin America, by Claudio de Moura Castro and
Daniel Levy. 2000. En ingls solamente. Puede obtenerse a travs de la librera del BID, telfono
(202) 623-1753, e-mail: idb-books@iadb.org.
CD-Rom:
Primer Seminario Virtual BID sobre educacin y tecnologa.

Para mayor informacin, contactarse con la Unidad de Educacin:


Tel.: (202) 623-2087
Fax: (202) 623-1558
E-mail: sds/edu@iadb.org
Website: http://www.iadb.org/sds/edu

46

You might also like