A built-in system of evaluation for reform projects and programmes in education

Abstract

In a conventional system of planning and implementation of educational reforms, evaluation generally appears only at the end of the process. While such a summative evaluation is necessary, the author argues for a more effective use of evaluation procedures for efficient planning, implementation and assimilation of reform projects. In order to use monitoring and evaluation procedures for contributing substantially towards the optimization of immediate outcomes and long-range effects of any reform project or programme, it is essential to follow a built-in, comprehensive and development-oriented approach. Such an evaluation procedure should take into account both extra-educational factors and intra-educational variables that influence the processes and outcomes of an educational reform. An EIPOL grid which combines five major dimensions of a broad-based evaluation system with different steps of a project cycle provides a basic operational framework for designing and adopting a more functional system of reform evaluation.

Résumé

Dans les systèmes conventionnels de planification et mise en oeuvre de réforme de l'éducation, l'évaluation se trouve généralement à la fin du processus. Bien qu'une telle évaluation sommaire soit nécessaire, l'auteur soutient qu'il faudrait aussi utiliser des procédés plus efficaces pour la planification, la réalisation et l'assimilation de projets de réforme. S'il est souhaitable que les procédés de surveillance et d'évaluation contribuent effectivement à l'optimisation de résultats immédiats et des effets à long terme de tout projet ou programme de réforme, une approche compréhensive, orientée vers le développement et intégrée dans le processus même s'impose. Un tel procédé devrait tenir compte aussi bien des facteurs relevant d'autres domaines que des variables à l'intérieur du domaine de l'éducation qui influent sur les processus et résultats d'une réforme. Le schéma EIPOL présenté combine cinq dimensions essentielles d'un système étendu d'évaluation avec les différentes étapes d'un cycle de projet et offre un cadre de base pour élaborer et adopter un système plus fonctionnel d'évaluation de réformes.

Zusammenfassung

In herkömmlichen Planungs- und Durchführungssystemen für Bildungsreformen steht Evaluation gewöhnlich am Ende des Prozesses. Obgleich solche summarische Evaluation notwendig ist, plädiert der Verfasser für Evaluationsverfahren, die eine wirksamere Planung, Durchführung und Assimilation von Reformprojekten ermöglichen. Wenn Überwachungs- und Evaluationsverfahren einen wesentlichen Beitrag zur Optimatisierung der unmittelbaren Resultate und Langzeit-Wirkungen eines Reformprojekts oder -programms leisten sollen, muß ein in den Reformprozeß eingebauter, umfassender und entwicklungsorientierter Ansatz benutzt werden. Ein solches Evaluationsverfahren sollte sowohl außerhalb des Bildungsbereichs liegende Faktoren als auch bildungsinterne Variablen berücksichtigen, welche die Prozesse und Ergebnisse einer Bildungsreform beeinflussen. Ein EIPOL Raster, in dem fünf wesentliche Dimensionen eines breit angelegten Evaluationssystems mit den verschiedenen Stufen eines Projekts verbunden sind, bietet einen operationeilen Grundrahmen für die Gestaltung und Einführung eines funktionelleren Reform-Evaluationssy stems.