Les effets du programme ont été estimés en comparant directement la moyenne des résultats aux examens et les réponses à l’enquête des groupes tests et témoins. Bien que le programme ait été une réussite quant à l’augmentation du nombre d’ordinateurs dans les écoles tests – en moyenne, ces écoles possédaient 13,4 ordinateurs, contre 5,1 pour les écoles témoins – le programme a eu étonnamment peu d’effets sur les résultats aux examens. En espagnol, la matière ciblée par le programme, les élèves tests n'ont répondu beaucoup mieux que ceux du groupe témoin. Aucun progrès n’a été observé en mathématiques. Quand on s’intéresse aux effets dans des sous-groupes spécifiques, par âge ou sexe, il n’y a pas non plus de différences significatives entre les groupes test et témoin. De plus, Computers for Education a eu peu d’effet sur d’autres paramètres scolaires comme les heures d’études, la perception de l’école, ou les relations entre les pairs.
Ces enquêtes, réalisées à la fois auprès des professeurs et des élèves, révèlent que, bien que le nombre d’ordinateurs disponibles se soit beaucoup multiplié, le programme augmente étonnamment très peu leur utilisation par les élèves comme par les enseignants.
Malgré l’attachement du programme à utiliser les ordinateurs pour un éventail de matières, ils ont seulement été utilisés pour enseigner des connaissances en informatique. Seuls 3 à 4% des élèves, à la fois dans les écoles tests et témoins, ont déclaré avoir utilisé l’ordinateur pour les cours de langue, alors qu'il s'agissait de l'objectif principal du programme. De plus, l’utilisation supplémentaire des ordinateurs rapportée par les professeurs était concentrée dans les petites classes. Dans les plus grandes classes, les enseignants des écoles tests et témoins ont déclaré n’avoir presque pas utilisé l’ordinateur.
Les résultats de cette évaluation fournissent un exemple clair des limites éventuelles de l’utilisation des TIC pour améliorer les méthodes des enseignants dans les classes. Alors que des études précédentes ont montré que les ordinateurs à l’école peuvent améliorer considérablement les résultats des élèves, cette étude met en lumière l’importance de la mise en oeuvre et de la formation, en matière d’intégration d’ordinateurs mis à disposition dans les processus scolaires et les programmes.
1The World Bank. “The Quality of Education in Colombia,” Nov 4, 2008 http://www-wds.worldbank.org/external/default/WDSContentServer/WDSP/IB/2008/12/15/000333038_20081215233713/Rendered/PDF/439060ESW0P10610Box334108B01PUBLIC1.pdf