Advertisement

International Large-Scale Assessments: Trends and Effects on the Portuguese Public Education System

Chapter

Abstract

Portugal’s first major participation on an international large-scale student assessment (ILSA) was with TIMSS 1995. Portuguese students performed very poorly, and this led to the dismissal of TIMSS as a valid assessment for the Portuguese education system and the devaluation of the results. However, participation in TIMSS 1995 set in motion a sample-based external assessment in mathematics the following year whose framework was clearly inspired by TIMSS and which set the reference for the external assessments that still prevail today. The PISA 2000 survey that followed found the Portuguese students in the lowest rankings amongst the OECD countries. The TIMSS and PISA results reinforced the perception that the Portuguese curricula, teaching and assessment practices needed much improvement. ILSA and OECD suggestions were used to support and justify education policies aimed at the curricula reformulation, teaching practices, students’ support programs and schools’ management. In 2015, Portugal ranked for the first time above the OECD PISA average. This chapter gives a brief overview of the Portuguese record in major ILSAs and their effects on the shaping of the Portuguese educational system.

References

  1. Afonso, N., & Costa, E. (2009). The influence of the Programme for International Student Assessment (PISA) on policy decision in Portugal: the education policies of the 17th Portuguese Constitutional Government. Sísifo. Educational Sciences Journal, 10(set/dez), 53–64. Retrieved from http://sisifo.fpce.ul.pt
  2. Alves, L. A. M. (2012). História da Educação – Uma Introdução. Porto. Retrieved from http://ler.letras.up.pt/uploads/ficheiros/10021.pdf
  3. Amaro, G. (1997). Qualidade em Educação: a avaliação externa das aprendizagens dos alunos em Portugal. Inovação, 10(2–3), 259–275.Google Scholar
  4. Barroso, C. F. de A. (2010). Os estudos PISA e o ensino das ciências físico-naturais em Portugal: a comparabilidade dos resultados nacionais e as implicações para a política educacional. Universidade Nova de Lisboa. Retrieved from https://run.unl.pt/bitstream/10362/5279/1/carlosbarroso.pdf
  5. Bivar, A., Grosso, C., Oliveira, F., & Timóteo, M. (2015). Programa e Metas Curriculares. Matemática. Ministério da Educação e da Ciência. Lisboa. Retrieved from http://www.dge.mec.pt/sites/default/files/ficheiros/programa_metas_curriculares_matematica_a_secundario.pdf
  6. Breakspear, S. (2012). The policy impact of PISA: An Exploration of the normative effects of international benchmarking in school system performance. OECD Education Working Papers, 71, 1–31.  https://doi.org/10.1787/5k9fdfqffr28-en.CrossRefGoogle Scholar
  7. Breakspear, S. (2014). How does PISA shape education policy making? Why how we measure learning determines what counts in education. Centre for Strategic Education: Seminar Series, 240, 16. Retrieved from http://simonbreakspear.com/wp-content/uploads/2015/09/Breakspear-PISA-Paper.pdf.Google Scholar
  8. Candeias, A., Paz, A., & Rocha, M. (2007). Alfabetização e escola em Portugal nos séculos XIX e XX: os censos e as estatísticas. Lisboa: Fundação Calouste Gulbenkian.Google Scholar
  9. Carvalho, L. M. (2012). The fabrications and travels of a knowledge-policy instrument. European Educational Research Journal, 11(2), 172–188.  https://doi.org/10.2304/eerj.2012.11.2.172.CrossRefGoogle Scholar
  10. Carvalho, L. M., Costa, E., & Gonçalves, C. (2017). Fifteen years looking at the mirror: On the presence of PISA in education policy processes (Portugal, 2000–2016). European Journal of Education, 52(2), 154–166.  https://doi.org/10.1111/ejed.12210.CrossRefGoogle Scholar
  11. Conselho Nacional de Educação. (2013). Avaliações internacionais e desempenho dos alunos portugueses. (A. M. Bettencourt & M. Miguéns, Eds.) (Seminários). Lisboa: Conselho Nacional de Educação.Google Scholar
  12. Conselho Nacional de Educação. (2015). Investigação em Educação e os Resultados do PISA. (A. L. Ferreira, P. Félix, & S. Ferreira, Eds.) (Seminários). Lisboa: Conselho Nacional de Educação. Retrieved from http://www.cnedu.pt/content/edicoes/seminarios_e_coloquios/PISA_Investigação_em_Portugal_dezembro_2014.pdf
  13. Cristo, A. H. (2017). Os três problemas dos exames nacionais. Observador. Retrieved from https://observador.pt/especiais/os-tres-problemas-dos-exames-nacionais/
  14. Fernandes, D. (2014). Avaliações externas e melhoria das aprendizagens dos alunos. In CNE (Ed.), Avaliação Externa e Qualidade das Aprendizagens (pp. 21–49). CNE: Lisboa. Retrieved from http://www.cnedu.pt/content/edicoes/seminarios_e_coloquios/Avaliacão_externa_e_qualidade_das_aprendizagens_vf.pdf.Google Scholar
  15. Fernandes, D., & Gonçalves, C. (2018). Para Compreender O Desempenho Dos Alunos Portugueses No PISA (2000-2015). In M. I. R. Ortigão (Ed.), Políticas de Avaliação, Currículo e Qualidade: Diálogos sobre o PISA – Volume 3 (pp. 39–68). Curitiba: EDITORA CRV.  https://doi.org/10.24824/978854442369.1.CrossRefGoogle Scholar
  16. Ferreira, A. S., Flores, I., & Casas-Novas, T. (2017a). Porque Melhoraram os Resultados PISA em Portugal. Estudo Longitudinal e comparado (2000–2015). Retrieved from https://www.ffms.pt/FileDownload/9857244f-4dfb-48ad-b196-0448dc444865/porque-melhoraram-os-resultados-pisa-em-portugal
  17. Ferreira, A. S., Simões, B., Flores, I., Leiria, I., & Casas-Novas, T. (2017b). A educação em Exame.pt [Education under Exam.pt]. Retrieved July 10, 2018, from https://educacaoemexame.pt
  18. Fundação Francisco Manuel dos Santos. (2018). PORDATA – Taxa bruta de escolarização por nível de ensino. Retrieved July 10, 2018, from https://www.pordata.pt/Portugal/Taxa+bruta+de+escolarização+por+nível+de+ensino-434-7644.
  19. Hanberger, A. (2014). What PISA intends to and can possibly achieve: A critical programme theory analysis. European Educational Research Journal, 13(2), 167–180.  https://doi.org/10.2304/eerj.2014.13.2.167.CrossRefGoogle Scholar
  20. IEA. (2018). Brief History of the IEA. Retrieved July 5, 2018, from https://www.iea.nl/brief-history-iea
  21. Justino, D., & de Almeida, S. (2017). International assessment, curriculum policy induction and instruction time management: Lessons from Portuguese experience. European Journal of Curriculum Studies, 4(2), 671–691. Retrieved from http://pages.ie.uminho.pt/ejcs/index.php/ejcs/article/view/162Google Scholar
  22. Marôco, J. (2016). Portugal – TIMSS 2015 Encyclopedia. Retrieved September 21, 2018, from http://timssandpirls.bc.edu/timss2015/encyclopedia/countries/portugal/
  23. Marôco, J. (2017). Assimetrias Educacionais em Portugal: Através das Lentes do PISA. In Conselho Nacional de Educação (CNE) (Ed.), Estado da Educação 2016 (pp. 254–274). Lisboa: Conselho Nacional de Educação (CNE). Retrieved from http://www.cnedu.pt/content/noticias/CNE/CNE-EE2016_web.pdf
  24. Marôco, J. (2018). O Bom Leitor: Preditores da Literacia de Leitura dos Alunos Portugueses no PIRLS 2016. Revista Portuguesa de Educação, 31(2), 115-131. Retrieved from https://revistas.rcaap.pt/rpe/article/view/13768
  25. Marôco, J., Gonçalves, C., Lourenço, V., & Mendes, R. (2016a). PISA 2015 – Portugal: Literacia científica, literacia de Leitura & literacia matemática (Vol. I). Lisbon: IAVE. Retrieved from http://iave.pt/images/FicheirosPDF/Estudos_Internacionais/Relatorio_PISA2015.pdf.Google Scholar
  26. Marôco, J., Gonçalves, C., Lourenço, V., & Mendes, R. (2016b). TIMSS 2015 – Portugal. Volume I: Desempenhos em Matemática e em Ciências. Retrieved from http://iave.pt/images/FicheirosPDF/Estudos_Internacionais/TIMSS/Relat_rio_TIMSS4.pdf
  27. Marôco, J., Gonçalves, C., Lourenço, V., & Mendes, R. (2016c). TIMSS advanced 2015 - Portugal: Desempenhos em matemática e em ciências (Vol. 1). Lisbon: IAVE. Retrieved from http://iave.pt/images/FicheirosPDF/Estudos_Internacionais/TIMSS/Relatorio_TA2015.pdf
  28. Marôco, J., & Lourenço, V. (2017). In Search of Concurrent Validity of Large-scale International Students Assessments (LSISA) and High-stakes National Exams: The Portuguese Case Study. In Paper presented at the 2017 European Conference on Educational Research: Network 9 Assessment, Evaluation, Testing and Measurement (p. 126). Copenhagen. Retrieved from http://www.iave.pt/images/FicheirosPDF/Estudos_Internacionais/ECER2017_InSearchOfConcurrentValidity.pdf
  29. MEC-OEI. (2003). Breve Evolução Histórica Do Sistema Educativo. Lisboa. Retrieved from https://www.oei.es/historico/quipu/portugal/historia.pdf
  30. Mendonça, A. (n.d.). Evolução da Politica Educativa em Portugal. Retrieved from http://www3.uma.pt/alicemendonca/conteudo/investigacao/evolucaodapoliticaeducativaemPortugal.pdf
  31. Ministério da Educação. (2007). Educação e Formação em Portugal (M. da Educação, Ed.). Lisboa: Editorial do Ministério da Educação. Retrieved from http://www.dgeec.mec.pt/np4/97/%7B$clientServletPath%7D/?newsId=147&fileName=educacao_formacao_portugal.pdf
  32. Ministério da Educação e Ciência. (2015). Educação Pré-Escolar, Ensino Básico e Secundário – Relações Internacionais 2011–2015 (Ministério da Educação e Ciência, Ed.). Lisboa.Google Scholar
  33. Nelson, D. I. (2002). CPRE policy briefs: Using TIMSS To inform policy and practice at the local level. Philadelphia. Retrieved from http://search.ebscohost.com/login.aspx?direct=true&db=eric&AN=ED477658&lang=pt-br&site=ehost-live&scope=site
  34. OECD.Stat. (n.d.). Level of GDP per capita and productivity. Retrieved July 13, 2018, from https://stats.oecd.org/Index.aspx?DataSetCode=PDB_LV
  35. Organization for the Economic Cooperation and Development. (2018). Education GPS – Portugal. Retrieved July 10, 2018, from http://gpseducation.oecd.org/CountryProfile?primaryCountry=PRT
  36. Pereira, M. C., & Reis, H. (2012). Diferenças regionais no desempenho dos alunos portugueses: Evidencia do programa PISA da OCDE. Boletim Económico Banco Portugal, 3(Inverno), 59–83. Retrieved from https://www.bportugal.pt/paper/diferencas-regionais-no-desempenho-dos-alunos-portugueses-evidencia-do-programa-pisa-da-ocde
  37. Perez, S. A., & Matsaganis, M. (2018). The political economy of austerity in Southern Europe. New Political Economy, 23(2), 192–207.  https://doi.org/10.1080/13563467.2017.1370445.CrossRefGoogle Scholar
  38. Phillips, G. W., & Jiang, T. (2015). Using PISA as an international benchmark in standard setting. Journal of Applied Measurement, 16(2), 161–170.Google Scholar
  39. Rutkowski, L., & Svetina, D. (2014). Assessing the hypothesis of measurement invariance in the context of large-scale international surveys. Educational and Psychological Measurement, 74(1), 31–57.  https://doi.org/10.1177/0013164413498257.CrossRefGoogle Scholar
  40. Schult, J., & Sparfeldt, J. R. (2016). Reliability and validity of PIRLS and TIMSS. Does response format matter? European Journal of Psychological Assessment, 1–12.  https://doi.org/10.1027/1015-5759/a000338
  41. Tavares, P. S. (2017). Andreas Schleicher: “Portugal é a maior história de sucesso da Europa no PISA”. Diário de Notícias. Retrieved from https://www.dn.pt/portugal/interior/andreas-schleicher-portugal-e-a-maior-historia-de-sucesso-da-europa-no-pisa-5659076.html

Copyright information

© Springer Nature Switzerland AG 2020

Authors and Affiliations

  1. 1.ISPA-Instituto UniversitárioLisboaPortugal

Personalised recommendations