Articles/Articoli
No. 2 (2025)
From Theory to Practice: Evaluation in Socio-Educational Services in the Brescia Area
Università Cattolica del Sacro Cuore
Università Cattolica del Sacro Cuore
Abstract
This study examines evaluation cultures and practices in socio-educational services in the Brescia area, managed by Third Sector organizations. The observational research focuses on the frequency of evaluation, its purposes, the dimensions considered, the methods employed, and the ways results are used. Data were collected through a structured questionnaire administered to the coordinators of 87 services (valid responses = 74).
Findings indicate that evaluation is more widespread in larger and more structured services, particularly where training initiatives on evaluation have been implemented. Formative purposes are strongly emphasized, followed by accountability functions. Needs, satisfaction, and effectiveness are frequently assessed, while processes and impacts receive less systematic attention. The use of results is mainly directed toward the improvement of interventions.
Overall, the findings provide an encouraging picture, but also point to the need for greater investment in the evaluation of broad and transformative processes and impacts. The study further underscores the strategic role of both initial and in-service training on evaluation in fostering the dissemination of methodologically robust and rigorous practices.
References
- Agresti A., & Finlay B. (2012). Metodi statistici di base e avanzati per le scienze sociali (Ed. it. a cura di M. Porcu). Milano: Pearson. (Originalmente pubblicato nel 2009).
- Altieri L. (2009). Valutazione e partecipazione. Metodologia per una ricerca interattiva e negoziale. Milano: FrancoAngeli.
- Arvidson M. (2009). Impact and evaluation in the UK third sector: reviewing literature and exploring ideas. Third Sector Research Centre, Working Paper 27.
- Benvenuto G. (2015). Stili e metodi della ricerca educativa. Roma: Carocci.
- Bezzi C. (2000). La valutazione dei servizi alla persona. Perugia: Giada.
- Bezzi C. (2010). Il nuovo disegno della ricerca valutativa (3^ ed.). Milano: FrancoAngeli.
- Breckell P., Harrison K., & Robert N. (2010). Impact reporting in the UK charity sector. CFDG, Charity Finance Directors’ Group.
- Cerri R. (Ed.). (2004). Valutare i progetti educativi: percorso di riflessione verso una mentalità valutativo-progettuale. Milano: FrancoAngeli.
- Coggi C., & Ricchiardi P. (2005). Progettare la ricerca empirica in educazione. Roma: Carocci.
- European Commision (2014). Proposal for key principles of a quality frameork for Early childhood. https://www.value-ecec.eu/wp-content/uploads/2019/11/ecec-quality-framework_en.pdf.
- Galliani L., & Notti A. M. (Eds.) (2014). Valutazione educativa. Lecce-Brescia: Pensa MultiMedia.
- Hadji C. (1995). La valutazione delle azioni educative. Brescia: La Scuola.
- Harachi T. W., Abbott R. D., Catalano R. F., Haggerty K. P., & Fleming C. B. (1999). Opening the black box: using process evaluation measures to assess implementation and theory building. American journal of community psychology, 27(5): 711-731.
- Iannotta J. S. (2023). Perché valutare. In: A.M. Notti, R. Tammaro (a cura di). Docimologia oggi. Manuale per docenti e futuri docenti (pp. 33-50). Lecce: Pensa Multimedia.
- Lumino R., & Gambardella D. (2020). Reframing accountability and learning through evaluation: Insights from the Italian higher education evaluation system. Evaluation, 26(2): 147-165.
- Marradi A. (2019). Tutti redigono questionari. Ma è davvero così facile?. Milano: FrancoAngeli.
- Melloni E. (Ed.) (2014). Come le organizzazioni Nonprofit valutano l’impatto delle proprie attività. IRS, Sodalitas. https://www.sodalitas.it/public/allegati/INDAGINE_RISULTATI_201531512283440.pdf (ultima consultazione: agosto ’25).
- Montalbetti K. (2024). La valutazione in campo educativo e formativo: logiche, scenari, esperienze. Milano: Vita & Pensiero.
- Nevo D. (1983). The Conceptualization of Educational Evaluation: An Analytical Review of the Literature. Review of Educational Research, 53(1): 117-128. Doi: 10.3102/00346543053001117.
- Nuzzaci A. (2012). Qualità e valutazione dei servizi extrascolastici. Lecce: Pensa multimedia.
- OECD/DAC (2019). Better Criteria for Better Evaluation Revised Evaluation Criteria Definitions and Principles for Use. https://www.oecd.org/dac/evaluation/revised-evaluation-criteria-dec-2019.pdf.
- Ógáin E. N., Lumley T., & Pritchard D. (2012). Making an impact. Impact measurement among charities and social enterprisesin the UK. London: NPC.
- Orizio E. (2024). Navigare nella complessità: la valutazione di impatto nei contesti socio-educativi. Lecce: PensaMultiMedia.
- Orizio E., & Montalbetti K. (2020). La valutazione di impatto nel contesto socio-educativo: un ibrido tra evaluation, assessment e measurement?. RIV Rassegna Italiana di Valutazione, 77: 33-49, Doi: 10.3280/RIV2020-077003.
- Orizio E., Montalbetti K., & Lisimberti C. (2021). Valutare l’impatto nei progetti educativi. Un compito (im)possibile?. RIV Rassegna Italiana di Valutazione, 80-81: 101-123, Doi: 10.3280/RIV2021-080006.
- Palumbo M., & Torrigiani C. (2009). La partecipazione fra ricerca e valutazione. Milano: FrancoAngeli.
- Palumbo M. (2002). Il processo di valutazione. Decidere, programmare, valutare (2^ed). Milano: FrancoAngeli.
- Pandolfi L. (2012). Valutare servizi educativi: un'introduzione. Lecce: Pensa multimedia.
- Pandolfi L., & Palomba F. (2025). Qualità educativa delle comunità per minori. Un percorso di valutazione sul campo. Lecce: Pensa multimedia.
- Patton M. Q. (1997). Utilization-focused evaluation: The new century text (3rd ed.). Thousand Oaks, CA: Sage.
- Patton M. Q. (2014). Qualitative research & evaluation methods: Integrating theory and practice (4^ed.). Thousand Oaks, CA: Sage publications.
- Pawson R., & Tilley N. (1997). Realistic Evaluation. Thousand Oaks and London: Sage.
- Picciotto R. (2011). The logic of evaluation professionalism. Evaluation, 17(2): 165-180.
- Regeer B. J., de Wildt-Liesveld R., van Mierlo B., & Bunders J. F. (2016). Exploring ways to reconcile accountability and learning in the evaluation of niche experiments. Evaluation, 22(1): 6-28.
- Restiglian E. (2020). Valutazione della qualità nei servizi per l'infanzia. Sistemi e strumenti. Roma: Carocci.
- Rogers P. J. (2009). Matching impact evaluation design to the nature of the intervention and the purpose of the evaluation. Journal of development effectiveness, 1(3): 217-226.
- Rogers P. J., & Weiss C. H. (2007). Theory-based evaluation: Reflections ten years on: Theory-based evaluation: Past, present, and future. New directions for evaluation, (114).
- Rossi P., Lipsey M., & Freeman H. (2004). Evaluation: A systematic approach (7th ed.). Thousand Oaks, CA: Sage Publications.
- Simeone D. (2023). Il pedagogista e le competenze di secondo livello. In: A. De Vita & P. Dusi (a cura di). Il mestiere di pedagogista. Approcci, contesti, competenze (pp. 111-122). Pisa: ETS.
- Stame N. (1998). L’esperienza della valutazione. Roma: Seam.
- Stame N. (2016). Valutazione pluralista. Milano: FrancoAngeli.
- Stame N. (2020). Valutazione d’impatto sociale. Committenti, Enti di Terzo Settore e valutatori. Impresa Sociale, 4: 54-60. Doi: 10.7425/IS.2020.04.09.
- Stern E. (2016). La valutazione di impatto. Una guida per committenti e manager preparata per Bond. Milano: FrancoAngeli.
- Stiozzi S. U., & Vinci V. (2016). La valutazione per pensare il lavoro pedagogico. Milano: FrancoAngeli.
- Stufflebeam D. L., & Kellaghan T. (2003). International Handbook of Educational Evaluation. Dordrecht: Kluwer Academic Publishers.
- Stufflebeam D. L., Madaus G. F., & Kellaghan T. (2012). Evaluation models: Viewpoints on educational and human services evaluation (2 ed.). Boston, Dordrecht, London: Kluwer Academic Publishers.
- Tessaro F. (1997). La valutazione dei processi formativi. Roma: Armando Editore.
- Torre E. M. T. (2010). Strategie di ricerca valutativa in educazione e formazione. Roma: Aracne.
- Torrigiani C. (2010). Valutare per apprendere. Capitale sociale e teoria del pro-gramma. Milano: FrancoAngeli.
- Trinchero R. (2004). I metodi della ricerca educativa. Roma: Laterza.
- Vinci V. (2016). Ridefinire il profilo professionale del valutatore degli staff nell’educazione degli adulti. Formazione & Insegnamento. Rivista internazionale di Scienze dell’educazione e della formazione, 14(2): 411-416.
- Weiss C. H. (2007). La valutazione basata sulla teoria: passato, presente e futuro (Trad. It.). In: N. Stame (a cura di). Classici della valutazione (pp. 353-370). Milano: FrancoAngeli. (Originalmente pubblicato nel 1997).
- Zaggia C. (2019). La valutazione dei servizi educativi. Verso un modello integrato di qualità gestionale, sociale e ambientale. Lecce: Pensa multimedia.