Evaluation of Social Engagement in the Institutional Planning of Brazilian Federal Universities: Development and Application of an Analytical Tool

Keywords: Social engagement; Universities; Strategic planning; Evaluation; Institutional planning; Higher education

Abstract

Despite the growing importance attached to universities' engagement with society, there is still a need to understand how this theme is present in universities' planning and evaluation mechanisms. This article presents a new instrument to assess how universities include engagement with society in their institutional planning. The instrument was developed based on the models: New Flagship University (Douglass, 2016), Civic University (Goddard et al., 2016), Responsible University (Sørensen et al., 2019) and Entrepreneurial University (Clark, 1998; Etzkowitz, 1983). In addition to presenting the development of the assessment tool, this article presents a pilot exercise of applying the tool, with the analysis of the Institutional Development Plans (IDP) of 13 Brazilian federal universities. With the application, it was possible to analyze the presence of the different themes in the documents analyzed, as well as an analysis by institution. The analysis by theme showed that "Access and Permanence" and "Innovation and Entrepreneurship" were very present in the planning of the universities analyzed, while themes such as "Scientific Dissemination" and "Extension Courses" appeared with less frequency and detail. The analysis by institution made it possible to organize the 13 universities analyzed into four groups according to the presence of engagement activities with society in the IDPs, from very high presence to low presence. The tool can be applied by university managers to carry out a self-assessment of their strategic planning documents. In this way, it has the potential to contribute to universities' institutional learning. 

Author Biographies

Flávia Colus, PPMI, Vilnius, Lituânia
Flávia is a professional with more than 4 years of experience in higher education policy and research. Her fields of expertise include the third mission of universities, community engagement in higher education, university rankings and quality assurance. At UNESCO IESALC, she is mostly involved in the 'Feasibility study for the creation of a diploma supplement for Latin America and the Caribbean. Flávia holds a Master in Research and Innovation in Higher Education (MARIHE) with a full scholarship provided by Erasmus Mundus and a Master of Science and Technology Policy from the University of Campinas (UNICAMP). Beyond her roles at UNESCO-IESALC, she is also a researcher at PPMI, where she has been involved in multiple projects, including a ‘Study on the Impact and Transformation Potential of the European Universities Initiative’ for DG EAC and an ‘Evaluation study on Excellent Science in the European Framework Programmes for Research and Innovation’ for DG RTD. 
Ana Maria Carneiro, State University of Campinas (UNICAMP), Campinas, Brazil.

Doutora em Política Científica e Tecnológica pela Universidade Estadual de Campinas (Unicamp - 2007), mestre em Sociologia pela Unicamp (2000) e graduada em Ciencias Sociais pela Universidade Federal de Goiás (1997). Possui Pós Doutorado em Avaliaçao em CT&I. Atualmente é Pesquisadora do Núcleo de Estudos de Políticas Públicas (NEPP/Unicamp), Professora Participante do Programa de Pós-Graduaçao em Política Científica e Tecnológica (DPCT/IG/Unicamp); Coordenadora Associada do Laboratório de Estudos de Educaçao Superior (LEES/NEPP) e Coordenadora Associada do Grupo de Estudos Sobre Organizaçao da Pesquisa e da Inovaçao (GEOPI/DPCT/IG/Unicamp). Entre março de 2005 e março de 2007 foi Gerente de Pesquisas do Observatório Digital SOFTEX, unidade de pesquisa e planejamento da Associaçao para Promoçao da Excelencia do Software Brasileiro. Tem experiencia na pesquisa em Avaliaçao, Prospecçao Tecnológica e Propriedade Intelectual, atuando principalmente nos seguintes temas: educaçao superior, políticas públicas, Ciencia Tecnologia e inovaçao, avaliaçao de impactos.

References

Biagiotti, L. C. B. (2005). Conhecendo e aplicando rubricas em avaliações. Congresso Brasileiro de Educação a Distância, 1-9. Disponível em: http://www.abed.org.br/congresso2005/por/pdf/007tcf5.pdf
Brasil. Ministério da Educação. (2007). Instruções para elaboração de Plano de Desenvolvimento Institucional. Brasília, DF. Disponível em: https://ape.unesp.br/pdi/pdf/PDI-DiretrizesMEC.pdf. Acesso em May 9, 2021.
Brasil. Ministério da Educação. (2018). Conselho Nacional de Educação: Câmara de Educação Superior. Resolução nº 7, de 18 de dezembro de 2018. Disponível em: https://www.in.gov.br/materia/-/asset_publisher/Kujrw0TZC2Mb/content/id/55877808. Accesso em 29 de Fevereiro, 2021.
Castro, T. G., Abs, D., & Sarriera, J. C. (2011). Análise de conteúdo em pesquisas de Psicologia. Psicologia: Ciência e Profissão, 31(4), 814-825.
Cipriani, M. D. S. (2014). Alinhamento estratégico do PDI e os projetos de ensino, pesquisa e extensão: estudo nos colégios da UFSM (Dissertação de mestreado, Universidade Federal de Santa Maria). Santa Maria.
Clark, B. (1998). Creating entrepreneurial universities. Oxford: Pergamon.
Clark, B. (2001). The entrepreneurial university: New foundations for collegiality, autonomy, and achievement. Higher Education Management, 13(2), 9-24.
Da Costa, I. R. B. (2019). A divulgação científica pelas universidades públicas brasileiras sob a perspectiva da lógica dominada por serviço (Tese de Doutorado, Universidade Federal de Minas Gerais). Belo Horizonte.
Dal Magro, C. B., & Rausch, R. (2012). Plano De Desenvolvimento Institucional De Universidades Federais Brasileiras. Administração: Ensino e Pesquisa, 13(3), 427-453.
Davidson, E. J. (2005). Evaluation Methodology Basics: The nuts and bolts of sound evaluation. Sage Publications.
Douglass, J. A. (Ed.). (2016). The new flagship university: Changing the paradigm from global ranking to national relevancy. Hampshire: Springer.
Etzkowitz, H. (1983). Entrepreneurial scientists and entrepreneurial universities in American academic science. Minerva, 21(2/3), 198–233.
Etzkowitz, H. (2016). The entrepreneurial university: vision and metrics. Industry and Higher Education, 30(2), 83-97.
Falqueto, J. M. Z. (2012). A implantação do planejamento estratégico em universidades: o caso da Universidade de Brasília (Dissertação de mestrado, Universidade de Brasília). Brasília.
Feltre, C. (2015). A atividade de extensão e suas correlações institucionais: os desafios de um observatório de políticas públicas. ParticipAção (28), 15-22.
Folha de S. Paulo. (2019). Como É Feito O Ranking Universitário Folha. Disponível em: https://ruf.folha.uol.com.br/2019/noticias/como-e-feito-o-ranking-universitario-folha.shtml. Accesso em 20 de Agosto, 2020.
Gimenez, A. M. N., & Bonacelli, M. B. M. (2021). A terminological study about university-society relations: third mission, socioeconomic surroundings and the evolution of the role of academia. Rev. Tecnol. Soc., 17(46), 1-21. Disponível em: https://periodicos.utfpr.edu.br/rts/article/view/11641. Acesso em May 14, 2021.
Goddard, J., Hazelkorn, E., & Vallance, P. (2013). The civic university: connecting the global and the local. In R. Capello, A. Olechnicka, & G. Gorzelak (Eds.), Universities, cities and regions: Loci for knowledge and innovation creation (pp. 1-34). London: Routledge.
Goddard, J., et al. (2016). The Civic University: the policy and leadership challenges. Cheltenham: Edward Elgar Publishing.
Hsieh, H.-F., & Shannon, S. E. (2005). Three approaches to qualitative content analysis. Qualitative Health Research, 15(9), 1277-1288.
INEP. (2018). Sinopse Estatística da Educação Superior 2017. Brasília: Inep. Disponível em: http://portal.inep.gov.br/basica-censo-escolar-sinopse-sinopse. Acesso em Março 5, 2021.
INEP. (2020). Sinopse Estatística da Educação Superior 2019. Brasília: Inep. Disponível em: http://portal.inep.gov.br/basica-censo-escolar-sinopse-sinopse. Acesso em Março 5, 2021.
Karlsen, J., & Larrea, M. (2019). Does a Responsible University Need a Third Mission?. In M. Sørensen et al. (Eds.), The Responsible University: Exploring the Nordic Context and Beyond (pp. 173-199). Cham: Palgrave Macmillan.
Laus, S. P., & Morosini, M. C. (2005). Internationalization of higher education in Brazil. Higher Education in Latin America, 111.
Leal, F. G., Stallivieri, L., & Moraes, M. C. B. (2018). Indicadores de internacionalização: o que os Rankings Acadêmicos medem?. Revista Internacional de Educação Superior, 4(1), 52-73.
Lee, J. J., Vance, H., Stensaker, B., & Ghosh, S. (2020). Global rankings at a local cost? The strategic pursuit of status and the third mission. Comparative Education, 56(2), 236-256. https://doi.org/10.1080/03050068.2020.1741195
Naoe, A., Pacheco, D., Dias, H., Escobar, H., & Caires, L. (2019). 10 mitos sobre a universidade pública no Brasil – Jornal da USP. Disponível em: https://jornal.usp.br/universidade/10-mitos-sobre-a-universidade-publica-no-brasil/. Acesso em Março 11, 2021.
Neves, C. E. B. (2012). Ensino Superior no Brasil: expansão, diversificação e inclusão. Paper presented at the Congresso da LASA (Associação de Estudos Latino Americanos), São Francisco, Califórnia.
Neves, C. E. B., & Martins, C. B. (2016). Ensino superior no Brasil: uma visão abrangente. In T. Dwyer et al., Jovens universitários em um mundo em transformação: uma pesquisa sino-brasileira. Brasília: Ipea; Pequim: SSAP.
Oliveira, L. N. (2018). Complementaridade entre Avaliação Docente Interna e Externa, com Foco nos Rankings Internacionais. In J. Marcovitch (Ed.), Repensar a universidade: desempenho acadêmico e comparações internacionais (pp.111-126). São Paulo, Brazil: Com-Arte.
OECD-CERI. (1982). The university and the community: The problems of changing relationships. Paris.
Oliven, A. C. (2002). Histórico da educação superior no Brasil. A educação superior no Brasil, 336.
Silva, A. H., & Fossá, M. I. T. (2015). Análise de conteúdo: exemplo de aplicação da técnica para análise de dados qualitativos. Qualitas Revista Eletrônica, 16(1).
Segenreich, S. C. D. (2005). O PDI como referente para avaliação de instituições de educação superior: lições de uma experiência. ENSAIO: Avaliação e Políticas Públicas em Educação, 13(47), 149-168.
Sørensen, M., et al. (Eds). (2019). The Responsible University: Exploring the Nordic Context and Beyond. Cham: Palgrave Macmillan.
Published
2024-06-30
How to Cite
Colus, F., & Carneiro, A. M. (2024). Evaluation of Social Engagement in the Institutional Planning of Brazilian Federal Universities: Development and Application of an Analytical Tool. Higher Education and Society Journal (ESS), 36(1), 141-162. https://doi.org/10.54674/ess.v36i1.883