INDICATORS FOR EVALUATING TEACHING-SERVICE-COMMUNITY CURRICULAR COMPONENT
Keywords:
Health Evaluation, Practical Learning, Teaching Care Integration Services, UniversitiesAbstract
Evaluating the integration of teaching-service-community (TSCI) is essential, and assessment matrices are useful for this purpose. Therefore, the objective was to propose and validate a judgment matrix to evaluate components of teaching-service-community integration, such as the Health and Citizenship Discipline. Thus, an evaluability study was conducted in 2022 where a judgment matrix supported by a logical model was validated by an expert (a professor with at least 24 months at the TSCI, a PhD in public health with expertise in modeling) who assigned a score from zero (total disagreement) to 10 (total agreement) for each proposed indicator, considering validity, simplicity, and ease of use. Therefore, indicators with a score > 8.0 were considered valid. For these, a maximum expected score, cutoff point, observed value, assigned value, and performance judgment were assigned. Thus, the final matrix was composed of the 27 original indicators, with only six adjustments (changes in formulas, indicator nomenclature, and value judgments). This matrix allows for a value judgment regarding the performance of TSCI components in four strata (inadequate development, moderate development, adequate development, and excellent development). Therefore, it can improve pedagogical strategies, student-teacher interaction, and the implementation of the intervention plan throughout the curricular component.
References
AKERMAN, M. “Desafios contemporâneos da avaliação em saúde: A trajetória reflexiva de Oswaldo Yoshimi Tanaka”. Revista Brasileira de Avaliação, vol. 11, n. 1, 2022.
ALBIERO, J. F. G.; FREITAS, S. F. T. “Modelo para avaliação da integração ensino serviço em Unidades Docentes Assistenciais na Atenção Básica”. Saúde Debate, vol. 41, n. 114, 2017.
AMARAL, J. M. et al. “Validation of an evaluation matrix for the nursing process in the hospital context.” Revista Gaucha de Enfermagem, vol. 45, 2024,
BARATIERI, T. et al. “Aplicação do Estudo de Avaliabilidade na área da saúde: uma revisão integrativa”. Saúde em Debate, vol. 43, n. 120, 2019.
BAUERA, M. S; KIRCHNER, J. “Implementation science: What is it and why should I care?” Psychiatry Research, vol. 283, 2020.
BELFORD, M.; ROBERTSON, T.; JEPSON R. “Using evaluability assessment to assess local community development health programmes: a Scottish case-study”. BMC Medical Research Methodology, vol. 17, n. 1, 2017.
BERWICK, D.; FOX, D. M. “Evaluating the Quality of Medical Care: Donabedian's Classic Article 50 Years Later”. Milbank Q, vol. 94, n. 2, 2016.
BOTACIN, W. G. et al. “Validação de modelo lógico para a formação em odontologia no Brasil”. Boletim de Conjuntura (BOCA), vol. 23, n. 67, 2025.
BRASIL. Diretriz metodológica: síntese de evidências para políticas. Brasília: Ministério da Saúde, 2020. Disponível em: . Acesso em: 12/08/2025.
BRASIL. Portaria n. 2.436, de 21 de setembro de 2017. Brasília: Ministério da Saúde, 2017. Disponível em: . Acesso em: 12/08/2025.
BRASIL. Resolução n. 7, de 7 de dezembro de 2018. Brasília: Ministério da Educação, 2018. Disponível em: . Acesso em: 12/08/2025.
BRIDGES, D. R. et al. “Interprofessional collaboration: three best practice models of interprofessional education”. Medical education online, vol. 16, 2011.
BROUSSELE, A. et al. “Modelizar as intervenções”. In: CHAMPAGNE, F. et al. Avaliação: conceitos e métodos. Rio de Janeiro: Editora Fiocruz, 2011.
CABRAL, I. E.; RAFAEL, R. M. R. Transposição da teoria para a prática: desafios e oportunidades na ciência da implementação. Revista Gaúcha de Enfermagem, vol. 45, n. 1, 2024.
CAMARA, A. M. C. S.; GROSSEMAN, S.; PINHO, D. L. M. ‘Educação interprofissional no Programa PET-Saúde: a percepção de tutores”. Interface - Comunicação, Saúde, Educação, vol. 19, n. 1, 2015.
DIAS, G. A. R.; SANTOS, J. P. M.; LOPES, M. M. B. “Arco da problematização para planejamento educativo em saúde na percepção de estudantes de enfermagem”. Educação em revista, vol. 38, 2022.
DIAS, M. S. A. et al. “Construção de modelo teórico-lógico e matriz de julgamento para avaliação da efetividade do Núcleo Ampliado de Saúde da Família e Atenção Básica”. Cadernos de Saúde Pública, vol. 38, n. 11, 2022.
DONABEDIAN, A. “Evaluating the Quality of Medical Care”. Milbank Quarterly, vol. 83, n. 4, 2005.
GARCIA, S. O. et al. “Integração ensino-serviço: experiência potencializada pelo programa de educação pelo trabalho para a saúde – eixo educação permanente”. Interface - Comunicação, Saúde, Educação, vol. 23, 2019.
GUERRA, E. C.; MEDEIROS JÚNIOR, A.; COSTA, N. D. L. “Formação em saúde no âmbito da UFRN: aspectos fundamentais das aprendizagens em contextos interdisciplinares”. Revista Espaço Pedagógico, vol. 28, n. 2, 2021
KEITH, R. E. et al. “Using the Consolidated Framework for Implementation Research (CFIR) to produce actionable findings: a rapid-cycle evaluation approach to improving implementation.” Implementation science , vol. 12, n.1, 2017.
KELLOG FOUNDATION. Logic model development guide. Michigan: W.K. Kellog Foundation, 2004.
KIDDER, D. P. et al. “CDC program evaluation framework, 2024”. MMWR - Recommendations and Reports, vol. 73, n. 6, 2024.
LEAL, L.A. et al. “Socio-emotional competency matrix in nursing education: undergraduate student perspectives”. Revista Latino-Americana de Enfermagem, vol. 33, 2025.
MACHADO, F. C. A. et al. “Integração ensino-serviço como mediadora de experiências de comunicação em saúde na comunidade”. Revista de Enfermagem do Centro-Oeste Mineiro, vol. 10, 2020.
MACHADO, F. C. A. et al.. “Educação em saúde para sensibilizar adolescentes escolares para a vacinação contra o papiloma vírus humanos”. Revista Ciência Plural, vol. 7, n. 2, 2021b.
MACHADO, F. C. A. et al.. “Modelo lógico para os ciclos de melhoria da Estratégia Saúde da Família”. Revista Ciência Plural, vol. 7, n. 3, 2021a.
MACHADO, F. C. A.; GOLDBARG, D. ; LIMA, M. L. B. “Modelo lógico para avaliar ensino-serviço”. Conecte-se! Revista Interdisciplinar de Extensão, vol. 8 n. 17, 2024.
MENDES, T. M. C. et al. “Contribuições e desafios da integração ensino-serviço-comunidade”. Texto contexto - Enfermagem, vol. 29, 2020.
MENDONÇA, B. F. S.; CARVALHO, R. B.; PACHECO, K. T. S. “Educação interprofissional em currículos de graduação em odontologia: uma revisão sistemática”. Journal of Dental Education, vol. 88, n. 5, 2024.
NORO, L. R. A. et al. “Validation of the criteria matrix about the generalist’s education in Dentistry Undergraduate Courses”. Brazilian Oral Research, vol. 35, 2021.
NUNES, W. B.; NORO, L. R. A.; FERREIRA, M. A. F. “Aproximação e desafios na articulação norma e prática de ensino para o sus: um estudo de caso”. Boletim de Conjuntura (BOCA), vol. 19, n. 56, 2024.
NUNES, W. B. et al. “Educação problematizadora e pensamento complexo no ensino na área da saúde”. Boletim de Conjuntura (BOCA), vol. 17, n. 51, 2024.
OLSSON, T. O. et al. “Interprofessional education in the Dentistry curriculum: Analysis of a teaching-service-community integration experience”. European Journal of Dental Education : Official Journal of the Association for Dental Education in Europe, vol. 26, n.1, 2022.
PATEL, H. et al. “A scoping review of interprofessional education in healthcare: evaluating competency development, educational outcomes and challenges”. BMC Medical Education, vol. 25, n. 409, 2025.
PYO, J. et al. “Qualitative research in healthcare: necessity and characteristics”. Journal of Preventive Medicine & Public Health, vol. 56, n. 1, 2023.
REDMOND, C. et al. “Development of the EVIBEC Learning Outcomes Framework to support the delivery of evidence-based practice curricula in health care professional programmes: a codesign approach”. BMC Medical Education, vol. 24, n. 1, 2024.
RODRIGUES, A. P.; DALBELLO-ARAÚJO, M.; LAZARINI, W.S. “Integração ensino-serviço: a experiência como estratégia formativa em saúde”. Interface, vol. 28, 2024.
SAMICO, I. et al. Avaliação em saúde: bases conceituais e operacionais. Rio de Janeiro: Medbook, 2010.
SANTOS, A. A.; GIRAFFA, L. M. M. “Avaliação e tecnologia: concepções e práticas docentes na construção de uma avaliação para a aprendizagem personalizada”. Boletim de Conjuntura (BOCA), vol. 15, n. 45, 2023.
SANTOS, K. S. S. et al. “O uso de triangulação múltipla como estratégia de validação em um estudo qualitativo”. Ciência & Saúde Coletiva, vol. 25, n. 2, 2020.
SCHOONENBOOM, J.; JOHNSON, R. B. “How to Construct a Mixed Methods Research Design”. Kolner Zeitschrift fur Soziologie und Sozialpsychologie, vol. 69, n. 2, 2017.
SCHWARTZ, R. ; MOORE, J. B . “Implementation Science in Practice”. Journal of Public Health Management and Practice, vol. 27, n. 2, 2021.
SILVA, W. P. “Extensão Universitária: um conceito em construção”. Revista Extensão & Sociedade, vol. 11, n. 2, 2020.
SILVEIRA, J. L. G. C. et al. “Percepções da integração ensino-serviço-comunidade: contribuições para a formação e o cuidado integral em saúde”. Interface - Comunicação, Saúde, Educação, vol. 24, 2020.
SLATER, P. ; HASSON, F. “Data Measurement, Instruments and Sampling”. Journal of Psychiatric and Mental Health Nursing, vol. 32, n. 3, 2025.
SPAGNOL, C. A. et al. “Diálogos da enfermagem durante a pandemia: reflexões, desafios e perspectivas para a integração ensino-serviço”. Escola Anna Nery, vol. 25, 2021.
TAVARES, M. C. et al. “Challenges of education in the accounting profession in the Era 5.0: A systematic review”. Cogent Business and Management, vol 10, n. 2, 2023.
TORRES, A. C.; MOURAZ, A.; MONTEIRO, A. “Desafios da inovação curricular: Perspetivas de professores veteranos”. Revista Portuguesa de Educação, vol. 35, n. 1, 2022.
UFRN - Universidade Federal do Rio Grande do Norte. Componente Curricular da disciplina Saúde e Cidadania. Natal: UFRN, 2020. Disponível em: . Acesso em: 20/12/2025.
VENDRUSCOLO, C. et al. “PET-Saúde Interprofissionalidade: reflexões sobre uma estratégia interinstitucional para reorientação da formação”. Saúde em Redes, vol. 6, n. 2, 2020.
VENEGAS-GÓMEZ, M. et al. “Satisfacción de los estudiantes de Odontología con el aprendizaje blended-learning en la Universidad San Sebastián, Chile”. FEM: Revista de la Fundación Educación Médica, vol. 27, n. 2, 2024.
VOSS, S. et al. “Logic models for the evaluation of complex interventions in public health: lessons learnt from a staged development process”. BMC Public Health, vol. 25, n. 1, 2025.
WILLMINGTON, C. et al. “A contribuição do benchmarking para a melhoria da qualidade na área da saúde: uma revisão sistemática da literatura”. Pesquisa em Serviços de Saúde BMC, vol. 22 , n. 139, 2022.
WOCIECHOSKI, D. P.; CATANI, A. M. “Resolução CNE n. 7/2018 e a burocratização da educação superior: apontamentos sobre a diretriz relativa apenas à extensão universitária”. Revista de Gestão e Avaliação Educacional, vol. 11, n. 20, 2022.
Downloads
Published
Issue
Section
License
This work is licensed under a Creative Commons Attribution 4.0 International License.
Copyright (c). Conjuncture Bulletin (BOCA)
This work is licensed under a Creative Commons Attribution 4.0 International License.
