Instituto de Medicina Tropical “Pedro Kourí”
Bases para abordar la valoración del impacto social de un programa cubano de maestría en epidemiología*
Dr. Edilberto González Ochoa,1 Dra. Luisa Armas Pérez,2 Lic. Beatriz Cantelar Martínez3 y Dra. Nereyda Cantelar de Francisco4
El programa de maestría en epidemiología del Instituto de Medicina Tropical “Pedro Kourí” comenzó desde el año 1984 como consecuencia del desarrollo institucional y nacional de esta rama de la salud pública. Sus objetivos magnos responden a un conjunto de necesidades y encargos sociales técnicos y científicos en un ámbito nacional, regional y mundial. Como todo programa educativo, está sometido a evaluaciones internas y externas. La evaluación de su efectividad e impacto social es un aspecto importantísimo para su acreditación, por lo que se hace necesario un abordaje metodológico apropiado del objeto del programa. La valoración del efecto del programa a corto plazo y sobre los graduados, el claustro, la administración, el entorno y la comunidad expresada en la ubicación laboral, la actividad desempeñada, las responsabilidades científicas investigativas, su ámbito y las asesorías brindadas podrían medir la efectividad. Para medir el impacto social sería preciso delimitar el entorno de la comunidad y aplicar indicadores del aporte general, el aporte científico-técnico y la influencia académica docente a más largo plazo.
Palabras clave: Educación, posgrado, maestría, evaluación, impacto, Cuba.
En octubre de 1984 comenzó el primer programa de maestría en epidemiología del Instituto de Medicina Tropical “Pedro Kourí”,1 un año después de celebrado el Seminario Regional sobre Usos y Perspectivas de la Epidemiología de la OPS/OMS.2 Surgió como necesidad y consecuencia del desarrollo científico-técnico institucional y nacional. En sus inicios estuvo dirigido a la formación de personal proveniente del extranjero y, a partir de la edición de 1988-89, se incorporaron estudiantes cubanos.3 Como elementos de la política docente para estos tiempos, los desafíos para la formación en epidemiología han sido: 4-17 1) necesidades cambiantes de la salud y de sus servicios en el contexto económico-social imperante, 2) ámbito de aplicación del objetivo de trabajo del graduado, 3) posibilidades y facilidades para vincular la teoría con la práctica epidemiológica ajustada a las necesidades de salud y a la organización de servicios en cada nivel jerárquico, con un adecuado enfoque social, 4) congruencia de las políticas y las funciones esenciales de la salud pública, 5) avances tecnológicos de las aplicaciones de investigación y 6) enfoques modernos de la enseñanza.4-22
Cada día se hace más necesario contar con un personal con la más alta calificación en esta rama del conocimiento, donde la capacitación de posgrado constituye un eslabón esencial. El posgrado está conformado por 2 vertientes: la superación profesional y la formación académica de posgrado. Esta última tiene como objetivo la formación de graduados con una alta competencia profesional y avanzadas capacidades para la investigación científica, técnica y humanística.18
La educación de posgrado constituye el nivel más elevado del sistema nacional de educación y la superación continua de los egresados universitarios durante su vida profesional y contribuye, de forma sistémica, a la elevación de la productividad, la eficiencia y la calidad del trabajo.
La formación académica de postgrado abarca las siguientes formas: la especialidad, la maestría y el doctorado.18-19 La maestría es el proceso de formación posgraduada que proporciona a los graduados universitarios dominio profundo de los métodos de investigación, amplia cultura científica y conocimientos avanzados en el campo del saber, así como el desarrollo de habilidades para el trabajo docente y la investigación. El Ministerio de Educación Superior ha elaborado un documento titulado "Patrón de Excelencia de Programas de Maestría", en el cual se recomienda que el programa de una maestría debe atender necesidades sociales relevantes, formuladas como demandas explícitas u obedecer a la identificación de tendencias científico-tecnológicas, socioeconómicas, culturales o de otros órdenes, que requieren la preparación de profesionales competentes en diferentes áreas. La atención a las necesidades sociales se expresa en los objetivos del programa, lo que determina la selección de las disciplinas y estructura del plan, las líneas de investigación y los requisitos de ingreso. Todo esto debe realizarse dentro del contexto de la educación avanzada como “proyecto de sistema para el desarrollo de las potencialidades intelectuales y de la actividad creadora”.19-21
Como todo proceso, la evaluación comprende el análisis de variables, dimensiones e indicadores de estructura, (diseño curricular) proceso y resultados. La investigación evaluativa comprende la aplicación de diversas técnicas. No sólo se basa en el análisis de indicadores numéricos, sino también en descripciones, de acuerdo con criterios preestablecidos, de variables no cuantificables que aportan información de gran importancia. La evaluación puede ser externa o interna. La evaluación externa es aquella que se ejecuta por expertos, dirigentes y funcionarios de los niveles municipales, provinciales y nacionales, así como por la población. La evaluación interna es la que desarrolla la propia institución. Esta evaluación se ejecuta fundamental y básicamente por el propio colectivo en cuestión. Es una autoevaluación que se desarrolla de forma participativa y es en realidad el motor impulsor del proceso docente-educativo y del cambio en el servicio.22
En el caso de la evaluación educacional resulta fundamental analizar impactos o efectos de un programa según sus objetivos. En esto juega un importante papel el estudio de la efectividad del desempeño y el impacto social de los profesionales graduados.20-22
En otra publicación1 se describió el diseño curricular del programa; lo retomaremos a partir de su estructura presente en el Instituto “Pedro Kourí” (Instituto “Pedro Kourí”. Programa del curso de maestría en epidemiología 2000-2001. Subdirección de Docencia. IPK. La Habana. 2000). El programa pretende que los graduados sean capaces de: 1) aplicar el método de investigación epidemiológica dentro del ejercicio de su trabajo, acorde con el sistema de funciones y el nivel de responsabilidad, 2) analizar la dinámica del proceso de los problemas de salud y aplicar acciones preventivas derivadas de las interacciones entre los distintos momentos de ese proceso, 3) proponer y ejecutar medidas de vigilancia y control de los problemas de salud en la comunidad y 4) valorar los resultados de la experiencia cubana en la solución de problemas de salud.
Se desarrollan módulos y unidades que hacen alcanzar los objetivos propuestos y el fomento y fortalecimiento de la autodisciplina consciente para el trabajo independiente y creativo. El programa está conformado por 5 módulos obligatorios y 2 opcionales. Su idea rectora consiste en que los estudiantes se apropien de los conocimientos, habilidades y actitudes que les permitan describir las características y los determinantes de los problemas de salud, investigar sus causas, así como aportar soluciones, dentro de la vigilancia, el análisis de la situación de salud, la investigación etiológica y la evaluación de programas y servicios, acordes con los deberes funcionales que se demandan. Los 2 primeros módulos sirven de basamento a los posteriores. Los estudiantes se adentrarán en la concepción, diseño, formulación y ejecución de investigaciones y sistemas de vigilancia, en el estudio de la situación de salud de una comunidad pequeña, y realizarán la presentación y debate de los informes finales de esos estudios. Seleccionarán 3 o 4 unidades opcionales, acordes con las necesidades oficiales e intereses de sus territorios. Deben elaborar y concluir una investigación de evaluación de programas o servicios y concluir el que será presentado y defendido a manera de trabajo de tesis final. El programa lectivo se extiende desde la tercera semana del mes de septiembre del año en curso hasta la segunda semana de septiembre del año siguiente en que corre la primera convocatorio de defensa de la tesis. La segunda convocatoria para defensa de la tesis se realiza al sexto mes después de finalizado tal período lectivo, es decir, que el programa dura 18 meses como máximo. Esto corresponde a una modalidad presencial. Se está elaborando una propuesta de modalidad semipresencial.
Consideraremos como impacto cualquier cambio ocurrido en el objeto del programa y su entorno como consecuencia de la influencia del proceso docente educativo. El impacto como rasgo del proceso evaluativo de un programa institucional consiste en: a) efectos sobre los estudiantes, claustro, administración, comunidad y entorno, b) mejoramiento profesional y humano, c) superación social, d) organización y prestigio alcanzados y e) servicios disponibles para estudiantes, profesores y comunidad.22
Debe entenderse como efectividad del programa de maestría el conjunto de efectos inmediatos útiles aportados por sus resultados. Esta efectividad puede expresarse en el objeto (graduados), en los clientes, organizaciones, instituciones, etc. o en el entorno, pero es de carácter inmediato y está vinculada a la competencia y al desempeño mostrado por los egresados, y revelada en los objetivos del programa.22
En las maestrías en ciencias, como la de epidemiología, la efectividad puede constatarse en el avance profesional de los egresados, lo que puede ser medido con algunas variables como la ubicación laboral, la actividad laboral, la responsabilidad científica profesional investigativa, el alcance de la responsabilidad y las asesorías científico-técnicas que brindan. Las publicaciones científicas y ponencias en eventos, así como la generalización de las publicaciones de las tesis de maestría, son evidencias de la efectividad del programa.
Por definición la efectividad es un rasgo componente del impacto del programa al revelar su efecto en los estudiantes y el claustro. En la medida en que la efectividad trascienda a la comunidad y/o al entorno se convierte en impacto social del programa.
El mayor desafío de la evaluación del objeto (graduados) es el abordaje de su impacto social. Constituye un enfoque especial del impacto general del programa. Un rasgo importante de la evaluación del impacto social es que incluye a todas las demás formas, tales como las de resultados, efectividad y eficiencia; 22 de este modo, las de resultados solo consideran los efectos previstos en los objetivos predeterminados; las de efectividad se refieren al efecto útil implícito en las consecuencias de los resultados, y las de eficiencia constatan el logro de los objetivos con la mayor economía de recursos. Consecuentemente cada uno de estos constituye una parte del impacto social y a la vez contribuyen con este.
]]> Otros rasgos de la evaluación del impacto social consisten en que es general y sistemático, abarca el análisis de diversas esferas, los efectos esperados se pueden constatar tanto en los usuarios como en el entorno social y se dirige a conocer efectos esperados o no, positivos o negativos.22 Esto implica la toma de conciencia de la utilidad, perjuicio o inutilidad del efecto múltiple del objeto evaluado integralmente.La evaluación del impacto social puede definirse como el grado de trascendencia en el entorno socioeconómico concreto, con el fin de valorar su efecto sobre los objetos aplicados y asegurar la selección mejorada de nuevos objetos de evaluación.20-22 Las características que permiten y favorecerían la evaluación del impacto social son: 1) que el efecto de la aplicación del objeto trascienda lo inmediato, 2) que constituya un efecto diferido (a posteriori) y 3) que sus indicadores sean específicos para la forma de vinculación con la realidad.
Por estas razones se exponen sus factores condicionantes:22 a) el objeto debe ser de conocido efecto diferido (a posteriori) insertado profundamente y susceptible de ser detectado en el entorno, b) a partir de la inserción del objeto en el entorno socioeconómico debe esperarse su maduración, c) debe conocerse la manera específica de inserción del objeto y los resultados fructificables de la inserción, d) deben elaborarse instrumentos específicos que permitan detectar los frutos de la inserción, incluyendo la valoración cualitativa, e) son de mucho interés los indicadores que reflejan la recuperación del esfuerzo social invertido en la inserción del objeto en la práctica y los beneficios complementarios, f) debe considerar objetos participantes de amplio espectro productivo y de servicios y g) buscar efectos mediatos requiere seleccionar objetos sistemáticamente apropiados que permitan su utilización como instrumento para el perfeccionamiento de la planificación y deben seleccionarse variables que reflejen, en mayor medida, la repercusión económico-social de la inserción del objeto en la práctica en sus influencias recíprocas.
En un terreno práctico, el impacto general, incluye los resultados, efectividad y eficiencia del programa en forma integral, junto con sus repercusiones. La evaluación del impacto social trata de establecer cuáles son los posibles efectos-consecuencias del objeto evaluable en una población amplia (comunidad o país, organizaciones, personas asociadas al usuario etc.) y no sólo a los inmediatos previstos, sino todo el espectro de consecuencias que resultan de la aplicación del objeto evaluable. El impacto social del programa consiste, por una parte, en la repercusión del desempeño de los profesionales egresados, y del reconocimiento social de tal repercusión en la transformación del entorno medido a posteriori como expresión del cumplimiento de los objetivos docente.20-22 Sin embargo, la efectividad o eficacia del desempeño profesional y su impacto social son, para muchos de los objetos, fenómenos complejos, multifacéticos y multicausales, por lo que su medición directa resulta prácticamente imposible. Ante tal situación tal vez se hace necesaria la medición de la eficacia-efectividad mediante indicadores que sinteticen la información disponible sobre un sistema de variables, de manera que pueda cuantificarse propiamente el salto de calidad que ha tenido el objeto como consecuencia de la formación académica recibida, lo que refleja parcialmente una faceta del impacto social. Más adelante se puede seguir uniendo esta valoración a otros indicadores más específicamente asociados al impacto social, el cual se concentra en los cambios logrados en el entorno del objeto, a mediano y largo plazos. El dilema consiste en aplicar los indicadores apropiados. Por indicador se entiende el número, cifra o expresión obtenida producto de un procedimiento de cálculo que nos permite medir la magnitud del fenómeno que estamos estudiando. En general, el indicador se considerará de mayor aplicabilidad en la medida en que reúna las siguientes características:23
Un indicador será, por tanto, un número (cifra), con cotas bien definidas. Se conoce como indicador sintético o resumido, el que resulta de otros indicadores o variables específicas de variadas dimensiones que influyen en el fenómeno que se intenta medir y caracterizar.24
Teniendo en cuenta que uno de los factores condicionantes del impacto social se refiere a su carácter específico para la forma de inserción del objeto del programa, es absolutamente necesario definir el alcance y la extensión del “entorno” y “la comunidad” para los egresados de la Maestría en Epidemiología.
Acorde con el propósito de la figura académica de la maestría en epidemiología23,24 y los objetivos magnos del programa, junto al sistema de deberes funcionales de los egresados en sus ubicaciones laborales, su entorno suele ser: la estructura de un organismo estatal, no gubernamental o privado, dentro de un centro de salud, centros de educación superior o centros de investigaciones, los cuales directa o indirectamente los ponen en contacto con la comunidad a la que ellos sirven y con la comunidad del campo científico-técnico. A su vez esta comunidad comprende: 1) la comunidad de su equipo de trabajo, 2) la comunidad científico-técnica de su territorio (provincia o país), 3) la comunidad científica mundial y 4) la comunidad lega, en general en esos ámbitos territoriales mencionados. El impacto social se refiere a la repercusión y trascendencia en esos entornos y comunidades.
Refiriéndonos a nuestro programa, se denomina objeto del estudio a los graduados desde el año 1985. La eficacia y efectividad sería expresada como el cambio esperado en sus ambientes o entornos de trabajo como consecuencia de su desempeño, y el impacto social vendría expresado en el reconocimiento que la comunidad-sociedad hace de tal desempeño a mediano y largo plazos acorde con el encargo social, revelado explícitamente en el programa y mas allá de este, que tendría su máxima traducción en el alcance de los cambios o transformaciones en el entorno social.
Uno de los aspectos más importantes es la de perfilar un modelo y un conjunto de variables e indicadores que permitan operar objetivamente con estos conceptos. Tanto más cuando se hace necesario ajustarlos a profesionales que laboran con categorías tan diferentes de las del laboratorio, o sea, de los que trabajan para la transformación del estado de la salud colectiva y de los conocimientos sobre aspectos de la salud, lo que tiene una difícil apreciación directa y necesita un arbitraje indirecto válido. Podríamos argumentar que ciertas variables e indicadores de efectividad de los egresados de nuestro programa puedan ser considerados como parte del impacto social, pues sus efectos se superponen. Por ejemplo: uno de los aspectos que retroalimentan el currículo de los programa de posgrado en la figura de maestría es (son) la(s) opinión(es) de las personas que dirigen las tareas y los planes de centros, departamentos o grupos de profesionales que se desempeñan en los campos de servicios, docencia e investigación y de sus empleadores. Estas opiniones además de expresar la calidad del desempeño, suelen revelar los cambios producidos por los egresados en su entorno; por ejemplo, mejora de los procesos de gestión, mayor eficiencia, mayor satisfacción de la población atendida, mayor ahorro de recursos, mejoría de los indicadores operativos y epidemiológicos relacionados con la salud, mayor producción y productividad de sus alumnos, etc. Por tanto, estas opiniones deben completar el expediente de autoevaluación y evaluación externa de estos programas (Ministerio de Educación Superior. Sistema de evaluación y acreditación de maestrías. Preparación de la evaluación. La Habana. 1999) como componente revelador del desempeño y también del impacto social. Ante la escasez de experiencias locales y nacionales sobre este abordaje se plantea la necesidad del desarrollo de las investigaciones educativas pertinentes.
En conclusión, la evaluación de la efectividad e impacto social del programa de maestría en epidemiología se asienta en las bases de la política y aspectos metodológicos de la educación de avanzada, dictados por nuestros organismos estatales rectores, y requiere de un abordaje metodológico multifacético peculiar para el objeto evaluable.
Al Profesor Norberto Valcárcel, del Instituto Superior Pedagógico “Enrique José Varona”, por esclarecer nuestras ideas y facilitarnos literatura sobre el tema.
Key words: Education, postgraduate, master's degree, impact, Cuba
1. González E, Armas L, Pérez A, Martínez R, Peña E. Cantelar N. Formación de personal en Epidemiología. Salud Pública de México. 1993;35(1):85-93.
2. Organización Panamericana de la Salud/Organización Mundial de la Salud. Documentos del Seminario Usos y Pespectivas de la Epidemiología . Buenos Aires. 7-10 de Noviembre 1983. OPS/OMS. Washington DC. 1984. Publicación No. PNSP 84-47.
3. González E. Armas L. Carmenate A. Capote A. Cantelar B. Algunas características y opiniones de los egresados de la Maestría en Epidemiología. La Habana. Rev Cubana Med Trop. 2004;55(2): En prensa.
4. Terris M. Epidemiología y liderazgo en salud pública. XIV Conferencia de la Asociación Latinoamericana y del Caribe de Educación en Salud Pública (ALAESP). México 1987. En: OPS/OMS. Serie Desarrollo de Recursos Humanos. Washington. 1987(88):52-8.
5. Muñoz F, López Acuña D, Halverson P, Ubilla S, Zeballos JL. Las funciones esenciales de la salud pública. Rev Panam Sal Públ. 2000. 86(1-2):126-34.
6. Mazzafero VE. Epidemiología como concepto básico. XIV Conferencia de la asociación Latinoamericana y del Caribe de Educación en Salud Pública. (ALAESP). México. Serie Desarrollo de Recursos Humanos. 1987(88):59-65.
7. Rodríguez da Silva G. Epidemiología como una especialidad. XIV Conferencia de la Asociación Latinoamericana y del Caribe de Educación en Salud Pública. (ALAESP). México. En: OMS/OPS. Serie Desarrollo de Recursos Humanos. Washington. 1987(88):66-75.
8. Pearce N. Traditional Epidemiology. Modern Epidemiology and Public.Health. Am J Epidemiol. 1996(86):678-83.
9. Wguder EL. Epidemiology faces its lints? Am J Epidemiol. 1996;142:247-749.
10. Krieger N. Epidemiology and the Web of causation: has anyone seen the spides. Soc Sci Med. 1994;39:887-903.
11. Shy CM. The failure of academic epidemiology: witness for the prosecution. Am J Epidemiol. 1997;145:479-84.
12. Rojo Pérez N, Silva LC. Maestría en Salud Pública de Cuba: una experiencia en la educación avanzada en salud. Educ Med Salud. 1995;29(4):12-24.
13. Mas Bermejo P. Enfoque moderno de la enseñanza de la epidemiología. Rev Cubana Hig Epidemiol. 1996;34(2):20-7.
14. Macfarlane SBJ, Movdy JB. Neonatal mortality in San Serriffe. A game for teaching survey methodes. Statistics in Medicine. 1982;205-16.
15. Almeida M, Feuerwerker L, Llanos M. La educación de los profesionales de la salud en Latinoamérica: teoría y práctica de un movimiento de cambio. Sao Paulo: HUCITEC. 1948.
16. Martínez S. Epidemiología y Sociedad (editorial) Rev Cubana Hig Epidemiol. 2003;41(2). Disponible en URL: http://bvs.sld.cu/revistas/
17. Pérez Maza B. La epidemiología y los servicios de salud. (editorial) Rev Cubana Hig Epidemiol. 2003;41(2). Disponible en URL: http://bvs.sld.cu/revistas/
18. Ministerio de Salud Pública. Resolución Ministerial No. 6. Reglamento de la Educación de Posgrado de la República de Cuba. La Habana. 1996.
19. Ministerio de Educación Superior. Reglamento de la Educación de Posgrado de la República de Cuba. La Habana. 1993.
20. Añorga J, Valcárcel N. Aproximaciones al diseño curricular de maestrías y doctorados: hacia una propuesta avanzada. Ministerio de Finanzas y Precios. La Habana. 1997.
21. Añorga J. Concepciones teóricas y metodológicas de la educación. Centro de Posgrado de la UMRPSEYCHE, La Paz. 2001.
22. Elejalde A, Valcárcel N. Técnicas de evaluación en la educación superior. Universidad Mayor de San Andrés. Facultad de Derecho y Ciencias Políticas. La Paz. 2002.
23. Ríos E, O´Farril E, Cathcar F. Bioestadística. Editorial Pueblo y Educación. La Habana. 1987:70-4.
24. Silva LC. Cultura estadística. Editorial Díaz de Santos. Madrid. 1997:43-98.
Recibido: 24 de junio de 2005. Aprobado: 6 de diciembre de 2005.
Dr. Edilberto González Ochoa. Instituto de Medicina Tropical “Pedro Kourí”, Autopista Novia del Mediodía, km 6½, Ciudad de La Habana, Cuba. Email: ochoa@ipk.sld.cu
*Presentado en el VI Taller Nacional de Investigaciones Educativas. Dirección Nacional de Posgrado del Ministerio de Educación Superior. La Habana, 25-26 de mayo de 2004.
1Doctor en Ciencias. Especialista de II Grado en Epidemiología. Profesor Titular y Consultante. ]]>
2Especialista de II Grado en Neumología. Profesora Consultante.
3Licenciada en Educación. Máster en Educación Avanzada.
4Doctora en Ciencias. Especialista de II Grado en Microbiología. Profesora Titular.