ARTÍCULO ORIGINAL
Metodología para la evaluación externa de la carrera de Estomatología
Methodology for external evaluation in odontology career
]]>
Dr. Luis Suárez Rosas,I Dra. C. Irene Barrios Osuna,II Dra. María Elena González EspíndolaIII
I Escuela Nacional de Salud Pública. La Habana, Cuba.
II Hospital Universitario Pediátrico Centro Habana. La Habana, Cuba.
III Facultad de Estomatología. Universidad de Ciencias Médicas de La Habana, Cuba.
RESUMEN
La investigación Metodología para la evaluación externa de la carrera de Estomatología estableció el objetivo de revisar la Guía para la Evaluación Externa de la Carrera (SEA-CU 02) contenida en el Sistema de Evaluación y Acreditación de Carreras Universitarias (SEA-CU), rediseñarla de acuerdo a las particularidades de la carrera de Estomatología en el contexto del Sistema Nacional de Salud de Cuba y recomendar validar la propuesta resultante para ser aplicada en los diferentes escenarios docentes donde se desarrolla la carrera. En la investigación participaron 25 expertos de la Facultad de Estomatología "Raúl González Sánchez" de la Universidad de Ciencias Médicas de La Habana que clasificaron como tales, acorde al criterio de inclusión establecido. A través de cuatro rondas de consultas utilizando el Método Delphi y el correo electrónico como vía de comunicación, se diseñó una nueva y específica Guía para la Evaluación Externa de la carrera de Estomatología en la cual coexisten requisitos generales de calidad para las carreras de la Educación Superior con requisitos específicos de calidad propios para esta en el contexto del Sistema Nacional de Salud con componentes de Organización y Administración de Salud Pública y de Administración Universitaria.
Palabras clave: calidad, evaluación externa, acreditación de carreras universitarias, acreditación carrera de Estomatología, escenarios docentes.
The research study Methodology for the external evaluation of odontology career set the objectives of reviewing the Guide for External Evaluation of the Career (SEA-CU 02) included in the System of Evaluation and Accreditation of University Careers (SEA-CU), of re-designing it according to the particularities of the odontology studies within the context of the national health care, and of recommending the validation of the resulting proposal to be put into practice in the various teaching settings of the career. Twenty five experts from "Raúl González Sánchez" dental school in the Medical Sciences University of Havana, who were accepted according to the set inclusion criteria, participated in the study. Through four rounds of consultations using Delphi´s method and the electronic mail as communication channel, a new specific Guide for External Evaluation of Odontology career was designed, which combines general quality requirements for the higher education careers and specific quality requirement inherent to this specialty within the national health system, with elements of public health organization and management, and of university management.
Key words: quality, external evaluation, accreditation of university careers, accreditation of odontology studies, teaching settings.
INTRODUCCIÓN ]]>
La importancia de la calidad de la enseñanza superiorLos participantes en la Conferencia Mundial sobre la Educación Superior, reunidos del 5 al 9 de octubre de 1998 en la Sede de la UNESCO en París, proclamaron lo siguiente:
La calidad de la enseñanza superior es un concepto pluridimensional que debería comprender todas sus funciones y actividades: enseñanza y programas académicos, investigación y becas, personal, estudiantes, edificios, instalaciones, equipamiento y servicios a la comunidad y al mundo universitario. Una autoevaluación interna y un examen externo realizados con transparencia por expertos independientes, en lo posible especializados en lo internacional, son esenciales para la mejora de la calidad. Deberían crearse instancias nacionales independientes, y definirse normas comparativas de calidad, reconocidas en el plano internacional. Con miras a tener en cuenta la diversidad y evitar la uniformidad, debería prestarse la atención debida a las particularidades de los contextos institucional, nacional y regional. Los protagonistas deben ser parte integrante del proceso de evaluación institucional.1
Igualmente, expresaron que "la calidad requiere también que la enseñanza superior esté caracterizada por su dimensión internacional: el intercambio de conocimientos, la creación de sistemas interactivos, la movilidad de profesores y estudiantes y los proyectos de investigación internacionales, aun cuando se tengan debidamente en cuenta los valores culturales y las situaciones nacionales".2
En Cuba, se estableció el Sistema Universitario de Programas de Acreditación (SUPRA). Este Sistema ha considerado los requerimientos del contexto internacional y las metodologías, métodos y procedimientos empleados para crear una cultura de calidad en la comunidad universitaria, a partir del fortalecimiento de la autoevaluación y evaluación externa con vistas a la acreditación de programas e instituciones, que prepare a la organización para enfrentar los nuevos retos del presente siglo.
La acreditación es el resultado de la aplicación de un sistema de evaluación interna y externa, dirigido a reconocer públicamente que una institución o programa reúne determinados requisitos de calidad, definidos previamente por órganos colegiados de reconocido prestigio académico. En Cuba es la Junta de Acreditación Nacional (JAN).
]]>
El Sistema de Evaluación y Acreditación de Carreras Universitarias (SEA-CU) es parte integrante del SUPRA y constituye el elemento esencial para evaluar y acreditar la calidad en las carreras que se desarrollan en las distintas instituciones
El objetivo general del sistema es, en esencia, la elevación continua de la calidad del proceso de formación en las carreras universitarias que se desarrollan en el país, y sus objetivos específicos son:
- Detectar fortalezas y debilidades, y posibilidades de mejora.
- Diseñar planes de actuación para mejorar la calidad.
- Proporcionar información a la sociedad sobre la calidad de los programas e instituciones de educación superior.
- Crear una cultura de calidad en la comunidad universitaria y en su entorno. ]]>
Lo anterior significa que el SEA-CU se convierte en una herramienta principal para la gestión del mejoramiento continuo de la calidad en la formación de los profesionales de cada rama y, por lo tanto, constituye el contenido esencial del trabajo de los principales actores universitarios. Por otra parte, resalta la importancia de la autoevaluación como elemento básico en la gestión de la calidad, involucrando directivos, profesores, estudiantes, trabajadores, empleadores, egresados y comunidad.3
El Sistema de Evaluación y Acreditación de Carreras Universitarias (SEA-CU) está formado por el Patrón de Calidad de Carreras Universitarias (SEA-CU 01), la Guía para la Evaluación Externa de las Carreras (SEA-CU 02) y el Reglamento para la Evaluación y Acreditación de Carreras Universitarias (SEA-CU 03).
El Sistema de Evaluación y Acreditación de Carreras Universitarias de Cuba (SEA-CU) identifica 5 variables esenciales para dicho sistema: pertinencia e impacto social, profesores, estudiantes, infraestructura y currículo. Estas variables posibilitarían alcanzar "un modelo ideal al cual deben aproximarse las carreras que se desarrollan en los diferentes Centros de Educación Superior (CES) del país…".4
En el diseño del SEA-CU se consideró que en la determinación de los indicadores y criterios de evaluación precisados para cada variable, se seleccionaron aquellos elementos que caracterizaban la variable de un modo esencial, tratando de reducirlos hasta tanto fuera posible. Estos elementos escogidos, por su nivel de generalización son aplicables a todas las carreras de la educación superior, pero como es de esperar el trabajo propio en cada carrera para tributar a la mejor expresión de los indicadores y criterios de evaluación depende de las peculiaridades propias de cada una de ellas, lo que debería expresarse en qué se concibe como importante para analizar la calidad cada caso particular. Así, los indicadores y criterios de evaluación que conforman la Guía para la Evaluación Externa de la Carrera (SEA-CU O2) son de carácter general para todas las carreras de la Educación Superior. Este enfoque generalizador implica que no sean tomados en consideración los requisitos específicos de calidad de los programas que existen en el campo de las Ciencias Médicas y sus diferentes carreras.
Los variados escenarios docentes que posibilitan el desarrollo de los procesos de formación de la carrera de Estomatología y sus particularidades, al igual que las demás carreras existentes en el área de las Ciencias Médicas, en su vinculación e interdeterminación con los subsistemas de atención de salud del país, hacen necesario que se ajuste el SEA-CU, de forma tal que el proceso de evaluación y acreditación de la carrera de Estomatología posea variables, indicadores y criterios de evaluación propios que complementen los establecidos originalmente por la Junta de Acreditación Nacional. ]]>
A partir de la Cumbre Mundial de Educación Médica celebrada en Edimburgo en 1993, se desarrolló un movimiento internacional para la búsqueda de un cambio articulado entre la educación médica, la práctica médica y la organización de salud que posibilite la formación de un profesional que responda a las necesidades económico-sociales de sus respectivos países, pero a su vez sea capaz de enfrentar los retos científicos y tecnológicos que exige la actual centuria sobre la base de una cooperación e interrelación tanto en los ámbitos nacionales como internacionales.
En la actualidad, en la inmensa mayoría de las universidades de prestigio en el mundo la evaluación y acreditación de carreras universitarias se encuentra impregnada de la concepción de la enseñanza superior como transformadora de la conciencia social.
Es amplia la bibliografía que refiere a la calidad como categoría esencial para llevar a cabo la evaluación de las instituciones y carreras de educación superior en el mundo actual, sin embargo, el concepto en sí encierra una concepción compleja, casi indefinible en torno a la uniformidad epistemológica, metodológica y práctica.5,6
En los informes sobre los estudios nacionales realizados para el IESALC (Instituto para la Educación Superior en América Latina y el Caribe-UNESCO) sobre acreditación y evaluación en los países de América Latina y el Caribe (2003) se evidencian los antecedentes de estos procesos, así como la situación existente en el momento de realizar el estudio y las perspectivas de la evaluación y la acreditación en los diferentes países, dando cuenta de los diversos aspectos del proceso: mecanismos de acreditación y evaluación, instituciones a cargo de estos procesos, así como problemas y obstáculos para su desarrollo. Estos informes son muestra de la ausencia de consenso para la determinación de la calidad en las instituciones de educación superior, aunque sobresalen entre las áreas más sensibles para su delimitación, la formación de las personas que terminan los programas, la capacidad institucional para producir cambios que mejoren esa formación y la respuesta de las instituciones y los programas a los problemas reales de la sociedad.7,8
A pesar de todos los esfuerzos realizados para implementar y desarrollar sistemas de evaluación y acreditación universitarias en América Latina y el Caribe, estos aún no son lo suficientemente sólidos para demostrar y garantizar la calidad de los sistemas de educación superior y se profundiza la brecha con un grupo de universidades y agencias de evaluación de Europa y América del Norte.9,10
En Cuba, el sistema de acreditación de carreras universitarias (SEA-CU) es parte integrante del Sistema Universitario de Programas de Acreditación (SUPRA) y constituye uno de sus subsistemas que tiene por objeto evaluar y acreditar las carreras que se desarrollan en los distintos centros de educación superior del país. Su concepción se basa en un conjunto de antecedentes sociales, políticos y pedagógicos que han constituido referentes para contextualizarlo en función de las condiciones de Cuba.
El SEA-CU fue diseñado originalmente con un alcance limitado a las carreras que se imparten en los Centros de Educación Superior adscriptos al Ministerio de Educación Superior (MES), aunque, a propuesta de los restantes organismos que participan en la Comisión Nacional, se ha ido enriqueciendo para su posible generalización al resto de las carreras que se desarrollan en Centros de Educación Superior (CES) adscriptos a otros Organismos de la Administración Central del Estado.11 ]]>
Una de las principales limitaciones es el hecho de que las guías, patrones de calidad, así como otros instrumentos metodológicos que ha aportado el Ministerio de Educación Superior para la acreditación de carreras, a través de sus órganos rectores, deben ser atemperados al contexto y las particularidades en las que se desarrolla la carrera de medicina en los momentos actuales.12
Las acciones encaminadas a que el médico y el estomatólogo cubano adquirieran una proyección social en la práctica de su profesión, tiene en Cuba una larga tradición que rebasa el siglo y medio de existencia, pero aún es un problema la precisión de qué se entiende por un modelo educacional sociomédico, lo cual es un tema a debate y ha transitado por la implementación de diversos planes de estudio.13
En el campo de las Ciencias de la Salud, y especialmente en la carrera de Estomatología, la perspectiva externa de la calidad, el vínculo entre pertinencia y calidad, se encuentra enmarcado en la polémica en torno a qué paradigma debe presidir la formación de este profesional. Aún en nuestros días este problema se encuentra presente en casi todas las facultades de Odontología y de Estomatología latinoamericanas, donde por regla general predomina el modelo flexneriano de formación con un enfoque biomédico.14
El problema de la precisión de que se entiende por un modelo educacional sociomédico es aún un tema a debate y ha transitado por la implementación de diversos planes de estudio.15
La carrera de Estomatología no es ajena a estas realidades. El mejoramiento continuo de la calidad de los procesos y escenarios docentes que se encargan de la formación integral de los recursos humanos de Estomatología en las instituciones universitarias que asumen esta función es una necesidad que estas deben enfrentar para ser consecuentes con el compromiso adquirido con la sociedad que recibe en su seno a los egresados. ]]>
Para evaluar y acreditar la carrera de Estomatología en Cuba existe el Sistema de Evaluación y Acreditación de Carreras Universitarias (SEA-CU), en el cual no se contemplan las particularidades histórico concretas del desarrollo de la carrera de Estomatología en el contexto de la Salud Pública ni la Administración de Salud como ciencias que intervienen en todo el proceso de formación del estudiante, por lo que la aplicación de la Guía de Evaluación Externa (SEA-CU 02) en el proceso de acreditación de la carrera no brinda información lo suficientemente válida para acreditar y certificar su calidad (problema de investigación).
Teniendo en cuenta el problema planteado, las consideraciones hechas en los párrafos anteriores y el objetivo general ya señalado en el resumen, los objetivos específicos de la investigación son los siguientes: determinar la pertinencia de las variables de acreditación del SEA-CU para la carrera de Estomatología, los indicadores de evaluación externa para la carrera de Estomatología y describir los criterios de evaluación de la Guía para la Evaluación Externa de la Carrera de Estomatología.
METÓDOS
Se desarrolló una Investigación de Desarrollo Tecnológico enmarcada dentro del Proyecto Ramal de Investigación en Sistemas y Servicios de Salud (ISSS) cuyo producto científico como propuesta de intervención sería la nueva Guía para la Evaluación Externa de la Carrera de Estomatología.
La consulta a expertos fue el método general elegido para alcanzar los objetivos de la investigación. Se consideraron como expertos a aquellos profesores de la Facultad de Estomatología "Raúl González Sánchez" de la Universidad de Ciencias Médicas de La Habana que tuvieran la categoría principal de Profesor Titular o Profesor Auxiliar y hubieran colaborado en el diseño del Plan de Estudio C de Estomatología o participado en el inicio de su puesta en marcha, considerando con estos criterios que al menos tendrían 15 años de experiencia vinculados sin interrupción en la institución, que habrían vivido diferentes etapas de desarrollo del centro y que se mantenían en activo en la docencia por lo que se considerarían preparados para participar en la investigación al tener conocimientos sobre el desarrollo histórico de la carrera en los últimos 15 años o más. ]]>
Los 94 profesores convocados inicialmente para participar en la investigación cumplimentaban todos los requisitos anteriormente expuestos.
Los profesores con mayor representación fueron los del área de conocimientos socio clínicas, clínicas y ciencias básicas biomédicas con el 37,23 %, 32,97 % y 15,95 % respectivamente.
De estos 94 profesores convocados en la primera ronda para participar en la investigación, respondieron en forma afirmativa 25. El resto presentó diferentes excusas y disculpas para no participar, la más frecuente la de la imposibilidad para participar debido a compromisos docentes e investigativos contraídos con anterioridad.
Los 25 profesores que finalmente participaron como expertos en la investigación estuvieron mayoritariamente representando el área de conocimiento: Socio Clínicas (32%), Clínicas (24 %) y Ciencias Básicas Biomédicas (16 %).
Los profesores pertenecientes a las áreas de conocimiento Preclínicas (12 %), Formación General (8 %), y Ciencias Sociales (8 %) les siguieron en ese orden de representatividad. ]]>
De los 25 profesores participantes en la investigación, 13 ostentaban la categoría docente principal de Profesor Titular (24,44 %) y 12 la categoría de Profesor Auxiliar (75,56 %).
El Delphi fue el método que se aplicó en los 3 momentos de la investigación (Evaluación, Desarrollo tecnológico y Evaluación de Tecnología) en los intercambios mediante el uso del correo electrónico efectuados con los expertos para el análisis de la pertinencia de las variables, indicadores, criterios de evaluación y sus puntuaciones contenidos en la Guía para la Evaluación Externa de la Carrera (SEA-CU 02) en relación con la carrera de Estomatología y la elaboración de un instrumento propio de esta carrera.
El Método Delphi consiste en la selección de un grupo de expertos a los que se les pregunta su opinión sobre cuestiones referidas a acontecimientos del futuro. Las estimaciones de los expertos se realizan en sucesivas rondas, anónimas, con el objeto de tratar de conseguir consenso, pero con la máxima autonomía por parte de los participantes. Se trata de un método cualitativo de determinación de un estándar de referencia. Próximo al consenso de un jurado, esta técnica no necesita la presencia de los expertos en un único lugar. La pregunta se presenta por escrito a cada experto, las respuestas de estos sirven para hacer un nuevo documento. Este último se transmite al conjunto de expertos hasta que se alcance un acuerdo sobre la referencia buscada. La opinión definitiva puede ser mejorada por el tratamiento estadístico de la suma de las opiniones formuladas. Así, se trata de una consulta anónima de expertos que permite evitar los inconvenientes de la interacción personal (conflictos de poder, de personas) y permite la consulta de numerosos expertos sin imponerles desplazamiento. La utilización de modos de interacción entre expertos, como el correo electrónico, tienden a desarrollarse y a convertir el procedimiento en más flexible y rápido. De manera que, los aspectos de anonimato, retroalimentación sucesiva y virtualidad han estado presentes en el proceso de la investigación realizada aplicando el Método Delphi.16
Primera ronda ]]>
En la primera ronda de consultas se envió por correo electrónico a cada uno de los expertos una carta de presentación explicándoles en qué consistía la técnica Delphi, la metodología que debía seguirse y la solicitud de su consentimiento para participar en la investigación con los siguientes documentos anexados para que le sirvieran de referencia:
- Patrón de Calidad para las carreras universitarias (SEA-CU 01).
- Guía para la evaluación externa de la carrera (SEA-CU 02).
- Anexo donde debían referir las variables, indicadores y criterios de evaluación que decidieran proponer como propios de la carrera de estomatología.
Se les solicitó que en un plazo de 28 días, una vez concluido el análisis, enviaran el Anexo de la Ronda 1 con sus propuestas a las direcciones electrónicas del equipo investigador.
]]>
Segunda ronda
Respondieron 25 expertos incluyendo en sus respuestas las propuestas de las variables, indicadores y criterios de evaluación que consideraron proponer como propios de la carrera de Estomatología.
En la segunda ronda se les hizo llegar un documento con el Patrón de Calidad para la carrera con la Guía para la evaluación externa donde ya se apreciaban consideraciones y comentarios que enriquecían los documentos originalmente enviados. Ello permitió a los expertos reevaluar sus opiniones al conocer el criterio de los restantes miembros del grupo. El sistema de entrega del segundo cuestionario fue similar al utilizado en la primera ronda. Cada experto pudo comparar sus respuestas anteriores con las de los demás. Luego de terminado el plazo límite de 28 días, se realizó nuevamente el análisis de las respuestas enviadas por los expertos por correo electrónico.
]]>
Tercera ronda
Esta ronda permitió concentrar aún más la opinión de los expertos en las propuestas de variables, indicadores y criterios de evaluación propios de la carrera de Estomatología en el contexto del Sistema Nacional de Salud y de la Administración universitaria. Para el análisis del documento circulado se procedió de manera similar que en las rondas anteriores.
Cuarta ronda
Se circuló entre los expertos el documento resultante de sus aportes, Guía para la Evaluación Externa de la carrera de Estomatología. Finalmente, se les envió una carta de agradecimiento a los miembros del grupo de expertos. El procesamiento y análisis de los datos de los documentos enviados y sus respuestas se realizaron manualmente atendiendo a que la cantidad de información y datos a procesar no fueron excesivamente voluminosos, ni complicados en su procesamiento.
La primera fase se caracterizó por la exploración del tema objeto de la investigación. Se seleccionaron los documentos a enviar por correo electrónico a los expertos y se les hizo llegar por esta vía. Los expertos recibieron los documentos. En esta fase, los expertos proporcionaron sus puntos de vista, se analizaron los resultados y se configuró el nuevo instrumento, Guía para la Evaluación Externa de la carrera de Estomatología. ]]>
En la segunda fase se exploraron los desacuerdos. Los expertos recibieron el instrumento. Las respuestas de los expertos se analizaron y se hizo una evaluación de ellas. Fueron sintetizadas y enviado nuevamente a los expertos el instrumento con los aportes realizados.
En la tercera fase se realizó la evaluación final. Esto ocurrió cuando toda la información previamente reunida fue analizada y los resultados obtenidos fueron enviados como retroalimentación para nuevas consideraciones. Los expertos recibieron la Guía para la Evaluación Externa de la carrera de Estomatología. Se les pidió que criticaran, refutaran o apoyaran el instrumento surgido de sus aportes. Se recibieron las respuestas y se utilizaron para conformar el diseño final del instrumento.
En la cuarta fase se realizó el envío a todos los expertos de los resultados finales de la fase anterior.
Cabe destacar que en el proceso de la investigación se atendieron aspectos éticos tales como el consentimiento de la dirección de la Facultad para que se realizara la investigación, el consentimiento de los expertos seleccionados para participar y el anonimato de las valoraciones realizadas por todos ellos. En resumen, en la ejecución de la investigación se transitó a través de tres momentos:
- Evaluación.
]]>
- Evaluación de Tecnología.
Durante la Evaluación, se circularon por vía electrónica a los expertos seleccionados el Patrón de Calidad para las carreras universitarias (SEA-CU 01) y la Guía para la evaluación externa de la carrera (SEA-CU 02), documentos rectores del Ministerio de Educación Superior, aprobados por la Junta de Acreditación Nacional, para la evaluación y acreditación de carreras universitarias, para evaluar la pertinencia de las variables, indicadores, criterios de evaluación y sus puntuaciones correspondientes en relación a la carrera de Estomatología.
En el momento de Desarrollo Tecnológico, se sometió a la consideración de los expertos el instrumento surgido de sus criterios.
El momento para la Evaluación de la Tecnología a nivel de los expertos consultados estuvo en correspondencia con la aprobación de los mismos, después de las 4 rondas de consultas anteriormente señaladas utilizando el correo electrónico, del instrumento Guía para la evaluación externa de la carrera de Estomatología con las variables de calidad, indicadores, criterios de evaluación y puntuaciones correspondientes que se consideraron por unanimidad como pertinentes para la carrera.
]]>
RESULTADOS
A continuación se hará un resumen de los principales resultados, organizados en función de cuál ha sido su aporte a los objetivos específicos establecidos para la solución del problema original.
a) Objetivo No. 1.
Determinar la pertinencia de las variables de acreditación del SEA-CU para la carrera de Estomatología.
El SEA-CU se autodefine como "el elemento esencial para evaluar y acreditar la calidad en las carreras que se desarrollan en las distintas instituciones de educación superior del país".16 Esta concepción generalizadora se establece como válida para cualquier carrera de la Educación Superior Cubana pero no niega la posibilidad del perfeccionamiento continuo de este instrumento y la complementación de los criterios establecidos en el mismo. ]]>
El grupo de 25 profesores considerados como expertos en su conjunto aportaron sus experiencias de trabajo. Las 5 variables establecidas en el Patrón de Calidad vigente en el SEA-CU y las puntuaciones que pueden alcanzar cada una de ellas a los efectos de la autoevaluación y la evaluación externa son las siguientes:
Variable No.1: Pertinencia e impacto social (15 puntos).
Variable No.2: Profesores (25 puntos).
Variable No.3: Estudiantes (20 puntos).
Variable No.4: Infraestructura (20 puntos). ]]>
Variable No.5: Currículo (20 puntos).
El resultado aceptado por el grupo de expertos, fue el de incorporar una variable más al Patrón de Calidad actual, la variable Administración Universitaria, y realizar una distribución de puntuación por cada variable que sería la que se expone a continuación:
Variable No.1: Pertinencia e impacto social (10 puntos).
Variable No.2: Profesores (25 puntos).
Variable No.3: Estudiantes (15 Puntos). ]]>
Variable No.4: Infraestructura (25 puntos).
Variable No.5: Currículo (20 puntos).
Variable No. 6: Administración universitaria (5 puntos).
b) Objetivo No. 2.
Determinar los indicadores de evaluación externa para la carrera de Estomatología.
]]>
Los indicadores y criterios de evaluación en cada una de las 5 variables que conforman el Patrón de Calidad actual fueron enriquecidas con los criterios de los expertos consultados.
La nueva variable propuesta, Administración Universitaria, también fue objeto de esta valoración y se le incorporaron indicadores con sus respectivos criterios de evaluación.
Seguidamente, se exponen los indicadores propuestos en las cuatro rondas de consulta efectuadas al grupo de expertos a partir de los existentes en el SEA-CU vigente:
A partir de la segunda ronda, se recepcionaron las respuestas de la totalidad de los 25 expertos participantes con un índice de aceptación final del 100 %.
La variable 1 Pertinencia e Impacto social con 2 indicadores vigentes actualmente tuvo la propuesta de un nuevo indicador y la modificación de los 2 actualmente existentes.
]]>
La variable 2 Profesores: con 6 indicadores en vigencia se le proponen 3 nuevos.
La variable 3 Estudiantes: con 4 indicadores vigentes se propone un quinto indicador.
La variable 4 Infraestructura: con 4 indicadores en la actualidad se proponen otros dos.
La variable 5 Currículo: en el presente con 5 indicadores se le proponen 2 nuevos y la modificación de uno vigente. ]]>
Surge una nueva variable, Administración Universitaria, para la cual se proponen 3 indicadores.
c) Objetivo No. 3.
Describir los criterios de evaluación de la Guía para la Evaluación Externa de la Carrera de Estomatología.
La variable No. 1 Pertinencia e impacto social: con 3 criterios de evaluación en el SEA-CU resultó en la investigación con la propuesta de 5 criterios de evaluación.
La variable No. 2 Profesores: con 10 criterios de evaluación en el SEA-CU resulta con 15 criterios de evaluación propuestos.
A la variable No. 3 Estudiantes: en el SEA-CU con 5 criterios de evaluación, se le proponen 6 criterios de evaluación.
]]>
La variable No. 4 Infraestructura: de suma importancia en la carrera de Estomatología, con 9 criterios de evaluación en el SEA-CU, en la investigación se identifican 16 criterios de evaluación.
La variable No. 5 Currículo: con 8 criterios de evaluación en el SEA-CU resulta con 15 criterios de evaluación.
A la nueva variable surgida de la investigación, Administración Universitaria, se le proponen 5 criterios de evaluación.
Los indicadores para la evaluación externa y las propuestas de criterios de evaluación para estos indicadores en cada variable y sus puntuaciones en el proceso de autoevaluación y evaluación externa de la carrera a los efectos de una calificación cuantitativa final, se detallan seguidamente atendiendo a lo establecido en el SEA-CU y a las propuestas acordadas por la totalidad de los expertos participante en la investigación.
La variable No. 1 Pertinencia e impacto social: con 2 indicadores y 3 criterios de evaluación en el SEA-CU, resultó en la investigación con la propuesta de 3 indicadores con 5 criterios de evaluación.
]]>
La variable No. 2 Profesores: con 6 indicadores y 10 criterios de evaluación en el SEA-CU, resulta con 9 indicadores y 15 criterios de evaluación propuestos.
A la variable No. 3 Estudiantes: con 4 indicadores y 5 criterios de evaluación en el SEA-CU, se le proponen 5 indicadores con 6 criterios de evaluación.
La variable No. 4: Infraestructura del SEA-CU con 4 indicadores y 9 criterios de evaluación, en la investigación se plantean 6 indicadores con 16 criterios de evaluación.
La variable No. 5: Currículo con 5 indicadores y 8 criterios de evaluación en el SEA-CU resulta con 7 indicadores y 15 criterios de evaluación.
El grupo de expertos consideró agregar una nueva variable al Patrón de Calidad para la carrera de Estomatología y así surge la variable Administración Universitaria con 3 indicadores y 5 criterios de evaluación. De manera que tomando como base el SEA-CU con 5 variables de calidad, 21 indicadores y 35 criterios de evaluación, los expertos en sus consideraciones precisan un instrumento para la evaluación y la acreditación de la carrera de Estomatología en Cuba con 6 variables, 33 indicadores y 62 criterios de evaluación.
]]>
DISCUSIÓN
Fue en extremo relevante que desde el primer momento de la investigación se apreciaran coincidencias en las opiniones de los expertos participantes, en torno a que los indicadores y los criterios de evaluación plasmados en la Guía para la Evaluación Externa de la Carrera (SEA-CU 02) se consideraban insuficientes para reflejar las realidades de la carrera de Estomatología.
A partir de este reconocimiento hubo una clara comprensión e interiorización de que estas particularidades limitaban el alcance del instrumento (SEA-CU 02) en el caso específico de la carrera de Estomatología y en particular se hizo hincapié en que no podían soslayarse la importancia de la variable de calidad Estructura y de los aspectos relacionados con la salud pública en todo lo concerniente a la adecuada adquisición de habilidades en sentido general y su influencia en la calidad de los egresados de la carrera.
No obstante a ello, los expertos consideraron como pertinentes las variables de calidad contenidas originalmente en la Guía para la Evaluación Externa de la Carrera (SEA-CU 02) del Sistema de Evaluación y Acreditación de Carreras Universitarias (SEA-CU) aprobado por la Junta de Acreditación Nacional para ser utilizadas en el proceso de acreditación de la carrera de Estomatología en sus diferentes escenarios, pero acordaron proponer una variable más, la Administración Universitaria, con sus indicadores y criterios de evaluación específicos y adecuar los existentes en las variables de calidad del SEA-CU 02 a las especificidades de la carrera de Estomatología.
Es necesario señalar que los expertos tomaron en consideración en sus aportes la necesidad de plasmar en la Guía para la Evaluación Externa de la carrera de Estomatología las particularidades del Sistema Nacional de Salud de Cuba, su orientación hacia la Atención Primaria de Salud y el nivel de responsabilidad social de los futuros profesionales frente a la salud de la población.
La propuesta final de variables, indicadores y criterios de evaluación a la que se arrib, refleja acciones que están presentes en la carrera de Estomatología en el contexto del Sistema Nacional de Salud y abarca actividades vitales propias de la carrera de Estomatología en los diversos escenarios docentes existentes.
]]>
Los expertos en su totalidad consideraron oportuno proponer a las autoridades correspondientes la introducción del instrumento producto de la investigación para la evaluación y acreditación de la carrera de Estomatología, acorde a sus requisitos específicos en el contexto del Sistema Nacional de Salud y sus diferentes escenarios. Con esta propuesta coinciden plenamente los investigadores principales.
Al proponer una Guía para la Evaluación Externa de la Carrera de Estomatología partiendo del sistema de variables, indicadores y criterios de evaluación contenidos en el Sistema de Evaluación y Acreditación de Carreras Universitarias (SEA-CU), se pretende implantar una tecnología mejorada para aplicar en los Centros de Educación Superior del Sistema Nacional de Salud y en los diferentes escenarios docentes donde se desarrolla la carrera de manera que también sirva de referencia para otros países si así fuera menester.
Resulta interesante constatar que lo planteado por los expertos a lo largo de la investigación está en consonancia, en el caso que nos ocupa, o sea, la carrera de Estomatología, con lo establecido en los objetivos de los estándares internacionales para la educación médica de posgrado de la Federación Mundial de Educación Médica, World Federation for Medical Education, (WFME), en el caso de la carrera de Medicina, expuestos en el año 1999 en la ciudad de Copenhague, Dinamarca. El documento de la WFME enunciaba 3 objetivos fundamentales: a) estimular a las facultades de medicina para que formulen sus propios planes para el cambio y la mejora de la calidad educativa, de acuerdo con las recomendaciones internacionales; b) establecer un sistema de evaluación y acreditación de las facultades de medicina de ámbito nacional e internacional con el propósito de garantizar unos estándares mínimos de calidad para sus programas; c) salvaguardar la práctica de la Medicina y la utilización del potencial humano de los médicos y su creciente internacionalización, mediante estándares internacionales bien definidos para la educación médica. El marco en que se inscriben los estándares minuciosamente descritos en dicho documento, considera que la educación médica es uno de los instrumentos esenciales que modelan el ejercicio de la Medicina y, por lo tanto, debe orientarse hacia la satisfacción de las necesidades sociales de salud; consecuentemente, las facultades de Medicina, asumiendo la responsabilidad que les corresponde en su servicio al ciudadano y a la sociedad, deben formar graduados, los futuros profesionales, de calidad, altamente cualificados desde un punto de vista científico y técnico pero también capacitados humana, social y éticamente para hacer frente a los retos que presenta la práctica médica en un mundo globalizado, preservando además la identidad y la heterogeneidad que requiere la división geopolítica de sus habitantes.17
De manera que así quedó conformada la propuesta de una Guía para la Evaluación Externa para la carrera de Estomatología con las especificidades inherentes a esta carrera.
Seguidamente se muestra el instrumento resultante de la investigación.
]]>
Guía para la evaluación externa de la carrera de Estomatología: (Cuadros 1, 2, 3, 4, 5 y 6).
Cuadro 1. Variable No.1: Pertinencia e impacto social (10 puntos)
| No. | Indicador | Criterios de evaluación | Puntos |
| ]]>
1.1 | Proyección de la | - Reconocimiento del vínculo de los profesores a la solución de los problemas de salud del municipio, territorio y /o país comprobado a través de encuestas a profesores, estudiantes, integrantes de la comunidad y directivos de la Salud del territorio en cuestión. (0-1) | 4 |
| ]]>
1.2 | Grado de | - Comprobar a través de encuestas a profesores, estudiantes, integrantes de la comunidad, directivos de la Salud, otros empleadores, y los egresados en el municipio, territorio y/o país el grado de satisfacción. | 3 |
| 1.3 | Impacto de la carrera de Estomatología sobre | - Comprobar a través de encuestas a profesores, estudiantes, integrantes de la comunicad, directivos de la Salud en el territorio y los egresados. | 3 |
Cuadro 2. Variable No.2: Profesores (25 puntos)
| No. | ]]>
Indicador | Criterios de evaluación | Puntos |
| 2.1 | Cualidades de educador. | - Los profesores demuestran sus cualidades de educadores con la participación activa en las actividades extracurriculares que precisan de su presencia y cooperación (0-1). | 2 |
| 2.2 | % de Doctores en Ciencias (o equivalente, según reglamento) y de másters con que cuenta la carrera. | ]]>
- Se otorgan los puntos en dependencia del % de doctores, como sigue: | 6 |
| 2.3 | Preparación de los profesores. | - Se otorgan los puntos en dependencia del % de profesores con categoría de PA y PT, como sigue: | 3 |
| 2.4 | Calidad de las investigaciones y el posgrado en la carrera. | - Profesores vinculados a proyectos de investigación aprobados en los últimos 5 años con marcada influencia en el proceso de formación. (0-3) | ]]>
3 |
| 2.5 | Publicaciones en revistas de reconocido prestigio y participación en eventos nacionales e internacionales. | - Tres o más publicaciones promedio por profesor en los últimos 5 años: 1 | 2 |
| 2.6 | Política y proyectos de investigación. | - Comprobar mediante revisión documental la existencia de una política de la institución donde se desarrolla la carrera dirigida hacia la realización de investigaciones por profesores y estudiantes que respondan a problemas concretos de la docencia, la calidad de los servicios y los problemas de salud relacionados con el componente bucal más prevalecientes en el territorio (0-1). | 2 |
| 2.7 | Experiencia profesional en el área de conocimientos de la carrera. | - La experiencia profesional del claustro satisface las exigencias del proceso de formación en las disciplinas del ejercicio de la profesión (0-1). | 2 |
| 2.8 | Evaluación de los Profesores. | - Se comprueba, revisando los Expedientes de los Profesores, que se cumplen las regulaciones institucionales establecidas para el proceso de Evaluación Profesoral, que sus resultados son conocidos por los evaluados y que se constituyen como aspectos a tomar en consideración para mejorar cada vez más la calidad del proceso docente en la institución. (0-1) | ]]>
1 |
| 2.9 | Profesores Especializados en las Especialidades de las Ciencias Básicas, de las Clínicas y de las No clínicas y dominio por parte de los profesores del Análisis de la Situación de Salud (ASIS) y su función orientadora y conductora de la estrategia sanitaria del equipo de salud del territorio. | - Existen profesores en todas las especialidades | 4 |
Cuadro 3. Variable No. 3: Estudiantes (15 puntos)
| No. | Indicador | Criterios de evaluación | Puntos |
| 3.1 | ]]>
Participación de los estudiantes como protagonistas de su proceso de formación. | Los estudiantes tienen una adecuada participación en las tareas previstas en la estrategia educativa de la carrera (0-3). | 3 |
| 3.2 | Dominio de los modos de actuación de la profesión, en correspondencia con el año que cursan. | - Resultados alcanzados en los exámenes integradores aplicados a una muestra de estudiantes de 1ro. a 5to. años: Más de 70 % y hasta 75 %: 1 | 7 |
| 3.3 | Tendencia que se manifiesta en la eficiencia en los últimos cinco cursos. | -La eficiencia vertical muestra una adecuada tendencia a la estabilidad o al incremento en los últimos 5 cursos (0-1). | 1 |
| 3.4 | Organización de los grupos de clase. | -La cantidad de estudiantes por grupo permite una adecuada atención diferenciada por parte de los profesores (0-2)- | ]]>
2 |
| 3.5 | Determinación de vocación, habilidades y aptitudes mínimas para el ingreso a la carrera de Estomatología. | - Comprobar la existencia de documentos archivados en los expedientes de los estudiantes que han ingresado a la carrera en los últimos 2 años que contengan información sobre el cumplimiento o no de las aptitudes mínimas necesarias para el ingreso a la carrera con énfasis en su estado de salud integral. | 2 |
Cuadro 4. Variable No. 4: Infraestuctura (25 puntos)
| No. | ]]>
Indicador | Criterios de evaluación | Puntos |
| 4.1 | Aseguramiento bibliográfico en el área de conocimientos de la carrera. | -Utilización de los textos básicos y complementarios disponibles para la carrera y accesibilidad a la información impresa y digitalizada por estudiantes, profesores e investigadores (0-1). | 3 |
| 4.2 | ]]>
Aseguramiento material para el empleo de la computación y las TIC en la carrera. | - Equipamiento de computación disponible y accesible para la carrera, en proporción al número de estudiantes con posibilidades de acceso de los estudiantes, profesores e investigadores a los servicios de la INTRANET del centro, a la bibliografía sobre temas de Estomatología, de las Ciencias Médicas en general y a la red telemática de Infomed y otras plataformas interactivas existentes (0-2). | 2 |
| 4.3 | Otras instalaciones y medios de carácter docente utilizadas por la carrera. | - Existencia y calidad de las aulas, los talleres, gabinetes, biblioteca, etcétera (0-1). | 3 |
| 4.4 | ]]>
Aseguramiento de la base material en las salas y laboratorios docentes en las áreas básica y preclínica de conocimiento de la carrera. | - Correspondencia de la base material disponible con las necesidades de la carrera y calidad de la misma según las normas establecidas: | 4 |
| 4.5 | Aseguramiento de la base material de los escenarios clínicos docentes donde se ejecutan las actividades necesarias para el desarrollo de las habilidades prácticas de la carrera. | - Correspondencia de la base material disponible con las necesidades de la carrera y calidad de la misma según las normas establecidas. ]]>
- Organización del trabajo en las clínicas (cantidad de estudiantes según unidades dentales. (0-1) Disponibilidad de locales:
| 10 |
| 4.6 | Prevención y control de enfermedades profesionales. | - Comprobar mediante la observación visual el uso de naso-bucos, guantes y batas sanitarias durante la realización de prácticas de laboratorio y clínicas por parte de profesores y estudiantes (0-1). | 3 |
Cuadro 5. Variable No. 5: Currículo (20 puntos)
| No. | Indicador | Criterios de evaluación | Puntos |
| 5.1 | Diseño de los años y de las disciplinas. | ]]>
- Los objetivos y los contenidos de las disciplinas dan respuesta a los requerimientos de la carrera (0-2). | 4 |
| 5.2 | Relación entre los diferentes componentes del proceso docente-educativo en la carrera. | - Se emplean adecuadamente los métodos, formas organizativas, medios y sistemas de evaluación. Se observan relaciones interdisciplinarias en el desarrollo del proceso docente- educativo (0-2). | 2 |
| 5.3 | Estrategia educativa de la carrera. | - Se cuenta con una estrategia educativa que contempla la relación entre las disciplinas del ciclo básico, del ciclo preclínico y del ciclo clínico y garantiza el cumplimiento de los objetivos generales de la formación del estomatólogo mediante la utilización adecuada de las áreas establecidas para cada ciclo en la institución donde se desarrolla la carrera (0-2). | 5 |
| 5.4 | Estrategia de las Disciplinas Estomatología Integral y Estomatología Social. | - Las estrategias de estas disciplinas a lo largo de la carrera fortalecen la concepción en estudiantes y profesores que | 2 |
| 5.5 | Otras estrategias curriculares. | . Las estrategias de Computación, Idioma Extranjero, Historia de Cuba, Historia de | 5 |
Cuadro 6. Variable No. 6: Administración universitaria (5 puntos)
| No. | Indicador | Criterios de evaluación | ]]>
Puntos |
| 1.1 | Preparación de los Directivos para la Administración Universitaria. | - Comprobar la preparación en Ciencias de la Administración y el cumplimiento de los requisitos para el cargo de los directivos de la institución universitaria donde se desarrolla la carrera así como la existencia de la reserva y los sustitutos para los cargos de dirección (0-1). | 1 |
| 1.2 | Planificación estratégica. | ]]>
- Comprobar mediante revisión documental la existencia del Plan de Desarrollo Estratégico de la institución académica donde se desarrolla la carrera, la Misión y la Visión de la institución y que existe coherencia y consistencia de la Misión y la Visión con el desarrollo actual y futuro de la carrera (0-1). | 2 |
| 1.3 | Organización académico-administrativa. | - Comprobación mediante revisión documental y actas adecuadamente realizadas que reflejen que las diferentes instancias de dirección de la institución donde se desarrolla la carrera que se controlan periódicamente los procesos internos académicos, financieros y administrativos de la institución, que existe control interno y que se adoptan medidas correctivas ante las desviaciones que se detectan (0-1). | 2 |
REFERENCIAS BIBLIOGRÁFICAS
1. Declaración Mundial sobre la Educación Superior en el Siglo XXI: visión y acción preámbulo. Inciso a, Artículo 11 Evaluación de la calidad. París: Conferencia Mundial sobre la Educación Superior; octubre 9 de 1998.
2. Declaración Mundial sobre la Educación Superior en el Siglo XXI: visión y acción preámbulo. Inciso b, Artículo 11 Evaluación de la calidad. París: Conferencia Mundial sobre la Educación Superior; octubre 9 de 1998.
3. Ministerio de Educación Superior. Sistema de evaluación y acreditación de carreras universitarias (SEA-CU). Manual de implantación. La Habana: MES; julio 2005.
4. Ministerio de Educación Superior. SEA-CU. Sistema de Evaluación y Acreditación de Carreras Universitarias. La Habana: MES; 2002.
5. Royero J. Contexto mundial sobre la evaluación en las instituciones de Educación Superior. OEI-Revista Iberoamericana de Educación; 2002.
6. Salas Perea, R. La calidad en el desarrollo profesional. Avances y desafíos. Educ Med Super. 2000;13(1):41-50.
7. Los procesos de evaluación y acreditación universitaria. La experiencia de Bolivia. En: Digital observatory for higher education in Latin America and the Caribbean. 2003. Disponible en: http://www.iesalc.unesco.org.ve
8. Informes sobre la Evaluación y Acreditación de la Educación Superior en Venezuela, República Dominicana, Brasil, Uruguay y México. En: Digital observatory for higher education in Latin America and the Caribbean; 2003. Disponible en: http://www.iesalc.unesco.org.ve
9. Aréchiga Urtuzuástegui H, Llarena de Thierry R. Antecedentes, situación actual y perspectivas de la evaluación y acreditación de la Educación Superior en México. México: Informe Nacional para IESALC/UNESCO; 2003. ]]>
10. Alarcón Alba F, Luna JG. Antecedentes, situación actual y perspectivas de la evaluación y acreditación de la Educación Superior en Centroamérica. Guatemala: Informe Regional Centroamérica para IESALC/UNESCO; 2003.
11. Domínguez M, Gutiérrez Hernández MT, Téllez Sánchez L. Acreditación universitaria. Algunas experiencias internacionales y proyección en Cuba. Holguín: Universidad de Holguín; 2003.
12. Valdés Vento AC, Morales Suárez IR. Criterios de evaluación de la variable "pertinencia e impacto social" específicos para la carrera de Medicina. Educ Med Super. 2009;23(3):30-45.
13. Delgado García G. La formación de médicos salubristas en Cuba. Algunos aspectos históricos. Cuadernos de Historia de la Salud Pública. La Habana: Edit. Ciencias médicas; enero-junio 2006.
14. Fernández Sacasas JA. Educación Médica Superior: Realidades y perspectivas a las puertas del nuevo siglo. Material bibliográfico de la Maestría en Educación Médica. La Habana: Centro Nacional de Perfeccionamiento Médico; 1999. ]]>
15. Brito P, Padilla M, Rígoli F. Planificación de recursos humanos y reformas del sector salud. Educación Médica Superior. 2002;16(4).
16. Rodríguez Perón JM, Aldana Vilas L, Villalobos Hevia N. Método Delphi para la identificación de prioridades de ciencia e innovación tecnológica. Rev Cub Med Mil. 2010;39(3-4).
17. Declaración de Granada sobre estándares en la Educación Médica de Pregrado (24 de octubre de 2001) Educ Med Super. 2004;18(1).
]]>
Recibido: 2 de enero de 2012.
Aprobado: 17 de enero de 2012.
]]>
Luis Suárez Rosas. Escuela Nacional de Salud Pública. Calle 100. Altahabana, Boyeros. La Habana, Cuba. Correo electrónico: lsuarez@infomed.sld.cu ]]>