Introducción
El criterio de expertos es uno de los métodos científicos más utilizados en las investigaciones educacionales, en particular muchos doctorandos lo emplean para validar algún componente de su investigación. En Cuba el amplio uso y aplicación de este método se refleja en 378 tesis doctorales de las 600 estudiadas por Díaz Ferrer y otros. 1
El método Delphi basado en la consulta a expertos de un área, con el fin de obtener la opinión de consenso más fiable del grupo consultado, se emplea por numerosos investigadores para diferentes situaciones y problemáticas.2) Este método permite la transformación de las apreciaciones individuales en un juicio colectivo superior.3) Tomás Crespo, de la universidad de Villa Clara expone importantes consideraciones que sientan las bases para la comprensión y aplicación de este método. (4)
Al elaborar una metodología es necesario valorar la pertinencia antes de su aplicación y una delas formas es alcanzar un juicio consensuado mediante el criterio de expertos. En investigaciones pedagógicas como las realizadas por García Pérez y otros para valorar la pertinencia de una metodología para el análisis de la situación de salud en la carrera de Medicina, y por Pérez García y otros al valorar una metodología para la enseñanza desarrolladora del diagnóstico de anomalías dentomaxilofaciales centrado en el método clínico se utilizó el método Delphi previo a la implementación en la práctica de esos resultados científicos. 5), (6)
La metodología para la integración de software educativo es una propuesta de procedimientos que se fundamentan teóricamente, con el propósito de alcanzar la integración didáctica de este recurso en las actividades docentes, a través de acciones y orientaciones encaminadas a que los estudiantes al utilizarlo guiados por el profesor, se apropien de conocimientos, desarrollen hábitos, habilidades y se eduquen en valores, en correspondencia con el perfil del egresado. 7
El empuje de las tecnologías de la información y las comunicaciones y el desarrollo del software educativo a nivel internacional, en Cuba y en la Universidad de Ciencias Médicas de Holguín hace incuestionable al tratamiento de la integración de estos recursos en el proceso de enseñanza-aprendizaje. La incorporación de software educativo a la enseñanza universitaria requiere cambios organizativos y metodológicos. 8 Por las razones antes expuestas en un periodo precedente a esta investigación se elaboró una metodología con etapas y procedimientos, por lo que se plantea como objetivo valorar la pertinencia de la metodología para la integración de software educativo en el proceso de enseñanza-aprendizaje de las asignaturas Rehabilitación I y II.
Métodos
Se realizó una investigación pedagógica en la Universidad de Ciencias Médicas de Holguín (UCM H), en el año 2020. Los métodos teóricos utilizados: histórico-lógico, inductivo-deductivo y analítico-sintético permitieron comprender la necesaria transformación en el proceso de enseñanza-aprendizaje ante el empuje de las tecnologías de la información y las comunicaciones, hacer generalizaciones e inferencias, discutir y analizar los resultados para arribar a conclusiones.
La encuesta fue el método del nivel empírico utilizado y se emplearon como instrumentos los cuestionarios, el primero para determinar el coeficiente de competencia de los expertos y el segundo para valorar la pertinencia de la metodología a través de la opinión de un grupo de expertos.
La lista inicial de participantes se integró por 22 profesores con más de 15 años en la docencia, las categorías docentes: Profesor Asistente, Profesor Auxiliar y Profesor Titular, experiencia en la utilización de software educativo en el proceso de enseñanza-aprendizaje en las carreras de ciencias médicas, publicaciones sobre el tema y que aceptaron participar en la investigación. Se solicitó por correo electrónico el consentimiento con respeto a la confidencialidad, voluntariedad y el derecho de no continuar en caso de que lo decidiera. Respondieron a la solicitud de participación 19 de los posibles participantes.
El coeficiente de conocimiento o información (kc) se calculó a partir de la autovaloración del nivel de conocimiento sobre el tema, en una escala del 0 al 10, en la que el 0 se consideró conocimiento nulo y el 10 máximo conocimiento. El valor seleccionado se multiplicó por 0,1.
El coeficiente de argumentación o fundamentación (ka) se obtuvo al sumar los puntos alcanzados a partir de la tabla patrón (Tabla 1). A los expertos se les presentó la tabla sin números y seleccionó el grado de influencia de cada una de las fuentes.
Fuentes de argumentación | Alto | Medio | Bajo |
---|---|---|---|
1. Estudios y análisis teóricos realizados por usted relacionados con el tema. | 0,2 | 0,16 | 0,1 |
2. Experiencia en el tema adquirida al utilizar software educativo en el proceso de enseñanza-aprendizaje. | 0,4 | 0,32 | 0,2 |
3. Análisis de las publicaciones de autores nacionales. | 0,05 | 0,04 | 0,025 |
4. Análisis de las publicaciones de autores internacionales. | 0,05 | 0,04 | 0,025 |
5. Participación en cursos, talleres u otras vías de superación | 0,1 | 0,08 | 0,05 |
6.Realización de investigaciones sobre el tema | 0,2 | 0,16 | 0,1 |
Total | 1 | 0,8 | 0,5 |
El coeficiente de competencia (K) se obtuvo a partir de la fórmula: K= ½ (k c + k a ). (4), (9 Se consideró el nivel de competencia alto si K mayor que 0,80, medio si K entre 0,50 y 0,80 y bajo si K menor que 0,50.
A continuación se procedió a la aplicación del segundo cuestionario para obtener el criterio de los expertos seleccionados. Este instrumento contó con siete ítems a valorar en una escala ordinal de muy adecuado (MA), bastante adecuado (BA), adecuado (A), poco adecuado (PA) e inadecuado (I). Además, se ofreció la posibilidad de emitir los criterios y sugerencias para perfeccionar la propuesta que se circuló. Al recibir las respuestas con la valoración se interactuó por correo electrónico, telefónica o personalmente en los casos necesarios para mayor claridad y precisión. No se consideró necesario aplicar otras rondas al obtener consenso de los expertos en los criterios emitidos. Este proceso se realizó con garantía de anonimato sin comunicación entre los miembros del grupo.
La matriz Delphi se utilizó para determinar la validez del criterio de expertos sobre la pertinencia de la metodología; variable que incluye las dimensiones validez y viabilidad. Los indicadores que se tuvieron en cuenta fueron:
I1: Estructura de la metodología.
I2: Etapas diseñadas en la metodología.
I3: Procedimientos de la etapa I: Organización para la integración del software educativo.
I4: Procedimientos de la etapa II: Ejecución de las acciones de la metodología.
I5: Procedimientos de la etapa III: Control de la aplicación de la metodología.
I6: Factibilidad de aplicación en el proceso de enseñanza-aprendizaje de Rehabilitación.
I7: Posibilidad de generalización a otras asignaturas del currículo.
Los indicadores I1-I5 integran la dimensión validez relacionada con la estructura, las etapas y los procedimientos propuestos. La dimensión viabilidad se midió por los indicadores I6 e I7 que abordan la posibilidad de aplicar la metodología y generalizarla a otras asignaturas y carreras de ciencias médicas, respectivamente. Esta dimensión muestra la correspondencia de la metodología con la necesidad de integrar software educativo en el proceso de enseñanza-aprendizaje y la posibilidad que tienen los profesores de utilizarla en los diversos escenarios de formación.
La pertinencia de la metodología se consideró en las siguientes categorías:
Muy pertinente: Si el consenso de los expertos valora todos los indicadores en la categoría muy adecuado o hasta dos de bastante adecuado.
Pertinente: Si el consenso de los expertos valora tres indicadores en la categoría bastante adecuado; pueden ser hasta dos indicadores adecuados.
Poco pertinente: Si el consenso de los expertos valora al menos tres indicadores en la categoría poco adecuado.
No pertinente: Si el consenso de los expertos valora al menos tres indicadores en la categoría inadecuado.
Los resultados se recogieron en una base de datos elaborada en Excel. En la determinación de la validez del criterio de los expertos se utilizó la matriz Delphi. Se aplicó un análisis estadístico descriptivo con el cálculo de las frecuencias absolutas, absolutas acumuladas, relativas acumuladas y se buscaron los puntos de corte. 4),(10 Los resultados finales se presentan en tablas para su mejor comprensión.
La investigación cumplió los principios éticos establecidos en la Declaración de Helsinki. Se obtuvo el consentimiento informado escrito de los participantes. Se explicaron las características, finalidades y beneficios posibles de la investigación y se aseguró el carácter confidencial de la información.
Resultados y Discusión
Los expertos que respondieron a la solicitud de participación laboran en cuatro sedes universitarias de la Universidad de Ciencias Médicas de Holguín, cinco son doctores en ciencias, 17 másteres (ocho en Educación Médica), ocho ostentan la categoría docente Profesor Asistente, tres Profesor Auxiliar, seis Profesor Titular y de ellos 15 son investigadores (13 Investigadores Agregados y dos Investigadores Auxiliares). El cálculo del coeficiente de competencia fue alto (K≥0,8) en 17 expertos, quienes participaron en la valoración de la metodología (Tabla 2).
En la Tabla 3 se aprecia que la totalidad de los indicadores fueron considerados por la mayoría de los expertos como Muy Adecuado y Bastante Adecuado, seguido dela categoría Adecuado. Ningún criterio correspondió a la categoría Poco Adecuado e Inadecuado.
En la Tabla 4 se presentan las frecuencias absolutas acumuladas, estas reflejan que la totalidad de los indicadores están ubicados en un nivel superior a la categoría Adecuado.
En la Tabla 5 se observan las frecuencias relativas acumuladas y se muestra que en la categoría Adecuado, todos los valores corresponden a 1,00, por lo que la totalidad de los indicadores se enmarcan en las categorías Muy Adecuado y bastante Adecuado.
En la Tabla 6 se muestra como al comparar los resultados de los siete indicadores con los puntos de corte se aprecia que los expertos en su conjunto los definen como Muy Adecuados, lo que indica criterios favorables en relación a la propuesta. En la tabla 6.1 se reflejan los rangos de la escala utilizada.
La mayoría de los expertos consultados obtuvo un coeficiente de competencia alto, quienes participaron en la valoración de la metodología, lo que permite inferir que la valoración se realizó por profesionales competentes, capaces de ofrecer criterios útiles sobre la pertinencia de la metodología y hacer recomendaciones respecto a sus aspectos fundamentales.
El análisis de los resultados obtenidos permite afirmar que la metodología resulta pertinente al destacar el consenso de los expertos, que se refleja en la estabilidad de las respuestas de los indicadores definidos para la validez y viabilidad de la metodología, enmarcados todos en la categoría Muy Adecuado respecto a los rangos de escala.
No |
Coeficiente de conocimiento (Kc) |
Coeficiente de argumentación (Ka) |
Coeficiente de competencia (K) |
Nivel de competencia K= ½ (k c + k a ) |
---|---|---|---|---|
1 | 0,9 | 0,98 | 0,94 | Alto |
2 | 0,9 | 1,0 | 0,95 | Alto |
3 | 0,8 | 0,88 | 0,84 | Alto |
4 | 0,9 | 0,98 | 0,94 | Alto |
5 | 1,0 | 1,0 | 1,0 | Alto |
6 | 1,0 | 1,0 | 1,0 | Alto |
7 | 0,9 | 0,99 | 0,94 | Alto |
8 | 0,9 | 1,0 | 0,95 | Alto |
9 | 0,9 | 0,98 | 0,94 | Alto |
10 | 0,9 | 0,9 | 0,9 | Alto |
11 | 1,0 | 1,0 | 1,0 | Alto |
12 | 0,6 | 0,8 | 0,7 | Medio |
13 | 0,9 | 0,86 | 0,88 | Alto |
14 | 1,0 | 1,0 | 1,0 | Alto |
15 | 0,9 | 0,99 | 0,94 | Alto |
16 | 0,9 | 0,87 | 0,88 | Alto |
17 | 0,8 | 0,65 | 0,72 | Medio |
18 | 0,8 | 0,87 | 0,83 | Alto |
19 | 0,9 | 0,84 | 0,87 | Alto |
Indicadores | Categorías | |||||
---|---|---|---|---|---|---|
MA | BA | A | PA | I | Total | |
A1 | 14 | 3 | 0 | 0 | 0 | 17 |
A2 | 16 | 0 | 1 | 0 | 0 | 17 |
A3 | 13 | 4 | 0 | 0 | 0 | 17 |
A4 | 11 | 6 | 0 | 0 | 0 | 17 |
A5 | 12 | 5 | 0 | 0 | 0 | 17 |
A6 | 15 | 2 | 0 | 0 | 0 | 17 |
A7 | 15 | 1 | 1 | 0 | 0 | 17 |
Indicadores | Categorías | ||||
---|---|---|---|---|---|
MA | BA | A | PA | I | |
A1 | 14 | 17 | 17 | 17 | 17 |
A2 | 16 | 16 | 17 | 17 | 17 |
A3 | 13 | 17 | 17 | 17 | 17 |
A4 | 11 | 17 | 17 | 17 | 17 |
A5 | 12 | 17 | 17 | 17 | 17 |
A6 | 15 | 17 | 17 | 17 | 17 |
A7 | 15 | 16 | 17 | 17 | 17 |
Indicadores | Categorías | ||||
---|---|---|---|---|---|
MA | BA | A | PA | I | |
A1 | 0,82 | 1,00 | 1,00 | 1,00 | 1,00 |
A2 | 0,94 | 0,94 | 1,00 | 1,00 | 1,00 |
A3 | 0,76 | 1,00 | 1,00 | 1,00 | 1,00 |
A4 | 0,65 | 1,00 | 1,00 | 1,00 | 1,00 |
A5 | 0,71 | 1,00 | 1,00 | 1,00 | 1,00 |
A6 | 0,88 | 1,00 | 1,00 | 1,00 | 1,00 |
A7 | 0,88 | 0,94 | 1,00 | 1,00 | 1,00 |
Indicadores | Categorías | Suma | Promedio | N-P | |
---|---|---|---|---|---|
MA | BA | ||||
A1 | 0,93 | 3,49 | 4,42 | 2,21 | -0,27 |
A2 | 1,57 | 1,57 | 3,14 | 1,57 | 0,37 |
A3 | 0,72 | 3,49 | 4,21 | 2,10 | -0,62 |
A4 | 0,38 | 3,49 | 3,87 | 1,93 | -0,01 |
A5 | 0,54 | 3,49 | 4,03 | 2,01 | -0,07 |
A6 | 1,19 | 3,49 | 4,68 | 2,34 | -0,40 |
A7 | 1,19 | 1,57 | 2,76 | 1,38 | -0,56 |
Suma | 6,52 | 20,59 | 27,11 | N=1,94 | |
Puntos de corte | 0,93 | 2,94 |
Categoría | Muy adecuado | Bastante adecuado | Adecuado |
---|---|---|---|
Rango (R) | ≤0.93 | 0,93< R ≤2,94 | > 2,94 |
Indicadores | A1-A7 |
La aplicación de este método permitió realizar las siguientes consideraciones sobre la metodología para integrar software educativo en el proceso de enseñanza-aprendizaje de rehabilitación estomatológica:
Indicador 1. Estructura de la metodología. La mayoría de los expertos consideran muy adecuada su organización, que parte de la fundamentación teórica con un ordenamiento adecuado de las etapas y procedimientos en función de alcanzar el objetivo propuesto. Este aspecto es valorado por tres expertos como bastante adecuado, y dos de ellos recomiendan el abordaje de los principios didácticos para complementar la metodología, aspecto que los autores decidieron incluir, por la importancia que representan estos postulados generales de la didáctica al trabajar con software educativo. Por ejemplo, el principio de vinculación de la teoría con la práctica se fortalece al plantear ejemplos y situaciones relacionados con problemas reales de la profesión, imágenes de técnicas, procedimientos, pacientes, videos, y presentaciones de casos, elementos que favorecen un grado de integración aplicable a las situaciones de salud que se presentan durante el desempeño profesional.
Indicador 2. Etapas diseñadas en la metodología. Las etapas fueron consideradas muy adecuadas por su concatenación lógica, que paso a paso dan la posibilidad de planificar, organizar, implementar y controlar la integración, sirviendo de guía para alcanzar su objetivo. Los procedimientos responden al diseño de cada etapa y guardan estrecha relación con sus objetivos. El experto que la consideró Adecuado considera incluir una cuarta etapa referente a acciones específicas para generalizar la metodología; los autores valoran la sugerencia dada para llevarla a cabo a partir de los resultados que se obtengan con la implementación y control de la metodología.
Indicador 3. Procedimientos de la etapa I: Organización para la integración del software educativo. Se consideró su adecuación al objetivo y necesidad de planificar y preparar las condiciones de este proceso, con procedimientos que atienden las necesidades tanto de estudiantes como profesores y permiten valorar alternativas para asumir la integración. Este indicador fue evaluado en las categorías Muy Adecuado y Bastante Adecuado por la totalidad de los expertos, sin realizar ninguna consideración específica, por lo que no se modificaron los procedimientos propuestos.
Indicador 4. Procedimientos de la etapa II: Ejecución de las acciones de la metodología. Se valora como muy adecuada por precisar los procedimientos para implementar en el proceso de enseñanza-aprendizaje la metodología, haciendo hincapié en el trabajo metodológico desde el colectivo de asignatura. Un experto recomienda incluir el tratamiento del idioma inglés, consideración que solo es factible aplicar cuando se trabaja con dos de los software educativos que poseen un glosario de términos en este idioma. Dos expertos sugieren incluir guías para el trabajo independiente, elemento que los autores consideran de importancia para un mayor aprovechamiento de estos recursos en la autopreparación de los estudiantes y para el desarrollo de las clases con software educativo, razón por la cual se incluyen como anexo a la metodología.
Indicador 5. Procedimientos de la etapa III: Control de la aplicación de la metodología. Esta acción refleja según el consenso de los expertos los procedimientos para valorar de forma sistemática la integración y asumir una posición activa ante la búsqueda de soluciones derivadas de las dificultades que pueden presentarse en la práctica, evidenciando la flexibilidad de la metodología. Uno de los expertos sugiere eliminar el procedimiento relacionado con la investigación pues no existe correspondencia con lo que se plantea en la etapa, recomendación que asumieron los autores.
Indicador 6. Factibilidad de aplicación en el proceso de enseñanza-aprendizaje de Rehabilitación. Existió consenso en cuanto a la posibilidad real de aplicarla metodología en contexto formativo de la universidad de Ciencias Médicas, que incluye los diferentes escenarios docentes donde se realiza el proceso de enseñanza-aprendizaje de Estomatología. Esto se reflejó en que casi la totalidad de los expertos valoró la factibilidad de muy adecuada.
Indicador 7. Posibilidad de generalización a otras asignaturas del currículo. La mayoría de los expertos consideran que los procedimientos que se proponen pueden aplicarse a otras asignaturas de la carrera Estomatología y en todas las Universidades del país, por la existencia de un Plan de estudio único, sin olvidar el carácter flexible de la metodología que permite su adecuación a la didáctica particular de cada asignatura.
A pesar de no existir opiniones poco adecuadas o inadecuadas, las sugerencias dadas por los expertos permitieron realizar modificaciones para perfeccionar la metodología antes de aplicarla en la práctica educativa, las que se citan a continuación:
Se elimina el procedimiento seis de la etapa tres dirigido a la inclusión de los profesores en investigaciones sobre software educativo, pues no responde al control de la metodología.
Se incluye, en la etapa de implementación, la utilización de las guías para el trabajo independiente con software educativo.
En las orientaciones metodológicas anexas a la metodología se aborda el tratamiento a la estrategia curricular del idioma inglés, al utilizar el software educativo instrumental y materiales para prótesis estomatológica, e historia clínica de Prótesis, que contienen un glosario de términos en ese idioma.
Se incluye la explicación del abordaje de los principios didácticos al utilizar software educativo en el proceso de enseñanza-aprendizaje.
El perfeccionamiento de la metodología en base a las críticas y sugerencias emitidas por los expertos, demuestra su flexibilidad y adecuación en la práctica educativa. Los procedimientos propuestos son susceptibles de ser modificados en la medida en que se implementen, en correspondencia con el propósito de obtener resultados que aporten cada vez más a la pertinencia de la propuesta en aras de una mayor integración.
Los autores consideran que la aplicación del método Delphi permitió la formación de un juicio objetivo sobre la metodología con la obtención de un consenso en base al criterio de los expertos, lo que conllevó a valorar las etapas y procedimientos así como a obtener opiniones y sugerencias en un clima donde el anonimato y la confidencialidad permitieron la libertad de opiniones y la creatividad.
En investigación realizada por Cáceres Pérez y otros, se utiliza el criterio de expertos para valorar un software educativo para la enseñanza en enfermería de las afecciones osteomioarticulares y confirman su pertinencia a través del consenso de los expertos. 11 Esto muestra la utilidad de la aplicación de este método en las investigaciones educacionales para la valoración de herramientas educativas previo a su aplicación en la práctica.
Es importante destacar que el método de expertos mediante la técnica Delphi supera los sesgos y limitaciones de una sola persona pues permite basarse en el juicio intersubjetivo. Otro aspecto que cabe resaltar es el hecho de que las opiniones de los participantes y la retroalimentación que se desarrolla permiten la reflexión y comprensión a partir de diferentes perspectivas. 2
Conclusiones
La pertinencia de la metodología para la integración didáctica de software educativo en el proceso de enseñanza-aprendizaje de Rehabilitación estomatológica se constató con el criterio consensuado de los expertos, aplicando el método Delphi, quienes consideraron en su mayoría Muy Adecuado los aspectos valorados y realizaron aportes que permitieron perfeccionarla antes de su implementación.