Pontificia Universidad Javeriana Facultad de Ciencias Económicas y Administrativas Trabajo de grado para optar por el título de Magister en Economía Título: ¿Existen diferencias significativas en el desempeño de los estudiantes que cursan un programa de educación superior virtual respecto a uno presencial en Colombia?: el caso de los programas universitarios en Ciencias Económicas y Administrativas Autor: Juan Manuel Medina Otálora Asesora: Silvia Consuelo Gómez Soler Bogotá D.C., junio de 2021
53
Embed
¿Existen diferencias significativas en el desempeño de los ...
This document is posted to help you gain knowledge. Please leave a comment to let me know what you think about it! Share it to your friends and learn new things together.
Transcript
Pontificia Universidad Javeriana
Facultad de Ciencias Económicas y Administrativas
Trabajo de grado para optar por el título de Magister en Economía
Título:
¿Existen diferencias significativas en el desempeño de los estudiantes que
cursan un programa de educación superior virtual respecto a uno presencial
en Colombia?: el caso de los programas universitarios en Ciencias
Económicas y Administrativas
Autor:
Juan Manuel Medina Otálora
Asesora:
Silvia Consuelo Gómez Soler
Bogotá D.C., junio de 2021
¿Existen diferencias significativas en el desempeño de los estudiantes que cursan un
programa de educación superior virtual respecto a uno presencial en Colombia?: el caso de
los programas universitarios en Ciencias Económicas y Administrativas *
Autor: Juan Manuel Medina Otálora **
Resumen
El presente estudio tiene como objetivo examinar las brechas de desempeño académico de la
educación superior en Colombia para las modalidades de formación virtual y presencial en los
programas universitarios del área de las Ciencias Económicas y Administrativas. A partir de los
resultados en competencias genéricas de la prueba de Estado Saber Pro del año 2019 y por medio
de la aplicación de modelos multinivel, se contrastaron factores personales, familiares,
socioeconómicos y de la institución educativa asociados con el desempeño obtenido. Como
resultado de las estimaciones, se identificó que los estudiantes que se forman en modalidad virtual
obtienen un menor rendimiento académico en las competencias de razonamiento cuantitativo,
lectura crítica, inglés y competencias ciudadanas que aquellos que cursan programas presenciales.
Palabras clave: Educación superior, educación presencial, educación virtual y a distancia, modelo
multinivel, calidad educativa, características de desempeño académico, brechas de aprendizaje.
Clasificación JEL: I20, I21, I23
Abstract
The objective of this study is to examine the differences in academic performance between students
enrolled in virtual and face-to-face programs at Colombian universities, focusing in business and
economics undergraduate programs. Using the generic competencies results of the 2019 Saber Pro
examination, we estimate a multilevel model that includes personal, family, socioeconomic and
educational institution factors associated with academic performance. The results show that those
students who attended virtual programs have a lower performance in quantitative reasoning,
critical reading, English, and citizenship skills than those who attended face-to-face programs.
* Agradezco a la Profesora Silvia C. Gómez Soler por sus orientaciones y apoyo en el desarrollo de este trabajo. Todos los errores son responsabilidad del autor. ** Dedicado a la memoria de Mercedes Tovar de Otálora (1945-2020)
ANEXO A. Descripción Variables Explicativas ____________________________________ 40
ANEXO B. Modelos Multinivel por Competencia___________________________________ 42
ANEXO C. Pruebas de Normalidad ______________________________________________ 52
3
1. INTRODUCCIÓN
La educación permite incrementar el stock de cualificaciones, conocimientos y entendimiento de
los individuos o la sociedad en su conjunto (Leyva y Cárdenas, 2002). Entidades como la
Organización de las Naciones Unidas para la Educación, la Ciencia y la Cultura -UNESCO- (2014)
y la Organización para la Cooperación y el Desarrollo Económicos -OCDE- (2016), reconocen la
importancia que tiene la calidad de la educación como mecanismo y estrategia en la reducción de
brechas de desigualdad y analfabetismo, así como determinante fundamental de la formación de
capital humano y en el desarrollo económico de una nación.
En el contexto de la educación superior en Colombia, se han afrontado retos importantes en las
últimas décadas, en el cual asegurar una oferta de calidad es un compromiso no solo a nivel estatal,
sino en la función que ejercen las Instituciones de Educación Superior (IES) en cumplir los
estándares mínimos de calidad1 y en el análisis del logro educativo en términos de los mecanismos
de enseñanza-aprendizaje sobre la adquisición del conocimiento y competencias necesarias para
el desarrollo profesional. De tal forma, “el análisis del desempeño académico del estudiante
universitario constituye un factor imprescindible en el abordaje del tema de la calidad de la
educación superior, debido a que es un indicador que permite una aproximación a la realidad
educativa” (Garbanzo, 2007, p.43).
De acuerdo con el Ministerio de Educación Nacional (MEN), la educación superior se divide en
programas a nivel de pregrado (con programas de formación técnico profesional, tecnológico y
profesional) y posgrado (con programas de especialización, maestría y doctorado). Los anteriores
se ofrecen bajo modalidades de enseñanza tradicional (presencial) y no tradicional (a distancia
tradicional y a distancia virtual)2. Todos los niveles y modalidades se deben alinear con políticas
de aseguramiento de la calidad y algunos de ellos alcanzan altos estándares de calidad representado
por la acreditación voluntaria en alta calidad3.
Actualmente, un elemento de observación en el escenario educativo y en especial para la educación
superior, es el acelerado desarrollo e incursión de nuevas Tecnologías de la Información y
Comunicación (TIC), que se constituyen como instrumentos de gran valor que están transformando
la educación atendiendo las nuevas necesidades del entorno en materia económica, social y
ambiental. Por ello, la situación que representa la modalidad de enseñanza “a distancia virtual” se
propicia como una opción avalada de educación inclusiva, alternativa a la presencialidad y a la de
distancia tradicional, donde las IES constituyen y desarrollan programas de formación académica
a través de la utilización de las TIC, permitiendo acceder al conocimiento sin la necesidad de estar
presente en cuerpo, espacio y tiempo (MEN, 2017). Esta modalidad se concibe como una posible
solución a las dificultades de acceso educativo para la población que padece algún tipo de
1 El Ministerio de Educación Nacional de Colombia a través del decreto 1330 de 2019 (MEN) que sustituye el Decreto 1075 de 2015, concibe los estándares mínimos de calidad que hacen parte del Sistema de Aseguramiento de la Calidad de la Educación Superior y se traducen en las
condiciones que deben cumplir las IES a nivel institucional y de programa para ofertar programas de educación superior en Colombia. 2 El Ministerio de Educación Nacional de Colombia a través del decreto 1330 de 2019 (MEN) que sustituye el Decreto 1075 de 2015, en su artículo No. 2.5.3.2.2.4 define las metodologías de formación de los programas que pueden ofertar las IES en Colombia. 3 El Concejo Nacional de Acreditación (CNA) determina los lineamientos para la acreditación en alta calidad de programas e IES.
4
exclusión de índole económico, social o geográfico, así como en la dificultad que tienen los
alumnos para continuar estudios a nivel superior por motivos personales, familiares y/o laborales
(Rodríguez et al., 2014).
En Colombia, la educación superior en modalidad distancia virtual ha tenido un auge importante
a partir de la década del 2000, aunado a la llegada paulatina de nuevas tecnologías, internet y
diversos medios de comunicación. Es notorio observar que una gran cantidad de IES que
tradicionalmente funcionaban bajo modalidad presencial, se están expandiendo en cuanto a la
oferta de cursos y programas académicos a través del uso de plataformas digitales apoyadas de
medios tecnológicos. De acuerdo con el Sistema Nacional de Información de la Educación
Superior (SNIES), esta modalidad reporta para el año 2019 un 9% de la población estudiantil en
la educación superior (220 mil matriculados de un total de 2.4 millones a nivel nacional en todas
las modalidades y niveles de formación), con una oferta académica de 823 programas activos (de
un total de 13.801 en todas las modalidades y niveles de formación). En el año 2010 solo se
reportaban 9 mil matriculados, lo que muestra un crecimiento significativo de gran repercusión en
la educación superior en Colombia en los últimos años. Así mismo, es importante analizar las
cifras en materia de deserción estudiantil, que hacen visibles los inconvenientes que tienen las IES
para consolidar la calidad y cobertura de sus programas. Los datos muestran que la deserción no
es un dilema ajeno a la educación virtual, ya que según un estudio del Laboratorio de Economía
de la Educación de la Universidad Javeriana (LEE) para el año 2020 con datos del Sistema para la
Prevención y Análisis de la Deserción en las Instituciones de Educación Superior (SPADIES), se
reporta un 66% de deserción por cohorte en esta modalidad, siendo un valor superior en 30 puntos
porcentuales respecto de la deserción en los programas de tipo presencial (36%)4.
Lo anterior, apunta a la investigación de los factores que influyen en la calidad educativa medida
a través de los determinantes del desempeño académico, ya que la incursión en la virtualidad no
solo requiere un esfuerzo considerable en la adaptación de la infraestructura tecnológica por parte
de las IES, sino la distinción de los mecanismos y metodologías de enseñanza-aprendizaje, que
varían respecto del sistema presencial y mantiene al estudiante en un ambiente distintivo, lo que
puede alterar su formación y rendimiento académico posterior (MEN, 2017).
En razón a lo expuesto, el objetivo de esta investigación es estudiar las diferencias en el desempeño
académico de los estudiantes de educación superior en modalidad virtual y presencial para los
programas universitarios de Ciencias Económicas y Administrativas5. El estudio considera los
datos para el año 2019 que proporciona el Instituto Colombiano para la Evaluación de la Educación
4 La deserción por cohorte es el número de estudiantes que desertan en los diferentes periodos para una cohorte en específico y la deserción por
periodo son los estudiantes desertores en un periodo específico de la cantidad de estudiantes que tenía matriculado (SPADIES).
5 Para efectos del estudio, se toma como referencia los datos de los programas académicos que hacen parte del área de las Ciencias Económicas y
Administrativas, siendo en esta, la que mayor participación de evaluados presenta en programas bajo modalidad virtual y a distancia tradicional en
el país (56%). Siendo el área de conocimiento cuya concentración de evaluados en IES de carácter académico “universidad” es de un 45% respecto
de todas las clasificaciones de IES en Colombia.
5
Superior (ICFES) a partir del Examen de Estado de la Calidad de la Educación Superior -Saber
Pro- (antes ECAES)6, el cual evalúa el sistema de la educación superior en Colombia, siendo una
prueba que “ (..) genera indicadores por medio de los cuales es posible comparar programas,
instituciones, metodologías, y proporciona el análisis pedagógico de los resultados del examen
mediante la identificación de niveles y la interpretación de rendimientos” (Boada y Cardona, 2017,
p.7).
Teniendo en cuenta lo anterior, se intenta dar respuesta a la pregunta de investigación: ¿existen
diferencias significativas en el desempeño de los estudiantes que estudian un programa de
educación superior virtual respecto a uno presencial?, ¿los resultados cambian por género y edad
del estudiante? Lo anterior, involucra un análisis asociado a las características de los estudiantes,
la modalidad de formación y las instituciones educativas a las que pertenecen. Con el fin de lograr
el objetivo propuesto y dar respuesta a las cuestiones planteadas, se usan modelos de regresión
multinivel (también llamados modelos lineales jerárquicos), ampliamente utilizados en la
investigación educativa.
El resto de esta investigación está organizado de la siguiente manera: la sección 2 revisa los
elementos que la literatura ha estudiado sobre los determinantes del rendimiento académico por
modalidades de formación. La Sección 3 describe los aspectos teóricos del campo de estudio. La
sección 4 presenta las fuentes de información y estadísticas descriptivas del conjunto de datos
utilizado para el análisis. La sección 5 describe la metodología empleada para el estudio y la
especificación del modelo. La sección 6 presenta los resultados de la estimación y las pruebas
respectivas. La Sección 7 proporciona una discusión de los principales resultados. La sección 8
presenta las conclusiones e implicaciones de política, y la sección 9 las referencias utilizadas en el
estudio.
2. REVISIÓN DE LA LITERATURA
En los últimos años, se ha suscitado un amplio interés en estudiar los determinantes de la calidad
de la educación en Colombia por medio del análisis de los factores que inciden en el desempeño
académico. Para dicho efecto, la observación y tratamiento de los datos que proporcionan los
exámenes estandarizados se han convertido en una herramienta ampliamente utilizada. La
literatura ha demostrado que las pruebas estandarizadas son una buena fuente de información para
comparar el desempeño y habilidades específicas de los estudiantes, pero no son una medida
perfecta de la calidad educativa (Card y Krueger, 1994; Popham, 1999). Lo anterior, en razón a
que en dichas pruebas no se puede validar y probar otro tipo de conocimientos y destrezas de los
estudiantes (Gómez, 2013).
6 El Decreto 1781 de 2003, estableció los Exámenes de Estado de Calidad de la Educación Superior (ECAES, actualmente Saber Pro) y la Ley 1234
de 2009 fijó los criterios que rigen la organización y funcionamiento del sistema de evaluación de la calidad de la educación superior.
6
En cuanto al desarrollo empírico de los determinantes de la calidad y desempeño de la educación
superior en Colombia, Torres et al. (2015) juntamente con datos del DANE y el ICFES para la
prueba Saber Pro en un horizonte de tiempo entre los años 2007 al 2012, exploran a través de la
estadística multivariante y el planteamiento de un modelo econométrico de regresión por quintiles,
la interrelación que existe entre las características socioeconómicas de los estudiantes con la
calidad de la educación que reciben. Los investigadores concluyen que factores como el estrato,
ingreso familiar y educación de la madre tienen una relación positiva con el rendimiento académico
de los estudiantes universitarios, en contraste con los estudiantes que tienen personas a cargo,
como hijos, padres, y/o cónyuge. Por otra parte, Melo et al. (2017) examinan el estado de la
educación superior con los resultados de la prueba Saber Pro del año 2011 y estiman bajo la técnica
de la frontera estocástica, los niveles de eficiencia de los diferentes programas académicos de las
IES colombianas. Al respecto, infieren que, aunque muchas instituciones educativas tienen
oportunidades para mejorar sus niveles de eficiencia, estas tienen restricciones por la incidencia
de los factores socioeconómicos de los estudiantes tales como el nivel de educación de los padres,
ingresos familiares, estrato socioeconómico, entre otros.
Otros autores como Celis et al. (2012), comparan la brecha de calidad de la educación colombiana
entre los niveles medio y superior con los resultados de las pruebas Saber 11 y Saber Pro a partir
de modelos multinivel, los cuales incluyen características individuales (género, edad, ingresos,
estrato, condición laboral, recursos tecnológicos), familiares (nivel educación de los padres) y de
la institución (tipo, carácter, acreditación) asociados con el puntaje obtenido. Así mismo, Escobar
y Orduz (2013) evalúan mediante un modelo logit ordenado, el rendimiento académico a nivel
superior según la prueba Saber Pro de los años 2008, 2009 y 2010, indicando que los estudiantes
con mejores condiciones socioeconómicas vinculados a programas acreditados en alta calidad
tienen una probabilidad más alta de obtener mejores resultados académicos. En igual sentido,
Cárdenas y Mora (2014) evalúan la eficacia de las IES en Colombia mediante un modelo
multinivel con los resultados de la prueba Saber Pro del año 2011 en competencias genéricas,
precisando que las IES con acreditación de alta calidad presentan mejores resultados, concluyendo
que es indispensable generar incentivos para que las IES logren esta acreditación con el fin de
mejorar la calidad educativa.
Respecto de la diferenciación por modalidades de enseñanza, el análisis de la calidad y brechas de
desempeño de la educación virtual respecto de la presencial ha sido un tema de investigación que
ha sido abordado en la literatura internacional. Sin embargo, los aportes a este tema de estudio
para el caso de países en desarrollo como Colombia son muy escasos. En el contexto internacional,
se concibe que el futuro de la educación a nivel superior dependerá de la combinación de las
fortalezas de la educación en línea y de la educación presencial, en beneficio tanto de los
estudiantes como de los países (Bonvillian y Singer, 2013). El metaanálisis de Allen et al. (2002)
considera estudios que comparan el grado de satisfacción de los estudiantes que asisten a cursos
presenciales tradicionales respecto de los que aplican a cursos de educación a distancia y virtuales.
7
Los hallazgos indicaron que los estudiantes mostraron una ligera preferencia por los ambientes de
aprendizaje bajo los métodos tradicionales.
En este sentido comparativo, Stern (2004) evalúa a partir de datos cualitativos y cuantitativos, las
similitudes y diferencias en el ámbito educativo estadounidense del desarrollo de un curso de
educación avanzada bajo el formato tradicional presencial y en línea, observando mejor
desempeño y mayor efectividad en el sistema tradicional. Estos investigadores concluyen que las
dificultades del aprendizaje del sistema en línea se traducen en el tiempo y limitaciones que tiene
el estudiante en asumir la responsabilidad del aprendizaje virtual. Por otra parte, Young y Duncan
(2014) por medio de estudios experimentales para una institución educativa estadounidense,
comparan las calificaciones de estudiantes en cursos de educación en línea y presenciales,
determinando que los desarrollados de manera presencial obtienen calificaciones
significativamente más altas. Así mismo, Lavy (2011) comparó por medio de métodos
experimentales la enseñanza tradicional y no tradicional (lo llama sistema moderno) en la relación
de los mecanismos de enseñanza y el desempeño estudiantil en Israel. Este investigador llega a la
conclusión que ambas alternativas de formación se asocian a las características de los estudiantes,
principalmente en el género y factores socioeconómicos. En oposición a esto, otros estudios
consideran que la educación no tradicional (a distancia y virtual) puede ser equiparada en términos
de eficacia respecto de la tradicional (presencial), sobre la base que los estudiantes no solo tienen
igual nivel de satisfacción en los mecanismos de aprendizaje, sino rendimientos similares en
cuanto al desempeño académico (Evans et al., 2007; Gagne y Shepherd, 2001).
En la literatura colombiana, son relativamente pocos los estudios que han analizado los
determinantes del desempeño académico y la calidad del sistema tradicional y no tradicional en la
educación superior. Existen algunos artículos que contrastan de una manera descriptiva los
resultados de la prueba Saber Pro entre programas que se ofrecen en modalidad virtual y a
distancia, con los de tipo presencial, encontrando en su mayoría diferencias a favor de los
presenciales para las competencias que evalúa el examen (Romero et al., 2015; Rincón y Arias,
2017; Ahumada et al., 2018).
Ahora bien, en cuanto a investigaciones que emplean métodos de inferencia estadística, se resalta
para el contexto colombiano el estudio de Ricardo et al. (2020), el cual analiza el potencial de la
educación a distancia tradicional para reducir brechas de aprendizaje en la educación superior. Con
los datos de la prueba Saber Pro de los años 2016 al 2018 y por medio del uso de modelos
multinivel, los investigadores encuentran que las variables que más se asocian al cierre de brechas
de aprendizaje entre estudiantes que cursan programas a distancia frente a programas presenciales,
son la edad y antecedentes de tipo cognitivo. Sin embargo, llama la atención que en los modelos
considerados, los investigadores no utilizan el nivel de educación de los padres como variable de
control en el primer nivel (estudiante) y utilizan como único predictor para el segundo nivel
(institución) la modalidad del programa, dejando de lado otro tipo de variables de interés a nivel
institucional (tipo, carácter, condición de acreditación, entre otras); así mismo se utiliza como
variable dependiente un puntaje global y no las competencias genéricas que evalúa la prueba Saber
8
Pro (razonamiento cuantitativo, lectura crítica, comunicación escrita, competencias ciudadanas, e
inglés), tal y como se presenta en este estudio.
De igual manera, se relaciona el aporte de Rodríguez et al. (2014) quienes comparan la calidad del
sistema educativo presencial frente al no tradicional (a distancia y virtual) utilizando los datos de
la prueba Saber Pro del año 2010. Por medio de la estimación de un modelo multinivel para cinco
(5) áreas de conocimiento, los investigadores infieren la existencia de una brecha de género a favor
de los hombres en el rendimiento académico, y que el nivel socioeconómico se relaciona de forma
positiva con un mejor desempeño. Sin embargo, para la construcción del modelo final, los autores
solo tienen en cuenta la metodología del programa, el género y el nivel educativo de la madre, sin
la inclusión de otro tipo de variables explicativas de orden socioeconómico e institucional, lo cual
puede limitar la capacidad explicativa del modelo que plantean.
Cellini y Grueso (2021) también aportan a la investigación sobre el aprendizaje en programas
virtuales y presenciales de tipo universitario y a nivel técnico - tecnológico (considerando los
programas que oferta el SENA). Estos investigadores analizan los resultados de las pruebas de
egreso de la educación media, técnica y universitaria (Prueba Saber 11, Saber TyT y Saber Pro)
mediante métodos de ponderación de probabilidad inversa con efectos fijos basado en factores
institucionales, concluyendo que los estudiantes de nivel universitario que cursan programas
virtuales obtienen resultados inferiores en relación con los que cursan programas de tipo
presencial, especialmente en instituciones de carácter privado. Al respecto, indican que los factores
institucionales contribuyen principalmente en la explicación de esas diferencias. Sin embargo,
señalan que dicho resultado varia respecto de los programas de nivel técnico-tecnológico, donde
los estudiantes del SENA que cursan programas de tipo virtual se desempeñan mejor en
comparación con los que cursan este tipo de programas de forma presencial.
Dado lo anterior, el presente estudio busca contribuir en varias formas a ampliar la evidencia
empírica sobre el análisis del desempeño académico en la educación superior a través de
modalidades de formación. Primero, en la contribución de la búsqueda de nuevos aspectos que
permiten comprender la relación entre los factores individuales e institucionales en el análisis del
desempeño académico. Segundo, en la cuantificación e incidencia de dichos factores sobre los
efectos de resultados por modalidad de aprendizaje. Tercero, y a diferencia de los estudios
referenciados, esta investigación considera como variable dependiente los puntajes de las cinco
(5) competencias genéricas que evalúa la prueba Saber Pro en todos los programas del país. Esto
permite obtener para cada una de estas, un análisis diferenciado para la población de estudio por
modalidad de formación. Finalmente, se resalta que el estudio se centra en los estudiantes que
hacen parte de las disciplinas que conforman el área de conocimiento de las Ciencias Económicas
y Administrativas, bajo la hipótesis que los estudiantes que cursan programas en el sistema no
tradicional (virtual) obtienen resultados inferiores frente al sistema tradicional.
9
3. MARCO TEÓRICO
Según Baumann y Hamin (2011), el análisis del desempeño académico está asociado con el capital
humano, el cual es considerado como un factor determinante en el crecimiento económico y
relacionado con la competitividad y la calidad de la educación superior. Por ende, la base que
fundamenta esta investigación se direcciona en la Teoría del Capital Humano (TCH), la cual
considera que la educación es vista como una decisión de inversión en capital humano, en la cual
un individuo evalúa los costos y beneficios esperados de dicha determinación (Rodríguez, 2014).
Bajo este enfoque, Becker et al. (1990) consideran que los sectores educativos se benefician de la
inversión en capital humano y esto tiene relación directa con el desarrollo económico de un país.
Así mismo, señalan que la motivación que tiene una persona en invertir en educación se da en
razón a los rendimientos económicos esperados producto de la aplicabilidad del conocimiento
adquirido. Por ello, aquellos individuos que desean acceder a la educación superior tienen la
opción de hacerlo en forma presencial, a distancia y/o virtual según la oferta educativa en
Colombia, e independiente de dicha elección, su objetivo es obtener el conocimiento y
competencias que le permitan desenvolverse en el campo laboral (Rodríguez et al., 2014).
En este sentido, tiene relevancia el análisis de la calidad de la educación medida por el desempeño
académico entre modalidades de enseñanza. Precisamente, el estudio y desarrollo de la concepción
que refiere a “la calidad de la educación”, constituye un desafío que tiene grandes implicaciones
en cuanto a las dimensiones y enfoques que conlleva su análisis en el ámbito académico. Toranzos
(2000) sustenta que el concepto de “calidad” en el contexto educativo puede ser visto bajo tres
dimensiones. En primera instancia, bajo el concepto de “eficacia” como el logro educativo que se
alcanza bajo un horizonte de tiempo; en segunda instancia, bajo el concepto de “relevancia” en
términos de lo que realmente se aprende y su aplicabilidad; y, por último, respecto a la cualidad
de los procesos y medios que el sistema proporciona a los estudiantes para el desarrollo de su
experiencia educativa.
Para Torres (2014) la distinción del desempeño académico está relacionado con el entendimiento
de las formas de aprendizaje. Sabiendo de antemano que el sistema tradicional (presencial) y no
tradicional (a distancia y virtual) involucra distintos mecanismos de enseñanza-aprendizaje, es
fundamental considerar los resultados y el desempeño en cuanto a la medida del éxito académico
final; siendo una conjunción de la administración del tiempo en el transcurrir académico, las
estrategias pedagógicas para el aprendizaje, y el apoyo de un entorno personal, familiar e
institucional (Mamiseishvili, 2012).
Finalmente, las investigaciones que han estudiado los determinantes del desempeño académico en
la educación superior en Colombia permiten identificar algunas características y variables que
inciden en el rendimiento entre las diversas modalidades de enseñanza. En primera instancia, por
medio de factores personales, familiares y socioeconómicos y seguidamente a través de factores
de índole institucional. No obstante, es importante tener en cuenta que existen factores adicionales
10
de tipo cuantitativo (tamaño del grupo familiar, número de hijos, entre otros) y cualitativos
(aspectos motivacionales, cognitivos, habilidades innatas, entre otros) que pueden influir en el
análisis del desempeño y que por la carencia y limitación de los datos no son incluidos en el
presente estudio.
Los factores de estudio que serán tenidos en cuenta en el ejercicio econométrico están en
correspondencia con la revisión de la literatura, y se sintetizan en la tabla No. 1.
Tabla 1. Factores de estudio que inciden en el desempeño académico en la
educación superior
Categoría Variables Autores
Asociadas al
Estudiante
Factores
Personales
• Edad.
• Género.
Cárdenas y Mora (2014)
Celis et al. (2012)
Escobar y Orduz (2013)
Lavy (2011)
Ricardo et al (2020)
Cellini y Grueso (2021)
Rodríguez et al. (2014)
Torres et al. (2015)
Factores
Familiares y
Socioeconómicos
• Nivel educativo más alto
alcanzado por los padres.
• Estrato socioeconómico del
hogar.
• Condición laboral del
estudiante.
• Bienes de apoyo educativo.
(internet, computador, entre
otros.)
Cárdenas y Mora (2014)
Celis et al. (2012)
Melo et al. (2017)
Cellini y Grueso (2021)
Torres et al. (2015)
Asociadas a la
Institución
Educativa
Factores
Institucionales • Origen de la institución.
(Pública o Privada)
• Modalidad del programa.
(presencial, a distancia y/o
virtual)
• Condición de acreditación en
alta calidad.
• Valor de la matrícula
institucional.
Cárdenas y Mora (2014)
Escobar y Orduz (2013)
Ricardo et al (2020)
Cellini y Grueso (2021)
Rodríguez et al. (2014)
Fuente: Elaboración Propia
11
4. FUENTES DE INFORMACIÓN
Las fuentes de información para este estudio son las bases de datos que proporciona el ICFES y el
SNIES. En primera instancia, el ICFES a partir del Examen de Estado de la Calidad de la
Educación Superior (Saber Pro), evalúa a los estudiantes que están próximos a culminar programas
de pregrado en IES de nivel universitario (requiere la aprobación mínima del 75% de créditos
académicos del programa en curso) en términos de competencias genéricas (según habilidades y
conocimientos generales), y en competencias específicas (de acuerdo con el área de conocimiento
del programa evaluado). En segunda instancia, el SNIES es un sistema que reúne y consolida la
información relevante sobre la educación superior en razón a las características asociadas a las
IES, estudiantes, directivos, docentes, entre otros factores (MEN, s.f).
4.1 Datos
Para la evaluación del desempeño académico de los estudiantes universitarios de programas de
ciencias económicas y administrativas en Colombia bajo modalidad presencial, distancia virtual y
distancia tradicional, se utilizarán los resultados de la prueba Saber Pro aplicada en el año 2019,
así como la información socioeconómica disponible en las bases de datos del ICFES. El estudio
empleará el análisis de las pruebas genéricas. Dichas pruebas permiten analizar y comparar el
desempeño para todas las IES y programas académicos, ya que se evalúan las mismas
competencias a todos los estudiantes: razonamiento cuantitativo lectura crítica; competencias
ciudadanas; inglés y comunicación escrita7.
Con esta información, se construye una base de datos que incorpora la información del SNIES
sobre acreditación en alta calidad y el área de conocimiento del programa de educación superior
evaluado. El SNIES define las áreas de conocimiento como mecanismo de agrupación en los
programas académicos ofertados según la afinidad en los contenidos y los campos específicos del
conocimiento (Núcleo Básico de Conocimiento) (MEN, 2021). Para efectos de un mejor
tratamiento en los datos, el análisis que se presenta en este trabajo se concentra únicamente en
estudiantes de universidades, excluyendo de la base de datos a estudiantes de instituciones
universitarias, instituciones tecnológicas, y técnicas profesionales8. Así mismo, se profundiza en
el área de economía, administración, contaduría y afines, la cual comprende el campo de las
Ciencias Económicas y Administrativas, ya que sobre ésta se concentra la mayor participación y
proporción de evaluados en programas bajo modalidad virtual y a distancia tradicional en el país
(56% del total de evaluados en todas las áreas de conocimiento para ambas modalidades). De
acuerdo con el Observatorio Laboral para la Educación -OLE- (2010) “(…) el área de economía,
administración, contaduría y afines articula profesiones que estudian las relaciones económicas,
comerciales, políticas y sociales en contextos nacionales e internacionales” (p.7). La concentración
Fuente: Cálculos propios. () resultados del modelo ampliado No.2 con interacciones
Los cálculos anteriores denotan que los modelos ampliados realizan un aporte significativo
respecto del modelo nulo, y son más completos en razón a explicar las brechas de desempeño
académico entre modalidades de formación, en la medida que se observa una disminución de la
varianza al incluir las variables del nivel de estudiante e institución educativa para las cinco (5)
pruebas consideradas en el examen Saber Pro. Esto es reflejo de un mejor ajuste, y en relación al
CCI, la inclusión de las variables explicativas en ambos niveles evidencia la disminución de dicho
valor en todas las pruebas; esto significa, que el efecto global que tienen las variables incluidas en
los modelos ampliados causa que la variación entre el desempeño en la prueba explicada por la
varianza entre las instituciones se redujera, lo que indica que las variaciones en el desempeño
dependen ahora en menor medida de las diferencias entre las instituciones (Hox, 2002). Así mismo,
se observa que el porcentaje de varianza explicado por los estudiantes en el modelo es inferior en
todos los casos; esto es reflejo de que el modelo quiere determinar los factores de tipo institucional
asociados con el desempeño académico, lo cual es razonable (Murillo, 2008).
15 La matriz de información (OIM) es la matriz de segundas derivadas generalmente de la función logarítmica de verosimilitud. El estimador OIM del VCE se basa en la teoría asintótica de máxima verosimilitud (Stata multilevel mixed effects reference manual, Release 16).
32
7. DISCUSIÓN DE RESULTADOS
Los resultados obtenidos en los modelos multinivel muestran aspectos relevantes que están en
concordancia con algunos resultados obtenidos por los autores mencionados en la revisión de
literatura. Fundamentalmente, para las competencias que evalúa la prueba Saber Pro, se demuestra
que existen brechas de rendimiento académico entre los estudiantes que cursan programas bajo
modalidades no tradicionales (virtual y a distancia) frente a los que cursan programas bajo la
modalidad tradicional (presencial), solo a excepción de la competencia de comunicación escrita la
cual no es estadísticamente significativa en la modalidad virtual, al igual como fue demostrado en
el paso No.2 de la estimación. En esa línea, la institución o “efecto institucional” explica de manera
importante el desempeño académico en las competencias consideradas.
Precisamente, en cuanto a la metodología de enseñanza, destaca que la modalidad del programa
virtual es estadísticamente significativa para tres (3) de las cinco (5) pruebas (razonamiento al
90%, lectura al 95% e inglés al 99%) en el modelo sin interacciones (No.1); y significativa para
cuatro (4) pruebas (a excepción de comunicación escrita) en el modelo con interacciones (No.2).
Así mismo, la modalidad del programa distancia es significativa para cada una de las cinco (5)
pruebas en los dos modelos. En ambas categorías, los parámetros reflejan un impacto diferencial
negativo, que evidencia la relación de puntajes inferiores en todas las competencias evaluadas de
las alternativas virtual y a distancia respecto de la modalidad presencial. Los efectos de la
modalidad virtual en el modelo No. 1 varía entre 2 y 8 puntos en promedio (siendo el mayor efecto
en la prueba de inglés) y entre 1 y 18 puntos en el modelo No. 2 (siendo el mayor efecto en la
prueba de razonamiento cuantitativo). Esta situación fue esperada dado que los estudiantes de
programas a distancia y virtuales obtuvieron, en promedio, resultados menores que los estudiantes
de programas presenciales según fue detallado en la sección de datos.
Con el fin de analizar la incidencia que tienen los controles incluidos, se presenta a continuación
el análisis por grupo de factores.
A. Factores Personales
En relación de los factores personales, se observa que la variable edad tiene efectos negativos
respecto del desempeño promedio en las cinco (5) pruebas. Así mismo, respecto de la variable
género, se evidencia que el valor de los parámetros para las tres (3) de las cinco (5) pruebas es
negativo (razonamiento, competencias ciudadanas e inglés), lo que refleja que existe una brecha
de género a favor de los hombres en estas competencias. Ambas variables muestran alta
significancia en todas las competencias.
Ahora bien, al detallar el modelo con interacción de factores personales (No.2), se resalta que no
existen diferencias estadísticamente significativas en la variable género para los tipos de
modalidad considerados en cuatro (4) de las cinco (5) pruebas, siendo únicamente en la
competencia de razonamiento cuantitativo la observación de brechas de género a favor de las
33
mujeres para los programas en modalidad virtual. Sabiendo de antemano que una mayor
proporción de mujeres accede a los programas en modalidad virtual, es un hallazgo interesante que
permite inferir que la educación virtual muestra posibilidades potenciales de inclusión de las
mujeres en pro de cerrar las brechas de rendimiento en todas las competencias respecto de los
hombres. Esto está alineado con el estudio descriptivo de Arias et al. (2018), quienes con los
resultados de la prueba Saber Pro del año 2017 analizan el desempeño de mujeres y hombres en la
educación superior presencial, virtual y a distancia, en el cual concluyen que: “(..) las opciones
como la educación a distancia y, especialmente, la educación virtual, podrían estar contribuyendo
a cierres de brechas como las de género” (p.67).
Por el contrario, en la variable edad se observan efectos positivos y significativos para los
estudiantes matriculados en programas bajo modalidad virtual en contraposición de los parámetros
negativos que se evidencian para quienes cursan programas bajo modalidad presencial. Dicho
resultado, ratifica que la matrícula en un programa de tipo virtual mitiga el vínculo negativo y
adverso que se evidencia entre la edad y el desempeño académico de cada competencia evaluada,
lo cual permite concluir que esta modalidad puede favorecer a estudiantes de edades mayores, al
igual que sucede con los programas a distancia en correspondencia con lo hallado por Ricardo et
al. (2020). Vale resaltar que, si un estudiante tiene mayor edad respecto a la media del grupo, esto
puede llegar a afectar negativamente el rendimiento tal como lo muestran los coeficientes. La
condición heterogénea de la población estudiantil manifiesta la necesidad de establecer un modelo
con la interacción en dicha variable (Duff et al., 2004).
B. Factores familiares y socioeconómicos
En torno a los factores familiares, se incluyeron los niveles de educación del padre y de la madre,
como predictores que permiten dar cuenta del nivel socioeconómico del hogar. En estas, se
evidencia una relación positiva respecto de los parámetros. Esto indica, que un mejor desempeño
académico para los estudiantes que cursan programas virtuales y a distancia en las competencias
evaluadas, está asociado a un mayor nivel educativo de los padres, en contraste a la situación en
que estos nos tuvieran ningún tipo de nivel educativo (categoría de referencia). Sin embargo, vale
la pena señalar que, para los modelos estimados un buen número de variables dummy para la
educación de los padres no son significativas. En este sentido, la significancia estadística se resalta
de forma conjunta para la categoría en la cual el padre tiene nivel de educación posgradual para
las cinco (5) pruebas, con efectos positivos entre 3 y 10 puntos en ambas especificaciones; por
ende, esta se considera como posible determinante para obtener un mejor desempeño académico
de los programas no tradicionales respecto de los tradicionales.
Ahora bien, con relación a los factores socioeconómicos, se evidencia significancia y efectos
negativos entre la condición laboral del estudiante y el puntaje para cuatro (4) de las cinco (5)
pruebas (lectura, competencias ciudadanas, inglés y comunicación escrita). Esto fue esperado
debido a que los estudiantes quienes cursan programas bajo modalidad virtual y a distancia, se
encuentran trabajando en una mayor proporción respecto de los que cursan programas
34
presenciales, tal como fue observado en el análisis descriptivo; por tanto, se considera que
disponen de un menor tiempo para atender las responsabilidades académicas y por ende su
desempeño en las pruebas sea menor. Así mismo, la variable estrato resulta ser significativa y con
efectos positivos únicamente para la prueba de inglés en todas las categorías consideradas en un
rango de 3 a 15 puntos, lo que indica que para esta prueba un mejor desempeño está asociado a un
mayor nivel de estratificación respecto del nivel más bajo de referencia (estrato 1).
Finalmente, las categorías de bienes de apoyo educativo (tenencia de computador e internet) son
altamente significativas y muestran una relación positiva en razón al desempeño en todas las
pruebas, lo cual fue esperado dado que en el ámbito educativo actual es fundamental disponer de
dichos bienes para el mejoramiento del rendimiento académico del estudiante.
C. Factores de la institución educativa
Destaca para ambos modelos que la condición de acreditación de la institución es significativa
para todas las pruebas y correlacionada positivamente con un mejor desempeño en las mismas. Es
decir, que los estudiantes de las instituciones que tienen acreditación de alta calidad obtienen un
mayor puntaje en cada una de la cinco (5) pruebas. Los resultados indican, que las instituciones
con acreditación de calidad presentan resultados en promedio de 8 puntos por encima de las
instituciones no acreditadas. Se considera en esta variable, la de mayor aporte respecto de los
efectos institucionales que contribuyen en la explicación de la diferencia de resultados entre
modalidades de enseñanza. Este resultado no es comparable, puesto que ninguno de los estudios
referenciados utiliza esta variable como predictor de segundo nivel.
En cuanto a la variable origen de la institución (pública/privada), se observa que el tipo de
institución no es significativo para la prueba de inglés y comunicación escrita en ambos modelos.
En contraste, para las pruebas de razonamiento, lectura y competencias ciudadanas se observa una
relación positiva en cuanto al desempeño de la prueba si el tipo de institución es de carácter oficial
o público, lo que significa que los estudiantes de este tipo de instituciones tienen un desempeño
mayor que los estudiantes de instituciones privadas en un promedio de 5 puntos. Dicho resultado,
está en relación con lo hallado por Cellini y Grueso (2021), quienes infieren que los estudiantes de
programas virtuales obtienen resultados inferiores especialmente en instituciones de carácter
privado.
Finalmente, en cuanto a la variable de valor de matrícula, el aspecto más relevante se observa en
la significancia y parámetros negativos para la categoría del valor de matrícula que señala “menos
de 500 mil” en cuatro (4) de las cinco (5) pruebas (a excepción de comunicación escrita). Esto
indica, que los estudiantes que cursan programas cuyo valor de matrícula este en dicho rango
obtienen en promedio un menor desempeño en las pruebas.
35
8. CONCLUSIONES
En el contexto de la educación superior en Colombia, este trabajo encuentra que los estudiantes de
programas universitarios en Ciencias Económicas y Administrativas, que se forman en modalidad
virtual, obtienen un menor desempeño en las competencias de razonamiento cuantitativo, lectura
crítica, inglés y competencias ciudadanas que aquellos que cursan programas presenciales. Este
hallazgo no es comparable con ningún estudio, en la medida que esta investigación es la primera
en evaluar y comparar el impacto de las modalidades de formación para los estudiantes de Ciencias
Económicas a partir los resultados de las competencias que evalúa la prueba de Estado Saber Pro
de conformidad con la metodología aplicada.
Los resultados empíricos más relevantes que se pueden resaltar son: 1) la educación virtual tiene
efectos positivos en la posibilidad de cerrar las brechas de aprendizaje entre estudiantes de mayor
edad; 2) existe una brecha de género a favor de los hombres en el rendimiento académico en la
mayoría de competencias; sin embargo, se demuestra que la educación virtual tiene a futuro
posibilidades potenciales de cerrar las brechas de rendimiento al mostrar relaciones positivas en la
prueba de razonamiento cuantitativo para las mujeres; 3) la tenencia de bienes educativos
(computador e internet) es fundamental en la obtención de un mejor desempeño académico; 4) la
formación posgradual para el nivel educativo del padre, resulta como único determinante conjunto
para todas la competencias en la obtención un mejor desempeño académico de los programas no
tradicionales respecto de los tradicionales; 5) acorde a lo esperado, los estudiantes que trabajan
durante su periodo de formación obtienen resultados inferiores respecto de los que no trabajan; 6)
la institución o el “efecto institución” explica de manera importante el rendimiento académico
universitario, siendo en la condición de acreditación el factor más significativo y que se relaciona
de forma positiva con la obtención de un mejor desempeño para todas las competencias
consideradas; y 7) los estudiantes que cursan programas virtuales en instituciones de carácter
público obtienen resultados superiores respecto a las de carácter privado.
Algunas apreciaciones desde el ámbito de la política educativa pueden ser sugeridas de acuerdo
con los resultados obtenidos. En primer lugar, es indudable que actualmente el crecimiento de la
oferta y demanda de la educación virtual es un aspecto de alta relevancia en la educación superior
en Colombia, y se posibilita como aspecto positivo que fundamenta las opciones de acceso
educativo a territorios con baja participación y cobertura. Sin embargo, se requiere enfatizar en su
situación actual y alcance a futuro en términos de calidad y eficiencia, al considerar que la
deserción en estos programas es muy alta, lo cual representa una oportunidad en la ampliación de
la investigación con la indagación de los posibles causantes de esta problemática. En segundo
lugar, la virtualidad no solo supone y propone para las IES retos importantes en materia de
inversión en infraestructura tecnológica, sino que resulta indispensable que la política de
acreditación se centre en mayor medida en estos programas con el fin mejorar paulatinamente su
calidad. En Colombia, solo el 1.2% de los programas de tipo virtual tienen acreditación en alta
calidad (MEN, 2019); por lo cual, es fundamental en el corto y mediano plazo para este tipo de
36
programas, fortalecer los mecanismos que propendan por el mejoramiento de los diseños
curriculares y estrategias pedagógicas.
En materia estatal, los retos no son menos importantes al observar que en muchas regiones del país
no se tiene la forma de aplicar a la educación virtual al existir limitaciones y carencias en recursos
tecnológicos, fundamentado en que más de un millón de personas en zonas rurales no cuentan con
acceso a internet (LEE,2020). Es por ello, que los desafíos de esta modalidad de formación no solo
se traducen en cambios a los modelos de enseñanza y aprendizaje para las instituciones, sino
también sobre la necesidad de eliminar barreras tecnológicas, geográficas, y sociales.
Es importante reconocer la limitación que tiene este trabajo en algunos aspectos. En primera
instancia, los resultados de las estimaciones son válidos únicamente para la población de estudio
del área de las Ciencias Económicas y Administrativas. Este estudio se puede expandir a futuro en
la medida que se amplíe la oferta y cantidad de evaluados de programas en modalidad virtual para
otras áreas de conocimiento. En segunda instancia, el estudio se puede ampliar incluyendo datos
para las instituciones técnicas profesionales, instituciones tecnológicas e instituciones
universitarias en cuanto estas puedan incursionar en mayor proporción en la oferta de programas
virtuales.
9. REFERENCIAS
Ahumada, V. D. R., Gamboa, M. C., y Guerrero, J. H. (2019). Calidad de la educación superior en
Colombia: Eficacia de algunos programas académicos presenciales y a distancia en las pruebas
Saber Pro. Libros Universidad Nacional Abierta y a Distancia, 1 - 257. Recuperado de