Autores: IPB, UFABC.

El proyecto EMBRACE ha impulsado un crecimiento institucional significativo, la transformación digital y la colaboración internacional entre sus instituciones asociadas. La evaluación de la calidad y el impacto se ha llevado a cabo a lo largo del proyecto en las fases críticas (al inicio, al finalizar el Paquete de Trabajo 2 y al finalizar el proyecto completo) de acuerdo con los criterios y dimensiones de evaluación (véase la Figura 1 a continuación) indicados en el Plan de Calidad del Entregable D1.2. El proceso de evaluación ha sido diseñado, dirigido y analizado por el Responsable de Calidad y su equipo en UFABC.

Figura 1. Dimensiones de la evaluación de la calidad del Plan de Calidad (ilustración realizada por UFABC)

La evaluación de la calidad y el impacto del proyecto EMBRACE se llevó a cabo entre mayo de 2023 y febrero de 2026. El análisis final de los resultados empleó un enfoque de métodos mixtos, basado en la teoría, para evaluar el impacto en cinco Paquetes de Trabajo (PT).

Métodos de Evaluación de la Calidad

El proyecto utilizó un marco analítico de cuatro niveles para garantizar la triangulación científica y la validez interna en la recopilación de datos (véase la Figura 2 a continuación):

Análisis estadístico cuantitativo: Se utilizaron encuestas con escala Likert procesadas mediante R y Alteryx para medir la intensidad y la estabilidad de las percepciones.
Análisis cualitativo de contenido (Bardin): Se identificaron categorías de aprendizaje institucional y la saturación de las prácticas operativas.
Análisis cualitativo del discurso (Foucault): Se examinaron los “regímenes de verdad” y cómo el proyecto reconfiguró las identidades profesionales y las relaciones de poder institucionales.
Análisis asistido por IA: Se utilizó como capa de confirmación para detectar regularidades semánticas y reducir el sesgo del analista tras la codificación humana.

Figura 2. Herramientas de recopilación de datos (ilustración realizada por UFABC)

Estos métodos se integraron en estrategias de evaluación más amplias, que incluyen el Análisis de Contribución, la Evaluación Realista (ECM), un Índice de Institucionalización, el Análisis de Redes y el Retorno Social de la Inversión (RSI).

Impacto general del proyecto

El proyecto EMBRACE transformó las instituciones asociadas, pasando de iniciativas digitales fragmentadas a ecosistemas integrados de educación digital.

Valor socioinstitucional: El modelo SROI estima que el proyecto generó entre 3,8 y 4,6 euros de valor por cada euro invertido, siendo el WP2 (capital humano) el principal impulsor de valor.
Transformación sistémica: En su nivel más alto (Nivel 4 de la Pirámide de Impacto), el proyecto logró la normalización cultural, donde la innovación digital, el aseguramiento de la calidad y la rendición de cuentas se internalizan como misiones institucionales permanentes, en lugar de objetivos temporales del proyecto.
Sinergia transfronteriza: El proyecto aprovechó con éxito las asimetrías, con socios finlandeses y portugueses que sirvieron como referentes metodológicos para instituciones brasileñas y colombianas.

A pesar de limitaciones como la dependencia de datos autoinformados y la falta de un grupo de control, la evaluación concluye que EMBRACE contribuyó de manera plausible y sustancial a un cambio cultural duradero en la forma en que las universidades asociadas abordan la educación superior digital.

Impacto por paquete de trabajo

La evaluación identificó roles e impactos distintos para cada paquete de trabajo, sintetizados en un “Panel de Impacto Maestro”:

WP1: Gestión y Garantía de Calidad (Ancla Estructural): Mostró consistentemente un alto nivel de satisfacción (88 % de acuerdo en la eficacia de la comunicación). Evolucionó de una coordinación procedimental a una rutina de gobernanza consolidada, transformando la mentalidad institucional de la “coordinación como problema” a la “coordinación como gobernanza”. Además, la cultura de calidad se internalizó en las instituciones asociadas.
WP2: Competencias Digitales del Docente (Motor de Transformación): Este fue el eje de mayor impacto individual del proyecto y el Motor de Transformación (Competencias Digitales). La competencia digital aumentó un 92 %, y para el desarrollo de entornos virtuales de aprendizaje (EVA) pasó del 75 % a más del 90 %. El docente cambió su identidad de “usuarios de herramientas” a “diseñadores de entornos de aprendizaje”.
WP3: Gestión Educativa (Incubadora Estratégica): Caracterizado como un “eje de impacto retardado”, mostró resultados tangibles inmediatos menores, pero un alto valor estratégico. Proporcionó conocimientos sobre transformación, ayudando a los directivos a sensibilizarse sobre su papel en el cambio institucional y a aprender de diferentes sistemas de gobernanza internacionales, incluso cuando las reformas estructurales inmediatas se veían limitadas por la burocracia local. El cambio estructural continúa.
WP4: Colaboración Educación-Industria (Integrador de Ecosistemas): Fortaleció los efectos del ecosistema mediante puentes de aprendizaje aplicado y alianzas (84 % de efectividad). Amplió con éxito la red de aprendizaje más allá del ámbito académico, aumentando la empleabilidad de los estudiantes en un 88 %.
WP5: Impacto y Difusión (Facilitador de Visibilidad): Logró un alto rendimiento en la difusión (81 % de efectividad) y un cumplimiento del 100 % con el Acceso Abierto. Los socios cambiaron la mentalidad de considerar la difusión como una tarea a considerarla una responsabilidad institucional. Sin embargo, su sostenibilidad a largo plazo se considera condicional, dependiendo en gran medida de la gobernanza y los recursos posteriores al proyecto.

Impacto en las instituciones asociadas

El proyecto EMBRACE logró resultados cuantificables en todas las instituciones asociadas, como lo demuestran las cifras indicativas presentadas en sus informes de impacto durante el Seminario Final de EMBRACE, celebrado el 27 de febrero de 2026 en São Paulo, Brasil. La siguiente tabla de datos destaca estos impactos cuantitativos específicos:

Institución asociada	Principales impactos y cifras indicativas
Universidad Federal do ABC (UFABC)	Desarrollo de capacidades: 22 miembros del personal participaron en programas piloto de MOOC, y otros 22 recibieron capacitación en pedagogía innovadora, representando a 9 de los 34 programas de pregrado. Compromiso estratégico: Se enviaron 110 invitaciones a coordinadores de pregrado para la sensibilización de gerentes, lo que resultó en la asistencia de 9 gerentes clave a talleres intensivos. Impacto directo en el aprendizaje: 60 estudiantes participaron en experiencias del mundo real con 10 profesionales de 6 socios externos. Creación de redes: Se establecieron 4 nuevos acuerdos internacionales y se llevaron a cabo 21 actividades de difusión.
Instituto Federal do Espírito Santo (Ifes)	Transformación digital: Se capacitó a 43 profesores en competencia pedagógica digital y se desarrollaron 3 MOOC trilingües (portugués, inglés y español). Conexiones con el mundo laboral: Dos importantes eventos de “Conexión” contaron con la participación de 15 ingenieros de Vale y 6 representantes de Unimed, involucrando a un total de 49 profesores y 19 estudiantes de diversos campus. Resultados de investigación: Se publicaron 8 artículos web y se organizaron 3 eventos importantes.
Instituto Federal de São Paulo (IFSP)	Participación estudiantil: 250 estudiantes participaron en proyectos de cocreación utilizando métodos de aprendizaje centrados en el estudiante y basados en competencias, con el objetivo de reducir el abandono escolar. Expansión institucional: Se difundieron modelos de colaboración entre la industria y las instituciones de educación superior a más de 100 instituciones a nivel nacional a través de las redes CONIF y ABED.
Universidad Tecnológica de Pereira (UTP)	Capacitación del profesorado: Aproximadamente 30 profesores reforzaron sus habilidades digitales y pedagógicas mediante la implementación de cursos online masivos y abiertos (MOOC) y recibieron más de 150 horas de formación. Impacto local: Las aplicaciones prácticas de IA a través de las asignaturas optativas “SinergIA” tuvieron un impacto directo en importantes entidades locales, como Frisby y hospitales regionales.
Polytechnic Institute of Bragança (IPB)	Internacionalización del ecosistema: Recibimos delegaciones de tres instituciones asociadas (UTP, Areandina e Ifes) y dos profesores visitantes del IFSP y la UTP. Investigación colaborativa: Lanzamos un proyecto de investigación conjunto con Areandina y establecimos un convenio de prácticas para la cooperación en el ámbito laboral.
Areandina	Desarrollo de recursos: Creé 8 infografías trilingües (Relaciones comerciales, Pensamiento computacional, etc.) para apoyar la educación digital. Investigación internacional: Participé en visitas de delegación a la IPB y colaboré en un proyecto de investigación conjunto.
Häme University of Applied Sciences (HAMK)	Intercambio de conocimientos: Se publicaron dos artículos de investigación en la revista HAMK Unlimited Journal que detallan las comunidades de aprendizaje profesional y el desarrollo de MOOCs culturalmente relevantes. Integración pedagógica: Se planea integrar los MOOCs EMBRACE y las insignias digitales en los programas pedagógicos existentes de HAMK, especialmente en el contexto de proyectos globales de formación docente.

Tabla 1. Impacto en las instituciones asociadas

Estas cifras demuestran cómo el proyecto pasó de los marcos teóricos iniciales a aplicaciones prácticas que impactaron directamente a cientos de estudiantes, docentes y socios profesionales externos en cuatro países. Puede consultar las presentaciones de impacto de cada institución asociada del Seminario Final de EMBRACE aquí. Además de estos resultados institucionales específicos, el proyecto facilitó una red transnacional más amplia, permitiendo el intercambio de buenas prácticas en gestión universitaria y educación digital, y fortaleciendo los vínculos entre el mundo académico y el ámbito laboral global. Asimismo, a través de la red, los socios ya han puesto en marcha varios proyectos nuevos, programas de movilidad, programas conjuntos y otras actividades de colaboración.

Para ver el informe completo de evaluación de calidad, puede dar clic en este enlace.