Capacitación masiva: medir aprendizaje real

Una cifra grande tiene fuerza política y comunicacional. Trescientas mil personas inscritas, cien mil certificados emitidos o miles de horas impartidas transmiten movimiento, alcance y capacidad de convocatoria. Son datos importantes. El problema comienza cuando se presentan como si también demostraran aprendizaje. No lo hacen. Una iniciativa puede llegar a muchas personas y ofrecer una experiencia valiosa sin saber todavía cuántas desarrollaron la competencia esperada, quiénes lograron aplicarla o qué barreras dejaron fuera a parte de la población. También puede ocurrir lo contrario: un programa pequeño puede producir aprendizajes profundos, pero no alcanzar la escala necesaria para responder a una necesidad pública. La discusión, entonces, no debería enfrentar cobertura y calidad. Debería evitar que una sustituya a la otra. Capacitar a 300 mil personas sería un logro de acceso; probar que aprendieron exige otra evidencia. La cifra de cobertura responde una sola pregunta Cuando una institución informa el número de personas alcanzadas, responde una pregunta legítima: ¿hasta dónde llegó la oferta? Esa cifra puede revelar capacidad de despliegue, demanda y apertura de oportunidades. En territorios o grupos históricamente excluidos, ampliar el acceso es un resultado que merece atención. Pero “alcanzada” puede significar cosas muy distintas: alguien que vio una convocatoria, creó una cuenta, se matriculó, abrió una unidad, asistió a una sesión o completó todo el itinerario. Si esas categorías se mezclan, el número crece mientras su significado se vuelve más débil. Por eso conviene construir un embudo transparente: población a la que se quería llegar; personas que recibieron la invitación; personas inscritas; participantes que iniciaron y se mantuvieron activos; participantes que finalizaron; participantes que demostraron la competencia; participantes que la aplicaron en un contexto real; resultados que se sostuvieron después. Cada tramo muestra una dimensión diferente. Una caída entre inscripción e inicio puede indicar problemas de comunicación o acceso. Una caída durante el curso puede revelar falta de tiempo, conectividad, apoyos o pertinencia. Una finalización alta con poco dominio puede cuestionar la exigencia de la evaluación. Y un buen desempeño final sin aplicación posterior puede señalar que el entorno no ofrece condiciones para transferir lo aprendido. Terminar un curso tampoco equivale a dominar una competencia La finalización acredita recorrido; no necesariamente dominio. Depende de qué se exigió para completar: ¿bastó con reproducir videos?, ¿se respondió un cuestionario?, ¿hubo que resolver una tarea auténtica?, ¿se observó el desempeño con criterios comunes? En capacitación digital, la ambigüedad es especialmente riesgosa. “Aprender inteligencia artificial”, “dominar herramientas digitales” o “formarse en nube” pueden abarcar desde reconocer conceptos hasta configurar un servicio, resolver un problema de datos o integrar una herramienta en la docencia. Sin una definición previa, cualquier certificado parece hablar de la misma competencia, aunque las experiencias sean incomparables. El marco DigComp 3.0 de la Comisión Europea ofrece una referencia útil porque organiza la competencia digital en áreas y niveles de dominio. No resuelve automáticamente el diseño de un curso, pero obliga a precisar algo básico: qué podrá hacer la persona, con qué autonomía, ante qué tipo de problema y con qué estándar. La evaluación debe derivarse de esa definición. Si el objetivo es aplicar una herramienta en el trabajo, un test de conceptos aporta información limitada. Conviene observar una tarea, revisar un producto, simular una situación o pedir que la persona explique las decisiones adoptadas. La evidencia debe parecerse al aprendizaje prometido. Satisfacción, aprendizaje y transferencia son cosas distintas Preguntar si el curso gustó sirve. Una mala experiencia puede anticipar abandono y entregar pistas para mejorar contenidos, plataforma o facilitación. Sin embargo, satisfacción no es aprendizaje. Una actividad exigente puede generar incomodidad y producir avances; otra muy entretenida puede dejar pocos cambios verificables. Un test al finalizar tampoco cuenta toda la historia. Puede mostrar comprensión o ejecución inmediata, pero no si el desempeño se mantendrá ni si la persona logrará usarlo fuera del entorno protegido del curso. La transferencia ocurre cuando lo aprendido se aplica en la práctica. Depende del participante, pero también del contexto: acceso a herramientas, tiempo, apoyo de jefaturas, oportunidades de uso, retroalimentación y compatibilidad con los procesos de la organización. La revisión meta-analítica de Blume, Ford, Baldwin y Huang sobre transferencia de la capacitación muestra precisamente que el paso desde aprender hasta desempeñarse en otro contexto no puede darse por supuesto. Esto cambia la pregunta evaluativa. Ya no basta con “¿aprobó?”. También importa “¿tuvo una oportunidad real de aplicar?”, “¿qué apoyo encontró?” y “¿qué cambió en su práctica?”. Un tablero que no confunda actividad con resultado Un convenio de capacitación a gran escala puede organizar su evaluación en seis dimensiones complementarias. 1. Alcance y participación ¿Cuántas personas elegibles fueron alcanzadas, se inscribieron, iniciaron, permanecieron y finalizaron? ¿Cuánto tiempo participaron realmente? Estos datos describen cobertura y funcionamiento, no aprendizaje. 2. Competencia demostrada ¿Qué podía hacer la persona antes y qué puede hacer después? La comparación requiere instrumentos alineados con los objetivos, criterios explícitos y tareas suficientemente cercanas al uso real. Cuando sea posible, una medición inicial ayuda a no atribuir al curso conocimientos que ya existían. 3. Transferencia ¿La competencia se utilizó semanas o meses después? Puede observarse mediante productos de trabajo, portafolios, registros de uso pertinentes, evaluación de desempeño o entrevistas trianguladas. Los autoinformes son útiles, pero resultan más sólidos cuando se combinan con otras evidencias. 4. Resultados ¿Qué mejoró gracias —o con la contribución— de la capacitación? Según el programa, podría tratarse de calidad de una tarea, reducción de errores, autonomía, tiempo de resolución, innovación docente, continuidad de estudios o movilidad laboral. El indicador debe guardar relación con el propósito; no todo curso puede ni debe prometer empleo o productividad. 5. Equidad ¿Quiénes accedieron y quiénes quedaron fuera? ¿Las brechas aparecen en inscripción, permanencia, aprobación, aprendizaje o transferencia? El análisis puede considerar territorio, género, edad, discapacidad, conectividad, nivel educativo, situación laboral u otras variables pertinentes. Debe hacerse con protección de datos y evitando convertir categorías sociales en explicaciones automáticas. 6. Sostenibilidad y costo ¿Cuánto costó alcanzar a una persona, lograr que finalizara, demostrar competencia y conseguir transferencia? El costo por inscrito puede parecer bajo mientras el costo por resultado significativo es alto. También importa saber si la capacidad queda instalada, si los contenidos se actualizan y si el programa depende indefinidamente de un proveedor. Este tablero evita buscar un único número mágico. Permite reconocer que una iniciativa puede tener gran alcance y, al mismo tiempo, una transferencia todavía débil; o mostrar aprendizaje sólido con problemas de equidad que exigen rediseño. No toda evaluación necesita un experimento, pero sí honestidad Medir aprendizaje es distinto de demostrar causalidad. Si quienes completan un curso mejoran su empleo, no puede asumirse automáticamente que el programa produjo el cambio. Tal vez ya tenían más motivación, experiencia, conectividad o redes que quienes no participaron. Quizás cambió el mercado laboral o recibieron otros apoyos al mismo tiempo. Para preguntas de alto impacto —por ejemplo, decidir si un programa público debe escalarse— puede ser necesario construir grupos de comparación, aprovechar una implementación gradual o aplicar métodos cuasiexperimentales. En otros casos bastará con una evaluación de proceso, una medición antes y después, tareas de desempeño y seguimiento cualitativo. La regla razonable es la proporcionalidad: mientras más costosa, extensa o decisiva sea la iniciativa, mayor debe ser la exigencia de evidencia. Cuando el diseño no permite atribuir un efecto, corresponde hablar de contribución , describir las limitaciones y considerar explicaciones alternativas. La honestidad metodológica informa mejor que una cifra contundente pero frágil. El informe Quality Matters de la OCDE sitúa el aseguramiento de la calidad de la educación y formación de adultos en una combinación de estándares, información, monitoreo y mejora. La evaluación no debería llegar al final como auditoría decorativa; debe influir desde el diseño en objetivos, instrumentos, datos y responsabilidades. Diseñar desde la evidencia que se necesitará La mejor evaluación comienza antes del primer inscrito. Quienes financian, diseñan e imparten el programa deberían acordar desde el inicio: el problema que buscan resolver; la población prioritaria y las barreras previsibles; las competencias observables; los criterios mínimos de logro; los momentos de medición; las condiciones para aplicar lo aprendido; los datos que se recogerán y su protección; las decisiones que se tomarán con los resultados. Esta última pregunta es crucial. Medir solo tiene sentido si alguien está dispuesto a actuar. Un dato de abandono debería permitir ajustar tiempos o apoyos. Una brecha territorial, revisar conectividad y acompañamiento. Una baja transferencia, intervenir el entorno de aplicación. Una competencia ya dominada al inicio, rediseñar la focalización o reconocer aprendizajes previos. La advertencia del Informe GEM de UNESCO sobre tecnología en educación también resulta pertinente: la tecnología debe ponerse al servicio del aprendizaje y evaluarse en su contexto, no adoptarse por la fascinación de la escala o la novedad. En capacitación masiva, la plataforma es infraestructura; el resultado educativo sigue siendo lo que las personas logran comprender, hacer y sostener. De celebrar volumen a construir capacidad No hay nada menor en llegar a miles de personas. La escala puede democratizar oportunidades, reducir costos y responder con rapidez a cambios tecnológicos. Pero el número de participantes debe conservar su nombre correcto: es evidencia de alcance. El éxito aparece cuando ese alcance se conecta con aprendizaje demostrable, aplicación, equidad y mejora sostenida. Para lograrlo, instituciones de educación superior, organismos públicos, empresas y proveedores necesitan compartir responsabilidades. Quien ofrece la plataforma no puede definir por sí solo el aprendizaje; quien convoca no debería limitarse a contar certificados; y quien financia necesita pedir evidencia útil sin imponer una burocracia desproporcionada. Capacitar a 300 mil personas puede ser el comienzo de una historia relevante. La parte difícil —y educativa— viene después: saber qué aprendieron, quiénes pudieron usarlo, qué cambió y qué debe corregirse antes de volver a escalar. Seguir aprendiendo a distinguir actividad, resultado e impacto también forma parte de la innovación. Regístrate gratis en InnovacionAcademica.org y participa en una comunidad interesada en fortalecer la educación continua, la evaluación y la transformación educativa con evidencia. Fuentes consultadas OECD. (2024). Quality Matters: Strengthening the Quality Assurance of Adult Education and Training. European Commission, Joint Research Centre. DigComp 3.0. UNESCO. (2023). Global Education Monitoring Report: Technology in education—A tool on whose terms? Blume, B. D., Ford, J. K., Baldwin, T. T. y Huang, J. L. (2010). Transfer of Training: A Meta-Analytic Review. Journal of Management, 36(4), 1065–1105.