Tasa de aplicación de la capacitación en IA en el trabajo · Medición del efecto de la capacitación en IA
On-the-Job Application Rate of AI Training
¿Qué es la tasa de aplicación de la capacitación en IA en el trabajo?
- Se cuenta lo que se usa, no lo que se escuchó
- Cruzar encuestas y registros; medir a partir de la cuarta semana
- Primero se distingue si la causa de una tasa baja es la capacitación o el entorno
Al empezar a medir la tasa de aplicación de la capacitación en IA en el trabajo, cambia el orden del diseño de la capacitación. Cuando el responsable sabe que debe reportar la tasa de aplicación, define antes de armar el curso «qué van a hacer estas personas después de la capacitación», y los cursos que no tienen respuesta a esa pregunta ya no se abren. Que una capacitación con 4.5 puntos de satisfacción y otra con 20% de aplicación al mes después puedan ser el mismo curso es el punto de partida que revelan los números. Si se cuenta con estos datos en la temporada de planificación de octubre para el año siguiente, qué cursos ampliar y cuáles cerrar se decide mucho más rápido que con una tabla de satisfacción.
La medición suele combinar tres fuentes. La primera es una encuesta personal 4 a 8 semanas después de la capacitación que pregunta «si usó algo de lo aprendido en su trabajo, qué fue y cuántas veces por semana». La segunda son los registros del administrador del servicio de IA, que comparan por persona el número de accesos y solicitudes de las 4 semanas anteriores y posteriores a la capacitación. La tercera es la evidencia de resultados: el jefe de equipo verifica si se hizo la tarea anotada en el plan de aplicación. Cruzar la encuesta personal con los registros y contar como aplicadores a quienes respondieron que lo usan y además aparecen en el registro es lo más sólido para defender el dato. El momento de medir debe ser 4 semanas después, no justo al terminar la capacitación, porque la encuesta de la semana siguiente casi siempre da resultados altos por el efecto de la memoria reciente.
La tasa de aplicación no refleja solo los problemas de la capacitación. Aunque el curso sea el mismo, la tasa baja en los departamentos sin licencias asignadas, en los que el jefe de equipo ve con malos ojos el uso de la IA y en los que la política de seguridad no permite ninguna herramienta. Para acertar con la siguiente medida hay que separar las variables de la capacitación de las del entorno. Si la causa de una tasa baja es el entorno, lo primero es asignar licencias o convencer al jefe de equipo, y no rediseñar la capacitación. Si se pide un plan de aplicación en el trabajo antes de la capacitación y en clase se practica con esa tarea, la tasa de aplicación suele subir de forma notable.
Lo que más suele salir mal en la práctica es usar la tasa de aplicación tal cual en la evaluación de los instructores. Si se le atribuye responsabilidad al instructor sin descontar las variables del entorno, el instructor enseñará en adelante solo contenidos superficiales que sean fáciles de usar. Otro error es cambiar las preguntas de la encuesta para aflojar los criterios y subir la tasa de aplicación. Si se cuenta como aplicación haber probado algo alguna vez, el número llega al 90%, pero no dice nada. Conviene fijar el criterio en algo como «usar al menos una vez por semana en productos de trabajo» y repetir las mismas preguntas cada año para poder leer la tendencia. Cerrar de inmediato un curso con baja tasa de aplicación también es precipitado: una reunión con el jefe de equipo en las cuatro semanas posteriores a la capacitación suele bastar para que la tasa de ese mismo curso cambie.
John KimAutor de «Diseño del marketing B2B» y CEO de Nanum Consultoría. Instructor.
Seolyeong ParkEspecialista en IA generativa y AX, con 17 años de experiencia práctica y más de 200 sesiones de enseñanza, que logra que personas sin formación técnica la usen de inmediatoEs la aplicación a la capacitación en IA del nivel 3, «Comportamiento» (Behavior), dentro del modelo de evaluación en cuatro niveles de Kirkpatrick: si la conducta cambió en el trabajo después de la capacitación. Como la IA deja registros del uso de sus herramientas, es más fácil verificar objetivamente el cambio de conducta que en la capacitación tradicional, por eso se consolidó rápido en la práctica.
Veamos un caso hipotético. La filial de venta de seguros A, con 1,500 colaboradores, impartió este año la capacitación introductoria en IA a todo el personal en 12 sesiones y obtuvo una satisfacción de 4.6 puntos. Sin embargo, el responsable de capacitación no supo responder a la pregunta «¿Entonces lo están usando?» en la revisión presupuestaria del año siguiente. Quedaban 4 sesiones.
- El jefe de equipo Seo, del área de capacitación, pidió a partir de las 4 sesiones restantes un plan de aplicación en el trabajo dos semanas antes de cada capacitación, en el que cada participante anotara «1 tarea que realizará en las 4 semanas posteriores a la capacitación», y cambió las prácticas en clase para que girasen en torno a esa tarea.
- El criterio de aplicación se fijó como «uso en productos de trabajo al menos una vez por semana». Cinco semanas después de la capacitación se cruzaron la encuesta personal con los registros de administración, y solo se contó como aplicadores a quienes cumplían ambas condiciones.
- Las 8 sesiones anteriores tuvieron una tasa de aplicación del 23% y las 4 sesiones rediseñadas, del 51%, pero el personal de ventas de sucursales obtuvo un nivel bajo en ambos grupos. El director de ventas respondió: “Las sucursales todavía no tienen licencias”, lo que reveló que la causa no era la capacitación.
- El jefe de equipo Seo presentó en el informe de tasa de aplicación separando las variables de la capacitación y las del entorno, y anexó a la propuesta presupuestaria la asignación de licencias a las sucursales y una reunión con el jefe de equipo como condiciones para la operación de la capacitación del año siguiente.
- En la revisión presupuestaria se aprobó reducir la capacitación introductoria de 12 a 8 sesiones y, con esos recursos, crear 6 sesiones de capacitación avanzada centradas en tareas de aplicación. La tasa de aplicación del primer semestre del año siguiente se registró en un promedio del 47% en toda la empresa.