Los pilotos de formación inmersiva rara vez fracasan por la tecnología. Fracasan en la reunión de presupuesto dieciocho meses después, cuando alguien pregunta cuál fue el retorno y la respuesta es una puntuación de satisfacción y una diapositiva de gente con gafas puestas pareciendo interesada.
El interés es real, y no es un argumento. Todo comité de presupuesto ha visto un piloto interesante que no cambió nada. Cualquier empresa de desarrollo de RA y RV que entrega un programa sin un diseño de evaluación ha entregado un proyecto que se cancelará en su primera revisión seria, por buena que sea la simulación.
Las métricas que no sobreviven al escrutinio
Tres aparecen en casi todas las presentaciones y ninguna sostendrá una decisión de financiación.
- Puntuaciones de satisfacción. Los alumnos disfrutan de la RV porque es novedosa. La novedad decae, y el disfrute nunca estuvo correlacionado con la competencia de todos modos.
- Tasas de finalización. Miden si la gente terminó, lo que sobre todo mide si era obligatorio.
- Tiempo con las gafas puestas. Una métrica de pura actividad. Más minutos no es más aprendizaje, y un director financiero lo dirá.
El fallo común es que las tres miden la formación en lugar del trabajo. Nadie financia formación. Financian resultados que se supone que la formación produce.
Empieza por el coste del error que estás previniendo
La formación inmersiva se gana su sobreprecio en exactamente una situación: cuando el procedimiento es caro de equivocar y caro de practicar. Si falta cualquiera de las dos mitades, un vídeo y una lista de comprobación batirán a la RV en coste cada vez, y deberías decirlo en lugar de vender unas gafas.
Así que el análisis empieza antes del desarrollo, cuantificando el error. ¿Con qué frecuencia ocurre, y qué cuesta una ocurrencia: en tiempo de parada, retrabajo, material desechado, incidente de seguridad o puesta en marcha retrasada? Ese número es el techo de lo que el programa puede valer como mucho, y merece la pena conocerlo antes de comprometerse a construir nada.
También termina con frecuencia la conversación pronto, lo cual es un buen resultado. Un procedimiento realizado dos veces al año con un coste de fallo de 400 € no justifica una simulación, por bien que se viera la demo.
Cuatro medidas que aguantan
- Tiempo hasta la competencia. ¿Cuánto tarda de la primera exposición al visto bueno independiente, comparado con el método existente? Suele ser el ahorro mayor y más defendible, porque las horas de formador y los salarios de los aprendices ya están en una partida presupuestaria que alguien posee.
- Tasa de error en el trabajo real. Sigue los errores concretos a los que apunta la simulación, para cohortes formadas frente a no formadas, durante los primeros 90 días en el puesto. Este es el número que convence a operaciones.
- Equipo y tiempo de parada evitados. Formar en una línea de producción real tiene un coste de oportunidad que operaciones suele poder cuantificar con precisión. La simulación lo elimina.
- Retención a los 90 días. Reevalúa la competencia un trimestre después. La ventaja genuina de la formación inmersiva sobre la impartición en aula tiende a aparecer aquí en lugar de inmediatamente después, y saltarse esta medición renuncia al resultado más fuerte.
Si no puedes nombrar el error concreto que estás previniendo y lo que cuesta una instancia, no estás midiendo el ROI. Estás recogiendo tranquilidad.
Diseña la comparación antes de construir
El error de evaluación más común es medir solo al grupo formado. Su tasa de error baja, y no significa nada sin una comparación: el proceso puede haber mejorado, la cohorte de entrada puede haber sido más fuerte, la temporada puede diferir.
Rara vez necesitas un ensayo aleatorizado. Un despliegue escalonado suele bastar y es más fácil de aprobar: una sede o turno adopta la simulación mientras una comparable continúa como antes, y luego intercambian. Obtienes un grupo de comparación sin negarle a nadie la formación de forma permanente, que normalmente es la objeción que mata un grupo de control.
Captura la línea base antes de que lleguen las primeras gafas. Las líneas base retrospectivas siempre se discuten, y la discusión es inganable porque los datos no se recogieron para ese propósito. Dos semanas de medición previa protegen la inversión entera.
Instrumenta la propia simulación
Una simulación puede registrar lo que un aula no puede: no solo si alguien completó un procedimiento, sino dónde dudó, qué paso repitió, en qué orden trabajó, y qué errores cometió antes de autocorregirse.
Merece la pena incorporarlo desde el principio, por dos razones. Te da datos de competencia mucho más ricos que una nota de aprobado, y te dice qué partes del procedimiento son de verdad difíciles, lo que con frecuencia mejora el propio procedimiento, o el diseño físico del equipo. Varios programas que hemos entregado produjeron más valor de ese hallazgo que de la formación.
Liga cada evento registrado a un objetivo de formación con nombre. La telemetría que no está mapeada a un objetivo se convierte en un gran conjunto de datos que nadie analiza.
Qué contiene un caso de negocio defendible
Una página: el error concreto, su frecuencia y coste unitario, la línea base de tiempo hasta la competencia, la mejora proyectada con su evidencia, el coste total del programa incluida la renovación de hardware y el mantenimiento de escenarios, y el periodo de amortización. Luego el plan de medición que lo confirmará o refutará, con fechas.
Incluye los costes continuos con honestidad. Las gafas se sustituyen, los procedimientos cambian, y los escenarios necesitan mantenimiento. Los programas que omiten esto parecen excelentes en el año uno y se cancelan en el año tres cuando el coste real de operación aflora en una revisión para la que nadie se preparó.
