Cómo la detección de fraude dio origen a Johnny y Julia: una historia de ejercicio en el navegador
Google/DeepMind
Un desarrollador de I+D en Biorg convirtió su función de seguimiento facial anti-fraude en un juego de ejercicio de cuello basado en navegador con dos instructores de dibujos animados, Johnny y Julia. El juego rastrea los movimientos faciales mediante MediaPipe, cuenta la sincronización y se adapta a dispositivos móviles. El proyecto es de uso gratuito, con música opcional.
Albert Stepanyan, un desarrollador de I+D en Biorg, creó un juego de ejercicios para el cuello basado en navegador después de darse cuenta de que la tecnología de seguimiento facial utilizada en su sistema de identificación de video antifraude podría funcionar también como rastreador de movimiento. El juego, llamado 'Johnny and Julia', utiliza la librería MediaPipe Face Mesh para detectar puntos clave faciales y calcular los ángulos de rotación de la cabeza en tiempo real. Los usuarios realizan 30 movimientos generados aleatoriamente, siguiendo a un instructor en pantalla (Johnny para hombres, Julia para mujeres, con el género detectado mediante face-api.js). El sistema puntúa la sincronización del usuario comparando los tiempos de movimiento esperados con los retrasos reales, produciendo una puntuación porcentual con comentarios alentadores. El desarrollador inicialmente enfrentó problemas de compatibilidad móvil, resueltos detectando dispositivos móviles mediante la orientación del dispositivo y eventos táctiles en lugar del tamaño de pantalla. La interfaz se adapta a las orientaciones vertical y horizontal, con las ventanas del usuario y del instructor posicionadas en consecuencia. La reproducción de música se añadió tras observar que algunos usuarios se movían más rítmicamente con música de fondo; la pista seleccionada tiene un tempo de alrededor de 140 BPM. Toda la librería de seguimiento está alojada localmente para evitar dependencias externas, y el proyecto es de acceso libre.
Fuente: Habr — хаб ML —
original
