Como a Detecção de Fraude Deu Origem a Johnny e Julia: Uma História de Exercício no Navegador
Google/DeepMind
Um desenvolvedor de pesquisa e desenvolvimento na Biorg transformou seu recurso de rastreamento facial anti-fraude em um jogo de exercício para o pescoço baseado em navegador, com dois instrutores de desenho animado, Johnny e Julia. O jogo rastreia movimentos faciais via MediaPipe, conta a sincronização e se adapta a dispositivos móveis. O projeto é gratuito para uso, com música opcional.
Albert Stepanyan, um desenvolvedor de P&D da Biorg, criou um jogo de exercícios para o pescoço baseado em navegador depois de perceber que a tecnologia de rastreamento facial usada em seu sistema de identificação antifraude por vídeo poderia funcionar como um rastreador de movimento. O jogo, chamado 'Johnny and Julia', usa a biblioteca MediaPipe Face Mesh para detectar pontos-chave faciais e calcular ângulos de rotação da cabeça em tempo real. Os usuários realizam 30 movimentos gerados aleatoriamente, seguindo um instrutor na tela (Johnny para homens, Julia para mulheres, com o gênero detectado via face-api.js). O sistema pontua a sincronização do usuário comparando os tempos de movimento esperados com os atrasos reais, produzindo uma pontuação percentual com feedback encorajador. O desenvolvedor inicialmente enfrentou problemas de compatibilidade com dispositivos móveis, resolvidos detectando dispositivos móveis por orientação do dispositivo e eventos de toque, em vez do tamanho da tela. A interface se adapta às orientações vertical e horizontal, com as janelas do usuário e do instrutor posicionadas de acordo. A reprodução de música foi adicionada após observar que alguns usuários se moviam mais ritmicamente com música de fundo; a faixa selecionada tem um andamento em torno de 140 BPM. Toda a biblioteca de rastreamento é hospedada localmente para evitar dependências externas, e o projeto é acessível gratuitamente.
Fonte: Habr — хаб ML —
original
