TrueConf AI 비서, 까다로운 음향 조건에서 화자 목소리 분리 기능 탑재

러시아 IT 기업 TrueConf가 혼합 오디오로 작업할 때도 최종 요약본에서 화상회의 참가자들의 음성을 분리할 수 있는 기업용 AI 비서의 새 버전을 공개했다. 이 신기술을 이용하면 다른 커뮤니케이션 솔루션에서 제작된 것을 포함해 어떤 오디오·영상 녹음에서도 이러한 보고서를 생성할 수 있다. 이전에 TrueConf는 PC 및 스마트폰 애플리케이션(application)에 능동 잡음 제거, 가상 배경, 발화자 오버레이, 얼굴 포커스 등의 스마트 기능을 통합한 바 있다. 2024년 10월, 회사는 대량 전사(transcription) 및 회의 요약을 위한 온프레미스(on-premise) AI 비서인 TrueConf AI Server를 선보였는데, 이는 로컬 환경에서 작동하며 제3자 서버로 데이터를 전송하지 않는다. 화상회의 전사 작업의 주요 난제는 각 참가자마다 개별 오디오 스트림이 필요하다는 점이다. 참가자들이 개방형 공간에 있거나 마이크를 공유하는 경우, 알고리즘이 발화 내용을 하나의 블록으로 뒤섞어버린다. 이제 AI 비서는 음성을 분리하고 요약본에서 해당 발언을 각 화자에게 배정하는 법을 학습했다. 사용자는 감지된 화자의 이름만 지정해주면 된다. 이러한 수요는 석유·가스 업계 고객사, 국영기업, 대규모 회의를 진행하는 집행위원회 등에서 나오고 있다. 개발에는 약 4개월이 소요됐다. 이 기능은 제3자 시스템에서 만들어진 파일을 포함해 어떤 오디오·영상 파일도 지원하므로, TrueConf AI Server를 범용 전사 및 요약 도구로 만들어준다. 버전 1.1에는 전사 기록 전체에 대한 전문(全文) 검색 기능과, 핵심 결정사항, 과제, 마감기한, 구조화된 보고서 등 유연한 요약 작성을 위한 맞춤형 프롬프트(prompt) 기능도 추가됐다. TrueConf AI Server는 회사 직원이나 관리자의 접근이 차단된 고객사 전용 폐쇄망 내에서 로컬 모델에 의해 전사 기록이 생성되도록 보장한다.