Thư ký AI của TrueConf học cách tách giọng nói của người nói trong điều kiện âm thanh khó khăn

Công ty công nghệ thông tin Nga TrueConf đã giới thiệu phiên bản mới của trợ lý thư ký AI dành cho doanh nghiệp, có khả năng phân biệt giọng nói của từng người tham gia hội nghị truyền hình trong bản tóm tắt cuối cùng, ngay cả khi xử lý âm thanh bị trộn lẫn. Công nghệ mới cho phép tạo các báo cáo như vậy từ bất kỳ bản ghi âm hoặc video nào, bao gồm cả những bản ghi được thực hiện trên các giải pháp giao tiếp khác. Trước đó, TrueConf đã tích hợp các tính năng thông minh vào ứng dụng trên máy tính và điện thoại thông minh, bao gồm: khử tiếng ồn chủ động (active noise reduction), nền ảo (virtual background), lớp phủ người nói (speaker overlay) và lấy nét khuôn mặt (face focus). Vào tháng 10 năm 2024, công ty đã ra mắt TrueConf AI Server — một trợ lý thư ký AI hoạt động cục bộ (on-premise), phục vụ việc chuyển văn bản (transcription) và tóm tắt cuộc họp trên quy mô lớn mà không truyền dữ liệu tới máy chủ của bên thứ ba. Một thách thức lớn trong việc chuyển văn bản từ hội nghị truyền hình là mỗi người tham gia cần có một luồng âm thanh riêng; nếu người tham gia ở trong không gian mở hoặc dùng chung microphone, các thuật toán sẽ trộn lời nói của họ thành một khối duy nhất. Trợ lý thư ký AI hiện đã học được cách tách riêng từng giọng nói và gán các phát biểu tương ứng trong bản tóm tắt; người dùng chỉ cần đặt tên cho những người nói được phát hiện. Nhu cầu sử dụng công nghệ này đến từ các khách hàng trong lĩnh vực dầu khí, các công ty nhà nước và các ủy ban điều hành tổ chức những cuộc họp lớn. Quá trình phát triển tính năng này mất khoảng bốn tháng. Tính năng mới hỗ trợ mọi loại file âm thanh và video, kể cả từ các hệ thống của bên thứ ba, giúp TrueConf AI Server trở thành một công cụ chuyển văn bản và tóm tắt toàn diện. Phiên bản 1.1 cũng bổ sung chức năng tìm kiếm toàn văn (full-text search) trong các bản ghi và cho phép tùy chỉnh câu lệnh (prompt) để tạo bản tóm tắt linh hoạt, chẳng hạn như các quyết định chính, nhiệm vụ, thời hạn và báo cáo có cấu trúc. TrueConf AI Server đảm bảo rằng các bản ghi văn bản được tạo ra bởi các mô hình cục bộ trong một hệ thống khép kín của khách hàng, không cho phép nhân viên hay quản trị viên của công ty truy cập vào dữ liệu đó.