Tiêu chuẩn GOST đầu tiên của Nga về phát triển phần mềm AI an toàn bắt đầu thảo luận công khai

Проект стандарта ГОСТ Р «Защита информации. Разработка безопасного программного обеспечения, реализующего технологии искусственного интеллекта. Общие требования» разработан ФСТЭК России, Институтом системного программирования РАН (ИСП РАН) и Сбером. Общественное обсуждение продлится до 17 сентября 2026 года. В отличие от ГОСТ Р 71539-2024, который охватывает всю систему ИИ, данный стандарт фокусируется именно на программном обеспечении в её составе, дополняя базовый стандарт безопасной разработки ГОСТ Р 56939-2024. Он определяет «ПО ИИ» как совокупность, включающую модель ИИ и её веса, взаимодействующее ПО, среду выполнения, расширяющее ПО (например, RAG, вызовы инструментов) и опционально обучающее ПО. Модели классифицируются как собственные, заимствованные (с исходным кодом/весами или подтверждением соответствия от разработчика) или привлеченные (используемые только при разработке). Стандарт вводит новую терминологию: «механизмы ограничения поведения модели ИИ», «дрейф данных» и «паспорт модели ИИ». В нём перечислено 27 процессов: 10 типовых, 15 модифицированных и 2 полностью специфических (управление наборами данных и безопасное обучение моделей ИИ). Управление наборами данных требует перекрестной разметки, рассматривает угрозы, такие как отравление данных и утечка, и включает правила для федеративного обучения. Безопасное обучение предписывает, что инфраструктура должна располагаться на территории России и запрещает привлечение иностранных подрядчиков. Моделирование угроз должно учитывать базу угроз ФСТЭК, OWASP Top-10 для LLM и ML, MITRE ATT&CK/ATLAS и NIST adversarial ML. Требования безопасности включают происхождение данных, запрещённые классы результатов и маркировку контента. Тестирование должно включать устойчивость к состязательным атакам, таким как инъекции промптов и извлечение данных. Стандарт требует паспорт модели ИИ и машиночитаемый список компонентов для цепочек поставок. Требования к локализации инфраструктуры обучения безусловны, а для хранения данных зависят от критичности системы. Стандарт явно исключает вопросы этики и предвзятости.