사이버보안에서 AI의 다섯 가지 역할: 공격 가속기에서 주요 표적까지
Ростелеком
Positive Technologies
이 글은 AI가 사이버보안에서 수행하는 다섯 가지 역할(공격 가속기, 손상된 어시스턴트, 유출 경로, 방패, 직접 표적)을 탐구합니다. 생성형 AI가 공격 비용을 낮추고, 에이전트를 통해 새로운 공격 표면을 도입하며, 모델 외부의 결정론적 제어가 필요함을 강조합니다.
Rostelecom, Positive Technologies 및 FMBA의 세 명의 사이버 보안 전문가가 작성한 이 기사는 사이버 보안에서 AI의 다섯 가지 역할을 살펴봅니다. 첫째, AI는 소셜 엔지니어링, 코드 생성, 논리 형성의 비용을 낮춰 공격을 가속화합니다. 둘째, 감염된 엔드포인트에서 손상된 어시스턴트는 데이터를 유출하거나, 작업을 수행하거나, 평판을 손상시키거나, 리소스를 소모하거나, 컨텍스트를 오염시킬 수 있습니다. 셋째, 유출은 종종 과도한 권한, 풍부한 컨텍스트 또는 약한 출력 검사에서 비롯됩니다. 넷째, AI는 방패 역할을 하여 이벤트를 분류하고 조사를 초안할 수 있지만 최종 결정을 내려서는 안 됩니다. 다섯째, 직접적인 대상으로서 AI는 프롬프트 인젝션, 오염된 소스 및 안전하지 않은 출력 처리에 취약하며, 특히 에이전시(agency)가 있을 때 더욱 그렇습니다. 저자들은 시스템 프롬프트는 보안 잠금 장치가 아니며, 정책 엔진, 역할 기반 액세스 제어(RBAC) 및 승인 단계와 같은 결정론적 제어가 필수적이라고 주장합니다.
출처: Habr — хаб ИИ —
원문
