Shippy가 알려준 운영 작업을 위한 신뢰할 수 있는 AI 에이전트 구축 방법

Ai2의 Skylight 팀은 실시간 해상 영역 인식(maritime domain awareness)을 위한 AI 에이전트 Shippy를 구축했으며, 안정성에 중점을 두고 있습니다. Shippy는 세 부분으로 구성됩니다: 영혼(soul, 시스템 프롬프트), 스킬(skills, 작업을 지정하는 마크다운 파일들), 그리고 설정(config, 런타임 설정). 스킬은 Claude Code와 Codex에서 사용하는 에이전트 스킬 명세(agent-skills spec)를 따르는 일반 마크다운 파일입니다. Shippy는 API를 직접 호출하는 대신, 인증, 페이지네이션 및 구조화된 출력을 처리하는 특수 목적의 CLI(Skylight CLI)를 사용합니다. 사용자 세션은 Mothership을 통해 격리되며, 세션별로 전용 쿠버네티스 배포(Kubernetes deployment)를 프로비저닝합니다. 평가 시스템은 주제 전문가(subject-matter experts)가 시나리오와 루브릭을 작성하고, LLM 판정관(LLM judge)이 실시간 데이터를 기반으로 에이전트를 평가합니다. Shippy는 현재 LLM으로 Claude Opus 4.6을 사용합니다. 향후 계획에는 에이전트 주도 UI 제어, 모델 라우팅, 그리고 스레드 간 메모리(cross-thread memory) 등이 포함됩니다.