Liang Wenfeng, 지속적 학습 능력을 AI의 약점으로 지목하다. DeepSeek는 이 문제를 어떻게 해결할까?

DeepSeek의 CEO인 Liang Wenfeng은 현대 인공지능 시스템의 주요 문제 중 하나가 지속적인 학습 능력의 부족이라고 지적했습니다. 새로운 정보를 지속적으로 흡수하는 인간과 달리, 대부분의 AI 모델은 훈련 단계 이후 정적인 상태를 유지하며, 완전히 재훈련하지 않고는 새로운 데이터에 적응할 수 없습니다. DeepSeek은 기존에 습득한 지식을 유지하면서도 새로운 데이터에 효과적으로 미세 조정할 수 있는 알고리즘을 개발하여 이 문제를 해결하는 데 주력하고 있습니다. 여기에는 catastrophic forgetting을 방지하는 정규화 기법과 점진적 학습을 용이하게 하는 아키텍처 솔루션이 포함됩니다. 이러한 접근 방식은 AI 시스템을 장기적으로 더 유연하고 관련성 있게 만들어, 뉴스 피드나 과학 출판물 분석과 같이 지속적인 지식 업데이트가 필요한 작업에 특히 중요합니다.