AI 개발자, 학습용으로 중고 서적 대량 구매 후 폐기

AI 개발자들은 인터넷에 넘쳐나는 저품질 AI 생성 콘텐츠를 피하기 위해 중개업체를 통해 수백만 권의 중고 서적을 구매하여 고품질 학습 데이터셋을 구축하고 있습니다. Anthropic은 Claude 학습을 위해 대량의 인쇄된 책을 디지털화하는 데 수백만 달러를 지출한 후, Better World Books에서 구매한 책들을 폐기했습니다. 법원은 이 사용이 공정 사용에 해당한다고 판결했지만, Anthropic은 700만 권의 불법 복제 전자책 라이브러리로 인해 최대 15억 달러의 벌금을 부과받을 위험에 처해 있습니다. Google 역시 불법적으로 획득한 책 복사본을 Gemini 학습에 사용한 혐의로 유사한 소송에 직면했습니다. 1억 1100만 권의 도서가 카탈로그화된 ISBNdb 데이터베이스는 현재 AI 개발자들을 위한 도매 구매 서비스를 제공하며, 거래당 수천에서 수백만 권의 주문을 처리합니다. Anthropic의 Project Panama에 참여했던 Tom Harvey는 디지털화 과정에서 비파괴 스캔 방식과 파괴 스캔 방식이 모두 사용되며, 후자가 더 저렴하고 빠르지만 수백만 권의 책을 폐기한다고 확인했습니다. 이러한 관행은 희귀하거나 가치 있는 도서를 유통에서 제거하고, 스캔된 콘텐츠에 대한 공공 접근을 제한한다는 윤리적 우려를 제기합니다.