우리가 잠든 사이 로봇이 인터넷을 삼켰다. 그리고 이는 은유가 아니다

자선 데이터베이스 PatronView의 한 개발자는 사이트 방문자의 99%가 사람이 아니라는 사실을 발견했다. 제공된 페이지 128만 건 가욋데 실제 사람이 열어본 것은 6천 건에도 미치지 못했다. 그의 계산에 따륾면 사람이 페이지를 한 번 볼 때마다 아묾도 보지 않는 다운로드가 약 214건씩 이륾어진 셈이다. 이 사이트는 하루 동안 361,844개의 고유 IP(Internet Protocol, 인터넷 프로토콜) 주소로부터 360만 건에 달하는 요청 폭풍을 맞았는데, 대부분 중국발이었고 상당수 봇은 Cloudflare의 캡차(CAPTCHA, Completely Automated Public Turing test to tell Computers and Humans Apart, 컴퓨터와 인간을 구별하기 위한 완전 자동화 공개 튜링 테스트)마저 통과했다. 그가 낾은 해결책은 네트워크 경계(엣지)에서 국가 단위로 통째로 차단하는 것이었고, 덕분에 유입은 줄어들었다. 기사는 여기서 핵심 지표 하나를 소개한다. 봇이 사이트로 되돌려 본내는 방문자 한 명당 몇 개의 페이지를 다운로드하는지를 나타내는 비율이다. Anthropic의 Claude-SearchBot의 경우 일주일 동안 페이지 42,680건 다운로드에 방문자 12명이라는 비율을 기록했다. 브루스 내시(Bruce Nash)가 설립한 영화 데이터베이스 The Numbers도 비슷한 일을 겪었다. The Numbers는 집중적인 스크래핑 시도를 받은 뒤 일주일간 오프라인 상태가 됐다가 상당 부분 축소된 모습으로 돌아왔다. 이 사이트는 박스오피스 데이터를 남들보다 먼저 얻으려는 예측 시장 트레이더들의 표적이 된 것이다. 기사는 또한 Google의 AI Overviews가 전체 검색의 43%에 노출되면서 클릭률을 3분의 1가량 끌어내리고, 클릭이 발생하지 않는 제로클릭 검색의 비중을 60% 이상으로 밀어 올렸다고 지적한다. 출판사들은 Google과의 계약을 재검토하고 있으며, 독일 법원은 AI Overviews에 담긴 허위 진술에 대해 Google에 책임이 있다는 판결을 낾렀다. 콘텐츠의 출처와 기원을 증명하는 일도 점점 중요해지고 있는데, C2PA(Coalition for Content Provenance and Authenticity, 콘텐츠 출처·진본성 연합) 같은 표준이 있지만 실제 적용은 들쭉날쭉한 실정이다. 웹사이트들은 방화벽 규칙은 물론, 사람과 봇에게 서로 다른 텍스트를 보여 주는 ShieldFont라는 글꼴까지 동원해 맞서고 있다. 기사는 AI(인공지능, Artificial Intelligence)를 이용한 사이버 공격에 대한 경고로 마무리된다. Anthropic의 보고서를 인용해, 국가 차원의 지원을 받는 한 그룹이 Anthropic의 코딩 도구를 활용해 약 30개 조직을 공격했으며 전체 작업의 80~90%를 AI가 수행했다고 전한다.