인터넷 아카이브 차단은 AI 학습을 막지 못한다 — 웹의 기억을 지워버릴 것이다

인터넷 아카이브 차단은 AI 학습을 막지 못한다 — 웹의 기억을 지워버릴 것이다

주요 출판사들이 인터넷 아카이브의 크롤러를 차단하기 시작했으며, 가장 두드러진 사례는 전통적인 robots.txt 제어를 넘어 웨이백 머신이 자사 페이지를 캡처하고 보존하지 못하도록 조치한 뉴욕 타임스입니다. 인터넷 아카이브는 웨이백 머신을 운영하며 일조 조단이 넘는 보관 페이지를 보유한 웹상 최대의 디지털 도서관으로, 기자·역사가·법원·일반 대중이 매일 사용하는 연구 도구입니다. 비영리 아카이브 크롤러에 대한 접근을 차단함으로써 출판사들은 편집·수정·철회 등 실시간 웹에서는 사라지는 변화들을 포함해 뉴스가 온라인에 어떻게 나타났는지에 대한 유일한 일관된 공개 기록을 파괴할 위험을 감수하게 됩니다.

출판사들은 이러한 조치가 대형 언어 모델과 다른 시스템을 학습시키기 위해 뉴스 콘텐츠를 스크래핑하는 AI 기업들에 대한 경고에 대한 대응이라고 주장하며, 여러 언론 기관이 AI 학습에 사용된 저작물의 이용을 둘러싸고 소송을 제기했습니다. 법원이 궁극적으로 출판사 손을 들어줘도, 역사를 보존하는 기관들로부터 아카이브 접근을 제거하는 것은 과도한 대응입니다. 인터넷 아카이브는 상업적 AI 학습자가 아니며, 보존과 발견을 위해 복사본을 만드는 도서관과 더 유사한 기능을 합니다. 도서관과 아카이브가 연구·접근·공익 목적을 위해 복제할 때 저작권법상 달리 취급되어 온 점을 고려하면, 광범위한 기술적 차단의 부수적 피해는 보고와 공론이 어떻게 진화했는지를 이해하기 위해 많은 이들이 의존하는 증거 기록의 점진적 상실입니다.

아카이브가 뉴스를 보존할 수 있는 능력을 제거하면 AI 학습 데이터에 대한 즉각적인 분쟁을 훨씬 넘어서는 장기적 비용을 초래합니다. 기자들은 과거 주장을 출처 확인하고 검증할 안정적인 자료를 잃게 되고, 연구자들은 미디어의 장기적 연구에서 공백을 마주하게 되며, 법원은 당시에 게시된 온라인 간행물의 동시대 기록을 갖지 못할 수 있습니다. 기술적 장벽을 세우는 대신 출판사와 아카이브는 상업적 이익을 보호하면서도 공개 기록을 지우지 않는 표적화된 합의안을 모색해야 합니다.

주요 시사점

• 역사 기록의 위험: 아카이브 크롤러 차단은 많은 뉴스 페이지의 유일한 독립적 스냅샷을 제거합니다.
• 잘못된 해결책: 기술적 차단은 상업적 모델 제작자가 아니라 비영리 보존 기관을 겨냥합니다.
• 법적·정책적 마찰: AI 학습을 둘러싼 진행 중인 소송들이 접근 규범을 결정할 수 있으나, 중간에 발생하는 아카이브 손실은 돌이킬 수 없습니다.
• 해결책 필요: 협상된 접근, 선택적 보류(embargo), 법적 명확화가 권리와 보존의 균형을 맞출 수 있습니다.

항상 연결 상태를 유지하고 안전하게 브라우징하려면 Doppler VPN을 이용하세요.

출처:

• eff.org