오픈AI는 8일(현지 시각) 최신 비공개 AI 모델이 ‘나비에-스토크스 존재성과 매끄러움 문제’의 해법을 찾았다며 165쪽 분량의 증명을 공개했다. 사진은 오픈AI 로고 이미지. /조선DB
오픈AI 로고 이미지./조선DB

오픈AI와 구글, 마이크로소프트(MS) 등 주요 인공지능(AI) 기업이 웹사이트 운영자가 AI 학습용 자료 수집을 한 번에 거부할 수 있는 공통 표준을 지원하기로 했다고 31일(현지시각) 밝혔다.

지금까지 운영자는 'robots.txt' 파일에 기업별 크롤링 봇을 하나씩 차단하고, 새 봇이 나올 때마다 이를 반영해야 했다. 표준이 적용되면 'AI 학습용 수집 거부' 설정만으로 일괄 차단이 가능하다. 검색엔진 노출용 크롤링은 허용하면서 AI 학습용 수집만 막는 것도 가능해진다.

이번 표준은 국제인터넷표준화기구(IETF)의 논의 결과를 따른 것이다. 앤트로픽은 이미 이를 도입해 시행 중이며, 구글과 MS는 내년부터, 오픈AI는 수개월 안에 적용할 방침이다. 메타는 앤디 스톤 커뮤니케이션 총괄이 엑스(X·옛 트위터)를 통해 조치의 중요성을 언급했지만, 동참 여부는 밝히지 않았다.

이번 조치는 주요 언론사와 출판계가 AI 학습용 무단 수집에 반발해 소송을 이어가는 가운데 나왔다.

오픈AI는 이번 조치를 "개방형 웹을 향한 실용적인 발걸음"이라고 평가했다. MS는 빙(Bing) 블로그에서 "웹사이트 운영자는 빙에서 자신의 콘텐츠가 검색되도록 하는 것과 생성형 모델이 자신의 저작물을 어떻게 활용할지 결정하는 것 사이에서 선택을 강요받아서는 안 된다"고 밝혔다.