
웹사이트 운영자가 자신의 글과 이미지를 AI 학습에 쓰지 말라는 뜻을 한 번에 표시할 수 있도록, 주요 AI 기업들이 공통 신호를 지원하기로 했습니다.
지금까지는 회사마다 다른 크롤러 이름과 설정을 확인해야 했습니다. 새 제안은 웹사이트의 robots.txt 파일에 공통된 선택을 적어 두고, 참여 기업들이 같은 뜻으로 읽도록 만드는 것이 핵심입니다.
🚫 회사마다 달랐던 거부 방법을 하나로
웹사이트는 robots.txt로 검색엔진이나 AI 수집 프로그램의 접근 범위를 알립니다. 하지만 서비스마다 크롤러 이름과 목적이 달라, 검색 노출은 유지하고 AI 학습만 막으려면 여러 규칙을 따로 적어야 했습니다.
OpenAI와 구글이 공개한 제안은 ‘AI 학습에 사용할 수 있는가’라는 선택을 공통 신호로 표현합니다. 마이크로소프트와 앤트로픽 등도 참여 기업으로 이름을 올렸습니다. 사이트 운영자는 회사별 규칙을 하나씩 적는 대신, 같은 의사를 한 번에 전달하게 됩니다.
새 신호가 정착하면 작은 출판사와 개인 블로그, 이미지 아카이브의 관리 부담이 줄어듭니다. 검색 결과에는 페이지를 남기고, 모델 훈련에는 쓰지 말라는 선택을 따로 표시할 수 있습니다.

🧩 검색 차단과 AI 학습 거부는 다르다
검색엔진의 접근 자체를 막으면 검색 결과에서 빠질 수 있습니다. 새 신호는 검색 접근을 열어 둔 채 모델 학습만 거부하도록 두 용도를 나눕니다. 기존 크롤러 차단 규칙은 그대로 유지됩니다.
다만 이 신호는 참여 기업이 자발적으로 따르는 약속입니다. 모든 AI 기업과 데이터 수집업체에 강제되지 않고, 이미 수집된 자료도 자동으로 삭제하지 않습니다. 회원 전용 콘텐츠, 검색 공개, AI 답변의 인용처럼 다른 이용 범위는 사이트가 별도로 관리해야 합니다.
예를 들어 기사 페이지는 검색엔진에 열어 두면서 모델 학습에는 쓰지 못하게 할 수 있습니다. 반대로 회원 전용 자료는 검색과 학습 모두 막는 기존 규칙이 필요합니다. 공통 신호는 이런 정책을 대신 정해 주는 기능이 아니라, 사이트가 정한 학습 방침을 여러 기업에 같은 말로 전달하는 수단입니다.
🌐 웹의 선택권을 표준으로 만들 수 있을까
현재 제안은 참여 기업이 자발적으로 읽는 신호입니다. 사이트가 거부 의사를 표시해도 모든 AI 업체가 따르는 것은 아니며, 이미 수집된 데이터도 자동으로 지워지지 않습니다. OpenAI와 구글은 웹 생태계와 표준화 기구의 의견을 받아 문구와 적용 범위를 다듬겠다고 밝혔습니다.
웹 콘텐츠는 검색 결과, AI 답변의 인용, 모델 학습처럼 서로 다른 용도로 쓰입니다. 새 신호는 이 가운데 학습 여부를 따로 표시하려는 장치입니다. 글·사진·댓글의 권리 관계가 서로 다르다면 사이트 운영자는 콘텐츠 종류별 공개 기준도 함께 정해야 합니다.
기업이 공개할 정보도 남아 있습니다. 적용 시작일과 대상 서비스·모델, 기존 데이터의 처리 방식, 신호가 지켜지지 않았을 때 연락할 창구입니다. 이 정보가 없으면 운영자는 설정이 실제로 반영됐는지 확인하기 어렵습니다.
표준화가 진행되더라도 기업마다 적용 시점이나 해석이 달라지면 운영자는 다시 사업자별 문서를 확인해야 합니다. OpenAI와 구글이 웹 생태계와 표준화 기구의 의견을 받겠다고 밝힌 이유도 같은 문구를 같은 범위에 적용하기 위해서입니다.
플랫폼 이용자의 선택과 사이트 운영자가 보낸 신호가 엇갈리는 경우도 생깁니다. 블로그 작성자는 학습을 허용했지만 플랫폼이 막거나, 반대 상황이 생길 수 있습니다. 공개 게시물의 학습 여부를 누가 결정할지는 이번 제안만으로 정해지지 않았습니다.
같은 사이트 안에서도 기사와 사진, 댓글의 권리자가 다를 수 있습니다. 운영자는 어떤 콘텐츠에 같은 규칙을 적용할지 먼저 구분해야 합니다. 여러 사람이 글을 올리는 플랫폼이라면 사이트 전체 방침과 작성자 개인의 선택을 함께 다룰 기준도 필요합니다. 참여 기업 목록과 실제 적용일도 계속 확인해야 하며, 각 기업이 공개한 적용 문서도 함께 살펴야 합니다. 신호를 보냈는데도 학습에 쓰인 정황이 있다면 이를 알리고 수정할 절차가 필요합니다.

D.Flick Note
이번 변화로 AI 학습 논쟁은 선언에서 웹의 기본 설정으로 옮겨갑니다. 다만 운영자가 보낸 신호와 기업이 반영한 결과를 함께 확인할 수 있어야 공통 표준이 신뢰를 얻습니다.
출처
용어 풀이
- robots.txt*: 자동 수집 프로그램이 사이트의 어느 영역에 접근할 수 있는지 알리는 파일
- 크롤러*: 웹페이지를 자동으로 방문하고 정보를 수집하는 프로그램