생성형 AI가 웹 콘텐츠를 무단으로 긁어가 학습과 답변 생성에 활용하면서, 트래픽과 광고에 의존하던 퍼블리셔들이 수익 위기에 몰렸다. Cloudflare의 Monetization Gateway는 이 구조를 뒤집으려는 시도다. 전 세계 웹의 약 20%를 처리하는 인프라를 지렛대 삼아, 사이트 소유자가 AI 봇을 단순 차단하는 데 그치지 않고 '크롤당 과금(Pay Per Crawl)' 방식으로 요금을 매길 수 있게 한다. 핵심 장치는 오래 잠들어 있던 HTTP 402 'Payment Required' 응답 코드다. AI 크롤러가 콘텐츠를 요청하면 서버가 가격을 제시하고, 지불하지 않으면 접근이 막힌다. Cloudflare가 중개자로서 인증과 결제를 대신 처리해, 개별 협상 없이도 수많은 퍼블리셔와 AI 기업을 연결하는 일종의 마켓플레이스를 만든다. '트래픽 기반 광고'라는 웹의 오랜 수익 모델이 흔들리는 시대에, 콘텐츠 그 자체에 값을 매기는 새 시장을 여는 실험인 셈이다. 국내 미디어·커머스 업계도 AI 스크래핑 대응과 데이터 수익화 전략을 진지하게 고민해야 할 시점이다.