영화 데이터에 관심 있는 분들이라면 The-Numbers.com이라는 사이트를 한 번쯤 보셨을 거예요. 1997년부터 운영된, 전 세계 영화의 박스오피스 성적과 제작비, 수익 데이터를 모아둔 사이트거든요. 거의 30년 가까이 꾸준히 데이터를 쌓아온, 인터넷에서 보기 드문 장수 사이트예요. 기자들이 기사를 쓸 때도, 연구자들이 논문을 쓸 때도, 영화 업계 사람들이 투자 판단을 할 때도 참고하는 사실상의 공공재였죠. 그런데 영화 산업 분석가 스티븐 폴로우스가 최근 이 사이트에 벌어진 일을 분석하면서 "이건 우리 모두가 걱정해야 할 문제"라고 경고하는 글을 썼어요.
무슨 일이 있었냐면
핵심은 검색 유입의 붕괴예요. 이런 데이터 사이트는 대부분의 방문자가 구글 검색을 통해 들어오거든요. "영화 A 제작비", "영화 B 흥행 성적" 같은 걸 검색하면 The-Numbers가 상위에 뜨고, 사람들이 클릭해서 들어오고, 그 트래픽이 광고 수익이 되어 사이트 운영을 지탱하는 구조였어요. 그런데 검색 엔진이 AI 요약 답변을 검색 결과 맨 위에 보여주기 시작하면서 이 구조가 무너지고 있어요. 이게 뭐냐면, 사용자가 검색했을 때 AI가 여러 사이트의 내용을 긁어모아 요약한 답을 바로 보여주는 기능이에요. 답의 재료는 The-Numbers 같은 사이트에서 왔는데, 정작 사용자는 그 사이트를 방문할 필요가 없어진 거죠. 클릭이 사라지니 광고 수익도 사라지고, 수십 년 운영된 사이트의 존립 자체가 흔들리게 된 거예요.
웹의 암묵적 계약이 깨지고 있어요
지난 25년 동안 웹은 일종의 거래로 굴러왔거든요. 사이트 운영자는 콘텐츠를 무료로 공개하고, 검색 엔진은 그 콘텐츠를 색인하는 대신 방문자를 보내주고, 운영자는 그 방문자로 수익을 내는 구조요. 그런데 AI 요약 답변은 이 고리의 중간을 끊어버려요. 콘텐츠는 가져가는데 방문자는 돌려주지 않는, 이른바 '제로 클릭' 현상이에요.
여기서 진짜 문제가 시작되는데요. 데이터는 저절로 생기는 게 아니거든요. 박스오피스 숫자는 매일 누군가가 수집하고, 검증하고, 오류를 고치고, 과거 데이터와 연결해줘야 해요. 그 일을 하던 사람의 수익원이 끊기면 데이터 갱신도 멈춰요. 그러면 AI가 요약해서 보여줄 원본 데이터 자체가 낡거나 사라지는 거죠. 비유하자면, 마을 사람들이 우물물은 계속 퍼가는데 우물을 관리하던 사람의 월급은 아무도 안 주는 상황이에요. 당장은 물이 나오지만, 언젠가 우물이 말라버리는 거죠.
업계는 어떻게 움직이고 있나
이 문제를 인식한 움직임도 있긴 해요. 클라우드플레어는 AI 크롤러가 콘텐츠를 가져갈 때 비용을 내게 하는 방식을 실험하고 있고, 대형 언론사들은 AI 회사들과 콘텐츠 라이선스 계약을 맺거나, 반대로 무단 학습에 대해 소송을 걸고 있어요. 레딧처럼 데이터 접근권 자체를 팔아서 큰 수익을 내는 곳도 있고요. 그런데 이런 협상은 대형 플랫폼과 언론사 이야기예요. 한 명이나 소수의 팀이 운영하는 전문 데이터 사이트는 협상 테이블에 앉을 힘 자체가 없거든요. 폴로우스가 걱정하는 게 바로 이 지점이에요. 웹의 가치는 이런 작고 깊은 전문 사이트들의 롱테일에서 나오는데, 그들이 아무 소리도 못 내고 조용히 사라지고 있다는 거죠.
한국 개발자에게 주는 시사점
한국도 전혀 예외가 아니에요. 기술 블로그를 운영해보신 분들은 최근 몇 년 사이 검색 유입이 줄어드는 걸 체감하셨을 거예요. 커뮤니티나 위키형 사이트도 똑같은 구조적 압력을 받고 있고요. 만약 콘텐츠나 데이터 기반 서비스를 만들고 있다면 생각해볼 게 많아요. 검색 유입과 광고에 의존하는 모델이 앞으로도 유효할지, 뉴스레터나 커뮤니티처럼 사용자와 직접 관계를 맺는 채널을 확보해야 할지, 아예 데이터 자체를 API나 라이선스 형태로 파는 게 맞을지 같은 것들이요. AI 크롤러를 robots.txt로 막을지 허용할지도 이제 운영자가 직접 내려야 하는 전략적 결정이 됐어요. 그리고 개발자 입장에서도, 우리가 매일 참고하는 블로그와 문서, Q&A 사이트들이 전부 같은 압력 아래에 있다는 걸 기억할 필요가 있어요.
마무리
한 줄로 정리하면 이래요. AI 검색의 편리함은 그 답의 재료를 만들어온 사람들의 생계 위에 서 있고, 그 기반이 지금 무너지는 중이다. 여러분은 어떻게 생각하세요? 운영 중인 블로그나 사이트에서 검색 유입 변화를 체감하고 계신가요? AI 크롤러를 차단하는 쪽이신가요, 아니면 흐름을 받아들이고 다른 수익 모델을 찾는 쪽이신가요?
🔗 출처: Hacker News