핵심 요약: 네이버는 20년간 검색엔진의 본질(신뢰 문서 수집·색인·서빙) 대신 자체 생태계와 광고 수익을 택했고, 그 오염된 데이터가 RAG 기반 AI 브리핑 시대에 독이 되어 돌아왔다. 연 200억 크리에이터 현금 지급과 대형 카페 대규모 정리는 그 청구서를 일시불로 치르는 과정이다.
검색엔진의 본질은 단순하다. 웹에서 문서들을 수집하고, 스팸성 문서는 제외 & 신뢰할 수 있는 문서를 골라 색인하고, 유저에게 검색 의도에 맞게 서빙하는 것. 네이버는 이 본질에 투자하는 대신 다른 길을 택했다. 오픈 웹을 크롤링해 문서의 신뢰도를 평가하기보다 블로그·카페·지식iN 자체 생태계를 우선 노출하고, 키워드 광고 수익을 극대화하는 길이었다. 수익 극대화를 위한 시나리오였고, 검색엔진으로는 직무유기였다.
색인과 서빙의 품질 관리에 소홀한 사이 키워드 도배와 상업성 정보 그리고 심지어 가짜 정보들로 상위 노출을 만들어내는 어뷰징이 판을 쳤고, 스팸을 걸러내는 일은 유저가 직접 콘텐츠를 다 확인하도록 했다. 검색 엔진이 치러야 할 정화 비용을 검색 유저가 대납해온 것이다.
광고와 스팸이 넘쳐도 유저가 알아서 걸러 읽어준 덕에 매출 효자 노릇을 하던 검색결과페이지는, AI 가 단 하나의 답변을 생성해야하는 RAG 시대에는 독이 든 원천 데이터가 되어 돌아왔다.
1. AI 브리핑 인용 출처의 70%가 블로그·카페 UGC다 라고 네이버가 직접 밝혔다.
AI 답변 품질이 자체 커뮤니티 데이터의 청결도에 완전히 종속됐다는 뜻이다. 표준 RAG 파이프라인은 가져온 문서를 의심하지 않고 그대로 컨텍스트에 넣는다. 원천 데이터의 노이즈는 걸러지는 게 아니라 환각으로 증폭된다. 브랜드가 맘카페에 올린 광고성 자문자답 게시글을 그대로 믿은 AI는 “실제 사용해온 엄마들의 후기로 검증된 제품은 OOO 입니다” 라는 답을 하게될 수 있다는 말이다.
2. 윗물이 흐리면, 아랫물은 더 흐리다.
올해 발표된 논문 Retrieval Collapse 는 원천 데이터 풀의 오염도가 67% 수준에 도달하면, 실제 검색 노출단의 오염도는 80%를 넘어서는 기하급수적 왜곡이 일어남을 증명했다. “조금 더러워도 쓸 만하다”가 성립하지 않는 구조다. 네이버 스팸성, 상업성 글들은 이미 네이버 검색결과 상단 노출 노하우의 집약체다. 검색은 오염을 거르는 게 아닌 오히려 오염된 정보를 골라 올리는 셈이다.
3. 네이버만의 청구서는 따로 있다.
AI 브리핑에 인용될 크리에이터 3,000명을 매달 선정해 연 200억을 현금 지급하는 ‘네이버 메이트’다. 그리고 콘텐츠 생태계에 양질의 콘텐츠 작성을 위해 5년간 1조원을 쓰겠다는 계획을 밝혔다. 네이버 CDO는 “AI 플랫폼 경쟁의 중심이 모델 성능에서 데이터 품질과 서비스 경쟁력으로 이동하고 있다.” 라고 직접 이야기했다. 20년 넘게 네이버가 쌓은 UGC가 자산이라면 이런 돈을 굳이 쓸 필요가 없다. 네이버가 만들어온 오가닉 생태계 콘텐츠로는 부족하니, AI 용 청정 데이터를 위해서 사람에게 돈 주고 콘텐츠를 수혈하고 있는 것이다.
4. 필터는 이제서야 가동 중이다.
지난 6월 15일 하루, 미즈넷·아이러브부산맘·네영카 같은 수십만 회원 대형 카페들부터 네이버가 직접 ‘대표 카페’로 선정했던 곳들까지 일제히 접근제한을 당했다. 수만 개의 바이럴·매크로 계정을 강제 탈퇴시키고, 수년치 광고글 수십만 건을 삭제하고, 게시판 100여 개를 폐쇄한 뒤에야 풀려났다. 한 카페 운영진의 말이 핵심을 찌른다.
“품질 관리에 AI 시스템이 도입되면서, 예전에는 문제가 안 되던 패턴들이 문제가 되고 있다.”
네이버는 AI 검색과 무관한 조치라고 부인하지만, 열흘 뒤인 6월 25일 AI탭이 정식 출시됐다. 작년 DAN25에서 공개한 Next N Search 아래, 작성자의 전문성과 공신력을 LLM으로 평가하는 AuthGR이 상업성 채널을 강등시키고, 이미지-본문 일관성을 보는 QUMA-VL이 복붙 콘텐츠에 페널티를 준다. 광고 로직마저 클릭 유도에서 의도-연관성 평가(ADVoost)로 피벗됐다. 카페들이 사라진 건 정책 변덕이 아니라, 필터링이 이제 막 시작됨을 알린다.
검색엔진이 처음부터 했어야 하는 본질
돌아보면 네이버가 조 단위를 들여 지금 새로 만들고 있는 것들은 새로운 기술이 아니다. 신뢰할 문서를 수집하고, 권위와 전문성으로 제대로 색인하고, 검색 의도에 맞게 줄 세워 서빙하는 것. 검색엔진이 처음부터 했어야 하는 그 본질이다.
광고 수익과 자체 생태계에 몰두하며 미뤄둔 검색엔진의 본질은 사라지지 않고 이자가 붙어 청구됐다. 구글은 이 본질을 처음부터 지금까지 꾸준히 투자하고 지켜왔으며, 네이버는 이제부터 발행되는 청구서를 일시불로 치르는 중이다. 어뷰징이 곧 최적화였던 네이버에서 오랫동안 SEO 가 아닌 ‘상위 노출 업자’ 의 이름으로 불렸던 건 우연이 아니다. 비로소 네이버가 검색엔진의 길로 가는 정상화의 시작이길 바란다.