핵심 요약: 구글 서치 센트럴 라이브 Day1 Crawling 핵심 — Gemini 전용 크롤러는 없고 Googlebot을 그대로 쓰며, llms.txt는 참고하지 않고, 고품질 웹사이트일수록 더 큰 크롤링 예산을 받는다.
처음으로 Crawling, Indexing, Ranking 세가지의 주제를 3일동안 깊게 다루는 행사에 참석했습니다.
Day1 의 주제였던 Crawling 에 대한 짧은 회고를 공유드립니다.
🤖 No other bots for Gemini
Gemini 모델을 위해서 Google 은 따로 크롤링 봇을 두지 않고 기존의 Googlebot 을 활용한다고 정리해주었습니다.
💀 SEO isn’t dead (SEO tends to die frequently since 1997)
AEO, GEO, AIO 이런 단어들이 생겨나지만 전혀 SEO 와 다를것이 없음을 공식적으로 계속 이야기하고 있습니다. 추가로는 LLM.txts 에 대해서 Google 에서는 전혀 참고하고있지 않으며, 왜 참고하지 않는지에 대한 내용도 짧게 언급해주었습니다.
🛜 What makes the internet? and How the search works?
인터넷이 어떻게 작동하는지, 검색이 어떻게 작동하는지에 대한 기본적인 지식은 SEO 전반적인 지식 향상에 도움을 줍니다.
💰 Crawling Budget
대형 웹사이트의 경우에는 crawling budget 관리의 중요성이 더 커집니다. Google은 high-quality 의 웹사이트일수록 더 큰 budget을 주어 더 많은 URL들을 크롤링하는 경향이 있다고 밝혔습니다.
어떤 세션은 너무 기본적인 이야기를 하기도하고, 깊은 내용이 담겨있는 세션도 있었지만 Google 에서 이런 행사를 적극적으로 주최하고, Crawling 에 대해 하루종일 이야기하는 경험을 할 수 있어 행사 참석하는 시간이 의미가 있는것같습니다