Google-Extended: 크롤러가 아닌 robots.txt 토큰
Google은 Google-Extended가 독립된 제품 토큰이라고 말합니다. Google이 내 사이트에서 크롤링한 콘텐츠를 앞으로의 Gemini 모델 학습과, Gemini 앱과 Vertex AI의 그라운딩에 쓸지 정할 수 있습니다.
하는 일
Google은 Google-Extended에 별도 사용자 에이전트 문자열이 없다고 말합니다. 크롤링은 기존 Google 크롤러가 하고, 이 토큰은 콘텐츠를 어떻게 쓸지만 정합니다. Google은 Google-Extended가 Google 검색 포함 여부에 영향을 주지 않고 순위 신호도 아니라고 말합니다.
사용자 에이전트
없습니다. Google은 Google-Extended에 별도 HTTP 사용자 에이전트가 없다고 말합니다. 로그에서 볼 일이 없습니다.
robots.txt
Google-Extended는 robots.txt에서만 작동합니다. Googlebot이 규칙을 읽습니다. 방화벽에서 허용할 것은 없습니다.
User-agent: Google-Extended
Disallow: /막으면 잃는 것
Google에 따르면 내 콘텐츠가 앞으로의 Gemini 모델 학습이나 Gemini 앱과 Vertex AI의 그라운딩에 쓰이지 않습니다. Google 검색에는 영향이 없습니다. Google은 AI 개요와 AI 모드가 검색의 일부이며 Googlebot의 robots.txt 규칙이 그것을 제어한다고 말합니다.
확인과 방화벽
확인할 Google-Extended 트래픽은 없습니다. 요청은 Google의 일반 크롤러에서 옵니다. Googlebot처럼 Google 안내대로 확인하세요. Gemini 학습을 거부하려고 Googlebot을 막지 마세요. Google 검색에서 빠집니다. 대신 Google-Extended robots.txt 규칙을 쓰세요.
CrawlCoach와 함께
Google-Extended는 내가 정할 일이라 CrawlCoach는 짚지 않습니다. CrawlCoach는 Google 검색에 중요한 것을 지켜봅니다. Google이 내 페이지 중 무엇을 색인했는지, 나머지는 왜 건너뛰었는지, 그리고 각각의 해결 방법입니다.
자주 묻는 질문
Google-Extended는 무엇인가요?
robots.txt 토큰입니다. Google이 크롤링한 페이지를 Gemini 학습과 그라운딩에 써도 되는지 알려 줍니다. 별도 크롤러가 아니며 사용자 에이전트도 없습니다.
Google-Extended를 막으면 AI 개요에서 빠지나요?
아닙니다. Google은 검색의 AI 기능이 검색의 일부이며 Googlebot용 robots.txt 규칙이 제어한다고 말합니다. 검색에서 페이지의 어떤 부분을 보여 줄지 제한하려면 nosnippet, data-nosnippet, max-snippet, noindex를 쓰라고 안내합니다.
Google-Extended가 순위에 영향을 주나요?
아닙니다. Google은 Google 검색 포함에 영향을 주지 않고 순위 신호도 아니라고 말합니다.
출처
2026년 10월 8일에 확인했습니다. Google은 Search Console과 도움말을 가끔 바꿉니다. 화면이 다르게 보이면 출처를 확인하세요.
Google에 없는 내 사이트 페이지를 확인하세요
Google 계정으로 로그인하세요. CrawlCoach가 최대 500개 페이지를 무료로 확인하고, 문제마다 해결 방법을 알려 드립니다.
무료 보고서 받기최대 500개 페이지까지 무료입니다. 신용카드는 필요 없습니다. Search Console에서 쓰는 Google 계정으로 로그인하세요.
CrawlCoach 앱과 보고서는 영어로 제공됩니다.