Bingbot: Bing과 Microsoft Copilot 뒤의 크롤러

하는 일

Bing Webmaster Tools에는 Copilot과 Bing AI 요약이 인용하는 내 페이지를 보여 주는 AI Performance 보고서가 있습니다.

사용자 에이전트

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/W.X.Y.Z Safari/537.36
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

Bing은 W.X.Y.Z가 Bingbot이 쓰는 현재 Microsoft Edge 버전이며 바뀐다고 말합니다. bingbot으로 맞추세요.

robots.txt

• Bing은 robots.txt가 크롤러와 사이트의 상호작용을 알려 준다고 말합니다.
• Bingbot은 Crawl-delay를 따르며, Bing은 이 줄이 Bing Webmaster Tools의 Crawl Control 설정보다 항상 우선한다고 말합니다.
• AI 용도를 위한 별도 Bing 토큰은 없습니다. Bing 가이드라인은 Bing 검색과 Copilot에서 페이지를 빼려면 noindex를, Copilot 답변에서만 빼려면 noarchive를 쓰라고 말합니다.

User-agent: bingbot
Allow: /

막으면 잃는 것

Bingbot을 막으면 Bing 검색용 크롤링이 안 됩니다. Bing 가이드라인은 robots.txt에서 Bingbot을 막는 것을 피해야 할 일로 듭니다. Copilot 답변도 같은 크롤링에 기대므로 그 인용도 잃습니다.

진짜 요청인지 확인하기

IP로 역방향 DNS 조회를 하세요. 이름이 search.msn.com으로 끝나야 합니다. 그 이름을 정방향 조회해 같은 IP가 나오는지 보세요. 또는 Bing Webmaster Tools의 Verify Bingbot에 IP를 넣거나, Bing이 공개한 Bingbot IP 주소(JSON)와 비교하세요. Bing은 목록을 매일 새로 고치라고 말합니다.

방화벽과 CDN

엄격한 봇 보호와 'AI 봇 차단' 설정이 Bingbot을 막을 수 있습니다. 방화벽 이벤트 로그에서 bingbot을 찾고, IP가 확인되면 허용하세요. 막는 대신 속도를 늦추려면 Bing Webmaster Tools의 Crawl Control을 쓰세요.

CrawlCoach와 함께

모든 유료 요금제에서 CrawlCoach는 robots.txt를 읽고, Google에 있는 공개 페이지에서 Bingbot을 막는 규칙을 짚습니다. Bing Webmaster Tools를 연결하면 Google에 있지만 Bing이 크롤링하지 않은 페이지도 보여 드리고, Pro와 Agency에서는 그 페이지를 Bing에 대신 보내 드립니다. Bing은 주소로 크롤러를 확인하므로 방화벽을 통한 Bingbot 시험은 하지 않습니다.

자주 묻는 질문

출처

2026년 10월 8일에 확인했습니다. Google은 Search Console과 도움말을 가끔 바꿉니다. 화면이 다르게 보이면 출처를 확인하세요.

• Bing Webmaster Tools 도움말: Which crawlers does Bing use?(영어)
• Bing Webmaster Tools 도움말: Verifying Bingbot(영어)
• Bing Webmaster Guidelines(영어)