User-agent: * Allow: / Sitemap: https://pruviq.com/sitemap-index.xml # AI Crawlers Welcome User-agent: GPTBot Allow: / User-agent: Google-Extended Allow: / User-agent: ClaudeBot Allow: / User-agent: PerplexityBot Allow: / User-agent: Bytespider Allow: / User-agent: CCBot Allow: / # 2026-09-20 보강 — 오너가 물은 다섯 중 **그록·제미나이가 없었다**. # `Google-Extended` 는 robots 전용 제어 토큰이라 UA 로는 오지 않는다(계측에서 늘 0). # 제미나이 계열의 실제 수집은 Google-CloudVertexBot 쪽이다. # 이 목록은 «허용» 신호다 — 기본 `User-agent: *` 가 이미 Allow 라 차단은 없었고, # 명시는 «환영한다» 를 읽는 쪽에 분명히 하는 용도다. User-agent: xAI-Bot Allow: / User-agent: Google-CloudVertexBot Allow: / User-agent: meta-externalagent Allow: / User-agent: Amazonbot Allow: / User-agent: cohere-ai Allow: / User-agent: MistralAI-User Allow: / User-agent: Applebot-Extended Allow: / User-agent: YouBot Allow: /