User-agent: *
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

# 显式放行主流 AI 检索与训练爬虫：便于审计，防止未来误加全局拦截
# 注意：爬虫匹配到自己的 User-agent 段后不再读取 * 段，故此处重复必要规则
# /docs/site-facts.html 是站点主体与上线状态的公开事实页，已包含在 /docs/ 放行规则内

User-agent: GPTBot
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: OAI-SearchBot
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: ChatGPT-User
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: PerplexityBot
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Perplexity-User
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: ClaudeBot
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Claude-SearchBot
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Claude-User
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Google-Extended
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Bingbot
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Baiduspider
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Bytespider
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: Applebot-Extended
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

User-agent: meta-externalagent
Allow: /
Disallow: /api/
Allow: /seo/
Allow: /docs/

Sitemap: https://yuanan.tech/sitemap.xml