# 駭客時期殘留的攻擊路徑，全部禁止爬蟲訪問
Disallow: /?items/
Disallow: /*?items/
Disallow: /items/
Disallow: /item/
Disallow: /content.php
Disallow: /comment.php
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

# === AI 爬蟲規則 ===
# 允許 OpenAI ChatGPT 爬蟲
User-agent: GPTBot
Allow: /

# 允許 OpenAI SearchGPT 爬蟲（搜尋用，跟訓練分開）
User-agent: OAI-SearchBot
Allow: /

# 允許 Anthropic Claude 爬蟲
User-agent: ClaudeBot
Allow: /

# 允許 Anthropic 舊版爬蟲（兼容）
User-agent: anthropic-ai
Allow: /

# 允許 Anthropic 使用者代理觸發的抓取
User-agent: Claude-User
Allow: /

# 允許 Perplexity AI 爬蟲
User-agent: PerplexityBot
Allow: /

# 允許 Perplexity 即時抓取（使用者搜尋時觸發）
User-agent: Perplexity-User
Allow: /

# 允許 Google Gemini / Bard 訓練（AI Overview 用）
User-agent: Google-Extended
Allow: /

# 允許 Apple Intelligence 爬蟲
User-agent: Applebot-Extended
Allow: /

# 允許 Meta AI 爬蟲
User-agent: Meta-ExternalAgent
Allow: /

Sitemap: https://yoosheetea.com/sitemap_index.xml