# ===========================================================
#  推しタイムズ — robots.txt（AI歓迎版）
#  学習 / AI検索インデックス / ユーザー起点フェッチ をすべて許可
#  利用条件: https://oshi-times.com/ai.txt
#  サイト要約: https://oshi-times.com/llms.txt
# ===========================================================

# --- すべてのクローラー ---
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=yes
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-login.php
Disallow: /*?s=
Disallow: /search/

# --- OpenAI（ChatGPT） ---
# GPTBot: 学習用
User-agent: GPTBot
# OAI-SearchBot: AI検索インデックス用（回答内引用の主因）
User-agent: OAI-SearchBot
# ChatGPT-User: ユーザー起点のWEBフェッチ
User-agent: ChatGPT-User
Allow: /
Disallow: /wp-admin/

# --- Anthropic（Claude） ---
# ClaudeBot: 学習用
User-agent: ClaudeBot
# Claude-SearchBot: AI検索インデックス用（回答内引用の主因）
User-agent: Claude-SearchBot
# Claude-User: ユーザー起点のWEBフェッチ
User-agent: Claude-User
# anthropic-ai: 学習・取得用（レガシー）
User-agent: anthropic-ai
Allow: /
Disallow: /wp-admin/

# --- Google（検索 / Gemini） ---
# Googlebot: ウェブ検索
User-agent: Googlebot
# Googlebot-Image: 画像検索
User-agent: Googlebot-Image
# Googlebot-News: ニュース検索
User-agent: Googlebot-News
# Google-Extended: 学習用（Gemini 等）
User-agent: Google-Extended
# Google-CloudVertexBot: Vertex AI / Gemini のグラウンディング
User-agent: Google-CloudVertexBot
# Google-InspectionTool: Search Console の URL 検査
User-agent: Google-InspectionTool
# GoogleOther: その他 Google 取得
User-agent: GoogleOther
Allow: /
Disallow: /wp-admin/

# --- Microsoft（Bing / Copilot） ---
# bingbot: 検索・Copilot
User-agent: bingbot
# msnbot: 検索（レガシー）
User-agent: msnbot
Allow: /
Disallow: /wp-admin/

# --- Perplexity ---
# PerplexityBot: AI検索インデックス用（回答内引用の主因）
User-agent: PerplexityBot
# Perplexity-User: ユーザー起点のWEBフェッチ
User-agent: Perplexity-User
Allow: /
Disallow: /wp-admin/

# --- Apple（Apple Intelligence） ---
# Applebot: 検索・Siri
User-agent: Applebot
# Applebot-Extended: 学習用
User-agent: Applebot-Extended
Allow: /
Disallow: /wp-admin/

# --- Meta（Meta AI） ---
# FacebookBot: Meta AI / クローラー
User-agent: FacebookBot
# meta-externalagent: 学習・取得用
User-agent: meta-externalagent
# meta-externalfetcher: ユーザー起点のWEBフェッチ
User-agent: meta-externalfetcher
Allow: /
Disallow: /wp-admin/

# --- DuckDuckGo（DuckAssist） ---
# DuckAssistBot: AI検索インデックス用（回答内引用の主因）
User-agent: DuckAssistBot
# DuckDuckBot: 検索
User-agent: DuckDuckBot
Allow: /
Disallow: /wp-admin/

# --- Mistral AI ---
# MistralAI-User: ユーザー起点のWEBフェッチ
User-agent: MistralAI-User
Allow: /
Disallow: /wp-admin/

# --- xAI（Grok） ---
# GrokBot: 学習・AI検索
User-agent: GrokBot
Allow: /
Disallow: /wp-admin/

# --- Tavily ---
# TavilyBot: AI検索インデックス用（回答内引用の主因）
User-agent: TavilyBot
Allow: /
Disallow: /wp-admin/

# --- Amazon（Alexa / Rufus） ---
# Amazonbot: 検索・アシスタント
User-agent: Amazonbot
Allow: /
Disallow: /wp-admin/

# --- その他のAI・データセット ---
# CCBot: Common Crawl
User-agent: CCBot
# cohere-ai: Cohere
User-agent: cohere-ai
# YouBot: You.com
User-agent: YouBot
# Diffbot: Diffbot
User-agent: Diffbot
# AI2Bot: AllenAI
User-agent: AI2Bot
# Timpibot: Timpi
User-agent: Timpibot
# Bytespider: ByteDance
User-agent: Bytespider
# PetalBot: Huawei Petal
User-agent: PetalBot
Allow: /
Disallow: /wp-admin/

# --- SNS・リンクプレビュー ---
# Twitterbot: X（旧Twitter）カード
User-agent: Twitterbot
# facebookexternalhit: Facebook / Instagram プレビュー
User-agent: facebookexternalhit
# LinkedInBot: LinkedIn プレビュー
User-agent: LinkedInBot
# Slackbot: Slack プレビュー
User-agent: Slackbot
# Discordbot: Discord プレビュー
User-agent: Discordbot
# LineBot: LINE プレビュー
User-agent: LineBot
Allow: /
Disallow: /wp-admin/

# --- 参照先 ---
Sitemap: https://oshi-times.com/wp-sitemap.xml
# Feed: https://oshi-times.com/feed
# LLM guide: https://oshi-times.com/llms.txt
# LLM guide (full): https://oshi-times.com/llms-full.txt
# AI policy: https://oshi-times.com/ai.txt