AIクローラーをrobots.txtで許可・ブロックする方法｜2026年版一覧付き
GPTBot、ClaudeBot、PerplexityBotなど主要AIクローラーをrobots.txtで許可またはブロックする具体的な方法を解説。クローラー名一覧と設定例付き。
続きを読む →タグから探す
AIクローラー
2件の記事
robots.txtの正しい設定方法｜SEOとAIクローラー対応の完全ガイド
robots.txtの基本構文から実践的な設定例まで詳しく解説。Googlebot対応はもちろん、GPTBotやClaudeBotなどAIクローラーの制御方法もカバーした2026年版ガイドです。
続きを読む →