無料ツール · 登録不要
ドメインを入力すると、robots.txt を取得して検証します。構文ミス、サイト全体をブロックするルール、サイトマップの記載漏れをチェックし、さらにどの AI・検索クローラーがコンテンツにアクセスできるかを一覧で示すアクセスマトリクスも提供します。
robots.txt ファイルは、サイトのルートに置かれ、クローラーがどのパスにアクセスしてよいか、してはいけないかを伝えます。従来の検索ボットだけでなく、いまでは GPTBot や PerplexityBot といった AI クローラーも制御します。設定を一つ誤るだけで、あなたのコンテンツが AI 検索の回答から静かにブロックされてしまうことがあります。
無料 · チェック無制限 · 登録不要
What Meev is
Meev tracks where your brand appears across ChatGPT, Claude, Gemini, Perplexity, Grok, DeepSeek, Google AI Overviews, and Google AI Mode — then shows what to fix, publish, or pitch next to improve AI visibility.
The path to getting cited
01 · Your domain
Meev reads your existing pages, topics, and Google Search Console signals to learn what your site is about and already ranks for: the foundation for every gap, draft, and citation that follows.
ステップ1
ドメインを入力
ドメインだけで大丈夫です。/robots.txt はこちらで取得します。
ステップ2
ファイルを検証
孤立したルール、不明なディレクティブ、サイト全体のブロック、サイズ超過のファイル、サイトマップの記載漏れを検出します。
ステップ3
AI クローラーマトリクス
クローラーごとに許可かブロックかを表示します。GPTBot、OAI-SearchBot、ClaudeBot、PerplexityBot、Google-Extended、Googlebot、Bingbot。
ステップ4
自信を持って修正
それぞれの判定が現実にどんな影響をもたらすかを説明するので、何をなぜ変えるべきかがわかります。
robots.txt は、すべてのクローラーが最初に読むファイルです。行儀のよい AI クローラー（GPTBot、ClaudeBot、PerplexityBot）はこれを厳格に守ります。テンプレートからコピーしたり、ステージング環境の設定が残っていたりして紛れ込んだ一行の Disallow が、あなたのサイト全体を ChatGPT や Claude、Perplexity の回答から静かに取り除いてしまいます。エラーは何も出ません。ただ引用されなくなるだけです。
Google-Extended は学習からのオプトアウトです。これをブロックすると、Google 検索の順位には一切影響を与えずに、Gemini モデルの学習からコンテンツを除外できます。一方、Googlebot をブロックすると、Google 検索から完全に姿を消してしまいます。サイトはこの二つを頻繁に混同します。その違いは、あなたのオーガニック流入チャネルそのものです。アクセスマトリクスは判定を別々に表示するので、この区別がはっきりわかります。
クローラーは robots.txt の問題をあなたに報告してくれません。User-agent 行より前に置かれたルールは無視され、不明なディレクティブは読み飛ばされ、約 500KB の読み取り上限を超えた部分は一切解析されません。ファイルは人間の目には妥当に見えても、クローラーにはまったく違う挙動をすることがあります。実際のクローラーの挙動に照らして検証することだけが、唯一信頼できるチェックです。
Meev なら
開かれた robots.txt はクローラーを招き入れますが、それだけで引用が得られるわけではありません。Meev は AI エンジンが抽出しやすい構造で記事を自動公開し、あらゆる主要な AI 検索面であなたのブランドを追跡します。許可したアクセスが実際に可視性へと変わっているかを確認できます。
それ自体は問題ではありません。robots.txt がないということは、すべてのクローラーがどこにでもアクセスできるという意味で、これは完全に有効な初期設定です。ただし二つのものを失います。サイトマップの場所を宣言する手段と、AI 学習クローラーを制御する手段です。多くのサイトは、少なくとも Sitemap 行を含む最小限のファイルを用意しておくと役立ちます。
7 つのクローラートークンです。GPTBot（ChatGPT の回答と学習）、OAI-SearchBot（ChatGPT の検索引用）、ClaudeBot（Claude）、PerplexityBot（Perplexity）、Google-Extended（Gemini 学習のオプトアウト）、Googlebot（Google 検索）、そして Bingbot（Bing。そのインデックスはいくつかの AI 検索面にも供給されています）。それぞれについて許可かブロックかの判定を、その影響とともに示します。
GPTBot は ChatGPT の回答とモデル学習のためにコンテンツを取得します。OAI-SearchBot は、ChatGPT のリアルタイム検索引用を担う専用クローラーです。両者は別々のルールを持つ別々のトークンです。学習からはオプトアウトしつつ検索引用は許可する、あるいはその逆も可能です。両方をブロックすると、ChatGPT から完全に見えなくなります。
いいえ。Google-Extended は、あなたのコンテンツが Gemini の学習やグラウンディングに使われるかどうかだけを制御します。Google 検索のクロール、インデックス、順位には一切影響しません。検索にとって重要なのは Googlebot です。これは robots.txt に関する最もよくある誤解の一つです。
エラーは、クロールを実際に壊してしまうルールです。User-agent 行より前に置かれたディレクティブ（クローラーはこれを無視します）や、ワイルドカードグループ配下のサイト全体を対象とする Disallow: / などです。警告は、何かを壊すわけではないものの機会を損なうものです。不明なディレクティブ、Sitemap 行の欠落、クローラーが読むのをやめてしまうほど大きなファイルなどが該当します。
各クローラーは、自分のトークンに最も具体的に一致する User-agent 値を持つグループを探します。GPTBot に完全一致するグループは、ワイルドカード（*）グループより優先され、ワイルドカードは具体的なグループが存在しない場合にのみ適用されます。一致したグループの中では、最も長く一致するパスのルールが勝ち、同点の場合は Allow が Disallow に勝ちます。
Meev は主要な AI 検索サーフェス全体であなたの可視性を追跡し、品質ゲートを通過した、引用されるコンテンツを自動で公開します。
7日間の無料トライアル。いつでもキャンセル可能。
Technical SEO
Keyword Density Checker
Top words and phrases on any page, with density percentages
Technical SEO
Broken Link Checker
Find dead links on any page in seconds
Technical SEO
XML Sitemap Validator
Check your sitemap for errors, bloat, and dead URLs
Technical SEO
Canonical Tag Checker
Find canonical problems that split your ranking signals
Technical SEO
XML Sitemap Generator
Crawl your site and generate a clean XML sitemap
Technical SEO
SEO Competitor Comparison
Your page vs a competitor's — side by side, signal by signal