この記事のポイント

独立したHTTP User-Agentを持たないGoogle-Extendedの意味と、Googlebotとの違いを説明します。

意味と店舗との関係

Google-Extendedは、Googleが取得したコンテンツを、対象となるGeminiの学習やグラウンディングに利用するか管理するためのrobots.txt用トークンです。独立したHTTPのUser-Agent文字列はありません。Google公式の一覧

店舗の担当者が「ログにGoogle-Extendedがないので取得されていない」と判断するのは適切ではありません。取得に使われる名前と、利用方針を示す名前を区別しましょう。

まず確認すること

robots.txtのGoogle-Extended向け設定と、Googlebot向け設定を別々に読みます。制作会社には、学習などの利用を制御したいのか、検索への公開を止めたいのかを先に伝えてください。

注意点

Google-ExtendedはGoogle検索の登録やランキングを管理するスイッチではありません。AIによる概要やAIモードの表示制御にはGooglebotやスニペット関連の設定が関係します。GoogleのAI機能の説明を確認し、両者を取り違えないようにします。

この記事の一次情報

最終確認

  1. Google の一般的なクローラーの一覧developers.google.com
  2. Google 検索:AI機能とウェブサイトdevelopers.google.com

出典の内容は更新される場合があります。

Markdown版を読む 訂正について