この記事の要点(1分でわかる)
  • Google・OpenAI・Microsoftが10月30日、ホームページの内容をAIの学習に使ってよいかどうかを、各社まとめて伝える共通の書き方に対応する方針を発表しました。Anthropicも実装を始めたと表明しています。
  • 書くのはrobots.txtの2行だけです。ただし各社の対応はこれからで、仕組みもまだ草案の段階。お願いであって、強制力はありません。
  • 多くの中小企業は急いで書く必要はありません。まず「学習」「回答の参照」「検索への掲載」の違いを知り、自社の方針を決めましょう。NoArchive・NoCacheを使っているサイトだけは、Bingの期限(2027年3月1日)に注意が必要です。

「うちのホームページの文章が、知らないうちにAIの学習に使われているのでは」「でも止めたら検索に出なくなるのでは」——こんな心配を聞くことが増えました。これまでは、止めたい場合はAIの会社ごとにロボットの名前を調べて、1社ずつ設定する必要がありました。

それを1つの書き方にまとめる動きが、10月30日に一気に進みました。この記事では、Google・OpenAI・Microsoftの発表と、インターネットの技術標準を話し合う団体IETF(アイイーティーエフ)に提出された文書を当社が原文で確認し、何が変わるのか、中小企業はどう判断すればよいかを整理します。

何が発表された?——AIの学習を「まとめて」断れる共通の書き方

各社の対応時期の図。Googleは2027年の対応を目標、共通のお断りはGoogle-Extendedの拒否として扱う予定。OpenAIは今後数か月以内。Microsoft Bingは2027年2月1日から巡回に合わせて反映。Anthropicは実装を始めたと表明。いずれも対応はこれから

発表の中身は、ホームページの設定ファイルrobots.txt(ロボッツテキスト)に、AIの学習について意向を伝える共通の書き方を用意し、各社がそれを尊重するというものです。robots.txtは、検索エンジンなどの巡回ロボットに「ここは見ないで」と伝えるためのファイルです。

Googleは公式ブログで、複数のAI提供企業に対して「in a single step(ひと手間で)」意向を伝えられるようになると説明しています。OpenAIも、これまで運営者はロボットを個別に調べて提供企業ごとにルールを管理する必要があったとし、共通の仕組みで負担を減らせると書いています。

対応の時期は会社ごとに違います。

書き方はたった2行——「__usage_ai-training」

robots.txtの書き方の例。サイト全体で断る場合はUser-Agent: __usage_ai-trainingとDisallow: /の2行。一部のフォルダだけ断る例、全体を断って/press-kit/だけ認める例も掲載。何も書かなければ意向を示していない扱い

使う名前は__usage_ai-trainingです(先頭の下線は2本)。サイト全体で学習を断るなら、robots.txtに次の2行を書きます。

ふつうのrobots.txtと同じ形なので、特定のフォルダだけを指定することも、全体は断って一部だけ認めることもできます。この名前は実在のロボットの名前ではなく、文書では「policy token(ポリシートークン)」と呼ばれています。ロボットの通行止めではなく、「内容の使い道についての意向」を伝える札のようなものです。

何も書かなかった場合、文書の上では「意向を示していない」扱いになります。Microsoftは、設定がなければ「Allow(許可)」が既定だと説明しています。つまり、書かないことで今の状態が急に悪くなるわけではありません。

「学習」「回答の参照」「検索への掲載」は別の話

学習、回答の参照、検索への掲載の違いを3枚のカードで示した図。今回の共通の書き方が扱うのは学習だけ。回答の参照はBingではページ単位の別の設定。検索への掲載はGoogle-ExtendedやBingの新設定で変わらない

ここが一番大切なところです。AIとホームページの関係は、次の3つに分けて考えます。

Microsoftは今回、回答の参照についても新しい設定をページ単位で用意しました。ただし、参照を止めると「reduced brand visibility in AI experiences(AIの体験の中でブランドの見え方が減る)」と明記しています。一方で、学習も参照も、Bingの通常の検索結果に載る資格は変えないとしています。

Googleには注意点があります。共通の書き方で学習を断り、Google-Extended(Googleの従来のAI向け設定)を個別に指定していない場合、GoogleはそれをGoogle-Extendedの拒否として扱う予定です。Google-Extendedは将来のGeminiの学習だけでなく、Geminiアプリなどでの回答の参照にも関わる設定です。Googleの検索への掲載や順位には影響しないと公式文書に書かれています。Googleは、Google-Extendedを明示的に許可したサイトはGeminiアプリの参照の対象になると説明しているため、断るとGeminiアプリの回答に出にくくなる可能性があると当社は読んでいます。

うちはどうする?——3つの方針

3つの方針の図(Office Nの整理)。A 今は何もしない、B 学習だけ全体でお断りする、C 一部のフォルダだけお断りする。本当に見せたくない物は公開せずログインなどで守る

どれが正解というものではありません。以下は、Office Nが中小企業向けに整理した考え方です。

  1. A:今は何もしない:会社案内やサービス紹介が中心で、見つけてもらうことを優先するなら、これでも問題はありません。各社の対応が出そろってから考えても遅くはありません
  2. B:学習だけ全体で断る:通常の検索には載せたまま、学習には使わないでほしいと伝えます。ただし前の項目のとおり、GoogleではGeminiアプリの回答の参照にも影響する見込みです
  3. C:一部のフォルダだけ断る:独自の資料や写真をまとめた場所だけ意向を示します。会社紹介は見つけてもらい、大事な資料は守る、という分け方です

なお、許可したからといって得をするとも限りません。Microsoftは、学習や回答の参照を許可しても「Neither choice guarantees inclusion, traffic, or payment(掲載・アクセス・支払いのいずれも保証しない)」と書いています。本当に見せたくない情報は、robots.txtに頼らず、そもそも公開しない、ログインで守るといった対応が必要です。

従来の設定方法は引き続き使えます。Google・OpenAIとも、今回の共通の書き方は既存の設定に置き換わるものではないとしています。GPTBotなどのロボットごとの違いは「うちのホームページ、AIに読ませる? 止める?」で解説しています。

書く前に知っておきたい5つの注意

書く前に知っておきたい5つの図。まだ正式な標準ではない、お願いであって鍵ではない、User-agent: *は意向にならない、すでに集められた分は別の話、書く場所を間違えると事故になる
  1. まだ正式な標準ではありません:文書は個人提出の草案で、冒頭に「IETFが承認したものではない」旨が書かれています。有効期限は2027年5月3日で、内容が変わる可能性があります
  2. お願いであって、鍵ではありません:IETFの作業部会は、守らせるための技術的な仕組みを対象外としています。OpenAIも「自主的な取り組み」と書いています。対応していない会社には届きません
  3. 「User-agent: *」で止めていても、意向にはなりません:全ロボット向けの書き方は、共通の札には当てはまらないと定められています。意向を示すなら、札の名前を明記します
  4. すでに集められた分は別の話です:文書では、意向は内容を取得した時点のrobots.txtで判断するとされています。後から書いても、過去にさかのぼって取り消す仕組みとは書かれていません
  5. 書く場所を間違えると事故になります:robots.txtの決まりでは、User-agentの行が続くと1つのまとまりになります。たとえば「User-agent: *」のすぐ上に札の行を続けて書くと、下の「Disallow: /」が全部のロボットにも札にも効いてしまう書き方になりかねません。新しいまとまりは、ファイルの一番最後に書くのが安全です(当社の整理)

Bingの期限に注意——NoArchive・NoCacheを使っている場合

NoArchiveとNoCacheを使っているサイトのBingの日程の図。2026年12月15日に一時設定の受付開始、2027年2月1日に新設定の反映開始、2027年3月1日が期限、2027年9月30日に一時設定が終了。使っていないサイトは移行手続き不要

ほとんどの会社には関係ありませんが、ページにNoArchive・NoCacheという指定を入れている場合だけ、日程の確認が必要です。Microsoftはこの2つを、学習や回答の参照の制御として読むのをやめ、新しい設定に置き換えます。

手続きをしないと、対象のページは再巡回されるまで、回答の参照が「許可」の扱いになります。使っていないサイトは、この移行手続きは不要です。

今週できる点検の手順5つ

今週できる点検の手順5つの図(Office Nの整理)。robots.txtを開いて見る、止めているロボットを書き出す、NoArchiveとNoCacheの有無を確かめる、方針を決めて残す、書くなら控えを取り各社の対応後に確認する

すぐに書き足す必要はなくても、自社の状態を知っておくことには意味があります。以下はOffice Nの整理で、各社が勧める手順そのものではありません。

  1. 自社のrobots.txtを開いて見る:ブラウザで「自社のドメイン/robots.txt」を開くと、誰でも中身を確認できます
  2. 今どのロボットを止めているか書き出す:GPTBotやGoogle-Extendedなど。過去の担当者や制作会社が入れた設定が残っていることもあります
  3. NoArchive・NoCacheの有無を確かめる:ページのmetaタグや制作会社への確認で調べます
  4. 方針をA・B・Cから決めて社内に残す:誰がいつ、なぜ決めたかを1行のメモにします
  5. 書くなら控えを取り、各社の対応後に確認する:書き換える前の中身を保存し、書いた後は検索での表示に変化がないかを確かめます

検索エンジンの表示を細かく調整する方法はnosnippetの解説記事、AI向けに話題のファイルについてはllms.txtの記事も参考になります。

まとめ

AIの学習についての意向を、robots.txtの2行で各社にまとめて伝える流れが始まりました。ただし、対応はこれからで、草案の段階で、強制力もありません。多くの中小企業に今必要なのは、急いで書くことより、「学習」「回答の参照」「検索への掲載」を分けて考え、自社の方針を決めておくことです。

Office Nでも、robots.txtの確認やAIに見つけてもらうためのサイト改善のご相談をお受けしています。

  1. Google Search Central Blog「Supporting a shared AI training control for websites」(2026年10月30日)
    https://developers.google.com/search/blog/2026/10/ai-training-control
  2. Google「Google の一般的なクローラ」(Google-Extendedの説明と注記)
    https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers
  3. OpenAI「AI 学習への利用意向をウェブサイトが伝えやすくする仕組み」(2026年10月30日)
    https://openai.com/index/helping-websites-express-ai-training-preferences
  4. Microsoft Bing Blog「Your content, your choice: clearer preferences for training and grounding」(2026年10月30日)
    https://blogs.bing.com/search/2026/10/your-content-your-choice-clearer-preferences-for-training-and-grounding/
  5. IETF Internet-Draft「Machine-Readable Training Preference Signal」draft-kelley-aipref-training-preference-signal-00(2026年10月30日)
    https://datatracker.ietf.org/doc/draft-kelley-aipref-training-preference-signal/
  6. IETF ai-controlメーリングリスト「New draft: draft-kelley-aipref-training-preference-signal-00」(2026年10月30日)
    https://mailarchive.ietf.org/arch/msg/ai-control/mddjatOxSR0h6GmLRBWlc839c7w/
  7. IETF「AI Preferences (aipref)」作業部会の憲章
    https://datatracker.ietf.org/wg/aipref/about/
  8. RFC 9309「Robots Exclusion Protocol」
    https://www.rfc-editor.org/rfc/rfc9309
※2026年10月31日に当社が原文を直接取得して確認しました(いずれもHTTP 200)。太字の「」で示した部分は原文の表現で、かっこ内の日本語は当社の訳です。そのほかはOffice Nによる要約・言いかえです。各社の対応時期は発表時点の予定で、変わる場合があります。「3つの方針」「点検の手順」「ファイルの最後に書く」はOffice Nの整理で、各社が勧める手順ではありません。法的な権利関係の判断が必要な場合は、専門家にご確認ください。

よくある質問

今すぐrobots.txtに書く必要はありますか?
急ぐ必要はありません。各社の対応はこれからで、Googleは2027年、Microsoftは2027年2月1日からの予定です。文書もまだ草案の段階です。まず自社の方針を決めておくのがおすすめです(Office Nの整理)。
学習を断ると、Google検索に出なくなりますか?
Googleの公式文書によると、Google-Extendedは検索への掲載や順位に影響しません。共通の書き方での拒否はGoogle-Extendedの拒否として扱う予定です。ただしGeminiアプリなどでの回答の参照には影響する可能性があります。
書けば、AIの会社は必ず守りますか?
必ずとは言えません。これは意向を伝える仕組みで、守らせる技術的な仕組みは含まれていません。対応する会社だけが尊重します。本当に見せたくない情報は、公開しない、ログインで守るなどの対応が必要です。
NoArchiveやNoCacheを使っていなくても手続きは必要ですか?
Microsoftによると、使っていないサイトは移行の手続きは不要です。使っているサイトで今の制限を保ちたい場合は、2027年3月1日までに新しい設定を行う必要があります。
「うちのrobots.txtはどうなっている?」「AIにどう扱われているか知りたい」——現状の確認から、まずは無料でご相談ください。
静岡・横浜・茨城/全国オンライン対応。ホームページの保守・改善からAI活用・業務のデジタル化までワンストップで支援します。
LINE公式アカウントで、AIが24時間ご相談にお答えします
全国の中小企業・個人事業主のみなさまへ。オフィスエヌの公式LINEでは、会社名を送るだけで、御社サイトが“AIの検索”にどれくらい見つけてもらえるかを無料でチェック。補助金や進め方のご質問も、AIがその場でお答えします(初回相談無料)。しつこい営業はしませんので、どうぞお気軽にどうぞ。
+ 友だち追加して相談する ※「診断」または会社名を送るだけでOK。夜間・早朝でもAIがその場でお返事します。
← 記事一覧へもどる