「ウェブはAIエージェントを想定して設計されていない」——この問題提起を軸に、現在のウェブ設計を根本から見直すべきだとするarXiv論文「Towards an Agent-First Web」（論文番号：2606.19116）が公開されました。17名を超える研究者が共著するこの論文は、CAPTCHAやロボットブロックでエージェントを排除してきた現在のウェブ構造に代わり、アクセス・経済・コンテンツの3層にわたる新設計原則を提案します。とりわけAI生成コンテンツがエージェントに読まれ、さらにAI生成コンテンツを生み出すという「認識論的循環（epistemic recursion）」への対処として、ATML（Agent Text Markup Language）と暗号による来歴証明チェーンの導入が示されています。
背景と文脈
現在のウェブは「人間がブラウザで読む」という前提で設計されています。HTMLはグラフィカルな表示に最適化されており、ページ構造・スタイル・データが混在したフォーマットになっています。しかしAIエージェントが日常的な業務の補助として普及し始めた現在、多くのウェブアクセスは人間ではなくエージェント経由になりつつあります。旅行を予約する、商品を比較する、論文を収集する——こうした作業をエージェントが担うとき、ウェブはしばしばそれを「不正なスクレイピング」として扱い、CAPTCHAやIPブロックで弾きます。
この現状はウェブの設計と利用実態の間のギャップとして問題化しています。企業側も一部はAPI経由でデータを提供していますが、すべてのウェブコンテンツにAPIがあるわけではなく、アクセス権・費用負担・コンテンツの信頼性に関するルールが整備されていません。また、LLMが学習・回答に使うウェブコンテンツの多くがAI生成になってきており、「AI→ウェブ→AI」という循環でコンテンツが生産されるという新しい問題も顕在化しています。論文はこれをepistemic recursionと呼び、ウェブの知識基盤が人間の真実から乖離していく構造的リスクとして警鐘を鳴らしています。
技術/ビジネス面
論文は「Agent-First Web」を実現するための設計を3層に分けて論じています。第1層はアクセス層です。エージェントが人間を代理するとき、そのエージェントには人間と同等のアクセス権を与えるべきとします。HTTPヘッダーへのエージェント識別メタデータの追加や、エージェントの利用規模に応じたレートリミット設計を提案します。また、同じドメインから人間向けコンテンツとエージェント向けに最適化されたコンテンツを同時に提供するデュアルレイヤー設計も示されています。
第2層は経済層です。エージェントのウェブアクセスを「抽出（extraction）」ではなく「正当なインタラクション」として位置づけ直すための課金設計が示されています。ページビューではなくトークン（AIが処理する文字・単語の単位）に基づくサブスクリプション課金や、エージェントのアクセスコストを人間ユーザーの費用と連動させる「インテントベース階層フレームワーク」を提案します。これにより、大規模なデータ収集に対して公正な対価が支払われる仕組みを目指しています。
第3層はコンテンツ層です。epistemic recursionへの対処として提案されるのが、ATML（Agent Text Markup Language）と4段階の人間監督モデル、そして暗号的来歴チェーン（コンテンツの生成過程と人間による関与の度合いを追跡可能にする仕組み）です。ATMLはHTMLのようにコンテンツを記述しながら、そのコンテンツが人間によって生成・検証されたかどうかの情報も構造的に付与します。これにより、エージェントが信頼できる情報源かどうかを判断できるようになります。
これからどうなるか
この論文が提案する設計原則はまだ草案段階ですが、エージェントがインフラ化していく中でWeb標準の議論に影響を与える可能性があります。自社サービスやAPIを公開している開発者にとっては、「エージェントが自分のサービスに適切にアクセスできるか」を今から考える指針として参考になります。エージェント向けに構造化されたエンドポイントや機械可読なコンテンツを用意しておくことは、近い将来の競争上の差別化要因になりえます。たとえば既存のREST APIにエージェント向けのアクセス枠組みを追加する、あるいは自社コンテンツにmeta情報を充実させるといった対応が検討の起点になります。
コンテンツの来歴証明については、Adobeが推進するContent Authenticity Initiativeなど類似の取り組みとの接点もあり、デジタルコンテンツの信頼性確保という大きな文脈の中で議論が深まりそうです。大手プラットフォームのロボット除外ポリシー（robots.txt）の扱いや、CDN事業者・ブラウザベンダーの対応次第では、Agent-First Webで提案された概念が標準化の議論テーブルに上がることも考えられます。
まとめ
Agent-First Web論文は、エージェントを前提としたウェブの再設計としてアクセス・経済・コンテンツの3層にわたる設計原則を提示しました。ATML・暗号来歴チェーン・エージェント向けデュアルレイヤー設計といった具体提案は、今後のウェブ標準や自社サービス設計の議論に影響を与える可能性があります。
参考リンク
アイキャッチ画像: Photo by Shubham Dhage on Unsplash
