跳到正文
Search Engine Journal· Matt G. Southern·· 1 天前精选AI 评分78

Meta 与 OpenAI 智能体占 HUMAN 监测网络近 90% 请求量

Meta & OpenAI Agents Made Nearly 90% Of Agent Requests In Bot Data via @sejournal, @MattGSouthern

AI 导读

HUMAN Security 发布的 10 月智能体流量报告显示,Meta 与 OpenAI 的 AI 智能体合计占其保护网络近 90% 的请求量,其中 Meta Muse 单独占据 59%,OpenAI 旗下三款智能体占约 30%。

推荐理由

报告量化了头部厂商智能体在电商站点的流量集中度,对出海卖家防御未签名爬取和重构流量识别具有参考价值。

正文 · AI 翻译

网络安全公司 HUMAN Security 发布的《智能体流量现状月度报告》显示,在 10 月访问其保护的网站和 App 的智能体请求中,近 90% 来自 Meta 和 OpenAI 旗下的 AI 智能体。其中,仅 Meta 的 Muse 一款就贡献了 59%。

10 月的智能体请求总量约为 8 月的 8 倍、9 月的 2.6 倍左右。该报告统计了 HUMAN 所保护网站和 App 上的智能体请求,并未涵盖全网所有流量;每次请求代表智能体执行了一次操作,例如加载页面或发起搜索。

这类请求绝大多数用于访问商品和搜索内容,只有极少一部分进入了结账环节。

Meta 与 OpenAI 旗下智能体包揽绝大部分请求

Muse 在智能体请求总量中的份额较 9 月跃升了 19 个百分点,请求量几乎翻了两番。报告称,Muse 目前发送的请求量是第二大智能体 ChatGPT Agent 的 3.7 倍。Meta 于 9 月 8 日推出了 Muse。

OpenAI 凭借排名前十中的三款智能体,拿下了约 30% 的总请求量。报告显示,ChatGPT Agent 在 9 月曾占 28.5% 的请求量,尽管其 10 月请求量增长了 44%,但由于 Muse 增速更为迅猛,其份额反倒降至 15.9%。Codex Browser 应用的份额从 7.7% 上升至 8.8%,Codex Chrome 扩展程序则从 3.3% 增至 5.2%。

Claude Chrome 扩展程序虽然请求量增长了 30%,但市场份额却遭遇腰斩,从 7% 降至 3.5%。Google 新发布的 Gemini 智能体(据 HUMAN 称于 10 月 8 日上线)以 0.8% 的份额位列第八。xAI 旗下的 Grok Agent 则是首次跻身前十,以 0.7% 的份额排名第九。

独立智能体浏览器份额下滑

Genspark 的浏览器端智能体已彻底跌出前十;Perplexity 的 Comet 智能体在 8 月曾占据所有智能体请求的 41%,但 9 月骤降至 9.4%,10 月更是进一步滑落至 3.6%。Comet 也是前十名中唯一在 10 月出现请求量下滑的智能体,较 8 月降幅达 30% 左右。此外,OpenAI 也在 8 月停用了独立的 ChatGPT Atlas 浏览器。

报告认为,这一走低趋势的原因在于:用户在挑选智能体时,往往取决于对平台的熟悉程度,或者是否使用过同一家公司的其他产品。

绝大多数请求流向商品与搜索页面

10 月,报告监测到的智能体请求中,有 85% 流向了商品和搜索页面,高于前一个月的 81%。与此同时,流向结账和支付页面的请求占比则从 2.4% 下降至 1.9%。

报告指出,智能体“浏览的频次仍然远高于下单”,但进入结账流程的请求数量正在快速增加。需要注意的是,报告中的页面分类仅代表请求最终抵达的位置,并不代表具体执行的操作,因此请求访问结账页面并不等同于已经完成下单。

报告显示,电商网站在此期间稳定占据了约 60% 的智能体请求,旅游类网站位居第二。媒体网站在监测的所有类别中排在第三,这也是该系列报告中旅游网站的请求量首次超越媒体网站。

识别 Muse

HUMAN 结合了行为数据、User-Agent 字符串以及在可行情况下的发布商端接入,来甄别哪些流量由智能体产生,并将爬虫活动排除在外。报告称,AgenticTrust 已通过 HUMAN 的自研技术和数字签名校验,识别并验证了 Muse。不过,报告并未进一步透露通过各途径分别检测到的 Muse 流量占比。

Meta 在其关于 Muse 的工程技术博文中表示,Muse 访问网站时的浏览行为“看起来会像是你本人的操作”。

据 DataDome 11 月 11 日的报告,Muse 在 11 月 7 日至 9 日期间,将其 Web Bot Auth 签名从 Meta 的密钥目录(meta.com)迁移到了自己的目录(muse.ai)。Web Bot Auth 允许智能体在向网站发出的请求中附带签名以表明身份,从而让接收方网站核验发起者的真实身份。截至笔者 11 月 13 日核查时,muse.ai 的密钥目录处于活跃状态。

截至 11 月 10 日,DataDome 网络监测到的 Muse 请求中,有一半未附带签名,导致无法核验请求来源。DataDome 指出,如果网站开启了签名核验且只接受基于 meta.com 的签名,现在就会将 Muse 的请求视为未通过验证。DataDome 和 HUMAN 均提供机器人与智能体识别服务。

这为何重要

对于电商和旅游团队来说,HUMAN 的 10 月报告明确指出了绝大部分智能体请求出自何处。HUMAN 的数据显示,仅两家公司的智能体就占据了近九成请求量。

正如 Slobodan Manic 10 月在 SEJ 上撰文所指出的那样,像 Muse 这样的智能体不会给 robots.txt 提供任何可匹配的名称,因此是否放行的决策权就落到了防机器人系统上。核验签名的防护规则如今需要识别 Muse 的 muse.ai 目录,而据 DataDome 11 月 10 日的统计,Muse 大约有一半的请求根本没有附带可供核验的签名。

HUMAN 的报告还提到,大多数网站的分析工具无法将 AI 智能体与真实人类访客区分开来。在黑五来临前,Muse 和 OpenAI 旗下的三款智能体,很值得各家网站的防机器人负责人重点关注。

展望

接下来的关注重点,在于 Muse 会不会有更多请求开始附带签名。HUMAN 表示,下个月的报告将揭示智能体在“黑色星期五”和“网络星期一”期间的行为表现。

头图来源:jackpress/Shutterstock

来源:Search Engine Journal · searchenginejournal.com

EVAOO 主站实战落地 · AI Agent 与研发提效

看完情报?回到 EVAOO 主站直接上手工具与完整 SOP

返回 EVAOO 主站