搜索索引

Meta

2026-08-08 10:34:59

Meta两款AI爬虫单季发出91亿次请求，独立开发者VPS触发负载警报

独立开发者 Pieter Levels 称，Meta 本周对其全部网站发起了“非常非常非常大量”的抓取，其中一台 VPS 直接出现负载平均警报。DataDome 报告显示，Meta 两款 AI 爬虫在 2026 年 Q2 合计发出 91 亿次请求，占该公司观测到的 AI 代理流量多数，其中负责搜索索引的 Meta-WebIndexer 季增 163% 至 37.5 亿次，6 月月请求量首次超过训练爬虫。报告还称，Meta 抓取规模居前，但几乎未给被抓取网站带回真实访问流量。

2240

Anthropic

2026-07-27 18:27:52

Claude 共享对话被谷歌索引，涉及钱包助记词等敏感信息

一名 Reddit 用户在 7 月 25 日通过 Google 搜索发现数百条可完整阅读的 Claude 共享对话，内容涉及加密钱包助记词、疑似社会安全号码和法律讨论。问题与 Anthropic 未在共享页面添加 noindex 元标签有关。7 月 26 日前后，Anthropic 已更新配置，Google 开始移除相关结果，但 Bing 仍可见部分共享链接。

1890