热点事件持续更新
Human Forward 美国测试：200家零售商中63家拦截AI爬虫，58家却在robots.txt中声明欢迎
1 篇报道1 个报道来源17 小时前更新
先了解这件事
报道摘要
调查机构 Human Forward 将英国版测试引入美国市场，用8款购物助手测试200家零售商及DTC品牌，发现63个拦截爬虫的站点中有58个在robots.txt中明确声明欢迎AI抓取。在顺利完成读取的48家大型零售商中，仅2家允许AI代理完成结账流程；200个测试站点中有98个直接拒绝爬虫访问或页面无法正常打开。测试还发现，8款购物助手中有7款在被问及床垫品牌Purple时将其识别为颜色而非品牌。距离黑色星期五不足一个月，商家可从robots.txt放行名单配置、商品页结构化数据完整性、品牌词在助手回答中指向的实体对象三个维度自查。
摘自 AMZ123 跨境快讯
报道时间线
沿着报道，了解事件的不同侧面。
11月7日
- AMZ123 跨境快讯Human Forward 美国测试：200家零售商中63家拦截AI爬虫，58家却在robots.txt中声明欢迎
调查机构 Human Forward 将英国版测试引入美国市场，用8款购物助手测试200家零售商及DTC品牌，发现63个拦截爬虫的站点中有58个在robots.txt中明确声明欢迎AI抓取。在顺利完成读取的48家大型零售商中，仅2家允许AI代理完成结账流程；200个测试站点中有98个直接拒绝爬虫访问或页面无法正常打开。测试还发现，8款购物助手中有7款在被问及床垫品牌Purple时将其识别为颜色而非品牌。距离黑色星期五不足一个月，商家可从robots.txt放行名单配置、商品页结构化数据完整性、品牌词在助手回答中指向的实体对象三个维度自查。
本事件热度走势
当前热度 6·可比范围峰值 10（11月7日 14:00）·近 24 小时可比范围变化 –
趋势仅比较持续完整观测到的相同主体，范围可能小于当前热度统计。移动指针或点击图表查看每小时热度；键盘可用左右方向键切换。