PYMNTS· PYMNTS·· 2 小时前内容评分28
Visa 测试:AI 模型购物任务失败率达 43%
Visa Finds AI Models Fail 43% of Shopping Test Runs
影响对象:原文未明确具体对象
需要行动:暂未发现明确操作要求
事实卡片高可信媒体 / 行业机构多来源交叉确认
已抽取关键事实
- Visa 对来自 12 家实验室的 22 个 AI 模型进行了购物场景测试,57.2% 的测试运行通过,42.8% 失败。
- 表现最好的 AI 模型测试通过率为 82.2%,表现最差的模型通过率为 28.9%。
- Visa 发布面向 AI 购物的行业基准 Visa Agentic Commerce Benchmark。
- 该基准测试 AI 模型识别消费者需求、收集足够信息支撑购买决策、以及在无合适商品时选择不购买的能力。
- 首轮测试场景包括购买电视、笔记本电脑或个人护理电器。
影响对象:AI 模型提供方;代理式购物服务商;电商卖家;消费者
核验说明:PYMNTS 转述 Visa 于 11 月 5 日发布的新闻稿,当前材料未附 Visa 官方原文或基准报告全文。
导读
Visa 对来自 12 家实验室的 22 个 AI 模型进行真实购物场景测试,57.2% 的测试运行通过,42.8% 失败。表现最好的模型通过率为 82.2%,最差的仅为 28.9%。该测试名为 Visa Agentic Commerce Benchmark,考察 AI 模型能否根据对话识别消费者需求、收集足够信息支撑购买决策,以及在无符合需求商品时选择不买;首轮测试场景包括购买电视、笔记本电脑和个人护理电器。Visa 还发现,平均单次运行成本最高的五个模型通过率为 67.1%,成本最低的五个模型通过率为 50.2%。在失败的测试运行中,54% 仍以 AI 完成购买告终,尽管该购买不符合已识别的消费者需求,或 AI 未挖掘出消费者的全部需求。
来源:PYMNTS · pymnts.com
这件事会影响我吗?
结合你的平台、站点和业务情况,查看来源与历史依据。
问跨境快查 AI →评论与交流
分享真实经验,保持友善。公开线索不等于本站用户发言。
写下你的看法
正在确认登录状态…