跳到正文
跨境快查跨境新闻与卖家资源导航
原文
PYMNTS· PYMNTS·· 2 小时前内容评分28

Visa 测试:AI 模型购物任务失败率达 43%

Visa Finds AI Models Fail 43% of Shopping Test Runs

重要度:待评估

影响对象:原文未明确具体对象

需要行动:暂未发现明确操作要求

事实卡片高可信媒体 / 行业机构多来源交叉确认
已抽取关键事实
  • Visa 对来自 12 家实验室的 22 个 AI 模型进行了购物场景测试,57.2% 的测试运行通过,42.8% 失败。
  • 表现最好的 AI 模型测试通过率为 82.2%,表现最差的模型通过率为 28.9%。
  • Visa 发布面向 AI 购物的行业基准 Visa Agentic Commerce Benchmark。
  • 该基准测试 AI 模型识别消费者需求、收集足够信息支撑购买决策、以及在无合适商品时选择不购买的能力。
  • 首轮测试场景包括购买电视、笔记本电脑或个人护理电器。
影响对象:AI 模型提供方;代理式购物服务商;电商卖家;消费者

核验说明:PYMNTS 转述 Visa 于 11 月 5 日发布的新闻稿,当前材料未附 Visa 官方原文或基准报告全文。

导读

Visa 对来自 12 家实验室的 22 个 AI 模型进行真实购物场景测试,57.2% 的测试运行通过,42.8% 失败。表现最好的模型通过率为 82.2%,最差的仅为 28.9%。该测试名为 Visa Agentic Commerce Benchmark,考察 AI 模型能否根据对话识别消费者需求、收集足够信息支撑购买决策,以及在无符合需求商品时选择不买;首轮测试场景包括购买电视、笔记本电脑和个人护理电器。Visa 还发现,平均单次运行成本最高的五个模型通过率为 67.1%,成本最低的五个模型通过率为 50.2%。在失败的测试运行中,54% 仍以 AI 完成购买告终,尽管该购买不符合已识别的消费者需求,或 AI 未挖掘出消费者的全部需求。

来源:PYMNTS · pymnts.com

这件事会影响我吗?

结合你的平台、站点和业务情况,查看来源与历史依据。

问跨境快查 AI →

评论与交流

分享真实经验,保持友善。公开线索不等于本站用户发言。

写下你的看法

正在确认登录状态…