亚马逊于今年 11 月底推出名为 Q 的 AI 聊天机器人,不过根据国外科技媒体 Platformer 披露的一份内部文件,亚马逊员工称 Q 存在严重的“幻觉”问题,并泄露了包括 AWS 数据中心位置、内部折扣计划等诸多机密信息。
IT之家 11 月 17 日报道,剑桥词典(Cambridge Dictionary)近日宣布 2023 年年度词汇为“hallucinate”(产生幻觉)。
hallucinate 原意为似乎看到、听到、感觉到或闻到“一些不存在的东西”,通常是指用户在不良健康或者服用药物状态下产生的幻觉。
伴随着 AI 的崛起,hallucinate 延伸为 AI 产生幻觉,生成错误的信息。
报告文件显示,亚马逊 Q 会产生幻觉,返回有害或不适当的聊天内容。例如,亚马逊 Q 会返回过时的安全信息,可能会让客户面临风险。
亚马逊淡化了员工讨论的重要性,并声称没有发现任何安全问题。然而,泄露的文件引发了人们对 Q 准确性和安全性的担忧,Q 仍处于预览阶段,尚未正式发布。
一名员工将该事件标记为“sev 2”,这意味着该事件非常严重,需要工程师加班第一时间修复。
Q 被定位为 ChatGPT 的企业级版本,旨在比消费级工具更安全。然而,内部文件强调了 Q 提供不准确或有害信息的风险。
报道称 Q 除了存在严重的幻觉之外,还泄露了公司机密数据,包括 AWS 数据中心的位置、内部折扣计划和未发布的功能。