C114通信网  |  通信人家园

人工智能
2023/7/6 08:41

OpenAI 预测超智能 AI 十年内出现,正研究用 AI 来监督 AI

新浪科技  

当地时间周三,ChatGPT 的开发者 OpenAI 表示计划投入更多资源并成立新的研究团队,研究如何确保 AI 对人类的安全性,最终实现用 AI 来监督 AI。

OpenAI 联合创始人伊利亚 苏茨凯弗(Ilya Sutskever)和 AI 对齐负责人简 莱克(Jan Leike)在官方博客中表示:“超级智能的巨大能力可能导致人类失去力量甚至灭绝。目前,我们还没有解决方案来操纵或控制一个可能的超智能 AI,并防止其变成无赖。”

这篇博文预测,超智能 AI,即相比于人类更智能的系统,可能会在未来 10 年中出现。人类需要比目前更强大的技术来控制超智能 AI,因此需要在“AI 对齐研究”方面取得突破,确保人 AI 对人类持续有益。AI 对齐是 AI 控制中的主要问题,即要求 AI 的目标和人类的价值观与意图保持一致。

作者写道,OpenAI 将在未来 4 年内,将算力的 20% 专门用于解决这方面问题。此外,该公司将组建新的“超对齐”团队来组织这方面的工作。

该团队的目标是开发达到“人类水平”,由 AI 驱动的对齐研究员,随后通过庞大的算力推动其发展。OpenAI 表示,这意味着将使用人工反馈来训练 AI 系统,通过训练 AI 系统来协助人工评估,最终训练 AI 系统来进行实际的对齐研究。

不过,人工智能安全的倡导者康纳 莱希(Connor Leahy)表示,OpenAI 的计划存在根本性缺陷,因为最初的人类水平 AI 可能会失控并造成严重破坏,而这将迫使研究者去解决 AI 安全问题。他在接受采访时表示:“在构建人类水平的智能之前,必须先解决对齐问题,否则默认情况下你无法控制它。我个人认为这不是个特别好的、安全的计划。”

AI 的潜在危险一直是 AI 研究员和公众最关心的问题。今年 4 月,一群 AI 行业领袖和专家签署公开信,呼吁暂停 6 个月开发比 OpenAI 的 GPT-4 更强大的系统,原因是对社会存在潜在风险。益普索今年 5 月的调查发现,超过 2/3 的美国人担心 AI 可能产生的负面影响,61% 的人认为 AI 可能威胁人类文明。

给作者点赞
0 VS 0
写得不太好

免责声明:本文仅代表作者个人观点,与C114通信网无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。

热门文章
    最新视频
    为您推荐

      C114简介 | 联系我们 | 网站地图 | 手机版

      Copyright©1999-2025 c114 All Rights Reserved | 沪ICP备12002291号

      C114 通信网 版权所有 举报电话:021-54451141