警告AI风险!13位OpenAI、Google 员工发布公开信

来源: 中国文明网
2024-06-06 00:15:35

国产免费爽爽爽爽「手で」  申军良觉得,家里变化最大的是晓莉。申聪刚回家时,她依然不爱说话,状态也不是很好,家人团聚之后重启生活,她慢慢才变得开朗。到现在,她已经能在直播里流畅地介绍产品了。yIUFjDE-WQ3GomN6qkLY15PxHzgG-警告AI风险!13位OpenAI、Google 员工发布公开信

  近日,一封由13位OpenAI和谷歌DeepMind前员工、现员工签署的公开信引起广泛关注。这封信对高级人工智能的潜在风险以及当前缺乏对人工智能科技公司的监管表示担忧。

  此外,在这封公开信中提及了AI或许会加剧现有的不平等现象,操纵和传播误导信息,以及可能无法控制自主人工智能系统,最终可能威胁人类生存。

  为这封公开信署名背书的有被誉为“人工智能教父”的杰弗里·辛顿(Geoffrey Hinton)、因开创性AI研究获得图灵奖的约书亚·本吉奥(Yoshua Bengio)和AI安全领域的学者斯图尔特·罗素(Stuart Russell)。

  公开信表示,人工智能技术有潜力为人类带来前所未有的福祉,同时,这些技术会带来严峻挑战,全球的政府和其他AI专家以及AI公司本身都已经意识到了这些风险。然而,AI 公司出于财务利益的考虑,往往避免接受有效监管,“我们认为特别设计的企业治理模式不足以改变这一现状”。

  公开信提到,AI公司掌握着大量的内部信息,包括其系统的能力和局限性、保护措施的充分性,以及不同类型伤害的风险水平。然而,目前他们与政府分享这些信息的责任较为有限,而且没有与民间社会分享的义务。

  上述公司中,现任和前任员工是为数不多的能够向公众负责的人,然而,保密条款阻碍了这种忧虑的表达。

  公开信提到,希望领先的AI 企业承诺遵循一些原则,包括承诺不会签订或执 行任何禁止对公司的风险相关担忧进行负面评价或批评的协议,也不会因员工进行风险相关的批评而阻碍其既得经济利益作为报复。

  联名信希望建立一个可验证的匿名机制,供现任和前任员工使用。

  OpenAI 前员工丹尼尔·科泰洛 (Daniel Kokotajlo)是此次联名信公开署名人员中的一位。他在社交平台发文表示,“我们中一些最近从 OpenAI 辞职的人聚集在一起,要求实验室对透明度作出更广泛的承诺。”今年 4 月,丹尼尔从 OpenAI 辞职,其中的一个原因就是对该公司在构建通用人工智能方面是否会采取负责任的行为失去了信心。

  丹尼尔提到,AI系统不是普通的软件,它们是从大量数据中学习的人工神经网络。关于可解释性、对齐和控制的科学文献正在迅速增多,但这些领域仍处于起步阶段。虽然OpenAI 等实验室正在构建的系统能够带来巨大的好处。但如果不小心,可能会在短期内造成不稳定,并在长期内造成灾难性后果。

  丹尼尔表示,从OpenAI离开时,曾被要求签署一份文件,其中包含一项不贬损条款,禁止他发表任何批评公司的话。丹尼尔拒绝签署,并失去既得股权。

  在丹尼尔加入 OpenAI 时曾希望随着AI功能越来越强大,内部在安全研究方面投入更多资金,但 OpenAI 从未做出这一转变。“人们意识到这一点后开始辞职,我不是第一个也不是最后一个辞职的人。”丹尼尔说。

  同一时间,OpenAI前超级对齐部门成员利奥波德·阿申布伦纳(Leopold Aschenbrenner)也在公开采访中透露他被开除的真实原因。他给几位董事会成员分享了一份OpenAI安全备忘录,结果导致OpenAI管理层不满。利奥波德在社交平台表示,到 2027 年实现 AGI 是极其有可能的,需要更严格的监管和更透明的机制,确保人工智能的安全发展。

  本次公开信事件是OpenAI近期面临的诸多危机中的一个。

  在OpenAI的GPT-4o模型发布不久后,OpenAI原首席科学家伊利亚·苏茨克维(Ilya Sutskever)正式官宣离职。不久后,OpenAI超级对齐团队联合负责人杨·莱克(Jan Leike)也在推特上宣布离职。他称OpenAI领导层关于公司核心优先事项的看法一直不合,超级对齐团队过去几个月一直在逆风航行,在提升模型安全性的道路上受到公司内部的重重阻碍,“(OpenAI)安全文化和安全流程已经让位给闪亮的产品”。

  (本文来自第一财经)

责任编辑:刘万里 SF014

  经党中央批准,决定给予师存武开除党籍、开除公职处分,给予李青川留党察看二年、政务撤职处分,给予王学文撤销党内职务、政务撤职处分。青海省委决定给予洪涛、陶永利留党察看一年、政务撤职处分,并对相关责任单位和人员进行严肃问责。

  反馈指出,集团总部“机关化”色彩还比较浓厚,对巡视及审计发现的问题整改不彻底,部分资产管理存在风险。巡视组还收到反映一些领导干部的问题线索,已按有关规定转自治区纪委监委、自治区党委组织部等有关方面处理。

  “但是兴奋之余,定下心来,仔细一想:芯片做出来了,没有用,锁在抽屉中,得了奖,又怎样?它只是一张纸。”黄令仪心中始终不甘。

声明:该文观点仅代表作者本人,搜狐号系信息发布平台,搜狐仅提供信息存储空间服务。
用户反馈 合作

Copyright © 2023 Sohu All Rights Reserved

搜狐公司 版权所有