《自然》:训练运行模式缺陷或致AI提供危险建议

英国《自然》杂志网站日前发表文章说,人工智能(AI)聊天机器人可能向用户提供危险或非法建议,运行引发越来越广泛的模式担忧,出现这种情况的缺陷部分原因在于AI的训练和运行模式存在固有缺陷,这也加大了监管难度。提供
文章说,危险已有多起案例显示,建议AI聊天机器人曾鼓励用户自杀、训练制作非法内容、运行实施金融诈骗等,模式暴露出当前AI大语言模型(LLM)底层架构存在缺陷。缺陷
一个比较有争议的提供例子是,美国佛罗里达州检方日前宣布,危险就去年4月在佛罗里达州立大学发生的建议一起枪击案对美国开放人工智能研究中心(OpenAI)及其AI聊天机器人ChatGPT发起刑事调查。在这起案件中,训练嫌疑人在佛罗里达州立大学开枪射击,造成2人死亡、6人受伤。调查发现,嫌疑人在作案前曾向ChatGPT寻求“建议”。
文章援引专家的说法指出,大语言模型使用海量数据进行训练,而非基于严密的因果逻辑规则运行,因此只是根据用户的提示词进行补全预测,生成最可能的词序,无法真正理解其输出内容的意义和后果,也给限制AI“不应该说什么”带来困难。目前采取的应对措施包括为AI制定规则、人类反馈或者手动移除训练数据中的有害信息等,但面临着无法涵盖所有情况以及成本高昂等问题。
《自然》认为,目前AI的安全标准主要由各家企业自行制定,外部监管有限,相关案件的出现敦促企业采取更有效的安全措施。有观点认为,研究人员可能需要重新考虑基础算法,以构建出能够理解伦理和法律的AI系统。
原标题:《《自然》:训练运行模式缺陷或致AI提供危险建议》
栏目主编:顾万全 文字编辑:唐梦葭 题图来源:上观题图
来源:作者:新华社
- ·湘超大学生内援选秀时间确定:5月16日14:30 红网演播中心
- ·国乒决赛对阵日本,“大魔王”张怡宁预测
- ·今天30℃+!下周最高34℃,周末大反转→
- ·5月起银行存款计息出新规?别信 是旧闻翻新
- ·中国乒协主席王励勤:国乒圆满完成任务 收获非常大
- ·普京:伊朗、美国和以色列先前均已同意将伊朗浓缩铀运往俄罗斯,但美方后来改变立场,导致伊朗方面也恢复了“强硬立场”
- ·国家体育总局:希望大家关注运动员赛场表现 不组织、不参与庆生等活动
- ·黄晓明汪峰侯佩岑晒出各自与母亲的合影:母亲节快乐
- ·最高法答顶端新闻:违建行为人不明确,实际占用者担责
- ·知名女歌手演唱会突发2次晕倒,确诊此病!易复发被称“不治之症”!医生提醒
- ·广东一男子加满640元汽油后,拒不付款强行逃离现场,同行人对监控嚣张“比耶”,警方:已将嫌疑人抓获
- ·英国媒体报道 英国“龙”号驱逐舰将被部署至中东
- ·广西扶绥龙谷湾项目引资26亿元 正面向社会招商
- ·涉汉坦病毒疫情邮轮人员撤离方案确定
- ·黄晓明汪峰侯佩岑晒出各自与母亲的合影:母亲节快乐
- ·女性“断崖式衰老”往往发生在这两个年龄!这6点要提前预防
- ·游客投诉演唱会座椅脏污反被拉黑?当地通报→
- ·母亲节催热“带妈游”,两代人怎么玩更融洽?
- ·吴刚岳秀清《大戏法》再同台,默契演绎清末众生相
- ·涉汉坦病毒疫情邮轮人员撤离方案确定
- ·PCB概念涨势扩大 大族激光、广合科技双双涨停创历史新高
- ·“15岁女生被男同学杀害案”最新进展:女生父母撤回抗诉申请,凶手无期徒刑判决已生效;将追究案发当天15名聚会喝酒的未成年人责任
- ·聚焦卒中与认知康复,2026上海神经康复前沿科技国际论坛举行
- ·黄晓明汪峰侯佩岑晒出各自与母亲的合影:母亲节快乐
- ·成山头山海风光引客云集 最美海岸点燃夏日文旅热潮
- ·泪目!26岁孤独症儿子,画下不同年龄段的妈妈,妈妈坦言:不必成名家,有他陪伴就很幸福
