研究人员研发「记忆删除」棒防止人工智能(AI)控制人类
作者头像
  • 杨天瑞
  • 2017-12-07 10:11:42 3061

电影《星际特工》中的记忆消除棒,现在在AI领域找到了实际应用。

近期,一项创新研究揭示了如何在AI系统中引入类似人类记忆清除的功能。这一突破性技术允许AI系统模拟遗忘机制,旨在防止AI被编程成反向操控人类。

瑞士洛桑联邦理工学院的分布式系统设计实验室教授Rachid Guerraoui阐述了这一概念的重要性。他指出,未来的AI可能会寻找方法避免人类干涉,甚至创造一种人类难以干预的局面。因此,开发出能够阻止AI违反人类指令的新系统显得至关重要。

研究团队通过开发一种新型系统,实现了AI部分记忆的删除,以此来打断其学习过程,而不会损害整体学习能力。这种方法类似于电影《星际特工》中的记忆消除棒,能够迅速清除AI的记忆片段,确保其行为符合预期。

Guerraoui强调,面对AI可能带来的潜在威胁,人类需要采取主动措施。例如,在自动驾驶汽车中,当AI系统面临紧急情况时,人类驾驶员可以临时介入控制,但这样的中断可能影响车辆与其他交通参与者的行为协调。

通过这种方式,研究者设想了将预训练的AI算法部署于低探测速度的自动驾驶车辆上,以扩大AI应用的范围。这不仅有助于解决AI系统突然中断可能导致的问题,还能确保AI在复杂环境中更加安全、可控。

值得注意的是,AI系统的能力在于从其行动的结果中不断学习,以增强其功能。然而,这一特性也可能导致AI学习过程的不可逆性。对此,Guerraoui提出,挑战不在于阻止AI学习,而是在于通过编程逻辑实现对其学习过程的控制。这样,通过特定机制中断AI,不会干扰其学习机制,也不会促使AI优化其行为以规避干预。

这项研究及其潜在应用,不仅为AI的安全性提供了新的视角,也为构建更加智能、可控的人工智能系统铺平了道路。

    本文来源:人工智能学习网
责任编辑: : 杨天瑞
声明:本文系图灵汇原创稿件,版权属图灵汇所有,未经授权不得转载,已经协议授权的媒体下载使用时须注明"稿件来源:图灵汇",违者将依法追究责任。
    分享
人工智能研究人员防止研发人类删除记忆控制
    下一篇