那么,目前我们所说的让AI产生回忆和人类的回忆是一回事吗;究竟人工智能可以用什么方法产生回忆,文中涉及判断和对过去行为的价值评估(评估信用分配)等问题,有哪些技术解决途径;与以往相比,此次DeepMind提出的新方法有何不同,让人工智能怎样学会回忆,达到怎样的效果;让人工智能会回忆,基于目前的办法,我们尚需做哪些努力?
AI产生的“回忆”与人类的是一回事吗
在现实中,多数让我们记忆深刻的,往往痛苦的事情多于快乐,好像受伤、不高兴事的记忆沟痕更深。这让人想起雨果的话——幸福的家庭都是相似的,不幸的家庭却各有各的不幸,也许这种感慨是记忆使然。
而在记忆当中,那些感动我们的人或事往往会触发回忆,所谓触景生情。“就人类长期记忆而言,实际上记忆本身是呈多模态、场景化的,对于到过哪里做过什么事,存储包含多维度,触发某个维度时即可快速找到线索。而人们往往高估了记忆量,其实容量很有限,人类记忆本身非常高度抽象,对特征的提炼,其中有好多要素是概况和模糊状的,如回忆电影,不会精准的一点一滴完整成像,但再现类似场景时,也许某个特定标识,就会回想起之前的一幕。”远望智库人工智能事业部部长、图灵机器人首席战略官谭茗洲在接受科技日报记者时指出。
记忆对人类而言,究竟有何作用?据介绍,记忆是我们对人脑中的信息和过去的经历进行编码、存储,保留和随后回忆的能力。一般而言,可以将其视为利用过去的经验来影响当前的行为。记忆使人类能够学习和适应以前的经验以及建立关系,是记忆过去经验的能力,以及使人想起以前学到的事实、经验、印象、技能和习惯的能力或过程。它是从我们的活动或经验中学到并保留下来的东西,通过结构或行为的改变或回忆和认可来证明。
目前,我们所说的让AI产生回忆与人类的是一回事吗?谭茗洲答道,“目前AI记忆仍只是停留在将学习将所获得的信息被编码、存储,进而转化认知的过程。以前的做法只是把所发生的一切悉数存储,然而记忆与存储有区别,记忆是为了能够有效回忆。回忆检索的方式,往往是跨各种阈界的,如通过某个品牌忽然想起某个事。由此,让AI智能体对过去所发生的一些事情,判断该不该记忆,关键要采取一些方法令其做出评定,达到人类回忆或记忆的效果。”
采用什么高招让AI产生些许“记忆”
在以往的研究中,采用什么高招可以让AI产生些许回忆?
谭茗洲介绍说,比较常用的有四种方法:1.长短期记忆网络,是由一个被嵌入到网络中的显性记忆单元组成,功能是记住较长周期的信息。这一技术主要被谷歌、亚马逊和微软等公司在使用,用于语言识别、智能助手和属性增强的应用。2.弹性权重巩固算法,这是从神经科学中借来的概念,用来评估联结的权重,而这些权重主要是通过早期任务的重要性来评估。这种算法用于序列学习多种游戏。DeepMind采用的就是这种与记忆巩固有关的算法,目的是让机器学习、记住并能够提取信息。3.可微分网神经计算机,特点是将神经网络与记忆系统联系起来,可以像计算机一样存储信息,还可从例子中进行学习。4.连续神经网络,主要用于迷宫学习,解决复杂的连续性任务,同时可以迁移知识,代表不会忘记此前所学的重要信息并利用先验知识的尝试(这依然是实现人类水平智能中的一大难题)。
“要让AI能够实现回忆过去的事情,涉及到判断和对过去行为的价值评估(评估信用分配)的问题。但现有的评估信用分配的方法,无法解决与结果存在长时间间隔的任务。简单来说,就是未来不可期。”谭茗洲指出。
据介绍,人工智能的研究中,在一个长序列内评估个人行为的效用问题,被称为信用分配问题。该评估可以对过去的行动或计划的未来行动进行评分。
谭茗洲解释道,“具体在强化学习中,智能体获得指导的唯一途径是通过奖励,而奖励通常是稀疏和延迟的。当智能体得到奖励时,很难知道哪些行为应该被信任,哪些该被责备,这就是信用分配问题。”
DeepMind的论文呈现打游戏过程中的简单场景,让AI智能体对探索过的路径及攻略进行记忆,当然与人类复杂的记忆机制相比,这是相当初期的阶段。