AI向真正“智能学习体”迈进_贵州在线-贵州门户网

可回溯过去能解决复杂任务AI向真正“智能学习体”迈进

张梦然

2021年02月25日09:09 | 来源：科技日报

小字号

科技日报北京2月24日电（记者张梦然)英国《自然》杂志24日发表一项人工智能研究成果：美国团队报告了一类增强学习，可回溯过去、解决复杂任务，真正改善了对复杂环境的探索方式，有望应用于机器人、语言理解和药物设计领域。这类算法被统称为“Go-Explore”，其已经在一款经典游戏的算法挑战中得分超过了人类玩家和先进的人工智能系统。该成果被认为正朝着实现真正“智能学习体”迈出了重要一步。

增强学习，可让人工智能系统通过探索和理解复杂环境来进行决策，并学习如何以最优的方式获得奖励。奖励可以包括机器人抵达特定位置或是在电脑游戏中达到一定的等级。然而，当遇到很少给予反馈的复杂环境时，现阶段的加强学习算法就很容易碰壁，这让人工智能专家们非常苦恼。

美国“OpenAI”是由诸多硅谷巨头联合建立的人工智能非营利组织，推动者包括美国创业孵化器Y Combinator总裁萨姆·阿尔特曼、美国太空技术探索公司（SpaceX）创始人埃隆·马斯克等，其目标是希望能够预防人工智能的灾难性影响，并推动人工智能发挥积极作用。此次，“OpenAI”的科学家艾德兰·艾克菲特、朱斯特·赫伊津哈及团队，提出了有效探索面临的两个主要障碍，并设计了一类算法来解决这些障碍。

研究人员表示，“Go-Explore”可以对环境进行全面探索，同时构建一个档案库来记住它去过的地方，确保自己不会忘记通往有望成功的期中阶段或是最终胜利（奖励）的路线。其在雅达利经典游戏中的得分，超过了人类玩家和先进的人工智能系统，研究人员用这类算法，解决了之前未能解决的2600个雅达利游戏，验证了这类算法的潜力。“Go-Explore”在算法挑战《蒙特祖马的复仇》中的得分是之前的4倍，在另一个算法挑战《玛雅人的冒险》中的得分也超过了人类玩家的平均水平。而相对的，此前的算法一分都拿不到。

“Go-Explore”算法还能完成一个模拟机器人任务，在这项任务中，它必须用机械臂把东西捡起来并放到4个架子中的一个架子上，其中两个架子被关在两扇门的后面。

研究人员指出，记住并回到有望成功的探索区域的简单原则是一种强大、通用的探索方法。他们认为最新的算法有望应用于机器人、语言理解和药物设计。

(责编：王震、吕骞)

分享让更多人看到

推荐阅读商务部：2020年中国商务发展回稳向好、好于预期　　商务部部长王文涛。徐想摄人民网北京2月24日电（赵竹青）2月24日，国务院新闻办公室就加快商务高质量发展、服务构建新发展格局有关情况举行发布会。… 中央一号文件给农民送上“大礼包” “三农”工作迎来新发展　　2021年2月17日，广西北海市合浦县廉州镇大江村的农民在地里播种花生（人民图片供图）人民网北京2月24日电（记者李栋）近日，中央一号文件《中共中央国务院关于全面推进乡村振兴加快农业农村现代化的意见》发布，对新发展阶段优先发展农业农村、全面推进乡村振兴作出总体部署，为当前和今后一个时期做好“三农”工作指明了方向。“学政策，跟着政策走，是俺们这些年劳动致富最大的感受。…