机械手击掌
周一,非营利人工智能研究公司 OpenAI 的研究人员由埃隆·马斯克共同创立推出了 Dactyl,这是一个经过训练、用于控制机械手的人工智能系统。研究人员称,该系统能够用机械手操纵实体物体,灵巧程度达到人工智能此前从未实现过的水平。
Dactyl 承担的任务听起来可能像是教幼儿做的事:拿起这个六面体方块,把它转来转去,直到某一面朝上。不过,与幼儿不同,Dactyl 需要超过一个世纪的经验才能学会熟练完成这项任务。得益于强大的计算机,研究人员得以将所有这些经验浓缩到仅仅 50 个“现实世界”小时里。
熟能生巧(几乎)
研究人员在模拟环境中训练 Dactyl——也就是一个配有计算机生成机械手的数字环境——所用的技术称为领域随机化。他们在模拟环境中设定了一些参数,例如立方体的大小或重力角度,然后将这些变量随机化。他们还让多个模拟机械手同时进行训练。通过促使 Dactyl 适应许多不同的虚拟情境,研究人员提升了人工智能适应现实世界情境的能力。
在模拟环境中训练 50 小时后,人工智能能够操纵现实世界中的机械手,连续 50 次成功完成指定任务(成功完成是指系统没有掉落方块,也没有耗时超过 80 秒)。要确定如何移动机械手来完成任务,它只需通过三台摄像机观察方块。
一个算法,训练万物
正如研究人员在博客文章中所述,他们使用与训练OpenAI Five相同的算法来训练 Dactyl。OpenAI Five 是由五个神经网络组成的团队,经过训练后可玩电脑策略游戏 DOTA 2。Dactyl 的成功证明,可以构建一种通用算法,教会人工智能完成两项截然不同的任务。这或许能让研究人员今后更轻松地为许多不同用途训练人工智能,因为他们无需从头开始。



