腾讯机器狗学会玩对抗游戏 智能“赛博宠物”离大众还有多远?

来源:青瞳视角时间:2023-06-15 11:56:49


(相关资料图)

6月14日,腾讯Robotics X机器人实验室公布了智能体研究的最新进展,通过将前沿的预训练AI模型和强化学习技术应用到机器人控制领域,让机器狗 Max 的灵活性和自主决策能力得到大幅提升。

据介绍,腾讯Robotics X机器人实验室通过引入预训练模型和强化学习技术,可以让机器狗分阶段进行学习,有效的将不同阶段的技能、知识积累并存储下来,让机器人在解决新的复杂任务时,不必重新学习,而是可以复用已经学会的姿态、环境感知、策略规划多个层面的知识,进行“举一反三”,灵活应对复杂环境。

腾讯Robotics X机器人实验室和腾讯游戏合作,用游戏技术提升了仿真引擎的准确和高效,同时游戏制作和研发过程中积累了多元的动捕素材。这些技术以及数据对基于物理仿真的智能体训练以及真实世界机器人策略部署起到了一定的辅助作用。

利用预训练阶段获取的神经网络,机器狗才有前提和机会来聚焦解决最上层的策略学习问题,最终具备端到端解决复杂的任务的能力。最后会附加的网络会获取与复杂任务有关的信息,例如在游戏中,获取对手的信息、旗子的信息。此外,通过综合分析所有信息,负责策略学习的神经网络会学习出针对任务的高阶策略,例如往哪个方向跑动,预判对手的行为来决定是否继续追逐等等。

为了测试Max所掌握的这些新技能,研究员受到障碍追逐比赛“World Chase Tag“的启发,设计了一个双狗障碍追逐的游戏。从这个游戏看来,在基于预训练好的模型下,机器狗通过深度强化学习,已经具备一定的推理和决策能力。比如,当追击者意识到自己在躲避者碰到旗子之前已经无法追上它的时候,追击者就会放弃追击,而是在远离躲避者的位置徘徊,目的是为了等待下一个重置的旗子出现。另外,当追击者即将抓到躲避者的最后时刻,它喜欢跳起来向着躲避者做出一个"扑"的动作,非常类似动物捕捉猎物时候的行为,或者躲避者在快要接触旗子的时候也会表现出同样的行为。这些都是机器狗为了确保自己的胜利采取的主动加速措施。

据介绍,游戏中机器狗的所有控制策略都是神经网络策略,在仿真中进行学习并通过zero-shot transfer(零调整迁移),让神经网络模拟人类的推理方式,来识别从未见过的新事物,并把这些知识部署到真实机器狗上。例如下图所示,机器狗在预训练模型中学会的躲避障碍物的知识,被用在游戏中,即使带有障碍物的场景并未在Chase Tag Game的虚拟世界进行训练(虚拟世界中仅训练了平地下的游戏场景),机器狗也能顺利完成任务。

让机器狗像人和动物一样灵活且稳定的运动,是机器人研究领域长期追求的目标,深度学习技术的不断进步,使得让机器通过“学习”来掌握相关能力,学会应对复杂多变的环境变得可行。

文/北京青年报记者 温婧

编辑/田野

标签:

相关阅读

推荐阅读

腾讯机器狗学会玩对抗游戏 智能“赛博宠物”离大众还有多远?

腾讯机器狗学会玩对抗游戏 智能“赛博宠物”离大

6月14日,腾讯RoboticsX机器人实验室公布了智能体研究的最新进展,通过更多

2023-06-15 11:56:49
每日速看!斯科利莫夫斯基:我依然是一位年轻的导演

每日速看!斯科利莫夫斯基:我依然是一位年轻的导

上海大学电影艺术中心艺术总监、上海电影学院特聘教授马可·穆勒给学生更多

2023-06-15 12:11:46
高龄能不能转行做程序员?

高龄能不能转行做程序员?

大家好,我是良许。在我的直播间,每天晚上都有人在问,我今年30多岁了更多

2023-06-15 11:48:03
全球热消息:三年级数学期末试卷评讲 三年级数学期末试卷

全球热消息:三年级数学期末试卷评讲 三年级数学

1、小学三年级数学上学期期末试卷60分钟完卷)分数一、细心计算:口算更多

2023-06-15 11:00:20
全球热议:统计局:5月一线城市二手住宅销售价格环比下降0.4%

全球热议:统计局:5月一线城市二手住宅销售价格环

据国家统计局网站消息,2023年5月份,70个大中城市新建商品住宅销售价更多

2023-06-15 10:48:26
环球聚焦:飞利信6月15日快速上涨

环球聚焦:飞利信6月15日快速上涨

以下是飞利信在北京时间6月15日10:18分盘口异动快照:6月15日,飞利信更多

2023-06-15 10:26:19
凝聚创新之力!2023年创业军机处系列活动启动 每日报道

凝聚创新之力!2023年创业军机处系列活动启动 每

6月14日,2023年创业军机处启动仪式暨首期活动举办。海淀团区委书记李更多

2023-06-15 10:10:28
聚焦|苏亚雷斯走马上任!国安已关注他一年有余 曾专门派人现场考察其执教-全球微资讯

聚焦|苏亚雷斯走马上任!国安已关注他一年有余

6月15日上午,北京国安俱乐部官方宣布,里卡多-苏亚雷斯正式成为国安队更多

2023-06-15 09:54:04
+ 点击查看更多精彩

精彩放送

太原12个楼盘发放18张预售证 仅有3个项目为纯新盘
    今年9月,太原市房产管理局给省城12个楼盘正式发放了18张预售证。...
截至9月底 杭州共完成不动产登记988.72万件
    房产证、土地证,两证合一了!2016年6月1日,在市民之家举行的全市...
各地继续密集发布楼市宽松政策 多地支持农民进城购房
    近期以来,各地继续密集发布楼市宽松政策,其中包括长春、遵义多...
宁波:关于“带押过户”新模式的7个典型问题权威解答来了
    日前,宁波市不动产登记中心试点二手房带押过户新模式。新模式下...
多地政府大手笔回购商品房 苏州拟对10个板块回购约1万套新房
    越来越多的地方政府出手回购当地商品房。近日,一份苏州市政府部...
市场降温豪宅不冷 媒体:北上广深掀起“豪宅热”
    尽管整体市场低迷,但豪宅板块比较稳定。争取成交,忙完这一次,...
    最新见闻