文 / 王丹
近日,英伟达 GTC 线上大会发起了一场特别活动——英伟达 CEO 黄仁勋与 OpenAI 联合创始人兼首席科学家 Ilya Sutskever 进行了一次 " 炉边谈话 "。两人就 OpenAI 旗下产品 ChatGPT 系列,以及 OpenAI 公司本身的发展进行了回顾和探讨。
Ilya 在谈话中提到,在 OpenAI 及其产品的发展历程中,有 2 个好点子功不可没——第一个是,通过压缩训练数据让 AI 进行 " 无监督学习 ";第二个是,让 AI 进行强化学习。在介绍强化学习部分时,Ilya 特地提到了《DOTA2》——训练出能与职业选手对抗的《DOTA2》AI,这是他们在 OpenAI 中完成的第一个真正的大型项目。
在 2017 年的《DOTA2》国际邀请赛(TI7)上,OpenAI 首次与《DOTA2》玩家见面。当时的 OpenAI 还无法进行 5V5 对战,只可进行中路单挑。在表演赛环节,主办方请来了 TI1 冠军队选手 Dendi,他使用英雄影魔与 OpenAI 进行中路单挑。OpenAI 展现了熟练的卡兵技巧,随后仅用 4 分 40 秒就 2:0 击败了 Dendi。
比赛期间,OpenAI 官方在 YouTube 上发布视频,解释了为何团队选择用《DOTA2》来训练 AI ——《DOTA2》机制较为复杂且竞技性较强,AI 在游玩中需要不断学习新的技能、新的玩法,才能达到和职业玩家相当的水平,这使《DOTA2》成为了很好的 AI 自我训练道具。
在此之后,OpenAI 研发出了《DOTA2》5V5 对战 AI —— OpenAI Five。5V5 对 AI 之间的合作、策略规划提出了更高要求。在实际对战中,OpenAI Five 的合作表现确实不如职业选手—— 2018 年 8 月 TI8,职业战队 paiN 在表演赛上对战 OpenAI Five,最终取胜;在 TI8 的第二场表演赛上,BurNing 徐志雷、骆非池 iG_430 等 5 位国内前职业选手组成小队,对战 OpenAI Five,也同样取胜。
OpenAI Five 在 2018 年的战绩并不好看,但它的成长速度超出了许多玩家的想象—— 2019 年 4 月,OpenAI Five 与 TI8 冠军战队 OG 进行 BO3 对战,官方对这次比赛进行了直播。
最终 OpenAI Five 以 2:0 的比分拿下了 BO3 胜利。期间还多次表演了诱敌深入、丝血逃命的 " 骚操作 "。
比赛之后,OpenAI 官方宣布在 2019 年 4 月 18-21 日举办 Open Five 擂台赛,期间全球玩家可自行组队挑战 OpenAI Five。根据官方最终在推特上公布的数据来看,OpenAI 赢得了 7215 场比赛,输掉了 42 场,胜率高达 99.4%。
谈到 OpenAI 在《DOTA2》上的尝试,黄仁勋表示,当时 OpenAI 看似在走弯路,但现在回顾却发现正是这些弯路导致了 ChatGPT 的产生。Ilya 表示认同——从某一方面来说,通过《DOTA2》,OpenAI 的学习模式从 " 强化学习 " 转变为了 " 基于人类反馈的强化学习(RLHF)",这为后来的 ChatGPT 技术提供了借鉴。
当然,《DOTA2》只是 OpenAI 的突破性尝试之一:在早期同行专注于神经网络的深度时,OpenAI 已经在兼顾考虑神经网络的规模;团队曾运用英伟达 GPU 和 ImageNet 来训练神经网络模型,而用黄仁勋的话来说,其训练结果 " 震惊了世界 "。
据 llya 介绍,今年 3 月推出的 GPT-4 采用多模态模型,不仅能够更好地理解文本,也能从图像中获取和学习信息,GPT-4 也因此具有更强的总结推断能力。但 llya 也坦言—— OpenAI 还没有充分挖掘出 AI 的潜力,AI 领域在未来还会持续进步。
回顾过去,《DOAT2》并不是唯一一个推动科技及研发进展的游戏。最被玩家熟知的,可能还是 2005 年的 " 堕落之血事件 " ——因为暴雪设计上的疏漏,一种传染性极强的 debuff 在《魔兽世界》各大主城传播,造成大量玩家角色伤亡。" 堕落之血事件 " 一度得到了公共卫生学界的关注,很多研究者将 " 堕落之血事件 " 作为流行病学的 " 虚拟案例 " 加以研究,还有人撰写了相关论文并刊发在医学期刊《柳叶刀 · 传染病》上。
图源 YouTube@Half as Interesting
除了这些成果较为明显的案例,游戏行业的发展本身就对科技有着不小的推进作用。今年 2 月,新华社旗下的每日电讯发文《别忽视游戏行业的科技价值》表示,游戏科技近年来正在芯片、终端、工业、建筑等实体产业领域实现价值外溢,释放更多效能。此外,文章认为,游戏产业汇聚了大量高水平科技人才,并且其发展顺应消费者需求,兼具市场与人才的 " 先天优势 ",将为更多科技创新提供基础环境。
游戏葡萄招聘内容编辑,