最近，OpenAI宣布启动Spinning Up，该项目旨在提供深度强化学习。 OpenAI以在虚拟环境中制作外观时尚的代理而闻名，该代理可以与华盛顿大学合作，例如Humanoid v2或POLO，来学习如何独自行走。强化学习包括在激励环境中向代理提供奖励信号，并通过最大化奖励来实现预期目标。强化学习在人工智能的重大突破中发挥了作用，例如Google的DeepMind的AlphaGo以及在Dota 2等环境中受过训练的代理。Spinning Up包括一系列重要的强化学习研究论文，以及词汇表。了解强化学习所必需的术语以及一系列用于进行锻炼的算法。该项目的启动不仅可以帮助人们了解强化学习的工作原理，还可以让更多计算机科学领域以外的人参与进来，从而朝着OpenAI的总体目标迈进，以安全地创建人工智能（AGI）。解决人工智能安全性问题需要具有广泛专业知识和意见的人。许多相关专业与工程或计算机科学无关。但是，每个参与人员都需要充分了解该技术，以便做出明智的决定。 ，提供Spinning Up所需的解决方案，”旋转文档文字说。通过与OpenAI的学者和研究人员合作，Spinning Up可以让对人工智能感兴趣但在该领域没有经验的普通人参与。除了在实现AGI的安全部署方面取得进展外，还制定了该计划，因为目前还没有教科书可以完全提供强化学习所需的知识。这些知识目前仅存在于前沿讲座和有影响力的研究论文中。 “因此，我们的软件包旨在为那些对深度强化学习感兴趣并且想要学习和使用但不知道如何将算法转换为代码的人提供一个中间步骤。我们正在努力使这个项目成为我们的起点。” Spinning Up项目是OpenAI大规模教育服务的一部分。该机构将在2019年2月举办一个Spinning Up研讨会，另外一个研讨会将与加州大学伯克利分校的人类兼容AI中心（CHAI）共同举办。