OpenAI 提出 RND：基于预测的好奇心探索方法
OpenAI 提出 Random Network Distillation（RND），一种基于预测的强化学习探索方法，通过好奇心鼓励智能体探索环境；该方法在 Montezuma’s Revenge 上首次超过人类平均水平。
#OpenAI
#OpenAI
今日 0 条OpenAI NewsAI 评分5151
OpenAI NewsAI 评分4545 OpenAI 提出迭代放大（iterated amplification）：学习超越人类规模的复杂目标
OpenAI 提出 AI 安全技术 iterated amplification，通过将任务分解为更简单的子任务来指定超越人类规模的复杂行为与目标，而无需提供标注数据或奖励函数。该想法仍处于极早期，目前仅在简单玩具算法领域完成实验，但 OpenAI 认为它有望成为可扩展的 AI 安全方案。
OpenAI NewsAI 评分3636 OpenAI Scholars 2019 申请开放
OpenAI 开放第二届 OpenAI Scholars 2019 申请，面向来自代表性不足群体的申请者。项目提供 6–10 份奖学金与指导，支持参与者全职学习深度学习 3 个月并开源一个项目。
OpenAI NewsAI 评分3232 OpenAI 2019 冬季 Fellows 与夏季实习生项目开放申请
OpenAI 宣布开始接受 2019 年 Fellows 与 Interns 项目申请，其中 Fellows 为冬季项目，Interns 为夏季实习生项目。
OpenAI NewsAI 评分3131 OpenAI Scholars 2018：最终项目
OpenAI 宣布 OpenAI Scholars 2018 首期学员已全部完成培训计划。
OpenAI News精选AI 评分6969 OpenAI Five 在 The International 2018 两负顶级 Dota 2 选手
OpenAI Five 本周在温哥华举行的 The International 上两负顶级 Dota 2 选手。两局比赛的前 20 至 35 分钟，OpenAI Five 都保持着获胜机会。
推荐理由：原文记录了两局比赛前 20 至 35 分钟 OpenAI Five 仍保持胜机，读者可据此观察 AI 在长时局博弈中的能力边界。
OpenAI News精选AI 评分7777 OpenAI Five 公布 Dota 对战基准结果
昨天，OpenAI Five 在现场观众和 10 万名同步直播观众面前，以三局两胜击败了一支由 99.95 百分位 Dota 玩家组成的队伍：Blitz、Cap、Fogged、Merlini 和 MoonMeander，其中四人曾有职业 Dota 比赛经历。
推荐理由：原文记录了 OpenAI Five 击败高水平 Dota 玩家的赛果，为评估当时游戏 AI 的能力边界提供了参照。
OpenAI News精选AI 评分6565 OpenAI 训练类人机器人手，以空前灵巧度操作实物
OpenAI 训练了一只类人机器人手，能够以空前的灵巧度操作实物。
OpenAI NewsAI 评分3333 OpenAI Scholars 2018：认识我们的学者
首届 OpenAI Scholars 项目现已启动，一群经验丰富的软件开发者将逐步转型为机器学习从业者。公众可以持续跟进这批学者的学习过程。
OpenAI NewsAI 评分4343 OpenAI Five Benchmark 比赛结束
OpenAI Five Benchmark 比赛现已结束。
OpenAI NewsAI 评分4343 Glow：更好的可逆生成模型
OpenAI 推出可逆生成模型 Glow，它采用可逆 1x1 卷积，能生成逼真的高分辨率图像并支持高效采样。Glow 还能发现可用于操纵数据属性的特征，OpenAI 已发布模型代码和在线可视化工具。
OpenAI NewsAI 评分5858 OpenAI 智能体从单次人类演示学会 Montezuma's Revenge 并拿到 74,500 分
OpenAI 训练智能体仅凭单次人类演示在 Montezuma's Revenge 中得到 74,500 分，优于此前任何已公开结果。做法是让智能体从演示中精心挑选的状态开始连续游戏，并用 PPO 优化游戏分数，PPO 也是 OpenAI Five 所使用的基础强化学习算法。
OpenAI News精选AI 评分7878 OpenAI Five 开始在 Dota 2 中击败业余人类战队
OpenAI 官方宣布，由五个神经网络组成的 OpenAI Five 已开始在 Dota 2 中击败业余人类战队。
推荐理由：原文由官方直接交代 OpenAI Five 的规模与对战结果，可作为了解游戏 AI 进展的一手背景。
OpenAI NewsAI 评分3131 OpenAI 首届 Retro Contest 结果公布
OpenAI 首届 Retro Contest 已结束，赛事聚焦能从既往经验泛化的算法开发。比赛结果现已公布。
OpenAI News精选AI 评分6565 OpenAI 用无监督学习改进语言理解
OpenAI 在一系列多样的语言任务上取得 SOTA 结果，所用系统可扩展且任务无关，并同时开源。该方法结合 Transformer 与无监督预训练，表明将监督学习方法与无监督预训练配合使用效果良好，OpenAI 希望该结果推动在更大、更多样数据集上应用这一思路的研究。
推荐理由：原文记录了 OpenAI 将 Transformer 与无监督预训练结合的验证，可据此理解该思路在语言任务上的效果。
OpenAI NewsAI 评分3131 OpenAI Fellows 2018 秋季计划
OpenAI 正在接受下一期 OpenAI Fellows 的申请，该计划提供在 OpenAI 进行为期 6 个月、带薪的 AI 研究学徒机会。
OpenAI NewsAI 评分5555 OpenAI 发布 Gym Retro 完整版，游戏强化学习平台扩展至 1000 多款游戏
OpenAI 发布 Gym Retro 完整版，这是一个面向游戏强化学习研究的平台，支持游戏从约 70 款 Atari 与 30 款 Sega 扩展到 1000 多款。OpenAI 同时开放了用于向平台添加新游戏的工具。
OpenAI News精选AI 评分7171 OpenAI 分析称最大规模 AI 训练算力自 2012 年以来每 3.4 个月翻倍
OpenAI 发布分析称，自 2012 年以来最大规模 AI 训练运行使用的算力每 3.4 个月翻倍，同期累计增长超过 300,000 倍。相比之下，摩尔定律 2 年翻倍的周期只会带来约 7 倍增长。OpenAI 指出算力提升是 AI 进步的关键组成部分，呼吁为远超当前能力的系统做好准备。
推荐理由：原文用 3.4 个月翻倍、增长超 300,000 倍的算力曲线对比摩尔定律，为预判远超当前能力的系统提供了量化参照。
OpenAI NewsAI 评分4141 OpenAI 提出基于辩论的 AI 安全技术
OpenAI 提出一种基于辩论的 AI 安全技术，通过训练 AI 智能体就特定话题相互展开辩论，并由人类担任裁判决定胜负。该技术旨在利用这种辩论机制来提升 AI 系统的安全性。
OpenAI NewsAI 评分3636 OpenAI 发布实验性元学习方法 Evolved Policy Gradients
OpenAI 发布实验性元学习方法 Evolved Policy Gradients（EPG），该方法通过演化学习智能体的损失函数，使其能够在全新任务上实现快速训练。经 EPG 训练的智能体在测试时可完成训练设定之外的基本任务，例如导航到房间另一侧的物体。
OpenAI NewsAI 评分4141 OpenAI 发起 Retro Contest 迁移学习竞赛
OpenAI 发起 Retro Contest 迁移学习竞赛，衡量强化学习算法从既往经验中泛化的能力。该竞赛聚焦迁移学习，检验算法能否有效利用过往经验。
OpenAI NewsAI 评分1717 OpenAI 黑客马拉松回顾
3月3日，OpenAI 举办了首届黑客马拉松，100 名人工智能社区成员参与其中。
OpenAI NewsAI 评分3636 OpenAI 提出 Reptile：一种可扩展的元学习算法
OpenAI 提出 Reptile 元学习算法，通过反复采样任务、对该任务执行随机梯度下降，并将初始参数向该任务学到的最终参数更新。Reptile 将 Shortest Descent 算法应用于元学习，数学上类似一阶 MAML，只需 SGD 或 Adam 等优化器的黑箱访问，即可获得相近的计算效率与性能。
OpenAI NewsAI 评分3737 OpenAI Scholars 计划
OpenAI Scholars 计划为来自代表性不足群体的个人提供 6–10 个津贴名额与导师指导，支持其用 3 个月时间全职学习深度学习，并开源一个项目。
OpenAI NewsAI 评分4747 OpenAI 发布机器人学研究的基础要素
OpenAI 发布 8 个模拟机器人环境与 Hindsight Experience Replay 的 Baselines 实现，这些工具均开发于过去一年并用于其机器人学研究。这些环境已被用于训练可驱动实体机器人的模型。OpenAI 同时发布了一系列机器人学研究请求。
OpenAI NewsAI 评分2828 OpenAI 黑客松
OpenAI 将于 3 月 3 日（周六）在旧金山 Mission 区办公室举办黑客松活动。活动包含技术演讲与黑客松开发环节，参与者可前往 OpenAI 办公室现场参加。
OpenAI NewsAI 评分4747 OpenAI 准备应对 AI 的恶意使用
OpenAI 与多家机构联合发表一篇论文，预测恶意行为者可能如何滥用 AI 技术，并提出预防和缓解这些威胁的潜在方法。
OpenAI NewsAI 评分2424 OpenAI 迎来新捐赠者
OpenAI 宣布欢迎新的捐赠者加入。
OpenAI NewsAI 评分3131 OpenAI：通过教学实现可解释的机器学习
OpenAI 设计了一种让 AI 互教的可解释机器学习方法，使教学示例同时对人类可理解。该方法会自动挑选最具信息量的示例教授概念，例如最能描述“狗”的图像。实验表明，这些示例能有效教会 AI。
OpenAI NewsAI 评分2828 OpenAI 发现用于实体消歧的类型
OpenAI 构建了一个可自动判断词语所指代对象的实体消歧系统。该系统利用神经网络判断词语是否属于约 100 个自动发现的“类型”（非排他性类别）。
OpenAI NewsAI 评分4040 OpenAI 发布 Requests for Research 2.0
OpenAI 发布 Requests for Research 2.0，公开 7 个在 OpenAI 研究过程中出现的未解决问题。
OpenAI NewsAI 评分3838 OpenAI 发布面向块稀疏权重网络的 GPU kernel
OpenAI 发布了针对块稀疏权重网络的高度优化 GPU kernel，根据所选稀疏度，速度可比 cuBLAS 或 cuSPARSE 快多个数量级。这些 kernel 已用于文本情感分析以及文本和图像生成建模，并取得 SOTA 结果。
OpenAI NewsAI 评分3030 OpenAI 开发分层强化学习算法，学习可用于多种任务的高层动作
OpenAI 开发了一种分层强化学习算法，能学习可用于解决多种任务的高层动作，从而快速完成需要数千个 timestep 的任务。将该算法应用于一组导航问题时，它发现了朝不同方向行走和爬行的高层动作，使智能体能够快速掌握新的导航任务。
OpenAI NewsAI 评分4444 OpenAI：机器人控制从仿真泛化到物理世界
OpenAI 的最新机器人技术使完全在仿真中训练的控制器部署到物理机器人后，能在执行简单任务时应对环境的意外变化。这些控制器构成闭环系统，而非以往的开环系统。
OpenAI NewsAI 评分3232 OpenAI：用于模拟机器人摔跤的元学习
OpenAI 展示，在模拟机器人摔跤任务中，元学习智能体可学会快速击败更强的非元学习智能体。该元学习智能体还能适应物理故障。
OpenAI NewsAI 评分4040 OpenAI：竞争性自我博弈让模拟 AI 自主发现物理技能
OpenAI 发现竞争性自我博弈（self-play）能让模拟 AI 在无需刻意设计环境的情况下，自主发现抢断、躲避、假动作、踢球、接球和扑球等物理技能。自我博弈可确保环境难度始终适合 AI 不断提升。结合 Dota 2 的自我博弈结果，OpenAI 越来越确信自我博弈将成为未来强大 AI 系统的核心组成部分。
OpenAI NewsAI 评分5353 OpenAI 提出 LOLA 算法，学习建模其他智能体
OpenAI 发布 LOLA（Learning with Opponent-Learning Awareness）算法，该算法在训练中会把其他智能体也在学习这一事实纳入考虑。在重复囚徒困境中，LOLA 能发现以牙还牙（tit-for-tat）这类既利己又协作的策略，是迈向能建模其他心智的智能体的一小步。
OpenAI NewsAI 评分4646 OpenAI Baselines 发布 ACKTR 与 A2C
OpenAI 发布了两个新的 OpenAI Baselines 实现：ACKTR 和 A2C。A2C 是 A3C 的同步确定性变体，性能与 A3C 相当。ACKTR 比 TRPO 和 A2C 更具样本效率，每次更新的计算开销仅略高于 A2C。
OpenAI NewsAI 评分5555 OpenAI 进一步解读 Dota 2 自我对弈成果
OpenAI 表示其 Dota 2 系统在一个月内从勉强匹配高水平玩家提升到击败顶尖职业选手，自我对弈可在算力充足时把机器学习系统从远低于人类水平提升到超人类水平。监督式深度学习系统的上限取决于训练数据集，而自我对弈系统中的可用数据会随智能体变强而自动改善。
OpenAI News精选AI 评分7777 OpenAI 的 Dota 2 bot 在 1v1 标准锦标赛规则下击败世界顶级职业选手
OpenAI 创建的 bot 在标准锦标赛规则的 Dota 2 1v1 比赛中击败世界顶级职业选手。该 bot 完全通过自我对弈从零学习，未使用模仿学习或树搜索。OpenAI 称这是朝向在涉及真实人类的复杂混乱情境中完成明确目标的 AI 系统迈出的一步。
推荐理由：该 bot 仅靠自我对弈从零学会 Dota 2，未使用模仿学习或树搜索，可作为复杂环境下目标导向 AI 系统的参考路径。