跳到正文
原文
OpenAI News·· 2017-06-13精选AI 评分62

OpenAI 与 DeepMind 合作提出从人类偏好中学习的方法

Learning from human preferences

AI 导读

OpenAI 与 DeepMind 安全团队合作开发了一种算法,通过让人类指出两种候选行为中哪一个更好,来推断人类想要什么。OpenAI 称,构建安全 AI 系统的一步是免去人类编写目标函数的需要,因为用简单代理替代复杂目标、或把复杂目标写偏一点,都可能导致不良甚至危险的行为。

推荐理由

OpenAI 与 DeepMind 安全团队合作提出用人类偏好比较替代手写目标函数,为对齐研究提供了一条早期思路。

来源:OpenAI News · openai.com