OpenAI再建顶级团队,重金招聘核心岗成员,阻止超级AI的威胁!

本文主要是介绍OpenAI再建顶级团队,重金招聘核心岗成员,阻止超级AI的威胁!,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

“AI确实可能会杀死人类。”这并不是哪家自媒体为博人眼球而发表的谣言,而是ChatGPT之父、OpenAI CEO山姆·奥尔特曼在今年3月与MIT研究科学家Lex Fridman对话时亲口所说的一句话。

如今,这位全世界最受瞩目的老板决定采取行动,以阻止自己的预言发生——OpenAI通过7月5日发表于官网的博客表示,公司正在组建一个顶级AI团队,计划于四年内解决超级AI的核心技术挑战并实现对超级AI的完全掌控。

更值得一提的是,为了能更好的完成对新团队的构建,OpenAI本次甚至开启了团队核心岗位的对外招聘通道。目前所公布的三个职位,年薪范围在24.5至50万美元不等。

1、我们创造了过于强大的黑盒

根据OpenAI的说法,超级智能将会是人类有史以来所发明的最具影响力的技术,将能够帮助人类解决世界上许多最重要的问题。但不可忽视的是,超级智能的巨大力量也同样危险,可能导致人类丧失许多核心技能,甚至彻底灭绝人类。

虽然就目前而言,即便是最先进的大模型GPT4与超级智能依然相差甚远,但OpenAI认为超级智能的到来只需要十年甚至更短。并且如今人类在AI方面的技术积累,就连GPT4的推理能力都无法解读,更不要说在未来控制比人类聪明太多的超级智能。

想要管理超级智能可能带来的风险,就需要建立相应的治理组织,来解决超级智能AI对齐的问题。然而遗憾的是,我们至今仍然没有解决方案能够操纵或控制潜在的超级智能,以防止将来可能发生的危险。

现阶段最有效的对齐人工智能的技术之一,正是GPT4中所使用的基于人类反馈的强化学习(RLHF),但依靠这种基于人类监督的AI能力,我们无法可靠地监督比我们聪明太多的人工智能系统。因此目前的对齐技术无法有效覆盖超级智能,这使得我们急需寻找新的科技突破。

2、OpenAI的三步计划

对于超级智能的潜在风险,OpenAI也给出了目前他们认为切实可行的解决方案,那就是建立一个人类水平的“自动对齐研究系统”,这样人类便能够依靠大量算力扩展研究工作,以实现对超级智能的控制和调整。

而创建这个自动对齐研究系统,则大致需要分为三步,包括开发可扩展的训练方法;验证生成模型结果,以及对整个对齐管道进行压力测试。

  1. 为了在人类难以评估的任务上提供训练信号,OpenAI决定利用人工智能系统协助评估其他人工智能系统。此外,他们希望能够了解并控制AI模型是如何将监督推广到人类研究员无法监督的任务上。
  2. 在验证自动对齐系统的一致性方面,可以搜索有问题的模型行为和出现问题的模型的内部结构。
  3. 最后,在完成上述的工作后,可以通过训练未对齐的模型来测试对齐系统的整个管道,并确认系统最终监测到的其余模型的未对齐行为,也就是我们熟知的对抗测试。

OpenAI表示,随着人们对AI模型不可控行为了解的深入,人类对于AI模型的研究重点可能将会发生实质性的变化,甚至有可能会演变出全新的AI研究领域。而在未来,公司也将随着研究的深入公开更多的研究路线及研究成果。

3、联合创始人带队的顶级天团

为了能够更好的构建这个自动对齐系统,OpenAI决定组建一个全新的顶级人工智能专家团队。团队将由OpenAI联合创始人兼首席科学家Ilya Sutskever以及OpenAI对齐团队负责人Jan Leike共同领导。

OpenAI联合创始人兼首席科学家Ilya Sutskeve

团队目前的其余成员,则包括此前在公司内部负责AI对齐的研究人员和工程师,以及来自其他研发团队的AI专家。并且在接下来的四年里,OpenAI决定将公司此后所获得算力的20%分配给该团队,用以完成新系统的训练。

这将会是一项关乎未来的赌注,而OpenAI最具价值的筹码便是这个正在组建的超级团队。公开博客中也提到,正确完成这项任务对实现OpenAI的使命至关重要,希望新团队包括其他内外部组织都能为之作出贡献,并最终将可靠的新方法推广部署到更多领域之中。

4、核心岗位重金招聘

而这篇博客中的另一个重点,则是OpenAI正在开展新团队核心岗位的对外招聘。博客中提到:“为了解决这个时代最重要的技术问题,我们需要世界上最优秀人才的帮助。如果你已经在机器学习领域取得了成功,这将是你为世界作出巨大贡献的机会。”

目前所公开的三个核心岗位包括研究工程师(research engineer)、研究科学家(research scientist)以及研究经理(research manager):

研究工程师:年薪范畴24.5至45万美元。职责主要为机器学习训练代码的编写;进行机器学习实验及分析,以及与团队合作规划未来实验。细节方面则包括探索可扩展监督技术;研究管理数据集和模型奖励信号;预测模型行为以及设计对齐研究方法。

研究科学家:年薪范畴同样为24.5至45万美元。岗位职责主要为开发创新的机器学习技术,并为公司的研究愿景作出贡献。工作包括对齐研究实验的设计、研究方法总结;管理数据集,以及探索模型行为和设计新的实验方法。

研究经理:年薪范畴42至50万美元。主要负责管理由科学家和工程师组成的团队,整合大模型和超级智能研究成果。该角色需要能够规划和执行研究项目,指导团队成员,以及培养团队的多元化和包容性文化。

5、终极目标:四年内解决一切

但话说回来,尽管目前新团队的阵容已然非常强大,OpenAI也在不惜重金招贤纳士,但想要完成这项任务的难度也同样可想而知,就连山姆·奥尔特曼自己也坦言不敢保证最终能取得成功。

然而值得高兴的一点是,目前该团队的许多想法在初步实验中已经取得了一定成果,AI对齐的衡量标准也在一次次实验中变得愈加完善,甚至如今一些创新性方法已经被运用到了解决GPT4幻觉的实验之中。

对于团队的终极目标,OpenAI表示计划利用四年时间完成自动对齐系统的构建,并彻底理解和减轻现有AI大模型以及未来可能出现的超级智能的所有技术风险,包括AI滥用、经济破坏、虚假信息、偏见与歧视,以及人类对AI的过度依赖。

除此之外,OpenAI还提到在未来的研究过程中,除了在技术方面的探索外,新团队也将积极与外部的跨学科专家及组织进行合作,以确保将技术价值发挥到最大,尽可能解决AI除技术风险之外可能造成的广泛的人类及社会领域问题。

 

6、这个时代最重要的课题

归根结底,无论是目前OpenAI对超级智能的担忧,还是近来广被用户诟病的大模型幻觉问题,落到实处所表现出的其实都是现有技术在AI监管和治理能力上的不足,而这也是当前时代人类最亟待解决的一个课题。

随着ChatGPT将我们带入AI2.0时代,人工智能所能创造的价值也被抬升到了一个全新的高度。然而伴随着技术及应用的不断下沉,AI所带来的造假、幻觉、滥用等问题也在极大程度上暴露出了这项技术“双刃剑”的属性。

无论是现在还是将来,人工智能战略的终极追求除了AGI以外,更重要的一点正是完全的可解释性。正如一位网友在Twitter上所说,如果有一天我们真的创造出了一个过于强大的黑盒,那将给人类带来极大麻烦。

除此之外,解决AI系统的黑盒问题,也将成为未来科技巨头们竞争的核心战场。毕竟谁能够率先完成这项壮举,谁就有机会彻底占据现有市场,并将自己的AI产品及业务扩张到更多对手无法企及的蓝海领域。

当然,无论出于何种目的考虑,如今的OpenAI已经在这条道路上再次迈出了坚实的一步。与此同时,也让我们期待未来能够有更多具备强劲实力的企业加入这场意义重大的远征。


相关拓展:

看到ChatGPT带来的生产力,我想到了低代码平台。

低代码是什么?一组数字技术工具平台,能基于图形化拖拽、参数化配置等更为高效的方式,实现快速构建、数据编排、连接生态、中台服务等。通过少量代码或不用代码实现数字化转型中的场景应用创新。它能缓解甚至解决庞大的市场需求与传统的开发生产力引发的供需关系矛盾问题,是数字化转型过程中降本增效趋势下的产物。

这边介绍一款好用的低代码平台——JNPF快速开发平台。近年在市场表现和产品竞争力方面表现较为突出,的是最新主流前后分离框架(SpringBoot+Mybatis-plus+Ant-Design+Vue3。代码生成器依赖性低,灵活的扩展能力,可灵活实现二次开发。

以JNPF为代表的企业级低代码平台为了支撑更高技术要求的应用开发,从数据库建模、Web API构建到页面设计,与传统软件开发几乎没有差异,只是通过低代码可视化模式,减少了构建“增删改查”功能的重复劳动,还没有了解过低代码的伙伴可以尝试了解一下。应用:JNPF开发平台

有了它,开发人员在开发过程中就可以轻松上手,充分利用传统开发模式下积累的经验。所以低代码平台对于程序员来说,有着很大帮助。


最后,如果你对于OpenAI新团队的招聘信息与岗位待遇感兴趣 ,可以从以下链接了解详情:https://openai.com/careers/search

参考链接:

https://openai.com/blog/introducing-superalignment#JanLeike

https://analyticsindiamag.com/openai-aims-to-achieve-superintelligence-before-2030/

这篇关于OpenAI再建顶级团队,重金招聘核心岗成员,阻止超级AI的威胁!的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/402717

相关文章

Ilya-AI分享的他在OpenAI学习到的15个提示工程技巧

Ilya(不是本人,claude AI)在社交媒体上分享了他在OpenAI学习到的15个Prompt撰写技巧。 以下是详细的内容: 提示精确化:在编写提示时,力求表达清晰准确。清楚地阐述任务需求和概念定义至关重要。例:不用"分析文本",而用"判断这段话的情感倾向:积极、消极还是中性"。 快速迭代:善于快速连续调整提示。熟练的提示工程师能够灵活地进行多轮优化。例:从"总结文章"到"用

AI绘图怎么变现?想做点副业的小白必看!

在科技飞速发展的今天,AI绘图作为一种新兴技术,不仅改变了艺术创作的方式,也为创作者提供了多种变现途径。本文将详细探讨几种常见的AI绘图变现方式,帮助创作者更好地利用这一技术实现经济收益。 更多实操教程和AI绘画工具,可以扫描下方,免费获取 定制服务:个性化的创意商机 个性化定制 AI绘图技术能够根据用户需求生成个性化的头像、壁纸、插画等作品。例如,姓氏头像在电商平台上非常受欢迎,

从去中心化到智能化:Web3如何与AI共同塑造数字生态

在数字时代的演进中,Web3和人工智能(AI)正成为塑造未来互联网的两大核心力量。Web3的去中心化理念与AI的智能化技术,正相互交织,共同推动数字生态的变革。本文将探讨Web3与AI的融合如何改变数字世界,并展望这一新兴组合如何重塑我们的在线体验。 Web3的去中心化愿景 Web3代表了互联网的第三代发展,它基于去中心化的区块链技术,旨在创建一个开放、透明且用户主导的数字生态。不同于传统

AI一键生成 PPT

AI一键生成 PPT 操作步骤 作为一名打工人,是不是经常需要制作各种PPT来分享我的生活和想法。但是,你们知道,有时候灵感来了,时间却不够用了!😩直到我发现了Kimi AI——一个能够自动生成PPT的神奇助手!🌟 什么是Kimi? 一款月之暗面科技有限公司开发的AI办公工具,帮助用户快速生成高质量的演示文稿。 无论你是职场人士、学生还是教师,Kimi都能够为你的办公文

Andrej Karpathy最新采访:认知核心模型10亿参数就够了,AI会打破教育不公的僵局

夕小瑶科技说 原创  作者 | 海野 AI圈子的红人,AI大神Andrej Karpathy,曾是OpenAI联合创始人之一,特斯拉AI总监。上一次的动态是官宣创办一家名为 Eureka Labs 的人工智能+教育公司 ,宣布将长期致力于AI原生教育。 近日,Andrej Karpathy接受了No Priors(投资博客)的采访,与硅谷知名投资人 Sara Guo 和 Elad G

AI hospital 论文Idea

一、Benchmarking Large Language Models on Communicative Medical Coaching: A Dataset and a Novel System论文地址含代码 大多数现有模型和工具主要迎合以患者为中心的服务。这项工作深入探讨了LLMs在提高医疗专业人员的沟通能力。目标是构建一个模拟实践环境,人类医生(即医学学习者)可以在其中与患者代理进行医学

AI行业应用(不定期更新)

ChatPDF 可以让你上传一个 PDF 文件,然后针对这个 PDF 进行小结和提问。你可以把各种各样你要研究的分析报告交给它,快速获取到想要知道的信息。https://www.chatpdf.com/

【北交大信息所AI-Max2】使用方法

BJTU信息所集群AI_MAX2使用方法 使用的前提是预约到相应的算力卡,拥有登录权限的账号密码,一般为导师组共用一个。 有浏览器、ssh工具就可以。 1.新建集群Terminal 浏览器登陆10.126.62.75 (如果是1集群把75改成66) 交互式开发 执行器选Terminal 密码随便设一个(需记住) 工作空间:私有数据、全部文件 加速器选GeForce_RTX_2080_Ti

AI Toolkit + H100 GPU,一小时内微调最新热门文生图模型 FLUX

上个月,FLUX 席卷了互联网,这并非没有原因。他们声称优于 DALLE 3、Ideogram 和 Stable Diffusion 3 等模型,而这一点已被证明是有依据的。随着越来越多的流行图像生成工具(如 Stable Diffusion Web UI Forge 和 ComyUI)开始支持这些模型,FLUX 在 Stable Diffusion 领域的扩展将会持续下去。 自 FLU

AI基础 L9 Local Search II 局部搜索

Local Beam search 对于当前的所有k个状态,生成它们的所有可能后继状态。 检查生成的后继状态中是否有任何状态是解决方案。 如果所有后继状态都不是解决方案,则从所有后继状态中选择k个最佳状态。 当达到预设的迭代次数或满足某个终止条件时,算法停止。 — Choose k successors randomly, biased towards good ones — Close