本文主要是介绍OneFlow:成功申报中国科协开源评选,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
恭喜OneFlow:入驻GitCode 代码托管平台
- OneFlow:面向大数据、大模型和大计算的流式人工智能计算框架
- OneFlow:入驻 GitCode 代码托管平台,成功申报中国科协开源评选
- GitCode 地址:https://gitcode.net/Oneflow-Inc/oneflow
中国科协首届2021“科创中国”开源创新榜评选,全程免费参与,对于申报成功的开源产品/社区/机构,主承办方会组织各种形式的宣传报道。
开源软件介绍
高效、易用、完备是任一深度学习框架在未来竞争中胜出的必由之路。在用三年时间对最难的分布式计算和高效性问题进行攻关后,2020年7月31日,一流科技宣布开源OneFlow,至今,已历经五次版本更迭,重点从优化编译、API接口等层面攻关易用性体验,同时持续优化分布式性能,保持业界领先地位。
一方面,OneFlow框架一开始就瞄准最具挑战的高效性,攻占技术制高点,并以此成为立足业界的安身之本。另一方面,随着OneFlow v0.5.0的发布,OneFlow将带给开发者革命性的易用性体验,同时,也从全局视角打破了深度学习框架易用性和高效性不可兼得的桎梏,向着全球范围内最好用深度学习框架的目标迈出了坚实的一大步。
自2017年创立以来,一流科技专注于把OneFlow产品研发,致力于打造成最受开发者欢迎的深度学习框架,向成为世界领先的AI基础设施供应商的目标迈进。
四个“一”实现极致易用性体验
相比之前版本,OneFlow v0.5.0在易用性上实现了四大技术特性:
- 一行代码实现OneFlow与PyTorch切换
- 一段代码实现动态图与静态图转换
- 一致性视角实现单机和分布式无缝切换
- 一套系统支持各种并行模式
“人有我优,人无我有”的高效性
原有深度学习框架都聚焦于单卡的用户体验,仅对适合数据并行的多机多卡场景处理的较好,但遇到Deep and Wide 、 GPT-3等超大模型,开发者就会面临多机多卡编程难、效率低下或无法实现等分布式深度学习的痛点。
尽管这些框架通过改进框架设计或研发NCCL 、 Horovod 、 HugeCTR等第三方插件的方式取得了一些进步,但受限于框架本身架构设计的不足,仍不能满足用户对极致性能的需求 ,而OneFlow在这方面的优势可以概括为“人有我优”和“人无我有”,是所有框架中的最优解决方案。
支撑 OneFlow 高效性的背后有四大关键技术,其中静态调度和流式执行均为业界首创:
- 编译器自动编排并行模式和流水线
- 静态调度
- 去中心化协议
- 流式执行引擎
深度学习框架的演进路线
作为新生代深度学习框架,尽管OneFlow在易用性和高效性上具有不俗实力,但它要想在未来进一步扩大在开发者社区中的竞争力,还需要在算子、模型库等完备性上补足功课,而这需要更多社区开发者参与其中。
未来,OneFlow深度学习框架将如何发展?一流科技创始人&袁进辉给出了他的判断:
- 框架平台标准化:深度学习算法的标准化,带来了软件标准化的机会,深度学习框架正在走向标准化
- 生态决定框架未来的竞争力:之江实验室、北京智源人工智能研究院、粤港澳大湾区数字经济研究院、之江实验室、中关村智用人工智能研究院等顶尖AI科研院所已使用OneFlow框架开展研究工作。同时,联合寒武纪、燧原科技、曙光DCU等芯片、云厂商上下游企业,推进适配OneFlow框架的超大模型训练方案。下一步,一流科技将推动与更多芯片厂商和广大开发者的合作,打造AI平台的繁荣生态
- 软件0趋势:前特斯拉AI 负责人Andrej Karpathy曾指出,软件 1.0 的“经典堆栈”是用 Python、C++ 等语言编写的计算机显式指令,与 软件1.0 不同,软件 2.0 用深度学习模型从数据中自动推导生成软件的编程范式,深度学习框架极有可能会朝这一方向迈进
像数据库产品那样提供标准化服务
面向社区开发者,一流科技在不断提升OneFlow框架用户体验;与此同时,作为一个商业化公司,基于OneFlow框架,相应推出了标准化解决方案,包括云边端AI基础设施OneBrain、OneAgent智能决策平台和OneFlow智能云平台。他们认为,AI产业化机会在于标准化的基础设施和云原生趋势。
OneBrain开发平台具有丰富的开发模式,支持高性能分布式训练、多租户的资源调度和混合云的解决方案。
通过私有化部署,用户可以在OneBrain上可以实现多租户和多任务管理,支持可视化、日志分析等功能,根据用户的集成规模、节点、使用时长等计费。
OneAgent智能决策平台是一个基于深度强化学习的平台,它创造性地使用了微服务架构,主要面向无人对战、路径规划、态势感知与智能博弈、金融量化交易等深度强化学习的应用场景。
此外,OneFlow智能云平台作为面向广大开发者的AI实训与开发平台,提供精品算法讲解、开源算法实测、在线编程环境及算力。它能帮助开发者快速掌握深度学习开发的相关技能,边学边连。未来,OneFlow智能云平台还将面向中小企业用户提供PaaS和SaaS服务,帮助更多企业用AI赋能生产和管理。
目前,一流科技已服务十多家客户,尤其是对性能、大规模分布式场景有迫切需求的头部互联网公司、安防公司、政务云、科研院所等机构,涵盖图像、自然语言处理、金融、广告/推荐等应用场景。
点击链接赶快申报吧:申报链接
这篇关于OneFlow:成功申报中国科协开源评选的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!