文心大模型融入荣耀MagicOS!打造大模型“端云协同”创新样板

2024-03-26 11:59

本文主要是介绍文心大模型融入荣耀MagicOS!打造大模型“端云协同”创新样板,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

2024年1月10日,在荣耀MagicOS 8.0发布会及开发者大会上,荣耀终端有限公司CEO赵明宣布了“百模生态计划”,并与百度集团执行副总裁、百度智能云事业群总裁沈抖共同宣布,百度智能云成为荣耀大模型生态战略合作伙伴。

沈抖在现场演讲中表示,“端云协同”是大模型到端侧应用的创新范式。端侧大模型更懂用户意图,云侧大模型擅长处理复杂问题,满足用户深层次需求,端侧、云侧能力互补、相互结合,将为用户带来卓越的体验。大模型将驱动移动应用二次爆发,不止现有的800万移动应用会基于大模型加速升级、重构,未来还将诞生更多全新的AI原生应用。

在这里插入图片描述
(百度集团执行副总裁、百度智能云事业群总裁沈抖)

文心大模型接入荣耀MagicOS百模生态计划

端云协同成大模型端侧应用新范式

大模型的竞争格局已逐渐从技术之争演变为应用落地和生态之争,让大模型进入千家万户才是真正价值所在。

在荣耀MagicOS8.0的发布会上,荣耀发布了“百模生态计划”,致力于携手合作伙伴共同打造端云协同的大模型服务“新生态”,荣耀将为百大模型提供入口,让云侧通用大模型和各种行业垂域大模型可以通过货架化方式融入到MagicOS中,端侧平台级AI大模型作为中控,理解用户意图,拆解编排任务,高效安全地连接云侧大模型,分发、融合、调度原子化服务,完成复杂任务闭环。

沈抖表示,“从2023年下半年开始,基础大模型的竞争就已经进入到优胜劣汰的阶段。今年再去卷基础大模型,已经没有意义。现在大家真正关心的,是怎么把大模型‘用起来’ 。大模型时代,真正给企业带来价值的,是使用大模型的深度和打磨AI原生应用的速度。

随着大模型落地不断深化,大模型到端侧应用成趋势。端侧应用是指大模型直接利用端侧芯片的算力生成结果。但动辄千百亿级参数的大模型所需的庞大算力、存储和能耗对端侧芯片提出了高要求,此外端侧用户对高性能、低时延、数据隐私等存在特别需求。因此,云侧部署的大模型加端侧应用的大模型是综合平衡性能、成本、功耗、隐私、速度之下的最佳选择。

百度智能云与荣耀一起在MagicOS上做了一次端、云协同的创新尝试。云侧通用大模型百度文心大模型赋能荣耀YOYO助理打造更专业的用户服务,带来本地化的文本创作、知识问答、生活建议等。此外,将云上的“文心大模型”与荣耀平台级端侧AI大模型“魔法大模型”相结合。

魔法大模型负责理解用户意图,在后台将用户的简单提示转化为更专业的提示,再由文心大模型提供知识问答、生活建议等专业服务。比如,当用户要求“帮我制定健康计划”时,魔法大模型会分析用户健康信息,自动生成具象化提示词,再调度文心大模型,生成更全面的个人定制健身计划。过程中,魔法大模型通过端侧防护网,滤掉敏感信息,并确保个人隐私不上云,守护安全。本次合作展现了终端厂商与云服务厂商的全新生态合作模式,也是荣耀与百度技术生态的完美契合。

沈抖表示,“端侧大模型更懂用户,可基于端侧对用户个人的学习深入理解用户意图,进而为用户带来个性化服务。云侧的基础大模型参数量更大,能力更广,能应对更复杂的问题。当用户在手机端提出一个需求,端侧模型能够准确理解其意图,并给出及时的、个性化的回应。用户如果需要了解更多,就会被引导到云侧的基础大模型,得到更深入、全面的解答。端侧、云侧能力互补、相互结合,为用户带来卓越的体验”。

在这里插入图片描述

800万移动应用将被大模型重构

2024年将是AI原生应用爆发元年

大模型也将为移动应用带来变革。

移动互联网时代有800多万移动应用,近几年移动应用的上架数量、下载量逐渐趋于平缓,但去年由大模型驱动的AI原生应用的兴起,拉开了新一轮增长势头。据统计,2023年生成式AI移动应用下载量翻了9倍,其中,AI聊天机器人增⻓了72倍。

在沈抖看来,大模型会是推动操作系统和移动应用进入下一个增长浪潮的关键力量,一定会带来移动应用的二次爆发。随着大模型使用门槛不断降低,不仅现有的800万移动应用会基于大模型加速升级、重构,未来还会有更多全新的“AI原生应用”诞生。

做重构应用的智能助手:
“Copilot for Building Copilots”

沈抖表示,做好一个AI原生应用,有两个关键步骤。

首先,做一个应用,找到合适的模型至关重要。文心大模型在理解、生成、推理和记忆等通用能力上很强,多数情况下,可以直接在千帆大模型平台调用它。在一些考虑个性化、行业知识和效率的场景,特定的专用模型会起到不可或缺的作用。未来,我们更多地会看到百度“文心大模型”这样的基础大模型和荣耀“魔法大模型”这样的平台级端侧AI大模型,还有一些基于大模型精调出来的专用模型搭配起来用,即“MoE”。专用模型融入了专业知识,更懂场景,它们负责处理特定领域的专业任务;基础大模型更智能,负责解决更全面、复杂的问题。

沈抖判断,未来会有数以百万计的专用模型。百度智能云千帆大模型平台上提供了一整套大模型开发的工具链,即千帆“ModelBuilder”,用户在上面就可以很经济、很简单地精调专用模型。目前千帆“ModelBuilder”已累计精调了10000个模型。

有了好的模型之后,下一步是开发AI原生应用。大模型正在重构移动应用的整个技术栈、数据流和业务流,这对AI原生应用的开发提出了新的挑战。百度智能云AI原生应用工作台千帆AppBuilder为开发者提供了更专业、更便捷的AI开发套件和资源环境,降低AI原生应用开发门槛。

沈抖判断,“2024年将会是中国AI原生应用爆发的元年。这些应用不仅仅是工具,它们会成为人们工作、生活上的智能助手,成为不可或缺的‘Copilot’。在这个过程中,千帆ModelBuilder和千帆AppBuilder会成为大家重构应用的‘智能助手’,也就是Copilot for Building Copilots,帮助大家为用户带来革命性的美好体验”。

据了解,百度智能云面向客户落地大模型的五类需求(异构算力、模型调用、模型精调、AI原生应用开发、选购AI原生应用),分别给出了业界最优的服务方案。

除模型和AI原生应用层面之外,百度智能云通过“百舸”异构计算平台为用户提供极致可靠和性价比的异构算力服务,目前“百舸”在大模型训练、推理各个纬度的评估指标上全部达到业界领先水平,能够在保障大模型训练、推理容错能力、稳定性的同时,助力客户大模型训、推效率飞升,加速业务智能化升级。

近期,百度智能云还宣布了,基于“云智一体”战略重构云计算服务,且已完成从底层基础设施—大模型开发与应用—AI原生应用开发的端到端升级重构。为促进AI原生应用生态的全面繁荣按下加速键。

“MagicOS是最具创新活力和影响力的移动应用生态之一,我相信,在大模型时代,它会为开发者提供更广阔的机会,为用户提供前所未有的智能体验,持续推动行业向前发展。百度智能云作为荣耀魔法大模型生态战略合作伙伴,会和荣耀一起,持续聚焦端、云大模型的深度融合,共同推动生态繁荣。”沈抖表示。

这篇关于文心大模型融入荣耀MagicOS!打造大模型“端云协同”创新样板的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/848441

相关文章

一份LLM资源清单围观技术大佬的日常;手把手教你在美国搭建「百万卡」AI数据中心;为啥大模型做不好简单的数学计算? | ShowMeAI日报

👀日报&周刊合集 | 🎡ShowMeAI官网 | 🧡 点赞关注评论拜托啦! 1. 为啥大模型做不好简单的数学计算?从大模型高考数学成绩不及格说起 司南评测体系 OpenCompass 选取 7 个大模型 (6 个开源模型+ GPT-4o),组织参与了 2024 年高考「新课标I卷」的语文、数学、英语考试,然后由经验丰富的判卷老师评判得分。 结果如上图所

大语言模型(LLMs)能够进行推理和规划吗?

大语言模型(LLMs),基本上是经过强化训练的 n-gram 模型,它们在网络规模的语言语料库(实际上,可以说是我们文明的知识库)上进行了训练,展现出了一种超乎预期的语言行为,引发了我们的广泛关注。从训练和操作的角度来看,LLMs 可以被认为是一种巨大的、非真实的记忆库,相当于为我们所有人提供了一个外部的系统 1(见图 1)。然而,它们表面上的多功能性让许多研究者好奇,这些模型是否也能在通常需要系

创新、引领、发展——SAMPE中国2024年会在京盛大开幕

绿树阴浓夏日长,在这个色彩缤纷的季节,SAMPE中国2024年会暨第十九届国际先进复合材料制品原材料、工装及工程应用展览会在中国国际展览中心(北京朝阳馆)隆重开幕。新老朋友共聚一堂,把酒话桑麻。 为期4天的国际学术会议以“先进复合材料,引领产业创新与可持续化发展”为主题,设立了34个主题分会场,其中包括了可持续化会场、国际大学生会场、中法复合材料制造技术峰会三个国际会场和女科技工作者委员会沙龙,

人工和AI大语言模型成本对比 ai语音模型

这里既有AI,又有生活大道理,无数渺小的思考填满了一生。 上一专题搭建了一套GMM-HMM系统,来识别连续0123456789的英文语音。 但若不是仅针对数字,而是所有普通词汇,可能达到十几万个词,解码过程将非常复杂,识别结果组合太多,识别结果不会理想。因此只有声学模型是完全不够的,需要引入语言模型来约束识别结果。让“今天天气很好”的概率高于“今天天汽很好”的概率,得到声学模型概率高,又符合表达

智能客服到个人助理,国内AI大模型如何改变我们的生活?

引言 随着人工智能(AI)技术的高速发展,AI大模型越来越多地出现在我们的日常生活和工作中。国内的AI大模型在过去几年里取得了显著的进展,不少独创的技术点和实际应用令人瞩目。 那么,国内的AI大模型有哪些独创的技术点?它们在实际应用中又有哪些出色表现呢?此外,普通人又该如何利用这些大模型提升工作和生活的质量和效率呢?本文将为你一一解析。 一、国内AI大模型的独创技术点 多模态学习 多

OpenCompass:大模型测评工具

大模型相关目录 大模型,包括部署微调prompt/Agent应用开发、知识库增强、数据库增强、知识图谱增强、自然语言处理、多模态等大模型应用开发内容 从0起步,扬帆起航。 大模型应用向开发路径:AI代理工作流大模型应用开发实用开源项目汇总大模型问答项目问答性能评估方法大模型数据侧总结大模型token等基本概念及参数和内存的关系大模型应用开发-华为大模型生态规划从零开始的LLaMA-Factor

模型压缩综述

https://www.cnblogs.com/shixiangwan/p/9015010.html

打造坚固的SSH防护网:端口敲门入门指南

欢迎来到我的博客,代码的世界里,每一行都是一个故事 🎏:你只管努力,剩下的交给时间 🏠 :小破站 打造坚固的SSH防护网:端口敲门入门指南 前言什么是端口敲门端口敲门的优点1. 增强安全性2. 动态防火墙规则3. 隐匿服务4. 改善日志管理5. 灵活性和兼容性6. 低资源消耗7. 防御暴力破解和扫描8. 便于合法用户访问9. 适用于不同类型的服务 端口敲

AI赋能天气:微软研究院发布首个大规模大气基础模型Aurora

编者按:气候变化日益加剧,高温、洪水、干旱,频率和强度不断增加的全球极端天气给整个人类社会都带来了难以估计的影响。这给现有的天气预测模型提出了更高的要求——这些模型要更准确地预测极端天气变化,为政府、企业和公众提供更可靠的信息,以便做出及时的准备和响应。为了应对这一挑战,微软研究院开发了首个大规模大气基础模型 Aurora,其超高的预测准确率、效率及计算速度,实现了目前最先进天气预测系统性能的显著

PyTorch模型_trace实战:深入理解与应用

pytorch使用trace模型 1、使用trace生成torchscript模型2、使用trace的模型预测 1、使用trace生成torchscript模型 def save_trace(model, input, save_path):traced_script_model = torch.jit.trace(model, input)<