XSKY 亮相中国移动智算存储论坛,共话 AI 存储创新之路

2024-08-24 22:28

本文主要是介绍XSKY 亮相中国移动智算存储论坛,共话 AI 存储创新之路,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

8 月 15 日,由中国移动云能力中心主办的“智算存储论坛”在南京大学顺利举办,本期技术论坛的主题是《智存未来-构建 AI 时代新型存储基础设施》。作为中国移动云能力中心的合作伙伴,XSKY星辰天合受邀参加了此次技术大会。 XSKY 产品总监朱荣泽作为特邀嘉宾之一,发表了主题为《大模型时代对于存储架构的挑战》的演讲,分享了大语言模型(LLM)对存储的需求以及现有存储架构的局限与挑战 并与来自中国移动云能力中心、中国信通院、南京大学、华为、中兴、JuiceFS、中国移动 IT 公司的存储领域技术专家共同探讨智算浪潮下云存储面临的挑战与机遇。

人工智能时代的存储系统技术趋势

在大模型技术加速发展的当下,相关企业对云存储这一重要的底层基础设施能力愈发重视。与会专家在此次论坛上深度探讨了人工智能时代存储系统的发展愿景和技术趋势,包括面对 AI 时代,所需的云存储技术类型,以及如何构筑智能、高效、低碳的新型存储基础设施等,涵盖了大模型时代下分布式存储现状和趋势、怎样构建面向云原生算力的智能弹性缓存系统、在 AIGC 新时代中存储的新机遇、如何提升分布式存储纠删码的性能、如何打造大模型存储底座、如何构建智能时代下的智能云存储、统一存储引擎面对当今 AI 场景的变与不变等技术议题。

XSKY 主题演讲:大模型时代对于存储架构的挑战

7500afc09052ca6b0d6a79861cd9ad0a.jpeg
图1:XSKY 产品总监朱荣泽发表演讲


在 XSKY 主题演讲环节,XSKY 产品总监朱荣泽首先阐述了在 AI 变革时代中计算和存储的关系,并且指明 AI 计算属于新的计算范式,它不仅对计算硬件提出了新的要求,也对存储技术带来了前所未有的挑战。

朱荣泽指出,GPU 的显存 DRAM 技术从 DDR 演进到 HBM,内存访 问模式从“延迟敏感”转变为“带宽优先”。 HBM 需要不断地从远端存储或本地存储加载数据,内存和数据传输之间的互联带宽,将成为 AI 计算发展的主要瓶颈。 HBM 的核心价值在于其对存储性能的重塑,它不仅提升了数据传输的速度,更改变了我们对存储核心需求的认识。

朱荣泽表示在大模型训练中 存储系统面临着大量数据的写入任务,这致使存储写带宽成为衡量其性能竞争力的关键所在。特别在多模态的情境里,大量小文件的处理给底层存储性能造成了严峻的挑战。

为了应对这些难题, XSKY 推出新的 XSEA(eXtreme Shared-Everything Architecture,极速全共享架构)全闪架构,采用了创新的“端到端纠删码(EC)+ 持续压缩”技术,实现将写放大问题降低至最小,实现接近于 100% 的有效带宽利用率,提升了存储效率 。这些关键技术创新,不仅减少了写放大效应,还显著提高了存储带宽利用率和整体性能,可以更好应对大语言模型对底层存储的挑战。朱荣泽表示,只有通过架构创新和不断的技术迭代和优化,才能为客户提供更高效、更可靠的存储解决方案。

4252a3f6f2c70d5dafd4fc1b4a210647.jpeg
图2:XSEA 星海全闪架构性能优势

联手业界生态 持续推进存储架构创新

在人工智能产业快速发展的当下,星辰天合将与更多伙伴携手奋进,持续对存储架构展开探索。借助创新的架构与软硬件组合,充分发挥分布式全闪存储的性能优势,助力客户从数据中获得更多价值,推动业务不断向前迈进

4463374ed61d5d2a43b30cc5a5964027.jpeg

欲了解星海全闪架构与星飞全闪产品的更多信息,欢迎扫描下方二维码,获取《 XSKY 星飞全闪技术白皮书》。

3de2a563ce7189eb87ca344ac01754ff.jpeg


这篇关于XSKY 亮相中国移动智算存储论坛,共话 AI 存储创新之路的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1103777

相关文章

C# WinForms存储过程操作数据库的实例讲解

《C#WinForms存储过程操作数据库的实例讲解》:本文主要介绍C#WinForms存储过程操作数据库的实例,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、存储过程基础二、C# 调用流程1. 数据库连接配置2. 执行存储过程(增删改)3. 查询数据三、事务处

基于Flask框架添加多个AI模型的API并进行交互

《基于Flask框架添加多个AI模型的API并进行交互》:本文主要介绍如何基于Flask框架开发AI模型API管理系统,允许用户添加、删除不同AI模型的API密钥,感兴趣的可以了解下... 目录1. 概述2. 后端代码说明2.1 依赖库导入2.2 应用初始化2.3 API 存储字典2.4 路由函数2.5 应

Oracle存储过程里操作BLOB的字节数据的办法

《Oracle存储过程里操作BLOB的字节数据的办法》该篇文章介绍了如何在Oracle存储过程中操作BLOB的字节数据,作者研究了如何获取BLOB的字节长度、如何使用DBMS_LOB包进行BLOB操作... 目录一、缘由二、办法2.1 基本操作2.2 DBMS_LOB包2.3 字节级操作与RAW数据类型2.

Spring AI ectorStore的使用流程

《SpringAIectorStore的使用流程》SpringAI中的VectorStore是一种用于存储和检索高维向量数据的数据库或存储解决方案,它在AI应用中发挥着至关重要的作用,本文给大家介... 目录一、VectorStore的基本概念二、VectorStore的核心接口三、VectorStore的

Java实现数据库图片上传与存储功能

《Java实现数据库图片上传与存储功能》在现代的Web开发中,上传图片并将其存储在数据库中是常见的需求之一,本文将介绍如何通过Java实现图片上传,存储到数据库的完整过程,希望对大家有所帮助... 目录1. 项目结构2. 数据库表设计3. 实现图片上传功能3.1 文件上传控制器3.2 图片上传服务4. 实现

C语言中的浮点数存储详解

《C语言中的浮点数存储详解》:本文主要介绍C语言中的浮点数存储详解,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、首先明确一个概念2、接下来,讲解C语言中浮点型数存储的规则2.1、可以将上述公式分为两部分来看2.2、问:十进制小数0.5该如何存储?2.3 浮点

MySQL常见的存储引擎和区别说明

《MySQL常见的存储引擎和区别说明》MySQL支持多种存储引擎,如InnoDB、MyISAM、MEMORY、Archive、CSV和Blackhole,每种引擎有其特点和适用场景,选择存储引擎时需根... 目录mysql常见的存储引擎和区别说明1. InnoDB2. MyISAM3. MEMORY4. A

Spring AI集成DeepSeek三步搞定Java智能应用的详细过程

《SpringAI集成DeepSeek三步搞定Java智能应用的详细过程》本文介绍了如何使用SpringAI集成DeepSeek,一个国内顶尖的多模态大模型,SpringAI提供了一套统一的接口,简... 目录DeepSeek 介绍Spring AI 是什么?Spring AI 的主要功能包括1、环境准备2

Spring AI集成DeepSeek实现流式输出的操作方法

《SpringAI集成DeepSeek实现流式输出的操作方法》本文介绍了如何在SpringBoot中使用Sse(Server-SentEvents)技术实现流式输出,后端使用SpringMVC中的S... 目录一、后端代码二、前端代码三、运行项目小天有话说题外话参考资料前面一篇文章我们实现了《Spring

Spring AI与DeepSeek实战一之快速打造智能对话应用

《SpringAI与DeepSeek实战一之快速打造智能对话应用》本文详细介绍了如何通过SpringAI框架集成DeepSeek大模型,实现普通对话和流式对话功能,步骤包括申请API-KEY、项目搭... 目录一、概述二、申请DeepSeek的API-KEY三、项目搭建3.1. 开发环境要求3.2. mav