【观察】金山云+英特尔:混合云存储市场的“创新者”

2023-10-27 17:10

本文主要是介绍【观察】金山云+英特尔:混合云存储市场的“创新者”,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

申耀的科技观察

读懂科技,赢取未来!

毫无疑问,随着虚拟化、容器等新技术的快速发展,企业数据中心基础设施也发生了翻天覆地的变化,开始从传统架构全面转向云架构,这让混合云架构被越来越多的企业所认可并采用。

以存储服务为例,在Gartner 2019年发布的混合基础架构服务能力成熟度曲线上,就首次出现了混合云存储技术。根据Gartner预测,到2024年大型企业存储在本地、边缘或公有云中的文件或对象存储的非结构化数据将比现在增加两倍,实施混合云存储架构的企业将从2020年的10%,增长到2024年的40%。

在此背景下,为帮助企业用户加速混合云存储的使用和部署,金山云和英特尔深入合作,通过一系列的联合创新推出了金山云混合云存储产品ES系列,该系列产品具备高性能、高可用性、高可靠性及可扩展性等优势,不仅最大化的解决了企业用户在混合云数据中心建设过程中面临的各类数据存储挑战,充分释放出了数据潜能,更进一步加速了企业的数字化转型之旅。

发力混合云存储正当其时

毫无疑问,随着数字化转型的提速,越来越多的海量数据正呈现出爆炸式增长,企业的存储基础设施也正面临着“翻天覆地”的变化,特别是在混合云的新环境下,新的数据形态、新的部署环境、新的安全需求,都对企业存储的发展提出了新的挑战。

在金山云企业存储部总监袁冬看来,企业级存储市场已经有三四十年的历史,但今天在全面云化的趋势下,企业级存储同样面临着前所未有的转型和变革的挑战:

首先,从企业级存储的规模角度看,传统企业最强的数据存储能力往往都是在几百TB或者几个PB的级别,但目前基于云化数据中心的存储交付规模通常都是以10PB甚至百PB起跳,由此也就带来了一个新的难题,那就是如何解决如此大规模的数据管理、运维以及分析的问题。

其次,从企业级存储的交付模式看,过去企业级存储市场中往往都是按照存储厂商的产品规划模式去做的,也就是先规划再进行存储的构建,同时还会面临不同的异构存储的难题,这种跨厂商的、跨产品的存储整合带来的挑战是很多方面的。

最后,从企业级存储的应用场景看,随着整个产业迈向5G时代,5G也会把企业的中心云和边缘云能力极大的释放,大量的数据、应用和场景也将出现在云、中心和边之间。换句话说,未来云边中心的协同以及多云共存将是企业数字化转型之路上的新挑战。

当然,企业此时也会面临一个新的选择,即公有云的模式最大程度降低企业基础设施建设和运维的压力,赋予业务最大的灵活性,然而对于数据敏感性有顾虑或合规性要求高的企业却很难全盘接受;私有云兼顾敏捷性和可控性,但也无法实现绝对的弹性和扩展性,运维压力依然留给了企业。

袁冬表示:“在这样的趋势下,未来云化的数据中心+公有云将会是企业搭建基础设施的一种核心的模式。同样,为大型企业提供云化数据中心底层存储的产品和整合解决方案,也是我们做企业存储这个业务的出发点,更是金山云推出混合云存储的关键所在。”

释放混合云存储创新红利

基于此,依托于金山云深厚的企业级基因和多年公有云存储服务经验,以及对存储行业和技术架构的深度认知,金山云日前推出了面向企业客户的混合云存储ES系列产品,该系列产品包括ES3000分布式块存储系统、ES5000分布式文件存储系统以及ES10000分布式对象存储系统三大类型。

金山云企业混合云存储产品家族

在此过程中,金山云与英特尔展开了深入合作,基于第二代英特尔至强可扩展处理器、英特尔固态盘 DC P4510和英特尔以太网融合网络适配器,不仅为ES系列产品的落地打下了坚实的基础,也最大化的释放出了混合云存储创新的红利。

比如,第二代英特尔至强可扩展处理器拥有更高的每核性能,能够在计算、存储和网络应用中,为计算密集型工作负载提供高性能和可扩展性;同时,英特尔固态盘 DC P4510系列基于英特尔3D NAND 技术,并采用了 NVMe 接口,可以提供更高的存储密度,从而可以支持更广泛的工作负载应用。

此外,P4510具备增强的智能固件算法、纠错功能、断电保护以及耐久性设计,提供了更好的 QoS,能够保证数据存储的读写保护处于更优的平衡状态,其年损坏率(AFR)显著低于机械硬盘,更好地满足了金山云混合云存储对存储系统可用性和稳定性等方面的要求。

不仅如此,英特尔除了根据金山云混合云存储产品家族的不同性能特点和要求,有针对性地部署了高性能硬件之外,还通过软件优化以充分释放不同配置的硬件潜能。这其中,SPDK(Storage Performance Development Kit)就发挥了重要的作用。

据了解,金山云使用SPDK 之后,用户态的驱动通过轮询硬件而不是依赖中断来完成,这可以降低总延迟和减少延迟差异,并且和内核驱动相比,在每个CPU内核的IOPS上具有更明显的性能优势;同时,SPDK具备I/O路径的无锁高性能模式,避免了所有在I/O关键路径中的锁,而是依靠消息传递在多个线程中共享资源,从而提高了并行性。可以说,SPDK 有效整合了英特尔的网络、数据和存储技术,真正将固态存储介质的性能潜力充分发挥了出来。

金山云混合云存储中的SPDK应用

事实上,在和英特尔联合创新的过程中,袁冬对英特尔提供的产品和相关的服务,也留下了非常深刻的印象,具体来说:

一是,英特尔的技术和产品确实过硬。以产品的参数为例,英特尔称SSD固态盘可以确保五年一直写,那么金山云在前期测试中,就先写上3个月不停,在这个过程中,金山云就会观察英特尔的固态盘,速度会不会下降,寿命会不会缩短,经过长时间的观察,金山云发现英特尔的硬件产品确实过硬,由此也就赢得了金山云的信任。对此,袁冬表示:“存储本质上就是卖信任的产品,用户不信任你的时候,你卖得再便宜,性能再好也没用。”

二是,英特尔不仅“授人以鱼,也授人以渔。”袁冬回忆说:“英特尔就跟我们很开放地讲他们产品内部所有的原理。例如,针对傲腾持久化内存,一位英特尔的老先生就给我们讲傲腾的化学构成,推导它在不同化学反应中、不同环境中的电位击穿效应是如何产生的,我觉得这个过程很难得,因为这让我们有机会了解英特尔傲腾技术的创新过程,这加深了我们对这个技术的深度了解,也让我们可以放心大胆的采用傲腾技术。”

三是,双方的联合创新过程中,英特尔也提供了大量的支持。金山云打造的针对私有化部署的百万级别云硬盘,就是基于SPDK的优化实现的,那么如何用好这个技术,双方就联合做了大量的工作。

袁冬举例说,某次为了验证一个数据模型,需要测试4K、16K、256K的性能到底谁最合适,因为这个性能与存储介质和存储颗粒的组织方式密切相关,那么对应的控制器指令就需要进行匹配,而这个过程就需要硬件、软件以及SPDK的不断优化,可以说这是一次“全链路”的创新,也是一次关乎核心设计的选型,背后正是双方通力合作的具体印证。

加速企业数字化转型

同样,英特尔中国区互联网业务部技术总监高明也认为,在金山云混合云存储的联合创新中,英特尔一直希望能给金山云这样的合作伙伴提供更多和更大力度的支持。

一方面,是平台要确保稳定性和高性能。以性能为例,今天IOPS对于对存储服务商而言是一直在追求的目标,那么英特尔的傲腾固态盘就具有非常优秀的性能一致性,IOPS可以随应用环境和时间的变化,抖动很小,这样就保证了混合云存储在各类应用场景下,均能够提供稳定、高性能的存储服务。在此基础上,英特尔还可以通过提供SPDK工具库优化性能,这样就能让存储稳定的同时,也能有非常高的性能表现。

另一方面,是全方位的支持对合作伙伴也至关重要。这种支持主要体现在英特尔一直所坚持的“开放”心态,通过研讨会等多种形式,英特尔会把研发中的产品规划,以及最新的产品解决方案,第一时间告知合作伙伴,加深他们对英特尔产品和技术的了解。

更关键的是,这种支持还体现在双方的日常合作的细节之中。高明说:“英特尔在上海的SPDK研发团队,就与金山云长期保持合作,甚至提供 7x24 小时的支持服务,通过不间断的交流,有问题随时解决的方式,这样才能真正把SPDK这个优化软件用好,解决混合云存储研发中遇到的很多难题。”

展望未来,双方还将依托产品与技术的持续创新,在更多层面上深化产品合作,进一步释放英特尔计算、存储和网络的性能潜力。目前,双方也正在持续基于新一代英特尔数据中心级固态盘等产品,以及软件优化方面的合作,推动金山云混合云存储产品的进一步探索与验证,以继续提升混合云存储系统的性能、可用性等优势,助力金山云在混合云存储领域的业务提速。

总的来说,随着数字化转型的提速,企业客户需要最符合业务需求的基础设施服务。因此,这个时代也需要坚定的、富于远见的,敢于不断突破的玩家的出现,而金山云和英特尔,作为混合云存储市场中的“创新者”,不仅以创新的解决方案为企业上云,乃至关键业务应用的落地,提供了坚实的存储“底座”支持,更为企业未来的数字化转型提供了更加强有力的支撑。


申耀的科技观察,由科技与汽车跨界媒体人申斯基(微信号:shenyao)创办,18年企业级媒体工作经验,专注产业互联网、企业数字化、渠道生态以及汽车科技内容的观察和思考。

这篇关于【观察】金山云+英特尔:混合云存储市场的“创新者”的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/287109

相关文章

使用JavaScript操作本地存储

《使用JavaScript操作本地存储》这篇文章主要为大家详细介绍了JavaScript中操作本地存储的相关知识,文中的示例代码讲解详细,具有一定的借鉴价值,有需要的小伙伴可以参考一下... 目录本地存储:localStorage 和 sessionStorage基本使用方法1. localStorage

异构存储(冷热数据分离)

异构存储主要解决不同的数据,存储在不同类型的硬盘中,达到最佳性能的问题。 异构存储Shell操作 (1)查看当前有哪些存储策略可以用 [lytfly@hadoop102 hadoop-3.1.4]$ hdfs storagepolicies -listPolicies (2)为指定路径(数据存储目录)设置指定的存储策略 hdfs storagepolicies -setStoragePo

HDFS—存储优化(纠删码)

纠删码原理 HDFS 默认情况下,一个文件有3个副本,这样提高了数据的可靠性,但也带来了2倍的冗余开销。 Hadoop3.x 引入了纠删码,采用计算的方式,可以节省约50%左右的存储空间。 此种方式节约了空间,但是会增加 cpu 的计算。 纠删码策略是给具体一个路径设置。所有往此路径下存储的文件,都会执行此策略。 默认只开启对 RS-6-3-1024k

从戴尔公司中国大饭店DTF大会,看科技外企如何在中国市场发展

【科技明说 | 科技热点关注】 2024戴尔科技峰会在8月如期举行,虽然因事未能抵达现场参加,我只是观看了网上在线直播,也未能采访到DTF现场重要与会者,但是通过数十年对戴尔的跟踪与观察,我觉得2024戴尔科技峰会给业界传递了6大重要信号。不妨简单聊聊:从戴尔公司中国大饭店DTF大会,看科技外企如何在中国市场发展? 1)退出中国的谣言不攻自破。 之前有不良媒体宣扬戴尔将退出中国的谣言,随着2

SprinBoot+Vue网络商城海鲜市场的设计与实现

目录 1 项目介绍2 项目截图3 核心代码3.1 Controller3.2 Service3.3 Dao3.4 application.yml3.5 SpringbootApplication3.5 Vue 4 数据库表设计5 文档参考6 计算机毕设选题推荐7 源码获取 1 项目介绍 博主个人介绍:CSDN认证博客专家,CSDN平台Java领域优质创作者,全网30w+

速了解MySQL 数据库不同存储引擎

快速了解MySQL 数据库不同存储引擎 MySQL 提供了多种存储引擎,每种存储引擎都有其特定的特性和适用场景。了解这些存储引擎的特性,有助于在设计数据库时做出合理的选择。以下是 MySQL 中几种常用存储引擎的详细介绍。 1. InnoDB 特点: 事务支持:InnoDB 是一个支持 ACID(原子性、一致性、隔离性、持久性)事务的存储引擎。行级锁:使用行级锁来提高并发性,减少锁竞争

ORACLE语法-包(package)、存储过程(procedure)、游标(cursor)以及java对Result结果集的处理

陈科肇 示例: 包规范 CREATE OR REPLACE PACKAGE PACK_WMS_YX IS-- Author : CKZ-- Created : 2015/8/28 9:52:29-- Purpose : 同步数据-- Public type declarations,游标 退休订单TYPE retCursor IS REF CURSOR;-- RETURN vi_co_co

OpenStack离线Train版安装系列—11.5实例使用-Cinder存储服务组件

本系列文章包含从OpenStack离线源制作到完成OpenStack安装的全部过程。 在本系列教程中使用的OpenStack的安装版本为第20个版本Train(简称T版本),2020年5月13日,OpenStack社区发布了第21个版本Ussuri(简称U版本)。 OpenStack部署系列文章 OpenStack Victoria版 安装部署系列教程 OpenStack Ussuri版

多云架构下大模型训练的存储稳定性探索

一、多云架构与大模型训练的融合 (一)多云架构的优势与挑战 多云架构为大模型训练带来了诸多优势。首先,资源灵活性显著提高,不同的云平台可以提供不同类型的计算资源和存储服务,满足大模型训练在不同阶段的需求。例如,某些云平台可能在 GPU 计算资源上具有优势,而另一些则在存储成本或性能上表现出色,企业可以根据实际情况进行选择和组合。其次,扩展性得以增强,当大模型的规模不断扩大时,单一云平

MySQL技术内幕_innodb存储引擎

MySQL技术内幕_innodb存储引擎 INNODB innodb中如果表没有主键 表是否由 非空唯一键,有则该字段为主键没有,则自动创建一个6字节大小的指针 innodb存储引擎的所有数据都存储在表空间中,表空间由段,区,页(块)组成。 如果启用了 innodb_file_per_table, 则每张表内的数据可以单独放在一个表空间中即使启用了上面参数,共享表空间也会因为 系统事务信息