本文主要是介绍优刻得公有云并行文件存储UPFS,正式公测!,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
为了满足市场对高效存储的迫切需求,优刻得公有云并行文件存储UPFS,现正式公测!延续私有化的高性能、高可靠、易用性,灵活应对客户的弹性诉求。
随着2024年大模型技术的广泛应用,整个AI生态正逐步向产业链深度融合。对于众多中小AI企业来说,算力资源的投入仍是一笔不小的开销。因此,在IaaS资源的选择上,企业更加倾向于成本效益高、弹性计算能力强的解决方案,而公有云无疑是他们的重要选择。
延续私有云,5大产品特性应对AI存储挑战
当前,AIGC发展依旧迅猛,也带动了全行业对数据服务板块的强烈需求,尤其是在多模态数据集的处理方面。为了使训练问答和产出达到预期效果,数据提供方必须确保数据的即时性和有效性。
UPFS是优刻得自主研发的高性能并行文件系统,旨在满足数据访问速度、可扩展性和可靠性的极致要求。通过创新设计,UPFS在元数据管理和数据存储引擎等方面实现了突破,具备最高每秒TB级吞吐、千万级IOPS的能力的同时,还可以保障亚毫秒级的时延,这使其成为人工智能大模型训练、自动驾驶、电子设计自动化仿真及计算机图形渲染等领域的理想存储方案。
高性能:支持POSIX协议的自研客户端,能够发挥底层资源的极限性能,数据路由算法采用高效的一致性哈希算法,缩短了IO路径,单个文件系统的吞吐最高可扩展至TB/s,IOPS最高可达千万级,时延可稳定在亚毫秒级别。
高可用:
1.存储节点高可用:多个存储节点构成存储集群,实现数据分布和负载均衡。2.数据存储高可用:数据存储采用分布式存储方案,支持多副本、数据均衡存储和故障自恢复,保障数据的完整性和可用性。3.元数据高可用:采用分布式架构存储文件系统元数据,多节点、多副本机制保证元数据服务高可用。并且所有节点均可处理元数据请求,防止元数据热点,提高整体集群的元数据OPS,分散开之后的元数据请求能够充分发挥每一个元数据节点的性能。
弹性扩容:扩容对使用文件存储的应用无感知。单个文件系统公测期目前支持最大10PiB级容量。
数据共享:通过挂载的方式,允许在同一个项目内的任意主机,都可以访问指定文件系统,从而达到数据共享的目的。文件存储不会限制可挂载文件系统的主机个数,这对需要大量节点进行共享数据处理的场景更加友好。
易用性:可以通过控制台方便地进行创建、扩容、删除等操作。并且由于文件存储支持 POSIX协议,让基于POSIX的应用能够无缝地对接文件存储产品。各类文件系统管理工具都可以直接使用,不需要对以往的开发和运维习惯做任何改变。
UPFS公测地域为华北二(乌兰察布),以100TiB文件系统为例,读吞吐最大可达60GB/s、写吞吐最大可达20GB/s;读IOPS 最大可达1200w、写IOPS最大可达 400w;平均单路4k读延迟0.25ms、平均单路4k写延迟0.3ms。
公测期间,支持POSIX协议,享受500MB/s/TiB基线版本。公测期部署的集群规模有限,吞吐和带宽会随容量线性提升,若想试用最高TB/s的吞吐,可通过文末联系优刻得技术支持团队。
抢先体验公有云UPFS
这篇关于优刻得公有云并行文件存储UPFS,正式公测!的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!