【观察】从EasyOP到先进计算服务平台,曙光HPC价值使命的全新飞跃

本文主要是介绍【观察】从EasyOP到先进计算服务平台,曙光HPC价值使命的全新飞跃,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

640?wx_fmt=jpeg

申耀的科技观察

读懂科技,赢取未来!

640?wx_fmt=jpeg 640?wx_fmt=jpeg 640?wx_fmt=jpeg 640?wx_fmt=jpeg


众所周知,中国HPC经过近四十年的发展,尤其最近十五年时间的快速崛起,已经从跟跑、并跑,进入到部分关键技术领跑的新时代。近期,中国HPC产学界共同努力,逐渐打破国外硬件制约,部分实现自主研发,软硬件协同支撑应用高速发展,迈向由应用引领机器研制的新时代。


但也要看到,一方面相比硬件领域取得的成绩,中国整体HPC的应用发展还有待发展,软硬件之间发展不平衡的现状依旧很明显;另一方面,中国HPC领域的人才建设工作同样也存在着不少的“短板”。


640?wx_fmt=jpeg


面对上述困扰中国HPC行业多年的痛点和难题,作为一家以高性能计算起家的企业,曙光一直以来始终坚持在HPC领域的不断探索和创新,不仅为科研、航天、气象、生命科学等多个行业提供了领先成熟的超算解决方案,同时也积极在应用、人才乃至生态建设方面不断求新求变,为中国HPC长远发展夯实了坚实的基础。


以2015年曙光创新推出的EasyOP在线运维平台为例,经过近四年时间不断进化和迭代,如今EasyOP已升级蜕变成为先进计算服务平台。更重要的是,依托该平台,曙光也正在搭建起中国HPC领域独具特色的O2O先进计算服务网络。


在我看来,曙光的先进计算服务平台,正在把中国HPC和人工智能等新技术变成像水和电一样的新生产力,这对降低全社会的HPC使用门槛,推进HPC规模化的应用,实现HPC的“普惠”经济,赋能全行业的数字化转型必将起到更大的促进作用,而这不仅是曙光HPC业务未来重点发展的新方向,更是价值使命的一次全新飞跃。


应用和人才成中国HPC“拦路虎”


我们知道,高性能计算是科技领域最“硬核”的行业之一,所以也被称为“国之重器”,是因为它的制造和应用水平不仅代表着国家的实力,更是一个国家在经济建设中打造核心竞争力的关键武器。


客观的说,中国HPC经过过去多年的发展,取得了令人瞩目的成就,但应用和人才的“短板”也正在成中国HPC长远发展的“拦路虎”,我们可以从三个维度来做观察:


640?wx_fmt=jpeg


第一,从硬件层面看,中国在HPC领域可谓是从“一穷二白”做起的。在2002年之前,TOP500榜单上就没有中国的超算,或者说中国超算本身就很少。从2002年之后,经过15年的高速发展,中国超算的上榜数量,包括性能都是指数级增长,并以“旱地拔葱”的方式一跃而起。


尽管在去年年中公布的TOP500榜单上,美国超算Summit“终结”了中国超算第一的位置,但中国“天河2号”以及“太湖之光”,分别六次和四次拿到冠军,相当于连续五年占据了TOP500的冠军位置。此外,在最新一期TOP500的榜单中,中国HPC的上榜套数依然高居第一,以曙光为代表的中国“超算军团”,正在全球超算领域大规模的强势崛起。


第二,从软件层面看,情况则相对不容乐观。目前,中国HPC不论是系统软件、应用软件还是工具软件,都还不成熟、不完善。例如,如今真正到P级规模并用上异构众核处理单元的应用相对较少,期待更多对重大科学发现、满足国家重大战略需求的应用能给跑出规模,实现“高速路上跑赛车,而不是跑拖拉机”。


同时,HPC在硬件层面上并行计算技术已经大规模投入使用,但是大量超算应用软件仍需要接受“代码现代化”的改造,这就意味着尚有大量的应用软件需要进行重新设计。此外,HPC的支撑和工具软件种类也不多,包括能够在结构化网格、非结构化网格以及无网格几何组合,以及有限元和图计算等方面提供支撑,同时还有在前处理、后处理、用户界面等方面的软件都比较“薄弱”。


第三,从人才建设看,HPC应用的开发、实施,以及HPC系统的运维需要千千万万的高素质人才,可以说如果人才储备质与量都能获得提高,中国的HPC应用水平才能不断提高,并最终产生真正的创新成果。


但实际的情况是,中国HPC领域除了具有跨学科知识和视野的高水平人才数量不足之外,HPC在管理和运维方面也一直存在着一些问题,包括缺乏专业人才、管理运维水平落后等等。


不难看出,应用和人才正在成为中国HPC长远发展之路上的“拦路虎”,要实现上述这些突破,应用领域的软件开发和人才培养投入就显得迫在眉睫。因此,这也意味着HPC需要建立一个全新的,不同以往的生态环境,才能促进中国HPC长远的发展。


从EasyOP到先进计算服务平台


对此,曙光高性能计算产品事业部首席科学家吉青博士告诉我,正是洞察到HPC领域面临的种种难题,早在2105年11月,曙光就创新推出了EasyOP在线运维平台,从“运维”这一痛点入手,希望帮助更多HPC用户解决运维人员不足的问题。


EasyOP带来的好处是,它不仅可以提供7*24小时全程专家支持的自动化运维能力,能够帮助HPC人员大大提升工作效率,一定程度上也提升了工作的自由度;同时,借助曙光在HPC领域多年积累的深厚技术和知识储备,EasyOP通过搭建“在线运维平台知识库”,并通过共享和开放的方式,让HPC运维人员形成强大的高性能计算专业知识体系。目前,曙光已在安徽、河北以及欧洲建立了三个EasyOP分中心。截至今年6月初,EasyOP的活跃集群已经接近200套。


640?wx_fmt=jpeg


值得一提的是,基于EasyOP在HPC运维领域的探索与实践,曙光又萌发了更大的想法,那就是能否把这一套经过实战检验和验证成功的经验、方法以及体系,延伸到计算、应用乃至生态领域,构建一个功能更加丰富、作用更加强大的服务平台呢?


在此背景下,曙光先进计算服务平台“应运而生”。通过该平台,曙光希望将传统的HPC集群和其他计算资源等,进行统一的管理和维护,并将应用软件进行封装,为用户提供一个全新的云环境,以应用服务的形式提供给更多的用户,让他们更加方便、快捷、高效的使用HPC的资源。


不仅如此,在实现HPC服务化的基础之上,曙光还将逐步把生物、气象、高校、科研机构等行业领域的应用,如CAE、深度学习等应用集成到平台,更好的发挥应用的价值,为中国HPC在应用领域发展进一步“添砖加瓦”。


640?wx_fmt=png


据曙光EasyOP产品总监、首席运维架构师安磊介绍,曙光先进计算服务平台主要包括先进计算运维体系、先进计算运营体系及先进计算分享体系三大部分,具体而言:


首先,先进计算运维体系,是指继续依托于EasyOP高性能计算运维服务平台提供服务,主要承担各大计算中心集群与资源的监控、运维、检查、维护、升级及管理服务,是面向先进计算中心管理人员的统一入口,该体系采用中心化管理原则辐射全国先进计算中心,提供运维支撑服务。


其次,先进计算运营体系,主要承担科学、合理、智能、高效的调度和利用资源服务计算的任务,是面向先进计算中心终端用户的统一入口,通过该平台,实现整合资源的共享应用、统一管理、动态调度,并通过建设云服务环境,使其成为面向全国先进计算中心的资源和信息服务的统一入口,全面汇聚全国先进计算中心资源。


最后,先进计算分享体系,主要包括互动平台、数据分享及应用发布三大模块。互动平台将针对应用和学科划分专业计算“生态圈”,汇聚相关专业人才互动交流;数据分享将提供科学计算数据及成果分享与交易平台功能,促进科研成果价值化、产业化;应用发布平台将允许用户发布自己的镜像、软件、环境或算法等知识产权,初步形成先进计算开放的资源交易平台。


640?wx_fmt=png


安磊表示,曙光先进计算服务平台2018年10月正式上线,2019年1月正式商用。截止目前,该平台已接入6+个遍布全国的大型先进计算中心,总计算能力高达6000+TFlops,并可通过智能策略,为用户提供最佳的资源分配和使用方案,满足用户超大规模并行计算的需求。


此外,该平台还汇聚了4000+个HPC计算节点,可为用户提供丰富的计算能力;以及100+个HPC相关应用;并维护了一支面向HPC各个应用领域的软件专家团队,为用户提供全面的技术支持。


据了解,曙光先进计算服务平台未来还有更大的目标,一方面是结合曙光目前的优势方向,针对物理化学、气环科学、生命科学、智能制造及人工智能五大领域展开更多的合作,以计算科学带动行业创新的突破;另一方面是,该平台的定位不仅是重大科技基础设施,还是创新的公共服务平台,未来也会围绕重点支柱产业,以促进科技创新和产业向中高端转型升级为目标,力争成为地方产业经济发展中重要支撑。


由此可见,从EasyOP到先进计算服务平台,不仅是曙光从一种技术工具到整体服务能力全面升级和进化的体现,更是曙光在HPC计算、应用和人才领域不断探索与创新的印证,其价值可谓是“不止于眼下,更关注未来。”


曙光HPC价值使命的全新飞跃


毫无疑问,曙光EASYOP在线运维平台和先进计算服务平台正在为中国HPC在计算、应用和人才领域探索一套新的长效机制,某种程度上也有助于破解中国HPC长远发展的难题。


640?wx_fmt=jpeg


一是,从计算层面看,两大平台通过“HPC云化交付”的方式,可以让用户快速获得高性能计算集群的计算能力、调度能力和软件能力。更关键的是,这种云中交付HPC集群应用的新模式,还可以大大减轻用户的运维压力,同时也最大化的提升了HPC的资源利用率。


二是,从应用层面看,曙光先进计算服务平台还能促进中国HPC应用领域的长足发展,通过该平台,用户可以将成熟算法或者应用通过标准统一的格式发布在平台上,也可将其他人分享的成品镜像直接调用使用,由此解决硬件发展和软件优化不平衡、不同步的难题。


三是,从人才层面看,如前文所述,中国在HPC的领域的人才依然有很多的“短板”,人才依然是中国HPC产业发展的主要瓶颈。那么,通过曙光两大平台,不仅可以减少运维人员日常面临的管理和运维压力,更大的意义在于,通过曙光搭建的平台以及创造的机制,还可以为HPC创新人才的培养提供土壤,更为HPC人才价值的释放提供了空间和舞台。


正如吉青博士最后所言:“HPC是科技的基础性产业,几乎涉及人类科学和生活的每一个领域,而曙光深耕高性能计算二十余年,不仅为中国HPC产业的发展提供了强有力的支撑,也希望在计算、生态和人才领域发挥更大价值,为中国HPC长远的发展创造更多的可能。这也是曙光从Supercomputer走向Supercomputing的一点感悟和现实需求。HPC相关环节顺畅打通才能良性快速发展,从而真正达成好用、用好”。


总的来看,曙光EASYOP在线运维平台和先进计算服务平台是曙光在HPC领域综合能力的全面体现,也是曙光在HPC领域厚积薄发的印证,更是曙光HPC未来新价值使命的升级所在。所以,它的出现不仅会把整个中国HPC行业带上一个新的台阶,也为曙光今后赋能百行百业的数字化转型奠定关键基础。


640?wx_fmt=gif


申耀的科技观察,由科技与汽车跨界媒体人申斯基(微信号:shenyao)创办,16年媒体工作经验,拥有中美两地16万公里自驾经验,专注产业互联网、企业数字化、渠道生态以及汽车科技内容的观察和思考。


640?wx_fmt=jpeg

这篇关于【观察】从EasyOP到先进计算服务平台,曙光HPC价值使命的全新飞跃的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/563829

相关文章

计算绕原点旋转某角度后的点的坐标

问题: A点(x, y)按顺时针旋转 theta 角度后点的坐标为A1点(x1,y1)  ,求x1 y1坐标用(x,y)和 theta 来表示 方法一: 设 OA 向量和x轴的角度为 alpha , 那么顺时针转过 theta后 ,OA1 向量和x轴的角度为 (alpha - theta) 。 使用圆的参数方程来表示点坐标。A的坐标可以表示为: \[\left\{ {\begin{ar

【云计算 复习】第1节 云计算概述和 GFS + chunk

一、云计算概述 1.云计算的商业模式 (1)软件即服务(SaaS) 有些景区给游客提供烧烤场地,游客需要自己挖坑或者砌烧烤台,然后买肉、串串、烧烤。 (2)平台即服务(PaaS) 有些景区给游客提供烧烤场地,同时搭建好烧烤台,游客只需要自己带食材和调料、串串、烧烤。 (3)基础设施即服务(IaaS) 有些景区给游客提供烧烤场地,同时搭建好烧烤台,还有专门的厨师来烧烤,用户不需要关心前面的所有

中国341城市生态系统服务价值数据集(2000-2020年)

生态系统服务反映了人类直接或者间接从自然生态系统中获得的各种惠益,对支撑和维持人类生存和福祉起着重要基础作用。目前针对全国城市尺度的生态系统服务价值的长期评估还相对较少。我们在Xie等(2017)的静态生态系统服务当量因子表基础上,选取净初级生产力,降水量,生物迁移阻力,土壤侵蚀度和道路密度五个变量,对生态系统供给服务、调节服务、支持服务和文化服务共4大类和11小类的当量因子进行了时空调整,计算了

HarmonyOS NEXT:华为开启全新操作系统时代

在全球科技浪潮的汹涌澎湃中,华为再次以创新者的姿态,引领了一场关于操作系统的革命。HarmonyOS NEXT,这一由华为倾力打造的分布式操作系统,不仅是对现有技术的一次大胆突破,更是对未来智能生活的一次深邃展望。 HarmonyOS NEXT并非简单的迭代升级,而是在华为多年技术积淀的基础上,对操作系统的一次彻底重构。它采用微内核架构,摒弃了传统的宏内核模式,实现了模块化和组件化的设计理念

什么是dB?dBm、dBc、dBi、dBd怎么计算,有什么区别?

什么是dB?dBm、dBc、dBi、dBd怎么计算,有什么区别? 引言 在电子工程、通信和音频领域,dB(分贝)是一个常见的术语。许多人刚接触时可能会感到困惑,因为它不仅仅是一个简单的单位,还有多种不同的形式,如dBm、dBc、dBi和dBd。这篇文章将详细解释这些概念,并介绍如何计算它们,帮助初学者更好地理解和应用。 什么是dB? dB,即分贝,是一种表示两个数值比值的对数单位。分贝的基

php字符串计算汉字、中英文数字个数

$str = '123abcDEF测试的事发地点';$length = strlen(preg_replace('/[\x00-\x7F]/', '', $str));$arr['en'] = strlen( $str) - $length; //(非中文)$arr['cn'] = intval($length / 3); // 编码GBK,除以2 (中文)print_r($

计算广告:第四章——合约广告

计算广告:第四章——合约广告 一、广告位合约 二、受众定向 1、受众定向方法概览 2、 受众定向标签体系 三、展示量合约 1、流量预测 2、流量塑性 3、在线分配 包括按 CPM 计费的展示量合约广告和按 CPT 结算的广告位合约。   一、广告位合约 按CPT结算广告位合约 缺点:无法做到按受众类型投放广告,无法进行深入的优化效果 优点:强曝光属性带来品牌冲击,或

计算广告:第三章——在线广告产品概览

第三章——在线广告产品概览 一、商业产品的设计原则 二、需求方层级组织及接口 二、供给方管理接口 (1)合约广告产品——主要服务于后续效果不宜直接衡量的品牌类广告主 按时段售卖的CPT广告按约定展示量售卖的CPM广告   (2)竞价广告产品 其形式主要是搜索广告,其产品形式为对搜索关键词的竞价。这种广告拓展到站外广告时,演变为了对页面关键词或者用户标签竞价的产品形式,也就是

计算广告:第二章——计算广告基础

一、广告有效性原理 二、互联网广告的技术特点 1、技术和计算向导 2、效果的可衡量性 3、创意和投放方式的标准化 4、媒体概念的多样化 5、数据驱动的投放决策 三、计算广告的核心问题 1、广告收入的分解 2、结算方式与ECMP估计关系 四、在线广告相关行业协会 五、问题 可衡量的效果以及相应的计算优化是在线广告区别线下广告的主要特点,千次展示期望收入(expect

给定正整数n,计算出n个元素的集合{1,2,....,n}可以划分为多少个不同的非空集合

给定正整数n,计算出n个元素的集合{1,2,....,n}可以划分为多少个不同的非空集合 附源代码: #include<iostream>using namespace std;int F(int n,int m){if(n<=2)return 1;if(m==1||n==m)return 1;elsereturn F(n-1,m-1)+m*F(n-1,m);}void main(