随着信息技术的飞速发展,人类对信息处理能力的要求越来越高,高性能计算HPC开始走入大众视野并对社会进步发挥着不可替代的作用,深入影响着我们生活的方方面面。
9月23日,华为全联接2020在上海盛大开幕。在第一天举行的HPC场景海量存储应用专题沙龙上,来自华为、中石化物探技术研究院、上海天文台、并行科技的行业专家学者畅谈HPC产业的现在与未来,为我们带来了一场高科技盛宴。
5G+AI时代,HPC存储将如何引领产业升级?
HPC是如何影响我们的生活的?以新药研发为例,制药企业借助HPC加速药物筛选和分子分析,可大幅缩短新药的研发周期;通过HPC实现车辆碰撞的技术仿真,车企可大幅降低新车研发费用和周期;在基因测序领域,人类第一次完整基因组测序耗费了13年时间,而今在HPC的加持下,这个时间已经降低到1天以内;人们所熟知的天气预报领域,准确率相比十年前有了很大提升,这背后,HPC技术都功不可没。
华为数据存储与机器视觉产品线副总裁,海量存储领域总裁 尚海峰
华为数据存储与机器视觉产品线副总裁,海量存储领域总裁尚海峰做了《打造新一代高性能并行存储,引领HPC产业升级》的主题演讲,他指出:“存储作为HPC的数据底座,对于数据价值的充分挖掘起到至关重要的作用。随着5G和AI时代的到来,HPC存储产业面临更大的挑战,比如需要更高的性能以匹配算力和客户体验的提升,更优的TCO让更多的数据得以被保存和分析,以及更高效的访问能力,以适应HPDA和HPC-Based AI趋势。 ”
对于如何应对HPC领域的新挑战,华为也给出了解决之道。本次会议上,华为推出了基于OceanStor Pacific海量存储的新一代高性能并行存储方案。方案基于全新架构打造的DPC并行客户端,实现一套存储同时支持高带宽与高OPS应用;通过非结构化协议互通提升分析效率,避免HPDA场景因不同协议访问导致的数据拷贝;通过热温冷智能分级,实现成本优化,为用户提供更佳的TCO。”
面向未来,HPC对企业、社会的重要性将进一步凸显,华为也将持续在效率、性能、成本维度创新,引领HPC产业升级。
用海量数据感知地球脉动,开启能源勘探新时代
能源勘探作为HPC场景的重要应用,一直是HPC应用新技术的试验场与磨刀石,尤其是在当今资源越来越紧缺的时候。如何通过数据准确感受“地球的脉动”从而降低开采成本并提升准确率,成为每个油气企业的重要课题。
“实际上地球物理勘探的另外一个说法就是相当于给地球做CT。采集的数据越多、处理的越精细、使用的新技术新方法越多,所产生的地质剖面以及对地下的地质结构的描述越清晰,这样找到油的可能性就越大。”来自中国石化石油物探技术研究院高性能计算高级专家王永波分享到。
中国石化石油物探技术研究院高性能计算高级专家王永波
采集的信息越多处理得越精细,开发井的井位误差就越来小。这就要求油气企业对勘探地震资料的处理精度越高越好。“我们采用华为OceanStor海量存储之后,基于其卓越性能与高效算法,HPC系统勘探效率提高了16%左右,整体采购成本降低了30%,自运维能力也大幅减少了运维负担。”
面向未来,大数据和AI技术也将广泛应用到能源勘探领域,进一步提升勘探的效率,通过数据的碰撞和算法的训练,来提升对于油层、井位、储量的预测,将油气勘探带入一个新时代。
SKA加速探索星空,从数据中看见宇宙
SKA是平方公里阵列射电望远镜阵列的简称,主要被用来研究宇宙的起源,聆听宇宙最早期的声音,科学家也称之为宇宙黎明。SKA建成后将比目前最大的射电望远镜阵列的灵敏度提高约50倍,巡天速度提高约10000倍。
中国科学院上海天文台射电天文科学与技术室副主任&SKA课题组组长 安涛
“SKA望远镜建成,将产生10倍于目前全球互联网的数据流量。”来自中国科学院上海天文台射电天文科学与技术室副主任&SKA课题组组长安涛提到。巨大的数据量处理需要高性能的存储支撑,并且还需要7*24小时稳定运行,以满足全球用户全天候、无缝的访问需求,基于华为OceanStor海量存储的高性能、低时延以及高可靠能力,高效地支撑了海量SKA数据的访问与分析。
安涛最后总结道:“SKA海量数据处理将会是未来全球科学家面临的主要挑战之一,上海天文台将继续携手华为,用海量数据加速探索星空,从数据中看见宇宙。”
开放生态,让气象预测更准确
北京并行科技是中国超算/人工智能行业软件服务企业,也是华为在HPC场景重要的合作伙伴。并行科技行业事业部总经理吕昇亮分享了与华为面向气象预测领域的合作方案。
北京并行科技行业事业部总经理 吕昇亮
气象预测过程包含了数据采集、数据同化、集成预测和最终的气象展现四个阶段,每个阶段的需求又不尽相同,因此需要存储设备同时支持高OPS、高带宽以及高稳定性。双方依托华为OceanStor新一代并行文件存储为底座,结合并行科技的软件和专业服务形成整体方案,让气象预测效率更高、性能更佳、成本更优。
总结
从基因密码到地球脉动,从浩瀚宇宙再到气象预测,华为新一代高性能并行存储OceanStor Pacific系列,持续为用户打造效率更高、性能更佳、成本更优的数据底座,引领HPC产业升级,让HPC更广泛地造福人类。