高校科研HPC高性能计算存储应用实践

发布时间:2024年01月08日

用户背景

南京理工大学是隶属于工业和信息化部的全国重点大学,学校由创建于1953年的新中国军工科技最高学府中国人民解放军军事工程学院(简称“哈军工”)分建而成。学校在长期发展过程中形成了兵器与装备、信息与控制、化工与材料三大优势学科群,主动对接服务国家重大战略,不断推进陆海空天信融合发展,为国防自主创新和经济社会发展提供强有力支撑。

b8a7e8b25c1f7848d5ee17a3e31fd557.jpeg

用户需求

用户的HPC项目前端安装有15台服务器,使用NFS共享协议,通过10GbE SFP+通道采集数据,并发写入后端存储系统,前端计算节点再从存储读取数据进行计算。在此基础上要求存储达到中型计算集群所需的性能。初期规划就要存储提供PB级空间供机械科研项目使用,并且存储要具备横向扩展(Scale-out)功能,应对计算数据增长以及备份带来的性能与容量的压力。

解决方案

针对客户的要求,Infortrend普安科技金牌合作伙伴燊通智联信息科技发展(上海)有限公司提供GS高密度统一存储解决方案。Infortrend高密度存储支持NFS协议直连服务器组成计算群组,文件级性能可达13.5GB/s的读、5.5GB/s的写,满足用户对性能的要求。单台高密度存储就可以到1.5PB的容量用于分析数据的存放。GS还具有横向扩展(Scale-out)功能,扩展后GS的集群性能可以达到54GB/s的读、22GB/s的写,容量可以支持3584颗硬盘70PB空间,满足用户计算节点增长、备份宝贵研究数据对性能与容量扩展的要求。

baf5939861151b02d00d499cccd3875c.jpeg

方案优势

  1. GS支持Linux,windows,MAC跨平台计算系统搭建。
  2. 支持NFS,SMB,FTP等多种存储协议直连计算集群,不需要使用其它并行文件系统,能有效地降低构建成本。
  3. GS横向扩展(Scale-out)功能,与分布式存储相比,扩展效能高、稳定性高,同时统一命名空间下文件存放一个存储池(pool)内,便于用户调取访问。适合HPC未来规模增长及备份的需求。
  4. HA双活及双冗余控制器,确保硬件故障时业务的连续运行,最大限度降低分析中断的风险。
  5. 支持SSD与HDD混合配置,通过冷热数据分层功能,将热数据存放到 SSD,冷数据存放到 HDD,形成合理的资源分配机制,调动存储发挥最大性能。
  6. RAID、文件副本 (FLR) 数据保护、SSD 智能管理防止多颗 SSD 发生故障。超级电容在断电时为数据写入硬盘提供电力。
文章来源:https://blog.csdn.net/smart1998/article/details/135460327
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。