Linux基金会支持高性能和百亿亿次计算

2023-11-15 11:36来源:大国新闻网

高性能计算(HPC)使用并行数据处理来提供尽可能快的计算性能。无论是超级计算机,如Exabyte的高速Frontier HPE Cray超级计算机,还是数百或数千台服务器的集群,都是关于处理复杂任务并尽可能快地运行它们。

现在,Linux基金会,一个领先的开源创新组织,宣布了两个新的基金会来推进HPC和存储解决方案:高性能软件基金会(HPSF)和DAOS基金会。

HPSF旨在为高性能计算构建、推广和推进便携式核心软件堆栈。该堆栈由10个不同的程序组成。这些都是:

  1. Spack: HPC包管理器

  2. Kokkos:一个性能可移植的编程模型,用于以与硬件无关的方式编写现代c++应用程序。

  3. AMReX:一种性能便携的软件框架,旨在加速在块结构、自适应细化网格上求解偏微分方程。

  4. WarpX:一种性能便携的具有先进算法的细胞粒子代码,获得了2022年戈登贝尔奖

  5. Trilinos:一组可重用的科学软件库,特别以线性、非线性和瞬态求解以及优化和不确定性量化而闻名。

  6. Apptainer:专门为安全、高性能计算而设计的容器系统和图像格式。

  7. VTK-m:一个用于加速器架构的科学可视化算法工具包。

  8. HPCToolkit:用于从笔记本电脑到世界上最大的gpu加速超级计算机的计算机的性能测量和分析工具。

  9. E4S:极端规模的科学软件堆栈

  10. charlicloud: hpc定制的、轻量级的、完全无特权的容器实现。

这些项目有什么共同之处?它们都是开源的,这才说得通。多年来,Linux和开源计算为所有TOP500超级计算机提供了动力

它们都是为了简化高性能软件开发人员的生活而设计的。有了它们,程序员可以获得持续集成、交钥匙软件堆栈和性能测试。这将使他们的生活更轻松。

这个新的基础解决了HPC在科学计算、数字工程和人工智能应用中日益普及的问题。该基金会计划利用美国能源部的百亿亿次计算项目、欧洲高性能计算联合项目和其他国际项目的投资,以提高不同计算架构的性能。

HPSF的主要支持者包括亚马逊网络服务、阿贡国家实验室、CEA、CIQ、惠普企业、英特尔和英伟达等。该基金会将建立一个技术咨询委员会,按照受云原生计算基金会(CNCF)启发的治理模式,管理各种HPC主题的工作组。

简而言之,阿贡国家实验室负责计算、环境和生命科学的副实验室主任Rick Stevens解释说:“HPSF将提供一个协作环境和资源访问,使社区能够共同开发驱动当前和未来一代HPC系统所需的软件,阿贡国家实验室很荣幸能作为创始成员加入。”

DAOS基金会专注于分布式异步对象存储(DAOS)项目的治理和开发。DAOS的发音与“boss”押韵,是一种高性能的开源存储系统,它彻底改变了高性能计算和人工智能工作负载的性能。它提供了一个完全分布式的键值存储体系结构,克服了传统的基于posix的HPC存储系统的局限性。

DAOS支持高带宽、低时延和高IOPS。再说一遍,这个游戏的名字就是速度,速度,速度。这是一个成熟的项目,英特尔于2012年开始研究。英特尔将向基金会捐赠DAOS源代码,并继续作为主要贡献者。

与HPFS一样,DAOS也得到了众多HPC推动者的支持,比如阿贡国家实验室、Enakta实验室、谷歌Cloud、惠普企业和英特尔。

在Linux基金会的保护下,这两个基金会标志着在推动高性能计算和存储的开源解决方案方面的合作努力的重大飞跃。它们将促进创新,降低进入门槛,并支持HPC和AI/ML关键技术的发展。

多讯网声明:未经许可,不得转载。
汽车
地球与环境