Enabling Remote Performance Profiling of HPC Workloads

作者：禅与计算机程序设计艺术

1.简介

HPC (high performance computing) 是高性能计算领域的最新研究热点之一，其突出特征之一就是具有强大的计算能力和大规模并行运算能力。而在CI/CD流程中，对HPC应用程序的性能测试也是一个重要的环节，因为它们在关键路径上运行，在部署上线时需要保证其性能满足要求。然而，由于高性能计算机的特点，为每一个提交的代码都进行性能测试是不可行的，因此需要寻找一种方法能够通过自动化的方式完成对应用性能的测试。远程性能分析（RPP）技术正是为此而生，它可以对HPC应用程序执行实时的性能测试，从而为开发人员提供有价值的信息。而在本文中，作者提出了一种名为“HPC-Profiler”的工具，该工具可以实现远程性能分析的功能，对运行在HPC集群上的程序进行性能监测，并且自动地将结果上传到远程数据库，供用户查询。通过对HPC-Profiler的功能、原理、实验验证等方面作详细阐述，本文期望通过分享HPC-Profiler的相关知识，让读者了解目前的远程性能分析技术发展状况，以及它的应用前景。

2.核心概念术语说明

2.1 HPC

高性能计算（HPC）是一个全新的计算机技术和管理模式，它是基于通用计算机的分布式系统，用以处理大型数据集和复杂计算任务。这种计算模型通常包含多个计算机节点组成，节点之间的通信依赖于网络，并采用分布式内存共享的架构。HPC系统被设计用于计算密集型任务，如科学、工程和金融模拟、天气预报、海洋模拟、航空航天和工程仿真等。

HPC系统由若干计算节点和资源池组成，包括计算节点和存储设备、网络连接器、运算单元、内存模块、磁盘阵列、交