hpc

使用 openhpc 安装 warewulf+slurm 环境

SLURM(Simple Linux Utility for Resource Management) 是一种可用于大型计算节点集群的高度可伸缩和容错的集群管理器和作业调度系统，被世界范围内的超级计算机和计算集群广泛采用。如天河二号上便使用了 SLURM 资源管理系统。

手动安装 warewulf+slurm 环境

超算环境管理模块

平行执行命令工具

超算智算常用工具

PyCharm 除了可以使用安装软件远程开发，还可以使用 JetBrain Projector，他完全免费，browser/server 架构，本地只需要一个浏览器访问。

Jupyter 是一个非营利组织，旨在为数十种编程语言的交互式计算开发开源软件，开放标准和服务。下面介绍 Jupyter 的安装和使用。

Singularity 是一个用于HPC（高性能计算）的容器系统，以安全为主，并兼容Docker。

visdom 是 pytorch 的可视化工具。browser/server 架构。

JupyterLab 是 Jupyter Notebook 的下一代产品，提供更加强大的功能。

Lmod 是一个基于 Lua 的 Module 系统，允许在 Unix 系统下动态修改用户环境，和 Environment Modules 功能类似。

Environment Modules 是一种管理 Unix 或 Linux shell 环境的工具，它允许动态地设置或删除相关的环境变量。

psdh (Parallel Distributed Shell)是一个高性能、并行的远程shell实用程序

clusterit 是工具集合，主要是用来批量 处理其他机器上的命令，文件等。目前该工具已经过时。

ClusterShell 是一个事件驱动的开源 Python 库，旨在在服务器场或大型 Linux 集群上并行运行本地或远程命令。

高性能计算 (HPC, High-Performance Computing) 是指高速处理数据并执行复杂计算的能力。一个 HPC 集群由数百或数千个通过网络连接的计算服务器组成。每个服务器都称为一个节点。每个集群中的节点彼此并行工作，提高处理速度，从而实现高性能计算。HPC 解决方案包括三个主要组件：计算、网络、存储、编排

本文介绍 munge 的工作作用、原理、安装和演示。munge 是一个用于创建和验证凭据的身份验证服务，为了在HPC集群环境中使用，它被设计为高度可伸缩的。

NIS(Network Information Services) 前身是 Sun Yellow Pages (YP)，主要目的是向网络上的机器提供集中身份管理。