1. 首页
  2. > 公司注册 >

集群调度是什么意思(集群调度的组网方式有哪些)

集群调度系统对现代数据中心的重要作用不言而喻,每个组织都有其独特的需求和目前,尤其商业组织对安全性、故障容忍度等要求很高,这时候一组网款优秀的商业产品就是不错的选择,比如即将和大家聊到的PBS Pro。








说到PBS意思 Pro,一定要先介绍一下“PBS家族”。PBS作为功能最齐全、历史最悠久、支持最广泛的本地集群调度器之一,其最初开发是为了提供一个能满足异构计算网络需要的软件包,当多个用户使用同一个计算资源时,每个用户可以使用PBS脚本提交自己的任务,并由PB组网S对这些任务进方式行管理和资源分配,因此特别适用于高性能计算中集群系统、超级计算机和大规模并行系统。




PBS包括OpenPBS 、PBS Pro和Torque三个主要分支,Open PBS 作为最早的系统已无后续开发,而Torque是常常和 Maui一同使用的开源版本,本篇要说的PBS Pro则是PBS的商业版本,一种快速、强大的工作负载管理器。








PBS Pro开发方Altair最初专攻仿真CAE,后期为了切合用户使用需求针对性地开发了PBS Pro调度软件。因此,在PBS Pro的开发初期就明确了是为高性能计算而生的。




那么,大家思考过吗——“究竟哪个PBS版本最适合客户的集群?”这其实没有绝对的答案,选择哪个版本和组织的需求息息相关,与其说“最”不如说“的更”。




OpenPBS 对于小型的、少于 32 个 CPU 的低成本集群来说是一个不错的平台,但是超过这一极限会导致故障容忍问题。相较之下,PBS Pro可以扩展到数千个CPU和最多1000个作有业,集群经过50000多个节点的测试,可拓展以支持数百万意思个内核,具有快方式速的作业分配和最小的延迟。因此,对于具有数千个CPU的工业级集群或者对可伸缩性、故障容忍等方面有要求的集群来说,PBS Professional 一定是“更佳”的选择。








// 首先是易用性。


PBS Pro的图形提交管理界面,可以方便使用者和管理员进行使用和集群管理。同时为所有的资源提供统一接口,易于配置以满足不同系统的需求。




// 其次是移植性。


PBS Pro符合POSIX 1003.2标准,可以用于shell和批处理等各种环境。




// 再者是适配性。


PBS Pro可以适配各种管理策略,并提供可扩展的认证和安全模型,支持广域网上的负载的动态分发和建立在多个物理位置不同的实体上的虚拟组织。




// 最后是灵活性。


PBS Pro可以通过层级调度灵活应对更加多样和动态化的工作负载,可帮助客户适应其不断变化的运营环境。





PBS Pro安装开始前一定也是“环境准备”,这里简单分为操作系统环境和并行运算基础环境的准备。


★ 操作系统环是什么境包括配置固定网络IP、维护主机Hos集群ts表、关闭iptables和selinux、正常配置yum、配置主机时间同步和配置root的ssh无密码等。


★ 并行运算基础环境的准备则包括NFS配置、配置NFS client、确保所有用户在所有节点间可以无密码ssh通信和配置autofs。







然后进入关键的安装环的节。


第一步,安装Altair license管理器。


上传安装程序并安装许可证管理器。



确认许可证服务正常启动后,检测许可证使用状态。





第二步,安装PBS Pro。


在命令行输入:





安装分类4类server节点、执行节点、提交节点与通信节点,根据节点的各个用途选择对应的安装类型。




第三步、安装相关组件。


为了实现PBS Pro丰富的功能,需要安装其它组件,如用于应用集成模版的PB有SAppsvcs组件、用于图形界面打开的PBSWorks组件、PBSA组件等等,具体这里不展开说了。



最后用web方式打开使用PBS Pro的web页面即可对调度软件进行页面化的对接操作。









服务部小伙伴 A:


我跟很多调度软件打过交道,PBS pro相对来说对用户使用的门槛低,它拥有图形化的提交界面,可以让不懂linux的用户通过web页面的方式,哪些通过鼠标点点就可以把作业提交至计算节点。




服务部小伙伴调度 B:


相对于客户感受到的价值优化,我们更多感受到了功能上的提升。PBS Pro核心功能中最是什么让我印象深刻的绝对是报表功能了,报表种类多且形式多样,囊括了柱状图、气泡图、雷达图、排名图等等……共25大类,从效率、成本、趋势多方位为HPC运行提供关键哪些指标。




服务部小伙伴 C:


PBS Pro实现了‘绿色计算’,它可以自动监测节点状态,对于空闲节点进行自动休眠或者关闭,有需求时会再次启动。这种节约能耗的计算方式有助于节能减排,深得企业调度的喜爱。




至此,本篇PBS Pro的部署实践介绍就结束啦!





奥工科技




-END-


版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至123456@qq.com 举报,一经查实,本站将立刻删除。

联系我们

工作日:9:30-18:30,节假日休息