浪潮天梭系统集群培训资料.ppt

浪潮天梭TS10K集群培训 10/16/2019 Inspur group 一、什么是集群？ “联结起来的计算机的集合，整个系统使用起来像一个单一的一体的计算资源” - Greg Pfister, In Search of clusters 二、为什么用集群？ 通俗的说，就是单一计算节点的资源已经无法满足我们的计算需求，比如内存的容量，cpu的计算能力。也许一个算例我们要计算数周甚至数月，这时候我们就需要用到集群来处理这些计算问题。 三、集群有哪些部分组成？ 计算节点：承载集群的计算任务 管理节点：用户登录、管理调度整个集群、任务提交等，提供对整个系统的监控管理 存储节点：存储大量的计算数据，高可用，高安全 硬件架构 网络架构 网络规划 管理ip：00管理节点 ~31计算节点 2~35 io节点 计算 ip：10.10.10段，尾数同上 IPMI网络：00管理节点 01~104 io节点 00 第一个刀箱，对应101~120，cu01~cu20 00 第二个刀箱，对应101~121，cu21~cu31 10/16/2019 Inspur group 需要的条件： 1、客户端与集群连通 2、客户端如果为linux可以直接ssh登录到管理节点；如果为windows系统，需要安装相应软件 3、一个合法账号！ 4、相应操作知识积累 并行环境搭建 Linux集群并行环境主要配置以下4个服务 1、rsh服务 通讯服务 2、ssh服务 通讯服务 3、nfs服务 目录共享 4、nis服务 用户同步 并行环境搭建-rsh服务配置 rsh服务配置 开启root用户对所有节点的rsh权限 1、编辑/etc/hosts节点名称解析，加入所有（包括本机）节点的ip地址和对应的计算机名； 此文件在一台机器上编辑完毕可以拷贝到别的节点上使用；注意这一行不要动，否则会影响到服务器的正常使用。 例如： 00 mu01 cu01 0 cu10 并行环境搭建-rsh服务配置 2、编辑/root/.rhosts和/etc/hosts.equiv，加入所有节点的计算机名 例如： mu01 cu01 cu10 3、开启rsh服务：setup→system services→[*]rsh[*]rlogin[*]rexec 并行环境搭建-rsh服务配置 4、编辑/etc/securetty，加入rsh，rexec，rlogin（在文件后面添加就可以） 5、重起服务service xinetd restart rsh的配置需要在所有节点上进行。 并行环境搭建-ssh服务配置 1、在mu01上以root登录，然后运行ssh-keygen –t dsa，目的是简单的在 /root下创建目录.ssh，当提示输入passphase时打入两次回车。这将生成/root/.ssh/id_dsa和/root/.ssh/id_dsa.pub 2、在cu01上以root登录，运行ssh-keygen –t dsa，然后在mu01上运行scp /root/.ssh/ id_dsa.pub gpu01：/root/.ssh/authorized_keys，在cu01的/root/.ssh/目录下运行cat id_dsa.pub 〉〉authorized_keys，再运行scp authorized_keys gpu02：/root/.ssh/ 并行环境搭建-ssh服务配置 3、在cu02的/root/.ssh/目录下运行cat id_dsa.pub 〉〉authorized_keys，再运行scp authorized_keys cu03：/root/.ssh/ 4、重复以上步骤在后面结点上，在最后的计算节点上将生成一个完整的authorized_keys文件，然后把authorized_keys文件用scp命令拷贝到其余所有节点的/root/.ssh/目录下，ssh配置完成。 并行环境搭建-nfs服务配置 server端配置 1、建立文件/etc/exports（若已存在该文件，则先删除再重新建立） 2、vi /etc/exports/，在文件内添加上语句： /home *(rw,no_root_squash,sync) /opt*(rw,no_root_squash,sync) （目录为需要共享的目录，目录和星号之间有空格。） 3、激活nfs chkconfig nfs on service nfs restart 此时可以到client上用showmount –e IP