虚拟机下的 集群文档信息
目录
一、集群的分类介绍
1.故障迁移集群
2.负载均衡集群
3.高性能集群
二、集群的条件
三、构造一个简单的Linux集群实现
2.安装GNU C编译器和GNU FORTRAN编译器
3.修改/etc/hosts文件将所有节点名称及其ip地址填入
4.接下来我们将安装MPICH
5.要让MPICH知道所有的节点
6.将目录/拷贝到集群中的所有节点上
7.在examples中运行几个测试程序
四、并行计算设计
正文
一、集群的分类介绍
1.故障迁移集群
最简单的故障迁移集群有两个节点一个节点是活动的另外一个节点是备用的不过它会一直对活动节点进行监视。一旦活动节点出现故障备用节点就会接管它的工作这样就能使得关键的系统能够持续工作。
2.负载均衡集群
负载均衡集群通常会在非常繁忙的Web站点上采用它们有多个节点来承担相同站点的工作每个获取Web页面的新请求都被动态路由到一个负载较低的节点上。
3.高性能集群
高性能集群用来运行那些对时间敏感的并行程序它们对于科学社区来说具有特殊的意义。高性能集群通常会运行一些模拟程序和其他对CPU非常敏感的程序这些程序在普通的硬件上运行需要花费大量的时间。
往往又把前面两种方式的集群称之为高可用性集群他们能够提供不间断的服务。例如有许多应用程序都必须一天二十四小时地不停运转如所有的web服务器、 ATM、医学与军事监测仪以及股票处理机等。对这些应用程序而言暂时的停机都会导致数据的丢失和灾难性的后果。而高性能集群通过将多台机器连接起来同时处理复杂的计算问题。模拟星球附近的磁场、预测自然灾害的隐患出现、定位石油资源的储藏地等情况都需要对大量的数据进行处理。
二、集群的条件
至少有两个系统这里用了windows下的虚拟机安装两个Linux来作为主从节点来实现。
工作站中间能实现通信利用高速的局域网来构成一个并行的计算平台。
三、构造一个简单的Li nux集群实现
环境的配置。对于我们的集群要使用MPI CH作为MPI 1实现和一组普通的Linux工作站。我们主要是突出其中的基本原理为目的构建最小的系统在集群环境中使用它来运行并行程序。 同时实验是在基于windwos下的两个VMware映像来做的可能算不上真正的集群。使用Vmware下集群 因为CPU需要进行共享在性能上不会有优势。首先安装windwos下的Linux虚拟机。
注意 同时安装的时候注意相关的服务的开启防火墙的设置在vm下安装完Li nux系统配置好相关的参数环境。设置网络至少能够使用机器名相互ping通。这些在下面要设置最好在系统安装前完成。
2.安装GNU C编译器和GNU FORTRAN编译器。 当然这步应该最好在L inux初始安装时候完成没有初始安装的通过服务设置也可以x-window可视话或者命令来设置启用相关的服务。主要用于对后面的并行计算程序进行编译运行。
3.修改/etc/hosts文件将所有节点名称及其ip地址填入。
修改(或创建)/etc/文件。
使用nfs共享文件实现集群机对共享文件的访问权。
修改~/.bash_prof ile文件 在安装mpi后更改
配置ssh。
安装以后应该保证各节点之间能够用ssh相互登录。每个节点的sshd都应该能正常提供服务。
4.接下来我们将安装MPICH。最新的MPICH拷贝到一个临时目录下解压编译安装。
5.要让MP I CH知道所有的节点。请编辑文件/t mp/
/util/machines/并将所有节点的主机名添加到这个文件中这样安装的MP I CH就可以知道所有的节点了。
6.将目录/拷贝到集群中的所有节点上。
7.在exampl es中运行几个测试程序
现在集群已经准备好了正如我们可以看到的一样所有的重头戏都可以留给MP I实现来完成。正如前面介绍的一样这是一个裸集群所需的大部分手工工作只是确保机器之间可以彼此进行通信我们配置了s sh MP ICH是手工拷贝的等等
以设定的用户登录将/examples/bas ic/文件拷贝到
~/mp i/m irror下编译mpicc -o cpimpirun -np 2 cpi
这里采用2个节点进行计算。进行ssh连接后程序等待输入这时可以在节点机上用命令 ps -A | grep aout
查看进程应该能看到数个fp i进程其中第一个是本机所执行的进程其它的是异地进程镜像。在sea上输入一个整值再次在各节点上执行ps -A | grep
可以发现计算时间在不断增长表明计算的确是在多台主机上同时进行的。 至此整个安装配置过程结束。
四、并行计算设计
在并行计算中 由于并行算法可以对性能产生重大的影响 因此受到广泛的重视并行算法也成为一个专门的十分活跃的研究领域并行算法设计也是并行程序设计的前提。
当然 目前的进行的实验只能说是最基本的裸机的实验。要对集群进行真正的应用还远远不够对L inux集群管理如何有效地实现简单而高可维护行的l inux集群这需要使用另外的集群软件来进行。
“ 虚拟机下的 集群”文档源于网络本人编辑整理。本着保护作者知识产权的原则仅供学习交流请勿商用。如有侵犯作者权益请作者留言或者发站内信息联系本人我将尽快删除。谢谢您的阅读与下载
之前几个月由于CHIA挖矿导致全球固态硬盘的价格疯涨,如今硬盘挖矿基本上已死,硬盘的价格基本上恢复到常规价位,所以,pacificrack决定对全系Cloud server进行价格调整,降幅较大,“如果您是老用户,请通过续费管理或升级套餐,获取同步到最新的定价”。官方网站:https://pacificrack.com支持PayPal、支付宝等方式付款VPS特征:基于KVM虚拟,纯SSD raid...
BuyVM在昨天宣布上线了第四个数据中心产品:迈阿密,基于KVM架构的VPS主机,采用AMD Ryzen 3900X CPU,DDR4内存,NVMe硬盘,1Gbps带宽,不限制流量方式,最低$2/月起,支持Linux或者Windows操作系统。这是一家成立于2010年的国外主机商,提供基于KVM架构的VPS产品,数据中心除了新上的迈阿密外还包括美国拉斯维加斯、新泽西和卢森堡等,主机均为1Gbps带...
LightNode是一家位于香港的VPS服务商.提供基于KVM虚拟化技术的VPS.在提供全球常见节点的同时,还具备东南亚地区、中国香港等边缘节点.满足开发者建站,游戏应用,外贸电商等应用场景的需求。新用户注册充值就送,最高可获得20美元的奖励金!成为LightNode的注册用户后,还可以获得属于自己的邀请链接。通过你的邀请链接带来的注册用户,你将直接获得该用户的消费的10%返佣,永久有效!平台目前...