Julia计算集群的建立和配置
使用Julia语言进行并行计算有两个方面。首先是在本机上进行并行计算,采用多核CPU的方式,使程序分布运行在一个CPU的多个核心上。或者采用集群的方式,一台主机调用多个计算节点来运算并行程序。
本地上进行并行计算,需要采用多核CPU。程序主要是addprocs_local(3)函数(新版本为addprocs(3))来添加多核支持,这里的3为添加3个核心,加上原来的,总共四个运算核心。在加完核心后,可以输出当前参与运算的核心数nprocs()。添加的核心ID顺序依次为2,3,4……
集群上进行并行计算,首先需要建立服务器集群。再没有真实平台的情况下,我们可以建立一个虚拟机集群来模拟。虚拟机集群其实就是一个互相能通信的虚拟机网络,然后在这个网络里进行添加计算节点的操作。这里介绍在集群上进行Julia计算的具体操作:
1.安装最新版本Julia:将Julia更新到最新版本,我采用直接删除旧Julia目录,然后重新下载编译Julia的方式,将Julia更新到最新版本。参考1
2.建立计算机集群:参考文章2建立一个真实Ubuntu电脑,以及其上的三个虚拟节点的计算机网络。按照桥接模式使其相互之间能够互联。
3.配置SSH无密码登陆:按照文章3介绍,使宿主机器和虚拟计算集群之间的机器可以相互无密码登录,这样在添加远程计算节点时,就不用输入密码了。
4.编写程序:集群计算和多核计算程序一直,只是在添加计算核心的时候,改变函数的参数为addprocs({gqk@192.168.0.11, “gqk@192.168.0.12”“gqk@192.168.0.13”})这种方式。添加的核心也是从2开始起步。
addprocs({gqk@192.168.0.11, “gqk@192.168.0.12” “gqk@192.168.0.13”})
5.计算和结果:
require("zm.jl")
rzm1=remotecall(1,zm,pbInter1,XX,Y,Z)
rzm2=remotecall(2,zm,pbInter2,XX,Y,Z)
rzm3=remotecall(3,zm,pbInter3,XX,Y,Z)
rzm4=remotecall(4,zm,pbInter4,XX,Y,Z)
pbInter=vcat(fetch(rzm1),fetch(rzm2),fetch(rzm3),fetch(rzm4))
该程序首先引入zm.jl文件,该文件定义了pbInter函数,该函数有三个参数x、y、z。在分别赋给1、2、3、4四个节点计算后,采用fetch取回计算结果,用vcat对结果进行连接。
总结:这里的并行计算是并行架构方面的实验:最新版本的Julia在每个节点上都存在。建立了这些计算节点的互联网络,在此基础上配置了无密码SSH登录方法,最后编写程序实现并行计算。但是目前尚未进行算法的深入考虑。
补充:软件开发 , Java ,