Julia计算集群的建立和配置
2013-06-26 09:58
1016 查看
使用Julia语言进行并行计算有两个方面。首先是在本机上进行并行计算,采用多核CPU的方式,使程序分布运行在一个CPU的多个核心上。或者采用集群的方式,一台主机调用多个计算节点来运算并行程序。
本地上进行并行计算,需要采用多核CPU。程序主要是addprocs_local(3)函数(新版本为addprocs(3))来添加多核支持,这里的3为添加3个核心,加上原来的,总共四个运算核心。在加完核心后,可以输出当前参与运算的核心数nprocs()。添加的核心ID顺序依次为2,3,4……
集群上进行并行计算,首先需要建立服务器集群。再没有真实平台的情况下,我们可以建立一个虚拟机集群来模拟。虚拟机集群其实就是一个互相能通信的虚拟机网络,然后在这个网络里进行添加计算节点的操作。这里介绍在集群上进行Julia计算的具体操作:
1.安装最新版本Julia:将Julia更新到最新版本,我采用直接删除旧Julia目录,然后重新下载编译Julia的方式,将Julia更新到最新版本。参考1
2.建立计算机集群:参考文章2建立一个真实Ubuntu电脑,以及其上的三个虚拟节点的计算机网络。按照桥接模式使其相互之间能够互联。
3.配置SSH无密码登陆:按照文章3介绍,使宿主机器和虚拟计算集群之间的机器可以相互无密码登录,这样在添加远程计算节点时,就不用输入密码了。
4.编写程序:集群计算和多核计算程序一直,只是在添加计算核心的时候,改变函数的参数为addprocs({gqk@192.168.0.11, “gqk@192.168.0.12”“gqk@192.168.0.13”})这种方式。添加的核心也是从2开始起步。
addprocs({gqk@192.168.0.11, “gqk@192.168.0.12” “gqk@192.168.0.13”})
5.计算和结果:
require("zm.jl")
rzm1=remotecall(1,zm,pbInter1,XX,Y,Z)
rzm2=remotecall(2,zm,pbInter2,XX,Y,Z)
rzm3=remotecall(3,zm,pbInter3,XX,Y,Z)
rzm4=remotecall(4,zm,pbInter4,XX,Y,Z)
pbInter=vcat(fetch(rzm1),fetch(rzm2),fetch(rzm3),fetch(rzm4))
该程序首先引入zm.jl文件,该文件定义了pbInter函数,该函数有三个参数x、y、z。在分别赋给1、2、3、4四个节点计算后,采用fetch取回计算结果,用vcat对结果进行连接。
总结:这里的并行计算是并行架构方面的实验:最新版本的Julia在每个节点上都存在。建立了这些计算节点的互联网络,在此基础上配置了无密码SSH登录方法,最后编写程序实现并行计算。但是目前尚未进行算法的深入考虑。
参考
1. Ubuntu下安装Julia http://blog.csdn.net/gongqingkui/article/details/8697099
2. VirtualBox集群建立和网络配置/article/1655812.html
3. SSH无密码访问/article/1655815.html
本地上进行并行计算,需要采用多核CPU。程序主要是addprocs_local(3)函数(新版本为addprocs(3))来添加多核支持,这里的3为添加3个核心,加上原来的,总共四个运算核心。在加完核心后,可以输出当前参与运算的核心数nprocs()。添加的核心ID顺序依次为2,3,4……
集群上进行并行计算,首先需要建立服务器集群。再没有真实平台的情况下,我们可以建立一个虚拟机集群来模拟。虚拟机集群其实就是一个互相能通信的虚拟机网络,然后在这个网络里进行添加计算节点的操作。这里介绍在集群上进行Julia计算的具体操作:
1.安装最新版本Julia:将Julia更新到最新版本,我采用直接删除旧Julia目录,然后重新下载编译Julia的方式,将Julia更新到最新版本。参考1
2.建立计算机集群:参考文章2建立一个真实Ubuntu电脑,以及其上的三个虚拟节点的计算机网络。按照桥接模式使其相互之间能够互联。
3.配置SSH无密码登陆:按照文章3介绍,使宿主机器和虚拟计算集群之间的机器可以相互无密码登录,这样在添加远程计算节点时,就不用输入密码了。
4.编写程序:集群计算和多核计算程序一直,只是在添加计算核心的时候,改变函数的参数为addprocs({gqk@192.168.0.11, “gqk@192.168.0.12”“gqk@192.168.0.13”})这种方式。添加的核心也是从2开始起步。
addprocs({gqk@192.168.0.11, “gqk@192.168.0.12” “gqk@192.168.0.13”})
5.计算和结果:
require("zm.jl")
rzm1=remotecall(1,zm,pbInter1,XX,Y,Z)
rzm2=remotecall(2,zm,pbInter2,XX,Y,Z)
rzm3=remotecall(3,zm,pbInter3,XX,Y,Z)
rzm4=remotecall(4,zm,pbInter4,XX,Y,Z)
pbInter=vcat(fetch(rzm1),fetch(rzm2),fetch(rzm3),fetch(rzm4))
该程序首先引入zm.jl文件,该文件定义了pbInter函数,该函数有三个参数x、y、z。在分别赋给1、2、3、4四个节点计算后,采用fetch取回计算结果,用vcat对结果进行连接。
总结:这里的并行计算是并行架构方面的实验:最新版本的Julia在每个节点上都存在。建立了这些计算节点的互联网络,在此基础上配置了无密码SSH登录方法,最后编写程序实现并行计算。但是目前尚未进行算法的深入考虑。
参考
1. Ubuntu下安装Julia http://blog.csdn.net/gongqingkui/article/details/8697099
2. VirtualBox集群建立和网络配置/article/1655812.html
3. SSH无密码访问/article/1655815.html
相关文章推荐
- VirtualBox下计算集群的建立和网络配置
- Hadoop中的集群配置和使用技巧——分布式计算开源框架Hadoop入门实践(二)
- linux ubuntu下配置MPICH2集群计算环境
- 配置IIS--通过多台设备之间建立局域网--测试Application_onStart事件计算当前网站程序在线人数
- 训练:建立和使用一个集群配置
- 分布式Matlab计算集群建立方法与Demo
- 如何建立一个GPU加速的研究计算集群(一)
- MPI并行计算环境建立之一--配置前的准备工作
- weblogic81集群配置多服务器(五)-建立信任(完)
- hpc高性能集群–计算力的标准linpack测试安装配置
- 建立集群——rsh(remote shell)实现无密码访问配置详细指导
- 并行计算02-《cuda by examples》代码配置及julia例子
- VirtualBox集群建立和网络配置
- 转载——Linux ANSYS Fluent计算集群配置实录
- 分布式Matlab计算集群建立方法与Demo
- Tomcat集群配置学习篇-----分布式应用
- 单机配置tomcat 8 集群
- WinCE 5.0 WIFI 无线网卡的配置和建立连接(转)
- pomelo集群配置模式下的日志问题
- Redis集群安装配置