java mpj,Win7下搭建JAVA並行開發環境MPJ Express(PART3)

2023-11-23 15:50

本文主要是介绍java mpj,Win7下搭建JAVA並行開發環境MPJ Express(PART3),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在前面的兩個PART中,我們分別搭建了並行開發環境,並小試牛刀實踐了簡單的並行開發。

http://blog.csdn.net/baimafujinji/article/details/45195159

http://blog.csdn.net/baimafujinji/article/details/45195285

當然在這個過程中,出現這樣或那樣的問題是在所難免的,這一部分我們就來討論一下其中可能會遇到的問題。

問題1:當我們搭建好開發環境后,我們需要試用一下mpjdaemon批處理命令,此時可能遇到的一個問題是: Port is not available,如下圖所示。

5cb5adad16f33412fbd725fd2aea375c.jpe

問題在於端口不可用。我們根據提示找到配置文件mpjexpress.conf所在的文件夾,然后用記事本把它打開,如下所示。可見,默認情況下port.1=10000,port.2=10001。

1453a9c6d0c0ff10733a00991d5051cc.jpe

此時,我們只需對端口進行調整,例如修改為下面這種結果(當然,應該保證8888和8889並沒有被占用)

8f1e75fd6c3e7278c489c5b53cfdd8a7.jpe

修改完成后保存文件,問題即得到解決。

問題2:注意到我們把解壓后的MPJ Express文件存於路徑“D:\mpj-v0_43”下,並相應的將環境變量MPJ_HOME賦值為D:\mpj-v0_43。如果我們將文件存於路徑“D:\Program Files\mpj-v0_43”下,並相應的修改環境變量賦值,將會有什么變化?

3aa4e97b464c25bb256549598079a1c1.jpe

這似乎是一個看起來完全不是問題的問題,但是一旦我們這樣做了,當再使用mpjdaemon批處理命令時,就會遇到下面這種情況。

f6423082cbd61bcfd7e7324c29e9ac4c.jpe

結果顯示報錯了!

Error: Unable to access jarfile D:\Program

系統沒有辦法訪問相應的jar文件。但是為什么?這是因為Program Files這個文件夾的名字不合法。這種文件夾的名字在Windows中當然沒有任何問題,對於我們日常的大多數應用開發而言這也不會成為一個問題。但是在MPJ Express中,文件夾的名字中間是不能包含有“空格”的。我們都知道,在控制台中輸入一條指令時,空格通常是用來間隔操作符與操作數的,或者可以認為空格也是有意義的,因此MPJ Express中的批處理命令在解析一個帶有空格的路徑名的時候就會產生混亂。這就是問題所在。所以只要我們把MPJ Express文件的存放路徑稍作調整即可消除此類問題。

此外,在命令行中查看當前環境變量設置情況的一個簡單方法是使用echo指令,例如

4f621e2d4fe55658b81cbe61376a6a09.jpe

問題3:上一個問題除了會發生在控制台操作界面上以外,在Eclipse中也會出現。回想在PART2中,我們設置VM arguments參數時是這樣寫的

-jar D:/mpj-v0_43/lib/starter.jar

-np 4

可見我們使用了一個絕對路徑!而更多的時候我們都習慣於寫相對路徑,此時用戶需要在菜單欄中選擇"Window",然后在下拉菜單中選擇"Preferences",如下所示。

064da1c71ade58c5537ddd8ddca42df7.jpe

然后在從左側的列表中選擇“String Substitution”,並新建一個“變量替換”,如下所示。

3fab24c2cae2360144e25adfbe303e25.jpe

完成上述步驟后,我們就可以使用形如下面這種情況的相對路徑了。

-jar ${MPJ_HOME}/lib/starter.jar

e2d9c156298a6a8b07a8c51174935ca0.jpe

這里我們需要注意,MPJ_HOME的值仍然不能等於一個有空格的路徑,否則就會出現下面這個錯誤,原理與問題2相同,這里不再贅述。

784112a9ad0245d1ba836fab21b8bf9d.jpe

問題4:最后我們討論一下在命令下編譯運行並行程序的方法。

首先編輯下列代碼並將其存入一個名為HelloWorld.java的文件中。

import mpi.*;

public class HelloWorld{

public static void main(String[] args) throws Exception

{

MPI.Init(args);

int me = MPI.COMM_WORLD.Rank();

int size = MPI.COMM_WORLD.Size();

System.out.println ("Hi from " + me + " of " + size + "\n");

MPI.Finalize();

}

}

編譯指令示例: javac -cp .;%MPJ_HOME%/lib/mpj.jar HelloWorld.java

執行指令示例: mpjrun.bat -np 4 HelloWorld  a //其中a是一個任意指定的參數

執行結果,如下所示。

bdfa24fa29390433f8c29c8b28bb268e.jpe

上面這種情況是執行並行計算的第一種場景,即在多核配置下執行MPJ Express 程序。

我們通過mpjrun.bat -np 后面的數字來指定核的數量。

另外一種場景是在集群(Cluster)配置下執行MPJ Express 程序。

集群配置: 如果開發人員期望在分布式內存平台(包括集群和計算機網絡)上執行並行JAVA程序,那么他們就會采樣這種配置場景。

對於這種集群配置,一共有四種選項,如下:

1) niodev - 使用 Java NIO Sockets

2) mxdev - 使用 Myrinet eXpress (MX) library for Myrinet networks

3) hybdev - 針對多核處理的集群

4) native - 使用一個 native MPI library (curretly only tested under MS-MPI for Windows)

具體使用時寫一個名為"machines"的文件,並在其中指定用於並發執行的所有主機名或IP地址。

執行方法

對於 niodev, hybdev and mxdev

1) 開啟守護: mpjdaemon.bat -boot

- 你將需要在每一個開啟守護的機器上手動地執行該命令。

2) 執行指令示例: mpjrun.bat -np 4 -dev niodev HelloWorld

-- 其中 -dev 里面的 device可以是 niodev, hybdev 或 mxdev

3) 終止守護指令: mpjdaemon.bat -halt

對於 native

1) 編譯 JNI wrapper library(具體編譯方法請參見MPJ Express的相關幫助文檔)

2) 執行指令示例: mpjrun.bat -np 4 -dev native HelloWorld

全文完。

这篇关于java mpj,Win7下搭建JAVA並行開發環境MPJ Express(PART3)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/419027

相关文章

Java实现检查多个时间段是否有重合

《Java实现检查多个时间段是否有重合》这篇文章主要为大家详细介绍了如何使用Java实现检查多个时间段是否有重合,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录流程概述步骤详解China编程步骤1:定义时间段类步骤2:添加时间段步骤3:检查时间段是否有重合步骤4:输出结果示例代码结语作

Java中String字符串使用避坑指南

《Java中String字符串使用避坑指南》Java中的String字符串是我们日常编程中用得最多的类之一,看似简单的String使用,却隐藏着不少“坑”,如果不注意,可能会导致性能问题、意外的错误容... 目录8个避坑点如下:1. 字符串的不可变性:每次修改都创建新对象2. 使用 == 比较字符串,陷阱满

Java判断多个时间段是否重合的方法小结

《Java判断多个时间段是否重合的方法小结》这篇文章主要为大家详细介绍了Java中判断多个时间段是否重合的方法,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录判断多个时间段是否有间隔判断时间段集合是否与某时间段重合判断多个时间段是否有间隔实体类内容public class D

IDEA编译报错“java: 常量字符串过长”的原因及解决方法

《IDEA编译报错“java:常量字符串过长”的原因及解决方法》今天在开发过程中,由于尝试将一个文件的Base64字符串设置为常量,结果导致IDEA编译的时候出现了如下报错java:常量字符串过长,... 目录一、问题描述二、问题原因2.1 理论角度2.2 源码角度三、解决方案解决方案①:StringBui

Java覆盖第三方jar包中的某一个类的实现方法

《Java覆盖第三方jar包中的某一个类的实现方法》在我们日常的开发中,经常需要使用第三方的jar包,有时候我们会发现第三方的jar包中的某一个类有问题,或者我们需要定制化修改其中的逻辑,那么应该如何... 目录一、需求描述二、示例描述三、操作步骤四、验证结果五、实现原理一、需求描述需求描述如下:需要在

Java中ArrayList和LinkedList有什么区别举例详解

《Java中ArrayList和LinkedList有什么区别举例详解》:本文主要介绍Java中ArrayList和LinkedList区别的相关资料,包括数据结构特性、核心操作性能、内存与GC影... 目录一、底层数据结构二、核心操作性能对比三、内存与 GC 影响四、扩容机制五、线程安全与并发方案六、工程

JavaScript中的reduce方法执行过程、使用场景及进阶用法

《JavaScript中的reduce方法执行过程、使用场景及进阶用法》:本文主要介绍JavaScript中的reduce方法执行过程、使用场景及进阶用法的相关资料,reduce是JavaScri... 目录1. 什么是reduce2. reduce语法2.1 语法2.2 参数说明3. reduce执行过程

如何使用Java实现请求deepseek

《如何使用Java实现请求deepseek》这篇文章主要为大家详细介绍了如何使用Java实现请求deepseek功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录1.deepseek的api创建2.Java实现请求deepseek2.1 pom文件2.2 json转化文件2.2

Java调用DeepSeek API的最佳实践及详细代码示例

《Java调用DeepSeekAPI的最佳实践及详细代码示例》:本文主要介绍如何使用Java调用DeepSeekAPI,包括获取API密钥、添加HTTP客户端依赖、创建HTTP请求、处理响应、... 目录1. 获取API密钥2. 添加HTTP客户端依赖3. 创建HTTP请求4. 处理响应5. 错误处理6.

Spring AI集成DeepSeek的详细步骤

《SpringAI集成DeepSeek的详细步骤》DeepSeek作为一款卓越的国产AI模型,越来越多的公司考虑在自己的应用中集成,对于Java应用来说,我们可以借助SpringAI集成DeepSe... 目录DeepSeek 介绍Spring AI 是什么?1、环境准备2、构建项目2.1、pom依赖2.2