 |
 |
 |
 |
 |
 |
||
 |
 |
 |
 |
 |
| 查看: 1425 | 回復(fù): 17 | ||
wuy069鐵桿木蟲 (正式寫手)
|
[求助]
請教：用Shell, awk, perl等語言實(shí)現(xiàn)監(jiān)視SGE集群節(jié)點(diǎn)和任務(wù)
|
|
請教：用Shell, awk, perl等語言實(shí)現(xiàn)監(jiān)視SGE集群節(jié)點(diǎn)和任務(wù) 簡單的bash shell和awk語言會(huì)點(diǎn)，但弄個(gè)復(fù)雜的腳本，功底還是不夠 下面的格式有點(diǎn)錯(cuò)位，我把相應(yīng)的內(nèi)容以附件粘貼了。 [wuy@cluster test]$ qhost -j HOSTNAME ARCH NCPU LOAD MEMTOT MEMUSE SWAPTO SWAPUS ------------------------------------------------------------------------------- global - - - - - - - compute-0-0 lx26-amd64 4 2.97 3.9G 3.5G 4.0G 2.9G job-ID prior name user state submit/start at queue master ja-task-ID ---------------------------------------------------------------------------------------------- 6 0.50500 test1.sh wuy r 12/09/2012 14:47:26 all.q@comp MASTER 7 0.60500 test4.sh wuy r 12/09/2012 14:47:26 all.q@comp MASTER all.q@comp SLAVE all.q@comp SLAVE compute-0-1 lx26-amd64 4 3.56 3.9G 3.8G 4.0G 3.1G job-ID prior name user state submit/start at queue master ja-task-ID ---------------------------------------------------------------------------------------------- 8 0.60500 test2.sh tester r 12/09/2012 14:48:52 all.q@comp MASTER all.q@comp SLAVE all.q@comp SLAVE 9 0.60500 test3.sh tester r 12/09/2012 14:48:52 all.q@comp MASTER all.q@comp SLAVE all.q@comp SLAVE 在compute-0-0節(jié)點(diǎn)上有兩個(gè)任務(wù)6和7，所用的cpu分別為1和2；在compute-0-1節(jié)點(diǎn)上有兩個(gè)任務(wù)8和9，所用的cpu分別為2和2. 使用Shell, awk, perl等語言獲得的命令腳本打印輸出下面所示： ------------------------------------------------------------------------------------------------ node state load ncpu mem memuse swapto swapus tasks jobids/users ------------------------------------------------------------------------------------------------ compute-0-0 free 2.97 4 3.9G 3.5G 4.0G 2.9G 3 6/wuy 7/wuy compute-0-1 busy 3.56 4 3.9G 3.8G 4.0G 3.1G 4 8/tester 9/tester 其中，當(dāng)node的LOAD為“-”時(shí)，相應(yīng)node的state為down. 下面是根據(jù)qstat命令編寫腳本監(jiān)視任務(wù)的申請時(shí)間和逝去時(shí)間 [wuy@cluster test]$ qstat -u '*' job-ID prior name user state submit/start at queue slots ja-task-ID ----------------------------------------------------------------------------------------------------------------- 6 0.50500 test1.sh wuy r 12/09/2012 14:47:26 all.q@compute-0-0.local 1 7 0.60500 test4.sh wuy r 12/09/2012 14:47:26 all.q@compute-0-0.local 2 8 0.60500 test2.sh tester r 12/09/2012 14:48:52 all.q@compute-0-1.local 2 9 0.60500 test3.sh tester r 12/09/2012 14:48:52 all.q@compute-0-1.local 2 [wuy@cluster test]$ qstat -j 6 |grep h_rt hard resource_list: h_rt=3600 得到的申請時(shí)間（reqtime）為3600s，改為小時(shí)制：1:00:00 逝去的時(shí)間（elaptime)為現(xiàn)在的時(shí)間`date`減去任務(wù)開始的時(shí)間 使用Shell, awk, perl等語言獲得的命令腳本打印輸出下面所示 job-ID name user state submit/start at queue slots reqtime elaptime -------------------------------------------------------------------------------------------------------------------- 6 test1.sh wuy r 12/09/2012 14:47:26 all.q@compute-0-0.local 1 1:00:00 00:50:00 7 test4.sh wuy r 12/09/2012 14:47:26 all.q@compute-0-0.local 2 2:00:00 00:50:00 8 test2.sh tester r 12/09/2012 14:48:52 all.q@compute-0-1.local 2 5:00:00 00:48:34 9 test3.sh tester r 12/09/2012 14:48:52 all.q@compute-0-1.local 2 12:00:00 00:48:34[ Last edited by wuy069 on 2012-12-9 at 18:30 ] |
回復(fù)此樓» 本帖附件資源列表
-
歡迎監(jiān)督和反饋：小木蟲僅提供交流平臺(tái)，不對該內(nèi)容負(fù)責(zé)。
本內(nèi)容由用戶自主發(fā)布，如果其內(nèi)容涉及到知識(shí)產(chǎn)權(quán)問題，其責(zé)任在于用戶本人，如對版權(quán)有異議，請聯(lián)系郵箱：xiaomuchong@tal.com - 附件 1 : 求助.txt
2012-12-09 18:30:44, 4.22 K
» 猜你喜歡
299求調(diào)劑
已經(jīng)有4人回復(fù)
-
材料與化工專碩調(diào)劑
已經(jīng)有6人回復(fù)
-
086500 325 求調(diào)劑
已經(jīng)有3人回復(fù)
-
材料080500調(diào)劑求收留
已經(jīng)有7人回復(fù)
-
一志愿南昌大學(xué)，327分，材料與化工085600
已經(jīng)有6人回復(fù)
-
環(huán)境工程調(diào)劑
已經(jīng)有9人回復(fù)
-
工科材料085601 279求調(diào)劑
已經(jīng)有9人回復(fù)
-
287求調(diào)劑
已經(jīng)有5人回復(fù)
-
22408 344分 求調(diào)劑 一志愿 華電計(jì)算機(jī)技術(shù)
已經(jīng)有3人回復(fù)
-
289求調(diào)劑
已經(jīng)有3人回復(fù)
» 本主題相關(guān)價(jià)值貼推薦，對您同樣有幫助:
- 鋼管混凝土桁架的單元選取問題
已經(jīng)有5人回復(fù)
- 鋼管混凝土桁架的建模問題
已經(jīng)有2人回復(fù)
- 請教蟲蟲們：我分配了50G的內(nèi)存，gaussian報(bào)錯(cuò)……
已經(jīng)有3人回復(fù)
- 用170，175單元耦合殼和梁，怎么設(shè)置材料屬性，實(shí)常數(shù)？和184有什么區(qū)別
已經(jīng)有0人回復(fù)
- 關(guān)于wien2k軟件安裝和配置問題請教各位高手！
已經(jīng)有8人回復(fù)
- 熱沉淀法合成上轉(zhuǎn)換納米離子求教
已經(jīng)有8人回復(fù)
- SCF電子占據(jù)
已經(jīng)有3人回復(fù)
- 又被督導(dǎo)（退休老師組成的）老師聽課！
已經(jīng)有22人回復(fù)
- 復(fù)合材料連續(xù)管ANSYS分析
已經(jīng)有13人回復(fù)
- visual studio 2008 中的VB調(diào)用ansys時(shí)老是VB內(nèi)部錯(cuò)誤而關(guān)閉
已經(jīng)有8人回復(fù)
- 請教：用Shell, awk, perl等語言實(shí)現(xiàn)監(jiān)視SGE集群節(jié)點(diǎn)和任務(wù)
已經(jīng)有0人回復(fù)
- 請教C-Shell的Script如何獲取Elapsed Time
已經(jīng)有2人回復(fù)
- 【求助】彈性力學(xué)-ansys-機(jī)械
已經(jīng)有8人回復(fù)
- 【求助】請教用高斯09算溶劑化單點(diǎn)時(shí)，怎樣得到溶劑中的Gibbs自由能？
已經(jīng)有9人回復(fù)
- 【請教】乙醇溶劑中ZnO納米粒子的制備？
已經(jīng)有14人回復(fù)
- 【求助】在計(jì)算含pt的吸收光譜的時(shí)候，居然出現(xiàn) l801錯(cuò)誤，請教怎樣解決？
已經(jīng)有3人回復(fù)
tracel
木蟲 (正式寫手)
- 應(yīng)助: 48 (小學(xué)生)
- 金幣: 4116.7
- 散金: 1052
- 紅花: 1
- 帖子: 314
- 在線: 2048.9小時(shí)
- 蟲號(hào): 831941
- 注冊: 2009-08-21
- 專業(yè): 理論和計(jì)算化學(xué)
2樓2012-12-09 20:59:38
wuy069
鐵桿木蟲 (正式寫手)
- 應(yīng)助: 20 (小學(xué)生)
- 金幣: 7921.9
- 散金: 15
- 紅花: 10
- 帖子: 506
- 在線: 549.1小時(shí)
- 蟲號(hào): 760723
- 注冊: 2009-04-30
- 性別: GG
- 專業(yè): 理論和計(jì)算化學(xué)
|
嗯，shell+awk應(yīng)該是能實(shí)現(xiàn)的，awk學(xué)的不咋好，一時(shí)半會(huì)整不出來 根據(jù)qhost -j命令輸出的結(jié)果，編寫一個(gè)腳本打印出： ------------------------------------------------------------------------------------------------ node state load ncpu mem memuse swapto swapus tasks jobids/users ------------------------------------------------------------------------------------------------ compute-0-0 free 2.97 4 3.9G 3.5G 4.0G 2.9G 3 6/wuy 7/wuy compute-0-1 busy 3.56 4 3.9G 3.8G 4.0G 3.1G 4 8/tester 9/tester 這是第一個(gè)腳本 第二個(gè)： 根據(jù)qstat -u ’*'和qstat -j jobid輸出的結(jié)果，編一個(gè)腳本輸出以下部分： job-ID name user state submit/start at queue slots reqtime elaptime -------------------------------------------------------------------------------------------------------------------- 6 test1.sh wuy r 12/09/2012 14:47:26 all.q@compute-0-0.local 1 1:00:00 00:50:00 7 test4.sh wuy r 12/09/2012 14:47:26 all.q@compute-0-0.local 2 2:00:00 00:50:00 8 test2.sh tester r 12/09/2012 14:48:52 all.q@compute-0-1.local 2 5:00:00 00:48:34 9 test3.sh tester r 12/09/2012 14:48:52 all.q@compute-0-1.local 2 12:00:00 00:48:34 如果你覺得很容易，我可以給你提供個(gè)賬號(hào)，你在機(jī)器上可以編寫；方便的話，可把你的QQ號(hào)用站內(nèi)消息發(fā)我，謝謝！ |
3樓2012-12-09 21:20:59
chembetsey
木蟲 (小有名氣)
- 應(yīng)助: 125 (高中生)
- 金幣: 3820.1
- 散金: 5
- 紅花: 9
- 帖子: 262
- 在線: 281.8小時(shí)
- 蟲號(hào): 1781694
- 注冊: 2012-04-27
- 專業(yè): 理論和計(jì)算化學(xué)
4樓2012-12-09 23:26:27
tracel
木蟲 (正式寫手)
- 應(yīng)助: 48 (小學(xué)生)
- 金幣: 4116.7
- 散金: 1052
- 紅花: 1
- 帖子: 314
- 在線: 2048.9小時(shí)
- 蟲號(hào): 831941
- 注冊: 2009-08-21
- 專業(yè): 理論和計(jì)算化學(xué)
【答案】應(yīng)助回帖
★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★
wuy069: 金幣+20, ★有幫助, 要考慮的因素還是挺多的，我有時(shí)間再弄吧 2012-12-10 08:07:09
wuy069: 金幣+20, ★有幫助, 要考慮的因素還是挺多的，我有時(shí)間再弄吧 2012-12-10 08:07:09
|
qhost -j | awk '/compute/{b=1;a[b++]=$1;a[b++]=$3;a[b++]=$4;getline;getline;for(i=1;i<5;i++){getline;if(NF==9){a[b++]=$4"/"$1}};print a[1]"\t"a[2]"\t"a[3]"\t"a[4],a[5]}' 你照著這個(gè)自己再修改下吧，反正你應(yīng)該是可以看懂的 |
5樓2012-12-09 23:42:46
wuy069
鐵桿木蟲 (正式寫手)
- 應(yīng)助: 20 (小學(xué)生)
- 金幣: 7921.9
- 散金: 15
- 紅花: 10
- 帖子: 506
- 在線: 549.1小時(shí)
- 蟲號(hào): 760723
- 注冊: 2009-04-30
- 性別: GG
- 專業(yè): 理論和計(jì)算化學(xué)
6樓2012-12-10 08:08:41
chembetsey
木蟲 (小有名氣)
- 應(yīng)助: 125 (高中生)
- 金幣: 3820.1
- 散金: 5
- 紅花: 9
- 帖子: 262
- 在線: 281.8小時(shí)
- 蟲號(hào): 1781694
- 注冊: 2012-04-27
- 專業(yè): 理論和計(jì)算化學(xué)
7樓2012-12-10 12:46:24
wuy069
鐵桿木蟲 (正式寫手)
- 應(yīng)助: 20 (小學(xué)生)
- 金幣: 7921.9
- 散金: 15
- 紅花: 10
- 帖子: 506
- 在線: 549.1小時(shí)
- 蟲號(hào): 760723
- 注冊: 2009-04-30
- 性別: GG
- 專業(yè): 理論和計(jì)算化學(xué)
8樓2012-12-10 13:45:36
tracel
木蟲 (正式寫手)
- 應(yīng)助: 48 (小學(xué)生)
- 金幣: 4116.7
- 散金: 1052
- 紅花: 1
- 帖子: 314
- 在線: 2048.9小時(shí)
- 蟲號(hào): 831941
- 注冊: 2009-08-21
- 專業(yè): 理論和計(jì)算化學(xué)
9樓2012-12-10 16:51:07
chembetsey
木蟲 (小有名氣)
- 應(yīng)助: 125 (高中生)
- 金幣: 3820.1
- 散金: 5
- 紅花: 9
- 帖子: 262
- 在線: 281.8小時(shí)
- 蟲號(hào): 1781694
- 注冊: 2012-04-27
- 專業(yè): 理論和計(jì)算化學(xué)
【答案】應(yīng)助回帖
★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ★ ...
wuy069: 金幣+100, ★★★很有幫助, 能否繼續(xù)完善，下面有回帖說明。 2012-12-11 08:42:40
wuy069: 金幣+200, ★★★很有幫助, 麻煩你了 2012-12-11 09:14:44
wuy069: 金幣+10, ★★★★★最佳答案, 非常感謝�。。� 2012-12-12 08:09:55
wuy069: 金幣+100, ★★★很有幫助, 能否繼續(xù)完善，下面有回帖說明。 2012-12-11 08:42:40
wuy069: 金幣+200, ★★★很有幫助, 麻煩你了 2012-12-11 09:14:44
wuy069: 金幣+10, ★★★★★最佳答案, 非常感謝�。。� 2012-12-12 08:09:55
|
既然你感興趣，我也沒必要敝帚自珍了。 查看節(jié)點(diǎn)Qnod 查看作業(yè)Qjob |
10樓2012-12-11 06:03:29
相關(guān)版塊跳轉(zhuǎn)
我要訂閱樓主 wuy069 的主題更新
| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考研] 08工學(xué)調(diào)劑 +5 | 用戶573181 2026-03-20 | 5/250 |
|
|---|---|---|---|---|
|
|
[考研] 本人考085602 化學(xué)工程 專碩 +18 | 不知道叫什么！ 2026-03-15 | 20/1000 |
|
|
|
[考研] 材料專碩英一數(shù)二306 +6 | z1z2z3879 2026-03-18 | 6/300 |
|
|
|
[考研]
 320求調(diào)劑0856
+3
|
不想起名字112 2026-03-19 | 3/150 |
|
|
|
[考研] 生物學(xué)調(diào)劑招人�。�！ +3 | 山海天嵐 2026-03-17 | 4/200 |
|
|
|
[考研] 一志愿 西北大學(xué) ，070300化學(xué)學(xué)碩，總分287，雙非一本，求調(diào)劑。 +3 | 晨昏線與星海 2026-03-19 | 3/150 |
|
|
|
[考研] 一志愿福大288有機(jī)化學(xué)，求調(diào)劑 +3 | 小木蟲200408204 2026-03-18 | 3/150 |
|
|
|
[考研] 0817調(diào)劑 +3 | 沒有答案_ 2026-03-14 | 3/150 |
|
|
|
[考研] 304求調(diào)劑 +6 | 司空. 2026-03-18 | 6/300 |
|
|
[考研] 295求調(diào)劑 +3 | 一志愿京區(qū)211 2026-03-18 | 5/250 |
|
|
|
[考研] 08工科 320總分 求調(diào)劑 +5 | 梨花珞晚風(fēng) 2026-03-17 | 5/250 |
|
|
|
[考研] 280求調(diào)劑 +6 | 咕嚕曉曉 2026-03-18 | 7/350 |
|
|
|
[考研] 材料，紡織，生物（0856、0710），化學(xué)招生啦 +3 | Eember. 2026-03-17 | 9/450 |
|
|
|
[考研] 0703化學(xué)336分求調(diào)劑 +6 | zbzihdhd 2026-03-15 | 7/350 |
|
|
|
[考研] 301求調(diào)劑 +9 | yy要上岸呀 2026-03-17 | 9/450 |
|
|
|
[考研]
11408 一志愿西電，277分求調(diào)劑
+3
|
zhouzhen654 2026-03-16 | 3/150 |
|
|
|
[考研] 藥學(xué)383 求調(diào)劑 +3 | 藥學(xué)chy 2026-03-15 | 4/200 |
|
|
|
[考研] 318求調(diào)劑 +3 | Yanyali 2026-03-15 | 3/150 |
|
|
|
[考研] 0703化學(xué)調(diào)劑 290分有科研經(jīng)歷，論文在投 +7 | 膩膩gk 2026-03-14 | 7/350 |
|
|
|
[考研] 326求調(diào)劑 +3 | mlpqaz03 2026-03-15 | 3/150 |
|