| 10 | 1/1 | 返回列表 |
| 查看: 2589 | 回復: 9 | |||
04nylxb木蟲 (正式寫手)
|
[求助]
請教torque該如何設置隊列或是任務或是用戶優(yōu)先級?以及調(diào)用哪些node
|
|
各位同仁,用torque進行任務管理,無maui,請問該如何設置優(yōu)先級?我看torque手冊,是否可以通過設置,隊列、任務、以及用戶組來設置優(yōu)先級? 比如通過隊列,創(chuàng)建一個隊列,通過priority控制優(yōu)先級 # qmgr –c “set queue queuename priority=20”(默認是0,手冊只說是取整數(shù),是正數(shù)優(yōu)先級高還是負數(shù)優(yōu)先級高呢? 0的優(yōu)先級還是20的優(yōu)先級高呢?還是可以設置-20,是最高優(yōu)先級?) 也可以在Pbs腳本里面設定, #pbs -l nice=integer (-20優(yōu)先級最高,19優(yōu)先級最低) 腳本還可以通過這樣控制優(yōu)先級 #pbs –p -1024 (-1024到1023,是否是負值越大,優(yōu)先級越高?) 或者是否可以通過設定用戶的優(yōu)先級?(手冊上貌似沒說) 請教下大家,隊列優(yōu)先級和腳本優(yōu)先級,哪個更高些? 還有是否可以通過設定nodes文件后面的Node跟的隊列,來指定某個隊列調(diào)用哪些nodes? 如 node-2 queue01 node-3 queue01 node-4 queue02 是否可以指定,queue01只能調(diào)用node-2 跟3,queue02只能調(diào)用node-4? queue03 (沒有指定),是否可以調(diào)用全部nodes? 非常感謝。 |
第一性原理和電化學 |

木蟲 (著名寫手)
|
對于第一個問題,現(xiàn)在沒有研究。我使用的Torque+Maui,但是對于你的第二個問題:隊列和節(jié)點的映射問題,可以提供一個思路。具體可以參見:http://www.gaoyang168.com/bbs/viewthread.php?tid=4065399&fpage=1,估計你看過,可能被開頭的Torque+Maui嚇到了,以為下面找不到你要的東西。其實那個帖子在最后的實現(xiàn)上與Maui無關,不妨一試。 現(xiàn)摘抄如下: 1.修改/var/spool/torque/server_priv/nodes文件 node01 np=12 sugon siesta dalton gaussian node02 np=12 sugon siesta dalton gaussian node03 np=12 sugon siesta dalton gaussian node04 np=12 sugon siesta dalton gaussian node05 np=12 sugon siesta dalton gaussian node06 np=12 sugon siesta dalton gaussian node07 np=12 sugon siesta dalton gaussian node08 np=12 sugon siesta dalton gaussian node09 np=12 sugon siesta dalton gaussian node10 np=12 sugon siesta dalton gaussian node11 np=12 sugon siesta dalton gaussian node12 np=12 sugon siesta dalton gaussian node31 np=8 powerlead siesta dalton gaussian others node32 np=8 powerlead siesta dalton gaussian others node33 np=8 powerlead siesta dalton gaussian others node34 np=8 powerlead siesta dalton gaussian others node35 np=8 powerlead siesta dalton gaussian others node36 np=8 powerlead siesta dalton gaussian others node38 np=8 powerlead siesta dalton gaussian others node39 np=8 powerlead siesta dalton gaussian others node40 np=8 powerlead siesta dalton gaussian others node41 np=8 dell siesta dalton gaussian others node42 np=8 dell siesta dalton gaussian others node43 np=8 dell siesta dalton gaussian others node44 np=8 dell molpro node45 np=8 dell molpro node46 np=8 dell molpro 將每一個節(jié)點分配上屬性,每一個節(jié)點可以加多個屬性,這一點是該方法成功的關鍵所在。 2.然后創(chuàng)建一系列的隊列,并且指定隊列只接受哪個用戶組的任務,為了簡單起見,每一個用戶組創(chuàng)建一個相似的隊列。然后給隊列指定默認的資源。 舉一例如下: 創(chuàng)建siesta用戶對應的隊列SIESTA qmgr -c "create queue SIESTA queue_type=execution" 創(chuàng)建SIESTA隊列,并且指定類型為execution qmgr -c "set queue SIESTA started=true" 指定SIESTA隊列中的任務可以被調(diào)度執(zhí)行 qmgr -c "set queue SIESTA enabled=true" 指定SIESTA隊列可以接受新的任務 qmgr -c "set queue SIESTA acl_group_enable=true" 指定SIESTA隊列專屬某一個用戶組 qmgr -c "set queue SIESTA acl_groups=siesta" 指定SIESTA隊列的專屬用戶組為siesta用戶組,只有屬于siesta用戶組的用戶才能向改隊列中提交任務,其他的用戶組不可以。當然,一個用戶可以屬于多個用戶組。 qmgr -c "set queue SIESTA acl_group_sloppy=true" 指定是不是只看用戶的第一用戶組來決定對隊列的使用權。如果該項沒有,則只有第一用戶組為siesta的用戶組才能向該隊列對提交任務,如果該項為true,表示檢查用戶的其他用戶組屬性。 qmgr -c "set queue SIESTA resources_default.neednodes=siesta" 指定SIESTA隊列使用的計算節(jié)點是siesta屬性的(上面1中指定的) 創(chuàng)建完畢后,可以用qmgr -c "p s"查看創(chuàng)建的隊列情況,如下 # Create and define queue SIESTA # create queue SIESTA set queue SIESTA queue_type = Execution set queue SIESTA resources_default.neednodes = siesta set queue SIESTA acl_group_enable = True set queue SIESTA acl_groups = siesta set queue SIESTA acl_group_sloppy = True set queue SIESTA enabled = True set queue SIESTA started = True 其他的用戶組都可以類比著創(chuàng)建自己的專屬隊列。 3.啟動服務節(jié)點的pbs_server服務和maui服務: qterm -t quick 停止pbs_server服務 pbs_server 重啟pbs_server服務 ps -A |grep maui 找出maui的進程號 18066 ? 00:00:00 maui 殺掉maui進程 kill 18066 重新啟動maui /usr/local/software/maui-3.3.1/sbin/maui 好了,到此為止,大功告成。可以使用了 屬于siesta用戶組的用戶提交任務,就可以默認提交到node01-node43上,只要提交滿了,就排隊,不能提交到node44-node46上。 但是siesta用戶組的成員如果想將自己的某一個任務提交到sugon上,而不是powerlead或者dell上,則可以在自己的腳本中寫上: #PBS -l nodes=1:sugon:ppn=8 表示該任務只向sugon機器提交,如果sugon滿了,就排隊,即使powerlead和dell有空閑。 如果寫為#PBS -l nodes=1:dell:ppn=8 那么siesta用戶組的用戶只能提交到node41,42,43這三個上,如果滿了,就排隊,直到這三個節(jié)點有空余。不會侵占到node44-node46上。 也就是說這兒對節(jié)點屬性的要求和隊列本身對節(jié)點的要求是 “與(and)”的關系。 如果寫成: #PBS -l nodes=1:ppn=8 那么就會從node43倒序向node01檢查,看是否有空閑資源。也就是說dell機器優(yōu)先。 這種做法有一個不令人滿意的地方:如果other用戶組的用戶用OTHER隊列向sugon提交任務的話,那么可以提交,并且不出錯,但是任務始終在排隊狀態(tài),永遠不會被執(zhí)行。 |

鐵桿木蟲 (著名寫手)

木蟲 (正式寫手)

木蟲 (正式寫手)
木蟲 (正式寫手)
木蟲 (正式寫手)

木蟲 (正式寫手)
木蟲 (正式寫手)

| 10 | 1/1 | 返回列表 |
| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考研] 一志愿天津大學化學工藝專業(yè)(081702)315分求調(diào)劑 +5 | yangfz 2026-03-17 | 5/250 |
|
|---|---|---|---|---|
|
[考研] 梁成偉老師課題組歡迎你的加入 +8 | 一鴨鴨喲 2026-03-14 | 10/500 |
|
|
[考研] 一志愿蘇州大學材料工程(085601)專碩有科研經(jīng)歷三項國獎兩個實用型專利一項省級立項 +6 | 大火山小火山 2026-03-16 | 8/400 |
|
|
[考研] 材料與化工專碩調(diào)劑 +5 | heming3743 2026-03-16 | 5/250 |
|
|
[考研] 材料與化工304求B區(qū)調(diào)劑 +7 | 邱gl 2026-03-11 | 8/400 |
|
|
[考研] 274求調(diào)劑 +5 | 時間點 2026-03-13 | 5/250 |
|
|
[考研] 286求調(diào)劑 +3 | lemonzzn 2026-03-16 | 5/250 |
|
|
[考研] 環(huán)境工程調(diào)劑 +6 | 大可digkids 2026-03-16 | 6/300 |
|
|
[考研] 311求調(diào)劑 +5 | 26研0 2026-03-15 | 5/250 |
|
|
[考研] 285求調(diào)劑 +6 | ytter 2026-03-12 | 6/300 |
|
|
[考研] 求老師收留調(diào)劑 +4 | jiang姜66 2026-03-14 | 5/250 |
|
|
[考研] 0856專碩279求調(diào)劑 +5 | 加油加油!? 2026-03-15 | 5/250 |
|
|
[考研] 22408總分284求調(diào)劑 +3 | InAspic 2026-03-13 | 3/150 |
|
|
[考研] 297一志愿上交085600求調(diào)劑 +5 | 指尖八千里 2026-03-14 | 5/250 |
|
|
[考研] 297求調(diào)劑 +4 | 學海漂泊 2026-03-13 | 4/200 |
|
|
[考研] 308求調(diào)劑 +5 | 是Lupa啊 2026-03-11 | 5/250 |
|
|
[考研] [0860]321分求調(diào)劑,ab區(qū)皆可 +4 | 寶貴熱 2026-03-13 | 4/200 |
|
|
[考研] (081700)化學工程與技術-298分求調(diào)劑 +12 | 11啦啦啦 2026-03-11 | 35/1750 |
|
|
[考研] 土木第一志愿276求調(diào)劑,科研和技能十分豐富,求新興方向的導師收留 +3 | 土木小天才 2026-03-12 | 3/150 |
|
|
[考研] 材料301分求調(diào)劑 +5 | Liyouyumairs 2026-03-12 | 5/250 |
|