| 5 | 1/1 | 返回列表 |
| 查看: 2593 | 回復: 9 | |||
| 當前只顯示滿足指定條件的回帖,點擊這里查看本話題的所有回帖 | |||
04nylxb木蟲 (正式寫手)
|
[求助]
請教torque該如何設置隊列或是任務或是用戶優(yōu)先級?以及調用哪些node
|
||
|
各位同仁,用torque進行任務管理,無maui,請問該如何設置優(yōu)先級?我看torque手冊,是否可以通過設置,隊列、任務、以及用戶組來設置優(yōu)先級? 比如通過隊列,創(chuàng)建一個隊列,通過priority控制優(yōu)先級 # qmgr –c “set queue queuename priority=20”(默認是0,手冊只說是取整數(shù),是正數(shù)優(yōu)先級高還是負數(shù)優(yōu)先級高呢? 0的優(yōu)先級還是20的優(yōu)先級高呢?還是可以設置-20,是最高優(yōu)先級?) 也可以在Pbs腳本里面設定, #pbs -l nice=integer (-20優(yōu)先級最高,19優(yōu)先級最低) 腳本還可以通過這樣控制優(yōu)先級 #pbs –p -1024 (-1024到1023,是否是負值越大,優(yōu)先級越高?) 或者是否可以通過設定用戶的優(yōu)先級?(手冊上貌似沒說) 請教下大家,隊列優(yōu)先級和腳本優(yōu)先級,哪個更高些? 還有是否可以通過設定nodes文件后面的Node跟的隊列,來指定某個隊列調用哪些nodes? 如 node-2 queue01 node-3 queue01 node-4 queue02 是否可以指定,queue01只能調用node-2 跟3,queue02只能調用node-4? queue03 (沒有指定),是否可以調用全部nodes? 非常感謝。 |
第一性原理和電化學 |

木蟲 (正式寫手)

木蟲 (著名寫手)
|
對于第一個問題,現(xiàn)在沒有研究。我使用的Torque+Maui,但是對于你的第二個問題:隊列和節(jié)點的映射問題,可以提供一個思路。具體可以參見:http://www.gaoyang168.com/bbs/viewthread.php?tid=4065399&fpage=1,估計你看過,可能被開頭的Torque+Maui嚇到了,以為下面找不到你要的東西。其實那個帖子在最后的實現(xiàn)上與Maui無關,不妨一試。 現(xiàn)摘抄如下: 1.修改/var/spool/torque/server_priv/nodes文件 node01 np=12 sugon siesta dalton gaussian node02 np=12 sugon siesta dalton gaussian node03 np=12 sugon siesta dalton gaussian node04 np=12 sugon siesta dalton gaussian node05 np=12 sugon siesta dalton gaussian node06 np=12 sugon siesta dalton gaussian node07 np=12 sugon siesta dalton gaussian node08 np=12 sugon siesta dalton gaussian node09 np=12 sugon siesta dalton gaussian node10 np=12 sugon siesta dalton gaussian node11 np=12 sugon siesta dalton gaussian node12 np=12 sugon siesta dalton gaussian node31 np=8 powerlead siesta dalton gaussian others node32 np=8 powerlead siesta dalton gaussian others node33 np=8 powerlead siesta dalton gaussian others node34 np=8 powerlead siesta dalton gaussian others node35 np=8 powerlead siesta dalton gaussian others node36 np=8 powerlead siesta dalton gaussian others node38 np=8 powerlead siesta dalton gaussian others node39 np=8 powerlead siesta dalton gaussian others node40 np=8 powerlead siesta dalton gaussian others node41 np=8 dell siesta dalton gaussian others node42 np=8 dell siesta dalton gaussian others node43 np=8 dell siesta dalton gaussian others node44 np=8 dell molpro node45 np=8 dell molpro node46 np=8 dell molpro 將每一個節(jié)點分配上屬性,每一個節(jié)點可以加多個屬性,這一點是該方法成功的關鍵所在。 2.然后創(chuàng)建一系列的隊列,并且指定隊列只接受哪個用戶組的任務,為了簡單起見,每一個用戶組創(chuàng)建一個相似的隊列。然后給隊列指定默認的資源。 舉一例如下: 創(chuàng)建siesta用戶對應的隊列SIESTA qmgr -c "create queue SIESTA queue_type=execution" 創(chuàng)建SIESTA隊列,并且指定類型為execution qmgr -c "set queue SIESTA started=true" 指定SIESTA隊列中的任務可以被調度執(zhí)行 qmgr -c "set queue SIESTA enabled=true" 指定SIESTA隊列可以接受新的任務 qmgr -c "set queue SIESTA acl_group_enable=true" 指定SIESTA隊列專屬某一個用戶組 qmgr -c "set queue SIESTA acl_groups=siesta" 指定SIESTA隊列的專屬用戶組為siesta用戶組,只有屬于siesta用戶組的用戶才能向改隊列中提交任務,其他的用戶組不可以。當然,一個用戶可以屬于多個用戶組。 qmgr -c "set queue SIESTA acl_group_sloppy=true" 指定是不是只看用戶的第一用戶組來決定對隊列的使用權。如果該項沒有,則只有第一用戶組為siesta的用戶組才能向該隊列對提交任務,如果該項為true,表示檢查用戶的其他用戶組屬性。 qmgr -c "set queue SIESTA resources_default.neednodes=siesta" 指定SIESTA隊列使用的計算節(jié)點是siesta屬性的(上面1中指定的) 創(chuàng)建完畢后,可以用qmgr -c "p s"查看創(chuàng)建的隊列情況,如下 # Create and define queue SIESTA # create queue SIESTA set queue SIESTA queue_type = Execution set queue SIESTA resources_default.neednodes = siesta set queue SIESTA acl_group_enable = True set queue SIESTA acl_groups = siesta set queue SIESTA acl_group_sloppy = True set queue SIESTA enabled = True set queue SIESTA started = True 其他的用戶組都可以類比著創(chuàng)建自己的專屬隊列。 3.啟動服務節(jié)點的pbs_server服務和maui服務: qterm -t quick 停止pbs_server服務 pbs_server 重啟pbs_server服務 ps -A |grep maui 找出maui的進程號 18066 ? 00:00:00 maui 殺掉maui進程 kill 18066 重新啟動maui /usr/local/software/maui-3.3.1/sbin/maui 好了,到此為止,大功告成?梢允褂昧 屬于siesta用戶組的用戶提交任務,就可以默認提交到node01-node43上,只要提交滿了,就排隊,不能提交到node44-node46上。 但是siesta用戶組的成員如果想將自己的某一個任務提交到sugon上,而不是powerlead或者dell上,則可以在自己的腳本中寫上: #PBS -l nodes=1:sugon:ppn=8 表示該任務只向sugon機器提交,如果sugon滿了,就排隊,即使powerlead和dell有空閑。 如果寫為#PBS -l nodes=1:dell:ppn=8 那么siesta用戶組的用戶只能提交到node41,42,43這三個上,如果滿了,就排隊,直到這三個節(jié)點有空余。不會侵占到node44-node46上。 也就是說這兒對節(jié)點屬性的要求和隊列本身對節(jié)點的要求是 “與(and)”的關系。 如果寫成: #PBS -l nodes=1:ppn=8 那么就會從node43倒序向node01檢查,看是否有空閑資源。也就是說dell機器優(yōu)先。 這種做法有一個不令人滿意的地方:如果other用戶組的用戶用OTHER隊列向sugon提交任務的話,那么可以提交,并且不出錯,但是任務始終在排隊狀態(tài),永遠不會被執(zhí)行。 |

鐵桿木蟲 (著名寫手)

木蟲 (正式寫手)

| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考博] 環(huán)境領域全國重點實驗室招收博士1-2名 +3 | QGZDSYS 2026-03-13 | 3/150 |
|
|---|---|---|---|---|
|
[考研] 268求調劑 +3 | 簡單點0 2026-03-17 | 3/150 |
|
|
[考研] 085601材料工程專碩求調劑 +5 | 慕寒mio 2026-03-16 | 5/250 |
|
|
[考研] 0703化學調劑 ,六級已過,有科研經(jīng)歷 +8 | 曦熙兮 2026-03-15 | 8/400 |
|
|
[考研] 283求調劑 +10 | 小樓。 2026-03-12 | 14/700 |
|
|
[考研] 085600材料與化工 求調劑 +13 | enenenhui 2026-03-13 | 14/700 |
|
|
[考研] 327求調劑 +6 | 拾光任染 2026-03-15 | 11/550 |
|
|
[考研] 288求調劑 +4 | 奇點0314 2026-03-14 | 4/200 |
|
|
[考研] 289求調劑 +4 | 這么名字咋樣 2026-03-14 | 6/300 |
|
|
[考研] 中科大材料專碩319求調劑 +3 | 孟鑫材料 2026-03-13 | 3/150 |
|
|
[基金申請] 現(xiàn)在如何回避去年的某一個專家,不知道名字 +3 | zk200107 2026-03-12 | 6/300 |
|
|
[考研] 255求調劑 +3 | 李嘉慧, 2026-03-12 | 4/200 |
|
|
[考研] 材料080500調劑求收留 +3 | 一顆meteor 2026-03-13 | 3/150 |
|
|
[考研] 學碩285求調劑 +13 | Wisjxn 2026-03-12 | 46/2300 |
|
|
[考研] 304求調劑 +6 | Mochaaaa 2026-03-12 | 7/350 |
|
|
[考研] 308求調劑 +5 | 是Lupa啊 2026-03-11 | 5/250 |
|
|
[考研] 材料工程調劑 +9 | 咪咪空空 2026-03-12 | 9/450 |
|
|
[考研] 材料工程調劑 +4 | 咪咪空空 2026-03-11 | 4/200 |
|
|
[考研] 274求調劑 +3 | S.H1 2026-03-12 | 3/150 |
|
|
[考研] 289求調劑 +3 | 李政瑩 2026-03-12 | 3/150 |
|