| 5 | 1/1 | 返回列表 |
| 查看: 2592 | 回復(fù): 9 | |||
| 當(dāng)前只顯示滿足指定條件的回帖,點擊這里查看本話題的所有回帖 | |||
04nylxb木蟲 (正式寫手)
|
[求助]
請教torque該如何設(shè)置隊列或是任務(wù)或是用戶優(yōu)先級?以及調(diào)用哪些node
|
||
|
各位同仁,用torque進行任務(wù)管理,無maui,請問該如何設(shè)置優(yōu)先級?我看torque手冊,是否可以通過設(shè)置,隊列、任務(wù)、以及用戶組來設(shè)置優(yōu)先級? 比如通過隊列,創(chuàng)建一個隊列,通過priority控制優(yōu)先級 # qmgr –c “set queue queuename priority=20”(默認是0,手冊只說是取整數(shù),是正數(shù)優(yōu)先級高還是負數(shù)優(yōu)先級高呢? 0的優(yōu)先級還是20的優(yōu)先級高呢?還是可以設(shè)置-20,是最高優(yōu)先級?) 也可以在Pbs腳本里面設(shè)定, #pbs -l nice=integer (-20優(yōu)先級最高,19優(yōu)先級最低) 腳本還可以通過這樣控制優(yōu)先級 #pbs –p -1024 (-1024到1023,是否是負值越大,優(yōu)先級越高?) 或者是否可以通過設(shè)定用戶的優(yōu)先級?(手冊上貌似沒說) 請教下大家,隊列優(yōu)先級和腳本優(yōu)先級,哪個更高些? 還有是否可以通過設(shè)定nodes文件后面的Node跟的隊列,來指定某個隊列調(diào)用哪些nodes? 如 node-2 queue01 node-3 queue01 node-4 queue02 是否可以指定,queue01只能調(diào)用node-2 跟3,queue02只能調(diào)用node-4? queue03 (沒有指定),是否可以調(diào)用全部nodes? 非常感謝。 |
第一性原理和電化學(xué) |

木蟲 (正式寫手)
木蟲 (著名寫手)
|
對于第一個問題,現(xiàn)在沒有研究。我使用的Torque+Maui,但是對于你的第二個問題:隊列和節(jié)點的映射問題,可以提供一個思路。具體可以參見:http://www.gaoyang168.com/bbs/viewthread.php?tid=4065399&fpage=1,估計你看過,可能被開頭的Torque+Maui嚇到了,以為下面找不到你要的東西。其實那個帖子在最后的實現(xiàn)上與Maui無關(guān),不妨一試。 現(xiàn)摘抄如下: 1.修改/var/spool/torque/server_priv/nodes文件 node01 np=12 sugon siesta dalton gaussian node02 np=12 sugon siesta dalton gaussian node03 np=12 sugon siesta dalton gaussian node04 np=12 sugon siesta dalton gaussian node05 np=12 sugon siesta dalton gaussian node06 np=12 sugon siesta dalton gaussian node07 np=12 sugon siesta dalton gaussian node08 np=12 sugon siesta dalton gaussian node09 np=12 sugon siesta dalton gaussian node10 np=12 sugon siesta dalton gaussian node11 np=12 sugon siesta dalton gaussian node12 np=12 sugon siesta dalton gaussian node31 np=8 powerlead siesta dalton gaussian others node32 np=8 powerlead siesta dalton gaussian others node33 np=8 powerlead siesta dalton gaussian others node34 np=8 powerlead siesta dalton gaussian others node35 np=8 powerlead siesta dalton gaussian others node36 np=8 powerlead siesta dalton gaussian others node38 np=8 powerlead siesta dalton gaussian others node39 np=8 powerlead siesta dalton gaussian others node40 np=8 powerlead siesta dalton gaussian others node41 np=8 dell siesta dalton gaussian others node42 np=8 dell siesta dalton gaussian others node43 np=8 dell siesta dalton gaussian others node44 np=8 dell molpro node45 np=8 dell molpro node46 np=8 dell molpro 將每一個節(jié)點分配上屬性,每一個節(jié)點可以加多個屬性,這一點是該方法成功的關(guān)鍵所在。 2.然后創(chuàng)建一系列的隊列,并且指定隊列只接受哪個用戶組的任務(wù),為了簡單起見,每一個用戶組創(chuàng)建一個相似的隊列。然后給隊列指定默認的資源。 舉一例如下: 創(chuàng)建siesta用戶對應(yīng)的隊列SIESTA qmgr -c "create queue SIESTA queue_type=execution" 創(chuàng)建SIESTA隊列,并且指定類型為execution qmgr -c "set queue SIESTA started=true" 指定SIESTA隊列中的任務(wù)可以被調(diào)度執(zhí)行 qmgr -c "set queue SIESTA enabled=true" 指定SIESTA隊列可以接受新的任務(wù) qmgr -c "set queue SIESTA acl_group_enable=true" 指定SIESTA隊列專屬某一個用戶組 qmgr -c "set queue SIESTA acl_groups=siesta" 指定SIESTA隊列的專屬用戶組為siesta用戶組,只有屬于siesta用戶組的用戶才能向改隊列中提交任務(wù),其他的用戶組不可以。當(dāng)然,一個用戶可以屬于多個用戶組。 qmgr -c "set queue SIESTA acl_group_sloppy=true" 指定是不是只看用戶的第一用戶組來決定對隊列的使用權(quán)。如果該項沒有,則只有第一用戶組為siesta的用戶組才能向該隊列對提交任務(wù),如果該項為true,表示檢查用戶的其他用戶組屬性。 qmgr -c "set queue SIESTA resources_default.neednodes=siesta" 指定SIESTA隊列使用的計算節(jié)點是siesta屬性的(上面1中指定的) 創(chuàng)建完畢后,可以用qmgr -c "p s"查看創(chuàng)建的隊列情況,如下 # Create and define queue SIESTA # create queue SIESTA set queue SIESTA queue_type = Execution set queue SIESTA resources_default.neednodes = siesta set queue SIESTA acl_group_enable = True set queue SIESTA acl_groups = siesta set queue SIESTA acl_group_sloppy = True set queue SIESTA enabled = True set queue SIESTA started = True 其他的用戶組都可以類比著創(chuàng)建自己的專屬隊列。 3.啟動服務(wù)節(jié)點的pbs_server服務(wù)和maui服務(wù): qterm -t quick 停止pbs_server服務(wù) pbs_server 重啟pbs_server服務(wù) ps -A |grep maui 找出maui的進程號 18066 ? 00:00:00 maui 殺掉maui進程 kill 18066 重新啟動maui /usr/local/software/maui-3.3.1/sbin/maui 好了,到此為止,大功告成?梢允褂昧 屬于siesta用戶組的用戶提交任務(wù),就可以默認提交到node01-node43上,只要提交滿了,就排隊,不能提交到node44-node46上。 但是siesta用戶組的成員如果想將自己的某一個任務(wù)提交到sugon上,而不是powerlead或者dell上,則可以在自己的腳本中寫上: #PBS -l nodes=1:sugon:ppn=8 表示該任務(wù)只向sugon機器提交,如果sugon滿了,就排隊,即使powerlead和dell有空閑。 如果寫為#PBS -l nodes=1:dell:ppn=8 那么siesta用戶組的用戶只能提交到node41,42,43這三個上,如果滿了,就排隊,直到這三個節(jié)點有空余。不會侵占到node44-node46上。 也就是說這兒對節(jié)點屬性的要求和隊列本身對節(jié)點的要求是 “與(and)”的關(guān)系。 如果寫成: #PBS -l nodes=1:ppn=8 那么就會從node43倒序向node01檢查,看是否有空閑資源。也就是說dell機器優(yōu)先。 這種做法有一個不令人滿意的地方:如果other用戶組的用戶用OTHER隊列向sugon提交任務(wù)的話,那么可以提交,并且不出錯,但是任務(wù)始終在排隊狀態(tài),永遠不會被執(zhí)行。 |

鐵桿木蟲 (著名寫手)

木蟲 (正式寫手)

| 最具人氣熱帖推薦 [查看全部] | 作者 | 回/看 | 最后發(fā)表 | |
|---|---|---|---|---|
|
[考博] 環(huán)境領(lǐng)域全國重點實驗室招收博士1-2名 +3 | QGZDSYS 2026-03-13 | 3/150 |
|
|---|---|---|---|---|
|
[考研] 303求調(diào)劑 +3 | 睿08 2026-03-17 | 5/250 |
|
|
[考研] 能源材料化學(xué)課題組招收碩士研究生8-10名 +3 | 脫穎而出 2026-03-16 | 6/300 |
|
|
[考研] 0703化學(xué)調(diào)劑 ,六級已過,有科研經(jīng)歷 +8 | 曦熙兮 2026-03-15 | 8/400 |
|
|
[考研] 328求調(diào)劑,英語六級551,有科研經(jīng)歷 +3 | 生物工程調(diào)劑 2026-03-16 | 8/400 |
|
|
[考研] 268求調(diào)劑 +8 | 一定有學(xué)上- 2026-03-14 | 9/450 |
|
|
[考研] 材料工程專碩調(diào)劑 +5 | 204818@lcx 2026-03-17 | 5/250 |
|
|
[考研] 本人考085602 化學(xué)工程 專碩 +16 | 不知道叫什么! 2026-03-15 | 18/900 |
|
|
[考研] 085600材料與化工求調(diào)劑 +5 | 緒幸與子 2026-03-17 | 5/250 |
|
|
[考研] 材料與化工專碩調(diào)劑 +5 | heming3743 2026-03-16 | 5/250 |
|
|
[考研] 271求調(diào)劑 +12 | 生如夏花… 2026-03-11 | 14/700 |
|
|
[基金申請] 國自科面上基金字體 +6 | iwuli 2026-03-12 | 7/350 |
|
|
[教師之家] 焦慮 +7 | 水冰月月野兔 2026-03-13 | 9/450 |
|
|
[考研] 22408總分284求調(diào)劑 +3 | InAspic 2026-03-13 | 3/150 |
|
|
[考研] 學(xué)碩285求調(diào)劑 +13 | Wisjxn 2026-03-12 | 46/2300 |
|
|
[考研] 337一志愿華南理工0805材料求調(diào)劑 +7 | mysdl 2026-03-11 | 9/450 |
|
|
[考研] 304求調(diào)劑 +6 | Mochaaaa 2026-03-12 | 7/350 |
|
|
[考研] (081700)化學(xué)工程與技術(shù)-298分求調(diào)劑 +12 | 11啦啦啦 2026-03-11 | 35/1750 |
|
|
[考研] 考研調(diào)劑 +4 | 芬達46 2026-03-12 | 4/200 |
|
|
[考研] 081200-11408-276學(xué)碩求調(diào)劑 +3 | 崔wj 2026-03-12 | 4/200 |
|