Регистрация Войти
Рейтинг:2
avatar Server

Как настроить раздел только для интерактивных или пакетных заданий в кластере SLURM?

флаг ua
wdg

Я управляю кластером PBS/torque HPC, и теперь я настраиваю другой кластер с ГРЯЗЬ. В кластере PBS я могу установить очередь для приема только интерактивных заданий, qmgr -c "установить очередь интерактивного_q disallowed_types = пакет" и принимать только пакетные задания qmgr -c "установить очередь cu disallowed_types = интерактивный".

Однако я не могу найти эквивалентные настройки SLURM после просмотра официальных документов SLURM.

Как настроить раздел в кластере SLURM для приема только интерактивных или пакетных заданий?

195
0 + 0
HPC
Рейтинг:3
user10489 avatar Server
флаг nc
user10489

Начиная с Slurm 20, нет прямого способа отделить интерактивные задания от пакетных заданий в разделе.

Тем не менее, можно использовать плагин отправки заданий, который может различать их несколькими способами; пакетные задания имеют сценарий задания (job_desc.script в Луа), связанные с ними там, где интерактивные задания не связаны. Некоторые интерактивные задания имеют ПТИ. Я думаю, что в Slurm 20 также может быть новый набор флагов.

Как только подключаемый модуль отправки задания идентифицирует задание как интерактивное или пакетное, он может либо отклонить его для данного раздела, либо изменить раздел, в который оно отправляется, либо изменить задание каким-либо другим подходящим образом (например, присвоение ему «интерактивной» лицензии или изменение QOS) перед окончательной отправкой.

Если вы измените задание, то дополнительная конфигурация Slurm может повлиять на задание на основе этого.

0 + 0
флаг ua
wdg
Это действительно хорошая идея. Задание, отправленное `sbatch`, будет иметь поле `BatchFlag`, установленное на 1. Это замечательно, но согласно https://github.com/SchedMD/slurm/blob/master/src/plugins/job_submit/lua/job_submit_lua. c, похоже, плагин lua не может получить доступ к полю `BatchFlag`. Написание плагина C слишком хлопотно, так как компиляцию SLURM выполняет поставщик, а не я. Прямо сейчас я могу сказать, что задание является интерактивным, только если `job_desc.argv[job_desc.argc-1]=="bash"`.Этого, конечно, недостаточно.
0
Ответить
user10489 avatar
флаг nc
user10489
Я написал свой плагин отправки заданий на lua для slurm 19 или более ранней версии, и проверка скрипта работает нормально, поэтому поле batchflag в любом случае избыточно. Возможно, они добавят его в будущую версию плагина lua. Посмотрите на `job_desc.script`
1
Ответить
флаг ua
wdg
Вы имели в виду, что для интерактивных заданий `job_desc.script` является пустым, но для пакетных заданий они не пусты?
0
Ответить
user10489 avatar
флаг nc
user10489
Правильно. Интерактивные задания не имеют сценария, и `job_desc.script` будет пустым/не заданным.
1
Ответить
флаг Moldova
Admin
Этот вопрос на других языках:

Ответить или комментировать

Большинство людей не понимают, что склонность к познанию нового открывает путь к обучению и улучшает межличностные связи. В исследованиях Элисон, например, хотя люди могли точно вспомнить, сколько вопросов было задано в их разговорах, они не чувствовали интуитивно связи между вопросами и симпатиями. В четырех исследованиях, в которых участники сами участвовали в разговорах или читали стенограммы чужих разговоров, люди, как правило, не осознавали, что задаваемый вопрос повлияет — или повлиял — на уровень дружбы между собеседниками.