Entorno SLURM (Dic 22, 2023)

Info de Users, Accounts y QOS

El Patagón utiliza el sistema de accounts y qos de SLURM para manejar el uso de recursos de forma balanceada entre usuarios. Existen limites de recursos a nivel de usuario, como también a nivel de account. Un account agrupa un conjunto de usuarios de una misma institución/laboratorio/departamento, y cada account tiene un QOS asociado el cual establece limites en el uso de recursos. A continuación se presenta información de utilidad para conocer los limites actuales puestos en el Patagón.

Queries útiles

  • Listar accounts existentes: sacctmgr list account
  • Consultar por el account asociado a mi cuenta: sacctmgr list user <user>
  • Listar los QOS existentes: sacctmgr list qos
  • Listar la asociación entre usuario, account y QOS: sacctmgr list association where user=<user>

Particiones

Existen las siguientes particiones:

  • A100: Partición con 8x GPUs NVIDIA A100 y CPU Cores AMD Zen2. Ideal para trabajos de Inteligencia Artificial y HPC General. Para mas información ejecutar scontrol show partition A100.
  • L40: Partición con 3x GPUs NVIDIA L40 y CPU Cores AMD Zen4. Ideal para trabajos generales y gráficos en precision FP32. Para mas información ejecutar scontrol show partition L40.
  • A4000: Partición con 3x GPUs NVIDIA L40 y CPU Cores AMD Zen4. Ideal para trabajos generales y gráficos en precision FP32. Para mas información ejecutar scontrol show partition A4000.
  • cpu: Partición con núcleos AMD Zen4. Ideal para trabajos de CPU paralelos. Para mas información ejecutar scontrol show partition cpu.

QoS

Se definen los siguientes perfiles (QOS):

  • internal: accounts SLURM de la UACh.

    • MaxTRESPerUser=cpu=64,gres/gpu=8
    • MaxTRESPerAccount=cpu=128,gres/gpu=16
    • MaxJobsPerUser=4
    • MaxSubmitJobsPerUser=4
    • MaxJobsPerAccount=16
    • MaxSubmitJobsPerAccount=20

  • external: accounts SLURM externos a la UACh.

    • MaxTRESPerUser=cpu=64,gres/gpu=4
    • MaxTRESPerAccount=cpu=128,gres/gpu=8
    • MaxJobsPerUser=2 (ejecución)
    • MaxSubmitJobsPerUser=2 (ejecución + encolados).
    • MaxJobsPerAccount=16
    • MaxSubmitJobsPerAccount=10

  • temporal: grupo de investigación raíz del Patagón.

    • MaxJobsPerUser=8
    • MaxSubmitJobsPerUser=8