Limitar los procesos para que no excedan más del 10% del uso de la CPU

Opero un sistema Linux que tiene muchos usuarios pero a veces ocurre un abuso; donde un usuario puede ejecutar un solo proceso que usa más del 80% de la CPU / Memoria.

Entonces, ¿hay alguna manera de evitar que esto suceda limitando la cantidad de uso de CPU que un proceso puede usar (al 10%, por ejemplo)? Soy consciente de ello cpulimit, pero desafortunadamente aplica el límite a los procesos que le indico que limite (por ejemplo, procesos individuales). Entonces mi pregunta es, ¿cómo puedo aplicar el límite a todos los procesos en ejecución y procesos que se ejecutarán en el futuro sin la necesidad de proporcionar su identificación / ruta, por ejemplo?

Si bien puede ser un abuso para la memoria, no lo es para la CPU: cuando una CPU está inactiva, un proceso en ejecución (por "ejecución", quiero decir que el proceso no está esperando E / S u otra cosa) 100% de tiempo de CPU por defecto. Y no hay razón para imponer un límite.

Ahora, puede configurar prioridades gracias a nice. Si desea que se apliquen a todos los procesos para un usuario determinado, solo necesita asegurarse de que su shell de inicio de sesión se ejecute con nice: los procesos secundarios heredarán el nicevalor. Esto depende de cómo los usuarios inicien sesión. Vea Priorizar los inicios de sesión ssh (agradable) por ejemplo.

Alternativamente, puede configurar máquinas virtuales. De hecho, establecer un límite por proceso no tiene mucho sentido ya que el usuario puede iniciar muchos procesos, abusando del sistema. Con una máquina virtual, todos los límites serán globales para la máquina virtual.

Otra solución es establecer /etc/security/limits.conflímites; consulte la página del comando man limit.conf (5). Por ejemplo, puede establecer el tiempo máximo de CPU por inicio de sesión y / o el número máximo de procesos por inicio de sesión. También puede establecerlo maxloginsen 1 para cada usuario.

agradable / renice

nice es una gran herramienta para ajustes "únicos" a un sistema.

 nice COMMAND

cpulimit

cpulimit si necesita ejecutar un trabajo intensivo de CPU y tener tiempo libre de CPU es esencial para la capacidad de respuesta de un sistema.

cpulimit -l 50 COMMAND

cgroups

cgroups aplicar límites a un conjunto de procesos, en lugar de a uno solo

cgcreate -g cpu:/cpulimited
cgset -r cpu.shares=512 cpulimited
cgexec -g cpu:cpulimited COMMAND_1
cgexec -g cpu:cpulimited COMMAND_2
cgexec -g cpu:cpulimited COMMAND_3

Recursos

http://blog.scoutapp.com/articles/2014/11/04/restricting-process-cpu-usage-using-nice-cpulimit-and-cgroups

¿Miraste cgroups? Hay alguna información en Arch Wiki sobre ellos. Lea la sección sobre cpu.shares, parece que está haciendo lo que necesita, y pueden operar a nivel de usuario, por lo que puede limitar todos los procesos de usuario a la vez.

Para la memoria, lo que estás buscando es ulimit -v. Tenga en cuenta que ulimites heredado por los procesos secundarios, por lo que si lo aplica al shell de inicio de sesión del usuario en el momento del inicio de sesión, se aplica a todos sus procesos.

Si todos sus usuarios usan bashcomo shell de inicio de sesión, poner la siguiente línea /etc/profiledebería hacer que todos los procesos de usuario tengan un límite estricto de 1 gigabyte (más exactamente, un millón de kilobytes):

ulimit -vH 1000000

La opción Hasegura que es un límite estricto, es decir, el usuario no puede volver a configurarlo después. Por supuesto, el usuario aún puede llenar memoria iniciando suficientes procesos a la vez.

Para otros shells, deberá averiguar qué archivos de inicialización leen en su lugar (y qué otro comando en lugar de ulimitusar).

Para la CPU, lo que deseas no parece tener sentido para mí. ¿Cuál sería el uso de dejar el 90% de la CPU sin usar cuando solo se está ejecutando un proceso? Creo que lo que realmente quieres es nice(y posiblemente ionice). Tenga en cuenta que, como ulimit, nicelos procesos secundarios heredan los valores, por lo que es suficiente aplicarlo al shell de inicio de sesión en el momento del inicio de sesión. Supongo que eso también se aplica, ionicepero no estoy seguro.

Puesto que usted está indicando que cpulimit no sería práctico en su caso, entonces le sugiero que mire bonita , renice , y taskset , que pueden acercarse a lo que quiere lograr, aunque taskset permite establecer afinidad CPU de un proceso, por lo que podría no ser de ayuda inmediata en su caso.

Como tus etiquetas tienen centos, puedes usar systemd.

Por ejemplo, si desea limitar el usuario con ID de 1234:

sudo systemctl edit --force user-1234.slice

Luego escribe y guarda esto:

[Slice] CPUQuota=10%

La próxima vez que el usuario inicie sesión, afectará.

Las páginas man: systemctl, systemd.slice, systemd.resource-control...

Si desea limitar los procesos que ya se iniciaron, deberá hacerlo uno por uno por PID, pero puede tener un script por lotes para hacerlo como el siguiente:

#!/bin/bash
LIMIT_PIDS=$(pgrep tesseract)   # PIDs in queue replace tesseract with your name
echo $LIMIT_PIDS
for i in $LIMIT_PIDS
do
    cpulimit -p $i -l 10 -z &   # to 10 percent processes
done

En mi caso pypdfocrlanza el codicioso tesseract.

Además, en algunos casos, si su CPU es bastante buena, puede usar una renicecomo esta:

watch -n5 'pidof tesseract | xargs -L1 sudo renice +19'