Linux: dowiedz się jaki proces wykorzystuje całą pamięć RAM?

W Linuksie w procesie top możesz nacisnąć klawisz <, aby przesunąć sortowanie wyjścia w lewo. Domyślnie jest on posortowany według %CPU, więc jeśli naciśniesz klawisz 4 razy, posortujesz go według VIRT, który jest rozmiarem pamięci wirtualnej, dając Ci odpowiedź.

Inny sposób to:

ps -e -o pid,vsz,comm= | sort -n -k 2

powinien dać Ci i wyjście posortowane według rozmiaru procesów wirtualnych.

Oto długa wersja:

ps --everyone --format=pid,vsz,comm= | sort --numeric-sort --key=2

Pokaż pamięć procesów w megabajtach i ścieżkę procesu.

ps aux | awk '{print $6/1024 " MB\t\t" $11}' | sort -n

Tylko notatka z boku na serwerze pokazująca te same objawy, ale nadal wykazująca wyczerpanie pamięci. To, co znalazłem to sysctl.conf z pudełka z 32 GB pamięci RAM i konfiguracja dla DB z dużymi stronami skonfigurowanymi do 12000. Ten box ma tylko 2 GB pamięci RAM, więc przypisał całą wolną pamięć RAM do ogromnych stron (tylko 960 z nich). Ustawienie ogromnych stron na 10, jako że żadna z nich i tak nie była używana, zwolniło całą pamięć.

Szybkie sprawdzenie /proc/meminfo w poszukiwaniu ustawień HugePages_ może być dobrym początkiem rozwiązywania problemów z co najmniej jednym niespodziewanym świniakiem pamięci.

W moim przypadku problemem było to, że serwer był serwerem wirtualnym VMware z włączonym modułem vmw_balloon:

$ lsmod | grep vmw_balloon
vmw_balloon 20480 0
vmw_vmci 65536 2 vmw_vsock_vmci_transport,vmw_balloon

Uruchomienie:

$ vmware-toolbox-cmd stat balloon
5189 MB

Tak więc około 5 GB pamięci zostało w rzeczywistości odzyskane przez hosta. Tak więc pomimo tego, że 8 GB do mojej maszyny wirtualnej było “oficjalnie”, w praktyce było ich znacznie mniej:

$ free
              total used free shared buff/cache available
Mem: 8174716 5609592 53200 27480 2511924 2458432
Swap: 8386556 6740 8379816

Możesz również użyć polecenia ps, aby uzyskać więcej informacji o procesie.

ps aux | less

Odnoszę się do to i Całkowita pamięć używana przez proces Pythona? - Stack Overflow , to jest moja odpowiedź. Dostaję konkretne narzędzie do liczenia procesów (python), teraz.

# Megabyte.
$ ps aux | grep python | awk '{sum=sum+$6}; END {print sum/1024 " MB"}'
87.9492 MB

# Byte.
$ ps aux | grep python | awk '{sum=sum+$6}; END {print sum " KB"}'
90064 KB

Dołącz moją listę procesów.

$ ps aux | grep python
root 943 0.0 0.1 53252 9524 ? Ss Aug19 52:01 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
root 950 0.6 0.4 299680 34220 ? Sl Aug19 568:52 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
root 3803 0.2 0.4 315692 36576 ? S 12:43 0:54 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
jonny 23325 0.0 0.1 47460 9076 pts/0 S+ 17:40 0:00 python
jonny 24651 0.0 0.0 13076 924 pts/4 S+ 18:06 0:00 grep python

Referencje

• pamięć - Linux: dowiedz się jaki proces wykorzystuje całą pamięć RAM? - Super User
• total memory used by Python process? - Stack overflow
• linux - ps aux output meaning - Super User

Zrób skrypt o nazwie show-memory-usage.sh z treścią:

#!/bin/sh
ps -eo rss,pid,user,command | sort -rn | head -10 | awk '{ hr[1024**2]="GB"; hr[1024]="MB";
 for (x=1024**3; x>=1024; x/=1024) {
 if ($1>=x) { printf ("%-6.2f %s ", $1/x, hr[x]); break }
 } } { printf ("%-6s %-10s ", $2, $3) }
 { for ( x=4 ; x<=NF ; x++ ) { printf ("%s ",$x) } print ("\n") }
 '

Mój serwer ubuntu DISTRIB RELEASE=18.04 na Hyper-V miał większość wykorzystanej pamięci, ale wszystkie procesy były w porządku. (Przyznaję, że usunąłem snapd i nienadzorowane pakiety, ale 95% pamięci nadal było używane)

Odpowiedź brzmi: Hyper-V ma pamięć dynamiczną, więc wziął pamięć do głównego systemu i ubuntu oznaczył ją jako używaną.

Mam nadzieję, że komuś pomoże.

To również wymaga id procesu, sortowania według MB i nakreślenia polecenia (które stworzyło proces):

ps aux | awk '{print $6/1024 " MB\t\t" $2 "\t" $11}' | sort -n