On Sat, 11 Nov 2006, [Windows-1251] Михаил Монашёв wrote:
Стоит одна из последних версий nginx-а на FreeBSD 5.5-STABLE . При
обычной нагрузке в top-е nginx приблизительно такой:
last pid: 77484; load averages: 0.42, 0.80, 0.84
146 processes: 1 running, 145 sleeping
CPU states: 22.4% user, 0.0% nice, 10.6% system, 3.5% interrupt, 63.5% idle
Mem: 2793M Active, 796M Inact, 270M Wired, 130M Cache, 112M Buf, 20M Free
Swap: 6144M Total, 5536K Used, 6138M Free
PID PRI NICE SIZE RES STATE C TIME WCPU CPU COMMAND
...
40801 4 0 14640K 13176K kqread 2 65:33 1.76% 1.76% nginx
40805 4 0 14640K 13556K kqread 2 64:52 0.54% 0.54% nginx
40804 4 0 14640K 13560K kqread 0 64:28 0.29% 0.29% nginx
40802 4 0 14968K 13888K kqread 2 64:09 0.24% 0.24% nginx
40803 4 0 15296K 14108K kqread 2 65:00 0.15% 0.15% nginx
...
(на большой размер процесса не смотрите - там гео-база всю память
занимает)
Далее увеличиваем нагрузку на одном из виртуальных хостов nginx-а.
Начинаем _пятистам_ юзерам отдавать 50 файликов размером в несколько
байт, стучаться на получение новых файликов, получать 404 ошибку,
ждать секунду и стучаться за ними снова и так, пока нужный файлик не
появится на диске. Далее цикл повторяется. Файлки лежат на диске и
отдаются nginx-ом.
В результате top почти не меняется. В нёмного поднимается nginx, что
вполне ожидаемо. И всё нормально работает.
Через несколько минут наступает странная картина: те, процессы (mysqld
и httpd), которые раньше были в верху top-а и которые никак не связаны
с nginx-ом начинают кушать всё больше и больше процессора. Load
average поднимается до 10 и начинаются тормоза. При этом дисковая
активность, судя по iostat, не меняется после увеличения нагрузки.
Процессор также имеет 50-60% idle. Памяти вроде достаточно. Такое
ощущение, что не хватает какого-то другого ресурса, разделяемого
процессами и съеденного nginx-ом.
Вопрос - какого?
Что показывает top в это время ? Интересует 5 верхних строчек:
last pid: 77484; load averages: 0.42, 0.80, 0.84
146 processes: 1 running, 145 sleeping
CPU states: 22.4% user, 0.0% nice, 10.6% system, 3.5% interrupt, 63.5% idle
Mem: 2793M Active, 796M Inact, 270M Wired, 130M Cache, 112M Buf, 20M Free
Swap: 6144M Total, 5536K Used, 6138M Free
Игорь Сысоев
