Бенчмаркинг Системная производительность системы Python

Question

Я ищу использование inotify для просмотра около 200 000 каталогов для новых файлов. При создании просмотр сценария будет обрабатывать файл, а затем он будет удален. Поскольку это часть более сложной системы со многими процессами, я хочу сравнить ее и получить статистику производительности системы на процессоре, памяти, диске и т. Д. Во время тестирования.

Я планирую запустить скрипт inotify в качестве демона и иметь второй скрипт, создающий тестовые файлы в нескольких каталогах (случайно выбранных перед тестом).

Я после предложений по лучшему способу оценить производительность чего-то подобного, особенно влияние, которое оно оказывает на сервер Linux, на котором он работает.

Answer 1

Я попытался бы удалить как можно больше других процессов, чтобы получить повторяемый бенчмарк. Например, я бы установил отдельный выделенный сервер с монтированием NFS в каталоги. Этот сервер выполнит только инициализацию и скрипт Python. Для простых измерений сервера я бы использовал top или ps для мониторинга процессора и памяти.

Настоящий тест заключается в том, как быстро ваш сценарий «истощает» каталоги, которые полностью зависят от вашего процесса. Вы можете просмотреть сценарий и посмотреть, где он проводит время.