Как измерить использование ЦП каждого контейнера в Мезосе?

Question

У меня есть много приложений, работающих на контейнерах в Мезосе, управляемых через марафон. Я дал распределение ЦП для каждого приложения при развертывании через марафон, например 1, .5 и т. Д. Но распределение ЦП в марафоне не означает, что его 1 процессор или половина процессора. Это просто означает, что его коэффициент разделения времени. Также каждый контейнер получает доступ ко всем ЦП на своем хосте.

Теперь я хочу измерить эффективность процессора каждого контейнера на ведомых устройствах Mesos, чтобы я мог уменьшить или увеличить распределение CPU для каждого приложения в марафоне. Я просто хочу сделать использование ресурсов еще более эффективным.

Я мог бы использовать https://github.com/bobrik/collectd-mesos-tasks, но проблема в показателях использования процессора не связана с распределением CPU в марафоне.

Answer 1

В зависимости от того, сколько работы вы хотите инвестировать себя, вы можете использовать либо Marathon Event Bus и в более общем Marathon HTTP API (например this endpoint) наряду с инструментами низкого уровня, как cAdvisor или cinf сделать математику самостоятельно. Если вы не хотите сами вводить код, я предлагаю вам использовать Sysdig, Datadog или Prometheus, чтобы сделать тяжелый подъем для вас.

Answer 2

В Mesos WebUI вы можете видеть, сколько CPU используется вашим исполнителем

Here код, который собирает статистику из /monitor/statistics конечной точки и рассчитать нагрузку на процессор.

Вы заинтересованы в cpus_total_usage поэтому следующий метод будет работать и для вас

Пусть предположим a и b являются снимок статистики в какой-то момент времени. Чтобы вычислить cpus_total_usage, нам нужно вычислить время, которое исполнитель потратил на системное и пользовательское пространство, и погрузил его по времени между a и b.

cpus_total_usage = (
        (b.cpus_system_time_secs - a.cpus_system_time_secs) + 
        (b.cpus_user_time_secs - a.cpus_user_time_secs))/
        (b.timestamp - a.timestamp) 
        ) 
cpu_percent  = cpus_total_usage/cpu_limit * 100%