hdfs Узел журнала, сообщающий об оповещениях "fsync latency about"

Question

Я получаю эти предупреждения от менеджера cloudera. Результат теста работоспособности для JOURNAL_NODE_FSYNC_LATENCY стал следующим: Задержка 99-го процентиля fsync за предыдущую минуту составляет 2,3 секунды. Предупреждающий порог: 1 секунда.

Я проверил документацию cloudera, в которой показано, что 1сек является предупреждением и 3сек является критическим. В чем причина этой проблемы и как ее решить?

Answer 1

Причина; JournalNode Fsync Задержка "JOURNAL_NODE_FSYNC_LATENCY"

Это испытание здоровья JournalNode, который проверяет Fsync латентность JournalNode в. Этот тест возвращает «Плохое» здоровье, если латентность 99-го процентиля fsync за предыдущую минуту превышает настроенное пороговое значение. Плохая производительность fsync может указывать на плохой или перегруженный диск (например, JournalNode использует один и тот же диск с NameNode и DataNode.) И будет отрицательно влиять на производительность операций метаданных HDFS, выполняемых NameNode.

Как это решить; На поврежденном узле проверьте свой диск с помощью iostat; или переместить содержимое журналаNode на отдельный диск.