У меня есть программа, которая отлично работает в локальном кластере, но не работает должным образом при выполнении на удаленном кластере. Я хотел бы знать, каковы наилучшие и распространенные способы отладки программы, работающей на удаленном кластере Flink? Любая помощь приветствуется!Отладка на удаленном кластере
2
A
ответ
4
Существует несколько способов отладки приложения Flink на удаленном кластере. Поскольку использование реального отладчика затруднено, я сначала попытался бы как можно больше зайти, чтобы узнать об ошибке.
Другим подходом, который может быть полезен, является использование аккумуляторов Flink. С их помощью вы можете собрать некоторую статистику: например, когда у вас есть фильтр, вы можете определить, сколько элементов прошло фильтр и так далее.
Последнее средство добавляет отладчик в один из JVM Flink TaskManager.
Также ознакомьтесь с моей презентацией на тему: http://de.slideshare.net/robertmetzger1/apache-flink-hands-on
Смежные вопросы
- 1. Запуск программы Flink на удаленном кластере
- 2. Получение результатов сценария свиньи на удаленном кластере
- 3. Запуск Hadoop тесты на удаленном кластере Hadoop
- 4. Удаленная отладка Java на удаленном континенте
- 5. Ошибка RegisterInputOutput() в удаленном кластере, Apache Flink
- 6. удалить клонированный файл в удаленном кластере hadoop
- 7. Настройка streamparse в удаленном кластере Бури
- 8. Ошибка «execute_count» при запуске задания на удаленном кластере IPython
- 9. SBT: Запуск искровой работы на удаленном кластере из SBT
- 10. Querying Hive данные, расположенные на удаленном кластере с использованием Spark
- 11. Проблема с обработкой файла Stale NFS на удаленном кластере
- 12. Запуск карты Уменьшить с помощью Hbase на удаленном кластере
- 13. Отладка внутренней внутренней ошибки сервера PHP на кластере IIS7
- 14. Отладка powershell работает в удаленном процессе
- 15. VisualStudio2005 отладка в удаленном Linux веб-сервере
- 16. искрой автономный на кластере
- 17. Отладка JSP на удаленном сервере Tomcat с отладки Eclipse + Javascript
- 18. Отладка веб-сайта, размещенного на удаленном сервере в VS 2008
- 19. Отладка приложения ASP.NET, работающего на удаленном сервере IIS от VS2010
- 20. PhpStorm - работает на удаленном сервере
- 21. Установка улья на кластере
- 22. Запуск openmp на кластере
- 23. Запуск приложения на кластере
- 24. распределенных случайные на кластере
- 25. Shibboleth IDP на кластере
- 26. Установка rstan на кластере
- 27. Команда Nodetool, имеющая проблемы при использовании ее на удаленном хосте в том же кластере
- 28. Запустить карту Hadoop Уменьшить задание на удаленном кластере в Eclipse с диалогом запуска (F11)
- 29. Apache Flink: выполнение программы, которая расширяет RichFlatMapFunction на удаленном кластере, вызывает ошибку
- 30. Connect-ServiceFabricCluster не может связаться с именованным сервером на удаленном кластере Labure Service Fabric