Защита потока MPI-связь

Question

В related question Недавно я узнал, что нужно быть очень осторожным, используя MPI с несколькими потоками. Поскольку реализация, которую я использую, не поддерживает MPI_THREAD_MULTIPLE, я просто завернул каждый звонок MPI::COMM_WORLD с помощью std::lock_guard<std::mutex>.

Мой вопрос сейчас: Это перебор? Конкретно: могу ли я Send в точное время I Recv?

Я попробовал это с двумя std::mutex, один для отправки, один для получения. На моей тестовой машине у меня было несколько тестовых прогонов без ошибок, но это не гарантия, это может быть просто совпадение.

Дополнение: теперь - с сотнями тестовых прогонов - на самом деле произошла одна отвратительная ошибка сегментации , но я не уверен на 100%, если это связано с одновременным отправкой/возвратом.

Answer 1

Какой режим многопоточного MPI вы используете? Использование мьютекса недостаточно, если вы не используете MPI_THREAD_SERIALIZED, и в этом случае вам нужно будет использовать один мьютекс вокруг всех вызовов MPI. Это делает сериализацию их, как вы видите. Если вы не используете MPI_Init_thread с MPI_THREAD_SERIALIZED (т. Е. Вы используете MPI_Init или некоторые настройки нижнего потока), даже с использованием мьютекса недостаточно; см. стандарт MPI для точных ограничений. Если вы используете MPI_THREAD_SERIALIZED, правило состоит в том, что вы не можете одновременно вводить вызовы MPI из нескольких потоков, независимо от того, являются ли они одной и той же операцией или разными.