Запуск нескольких экземпляров программы для ускорения процесса?

Question

У меня есть программа, которая выполняет длительный процесс. Циклы по тысячам записей, по одному за раз, и вызывают хранимую процедуру для каждой итерации. Будут ли запущены два экземпляра такой программы с одной обработкой половины записей, а другая обработка второй половины ускорит обработку?

Вот сценарии:

1. 1 Программа, бег длительного процесса запуска
2. 2 экземпляра программы на одном сервере, подключение к одной базе данных, каждый из которых отвечает за обработки половины (50%) из записей ,
3. 2 экземпляра на разных серверах, подключающихся к одной базе данных, каждая из которых отвечает за половину (50%) записей.

Будет ли сценарий 2 или 3 работать в два раза быстрее, чем 1? Будет ли разница между 2 и 3? Основным узким местом является хранимый вызов proc, который занимает около половины секунды.

Спасибо!

Answer 1

Это действительно зависит от того, что делает хранимая процедура. Если хранимая процедура будет обновлять записи, и у вас будет один экземпляр базы данных, тогда при записи данных будут возникать разногласия.

Значения в игре здесь, являются:

1. Время, необходимое для считывания данных в памяти для приложений (и это также зависит от того, используется ли на стороне клиента или SQL-поддерживаемые сервером боковые курсоры).
2. Время, необходимое для обработки или использования вашей логики приложения.
3. Время, необходимое для записи обновленного элемента назад (при условии обновления proc).

Одно из решений (и это не в коем случае не идеальное решение, не зная точные требования), являются:

1. Have X сервера чтение Y записи, и обрабатывать их.
2. Если эти серверы записывают результаты на выделенный почтовый сервер в сериализованном виде, чтобы избежать разногласий.

Answer 2

Это зависит от множества факторов. Также обратите внимание, что потоки могут быть более подходящими, чем процессы. А может и нет. Опять же: это зависит. Но: эта работа связана с CPU? Сеть переплет? Или связано с тем, что может сделать сервер базы данных? Добавление параллелизма помогает с привязкой к процессору и при разговоре с несколькими независимыми ресурсами. Борьба за одно и то же сетевое соединение или тот же сервер базы данных вряд ли улучшит ситуацию - и может многое ухудшить.

Откровенно говоря, из-за его звука лучшим вариантом может быть повторная работа sproc для работы в партиях (а не отдельных записей).

Чтобы правильно ответить на этот вопрос, вам необходимо знать, как используется ресурс сервера базы данных в настоящее время: может ли он получить дополнительную нагрузку? Или проще - просто попробуйте и посмотрите.