PYTHON Gearman Worker принимает несколько задач

Question

Например: У меня есть задача с именем «URLDownload», функция задачи - загрузить большой файл из Интернета. Теперь у меня есть рабочий процесс, но есть около 1000 файлов для загрузки. Клиентскому процессу легко создать 1000 задач и отправить их на сервер Gearman.

Мой вопрос является рабочий процесс сделает задачу один на один, или он будет принимать несколько задач в одно время,

Если рабочий процесс может принимать несколько задач, так как я могу ограничить задачу -pool-size в рабочем процессе.

Answer 1

Работники обрабатывают один запрос за раз. У вас есть несколько вариантов:

1) Вы можете запускать нескольких сотрудников (это наиболее распространенный метод). Рабочие сидят в опросе(), когда они не обрабатываются, поэтому эта модель работает очень хорошо.

2) Напишите реализацию fork() вокруг рабочего. Таким образом, вы можете запустить определенное количество рабочих процессов, но не должны контролировать несколько процессов.