Как разработать загрузчик в питона с поддержкой многопроцессорных

Question

Я хочу разработать Uploader в питона со следующими характеристиками:

1. Получает загружать запросы задания из разных процессов
2. Способен сказать статус вызова процесс относительно успеха или неудачи задания
3. Retry, если не удается
4. приоритизации Вакансии
5. Отмена активной работы

нужно в питона и краткой архитектуры дизайна

Answer 1

АНИ, я не уверен, что вы точно имеете в виду. Я говорю что-то, как я думаю.

Я рекомендую использовать библиотеку сельдерея. Это делает некоторых работников, которые потребляют задачи, которые вы отправляете.

Сделайте рабочих, которые загружают файлы с библиотекой сельдерея.

И сделать процессы, которые посылают с загрузкой задач в сельдерея (rabitmq) с многопроцессорной библиотека