Comments 7
Процессы в чистом виде непригодны для подобного класса задач, слишком большой оверхед на создание процесса и его убийство, взаимодействовать с ОС так часто - дорогое удовольствие.
ИМХО, процессы отлично работают для таких задач, только писать нужно немножко по другому. Если мы хотим скажем обрабатывать что-то в нескольких параллельных ветках, то пишем воркер, который будучи запущенным, ждет на вход сообщение с входной информацией, обработав ее, он посылает сообщение с результатом и ждет следующего сообщения. В начале работы запускаем сколько хотим воркеров, в конце работы завершаем их работу.
Таким образом создание процессов происходит один раз для каждого процесса, а все преимущества процессов остаются.
Спасибо за комментарий!
Можете привести пример кода, как можно под задачу из статьи адаптировать процессы чтобы они работали эффективнее?
В качестве примера после комментария@evgenyk - мне лично вспоминается svchost.exe и services.exe
Речь идет скорее всего о модуле queue в целом, и в частности о реализации с multiprocessing. Примеры легко найти в интернет поисковиках.
Получается, при наличии асинхронности потоки полностью неактуальны для любых задач?
Практический гайд по процессам и потокам (и не только) в Python