Добрый День! Столкнулся с необходимостью ускорения выполнения одной тяжелой функции много раз и решил попробовать распараллелить её выполнение.
p0 = Process(target=post_searcher, args=(urls_for_process[0], words, depth, marks_and_models, filename))
p1 = Process(target=post_searcher, args=(urls_for_process[1], words, depth, marks_and_models, filename))
p2 = Process(target=post_searcher, args=(urls_for_process[2], words, depth, marks_and_models, filename))
p0.start()
p1.start()
p2.start()
p0.join()
p1.join()
p2.join()
всё равно сначала запускается процесс 1, затем процесс 2 и тд. Как сделать так, чтобы все процессы запускались параллельно и функция отрабатывала для каждого из них в одно и то же время? функция post_searcher
пишет в экселину результат работы алгоритма. Хочу чтобы писалось сразу из нескольких процессов. Пишу в эксель с помощью pandas
append
(конечно, писать надо логически законченными независимыми фрагментами данных)