LINUX.ORG.RU

Параллелизация питона

 ,


2

6

Вопрос касается ленивого скрещивания python и mpi
Вот есть у нас библиотека scikit-learn, в которой куча функций может выполняться параллельно из коробки при помощи joblib. гаjoblib реализует параллелизацию при помощи multiprocessing. Вот тут (http://stackoverflow.com/questions/25772289/python-multiprocessing-within-mpi) герой написал параллельную программку при помощи multiprocessing и раскидал её по разным узлам кластера, общающимся с помощью mpi, при помощи mpirun. Можно ли так же при помощи mpirun раскидывать по разным нодам кластера job-ы, которые запускает sklearn с помощью joblib ?

★★★

...«Попробуй…!» – шепнула мечта.

anonymous ()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.