使用 Dask 进行并行学习
Parallel learning using Dask
Scikit-Learn 已经用 Joblib 提供了单机并行计算。
但是我想用 Dask 怎么实现呢?
from dask.distributed import Client
client = Client()
我该如何处理?
dask 文档中有一个片段,您可以同时使用 dask 语法和 sk"Scikit-learn" 代码
import dask_ml.joblib
from sklearn.externals.joblib import parallel_backend
with parallel_backend('dask'):
# Your normal scikit-learn code here
此处的其他文档:http://dask-ml.readthedocs.io/
Scikit-Learn 已经用 Joblib 提供了单机并行计算。
但是我想用 Dask 怎么实现呢?
from dask.distributed import Client
client = Client()
我该如何处理?
dask 文档中有一个片段,您可以同时使用 dask 语法和 sk"Scikit-learn" 代码
import dask_ml.joblib
from sklearn.externals.joblib import parallel_backend
with parallel_backend('dask'):
# Your normal scikit-learn code here
此处的其他文档:http://dask-ml.readthedocs.io/