Python Anaconda Windows 10 的 XGBoost 安装问题(2018 年 5 月 18 日)

XGBoost installation issues for Python Anaconda Windows 10 (18 May 2018)

在过去的几天里,我尝试使用

中的说明安装 XGBoost

一些说明是直截了当的(例如,conda install -c conda-forge xgboost)。其他涉及几十个步骤,其中一些对像我这样的新手来说不清楚和困惑。

部分安装似乎有效,但在 jupyter notebook 中导入模块失败。例如,我可以在 ...\Anaconda2\envs\py36\Lib\site-packages\xgboost-0.71-py3.6.egg\xgboost 看到已安装的文件,但导入会产生错误。

我最近的尝试遵循了 https://www.kaggle.com/general/30163#latest-330213 上发布的说明:conda install -c anaconda py-xgboost

同样,安装 似乎 有效:我可以在 ...\Anaconda2\envs\py36\Lib\site-packages\xgboost 下看到已安装的文件。但是在我的笔记本中,当我尝试使用两者导入模块时

from xgboost import XGBRegressor

import xgboost

我得到OSError: [WinError 126] The specified module could not be found error.

完整的回溯如下。

有解决办法吗?更好的安装方式?我想继续 Dan Becker 在 kaggle 上对 ML 的介绍!

版本:

 python version : 3.6.4150.1013
  conda version : 4.3.30

  Microsoft Windows : Version 10.0.16299.431
           platform : win-64
           git bash : launches a window labeled `MINGW64:/c/users/karls`

回溯:

---------------------------------------------------------------------------
OSError                                   Traceback (most recent call last)
<ipython-input-7-15d947748610> in <module>()
----> 1 from xgboost import XGBRegressor   # OSError: [WinError 126] The specified module could not be found
      2 
      3 my_model = XGBRegressor()
      4 # Add silent=True to avoid printing out updates with each cycle
      5 my_model.fit(train_X, train_y, verbose=False)

~\Anaconda2\envs\py36\lib\site-packages\xgboost\__init__.py in <module>()
      9 import os
     10 
---> 11 from .core import DMatrix, Booster
     12 from .training import train, cv
     13 from . import rabit                   # noqa

~\Anaconda2\envs\py36\lib\site-packages\xgboost\core.py in <module>()
    113 
    114 # load the XGBoost library globally
--> 115 _LIB = _load_lib()
    116 
    117 

~\Anaconda2\envs\py36\lib\site-packages\xgboost\core.py in _load_lib()
    107     if len(lib_path) == 0:
    108         return None
--> 109     lib = ctypes.cdll.LoadLibrary(lib_path[0])
    110     lib.XGBGetLastError.restype = ctypes.c_char_p
    111     return lib

~\Anaconda2\envs\py36\lib\ctypes\__init__.py in LoadLibrary(self, name)
    424 
    425     def LoadLibrary(self, name):
--> 426         return self._dlltype(name)
    427 
    428 cdll = LibraryLoader(CDLL)

~\Anaconda2\envs\py36\lib\ctypes\__init__.py in __init__(self, name, mode, handle, use_errno, use_last_error)
    346 
    347         if handle is None:
--> 348             self._handle = _dlopen(self._name, mode)
    349         else:
    350             self._handle = handle

OSError: [WinError 126] The specified module could not be found

编辑 1 安装尝试

示例 1:conda install -c anaconda py-xgboost

  1. 启动 Anaconda 提示
  2. 激活py36
  3. 运行conda 安装-c anaconda py-xgboost

这是我几天前尝试此安装时的命令 window 结果(以及今天回溯这些步骤时在 "All requested packages already installed" 确认下方):

(py36) C:\Users\karls>conda install -c anaconda py-xgboost
Fetching package metadata ...............
Solving package specifications: .

Package plan for installation in environment C:\Users\karls\Anaconda2\envs\py36:

The following packages will be UPDATED:

    bzip2:        1.0.6-haa5b126_2        --> 1.0.6-vc14_3          anaconda [vc14]

The following packages will be SUPERSEDED by a higher-priority channel:

    cryptography: 2.1.4-py36he1d7878_0    --> 2.0.3-py36h123decb_1  anaconda
    curl:         7.58.0-h7602738_0       --> 7.55.1-vc14hdaba4a4_3 anaconda [vc14]
    freetype:     2.8-h51f8f2c_1          --> 2.8-vc14h17c9bdf_0    anaconda [vc14]
    hdf5:         1.10.1-h98b8871_1       --> 1.10.1-vc14hb361328_0 anaconda [vc14]
    icu:          58.2-ha66f8fd_1         --> 58.2-vc14hc45fdbb_0   anaconda [vc14]
    jpeg:         9b-hb83a4c4_2           --> 9b-vc14h4d7706e_1     anaconda [vc14]
    libiconv:     1.15-h1df5818_7         --> 1.15-vc14h29686d3_5   anaconda [vc14]
    libpng:       1.6.34-h79bbb47_0       --> 1.6.32-vc14h5163883_3 anaconda [vc14]
    libssh2:      1.8.0-hd619d38_4        --> 1.8.0-vc14hcf584a9_2  anaconda [vc14]
    libtiff:      4.0.9-h0f13578_0        --> 4.0.8-vc14h04e2a1e_10 anaconda [vc14]
    libxml2:      2.9.7-h79bbb47_0        --> 2.9.4-vc14h8fd0f11_5  anaconda [vc14]
    libxslt:      1.1.32-hf6f1972_0       --> 1.1.29-vc14hf85b8d4_5 anaconda [vc14]
    lxml:         4.2.1-py36heafd4d3_0    --> 4.1.1-py36he0adb16_0  anaconda
    lzo:          2.10-h6df0209_2         --> 2.10-vc14h0a64fa6_1   anaconda [vc14]
    openssl:      1.0.2n-h74b6da3_0       --> 1.0.2l-vc14hf4c37d5_5 anaconda [vc14]
    pillow:       5.0.0-py36h0738816_0    --> 4.2.1-py36hdb25ab2_0  anaconda
    py-xgboost:   0.71-py36h6538335_0     --> 0.71-py36h6538335_0   anaconda
    pycurl:       7.43.0.1-py36h74b6da3_0 --> 7.43.0-py36h086bf4c_3 anaconda
    pyopenssl:    17.5.0-py36h5b7d817_0   --> 17.4.0-py36h3316aad_0 anaconda
    qt:           5.6.2-vc14h6f8c307_12   --> 5.6.2-vc14h6f8c307_12 anaconda [vc14]
    sqlite:       3.22.0-h9d3ae62_0       --> 3.20.1-vc14h7ce8c62_1 anaconda [vc14]
    tk:           8.6.7-hcb92d03_3        --> 8.6.7-vc14hb68737d_1  anaconda [vc14]
    yaml:         0.1.7-hc54c509_2        --> 0.1.7-vc14hb31d195_1  anaconda [vc14]
    zlib:         1.2.11-h8395fce_2       --> 1.2.11-vc14h1cdd9ab_1 anaconda [vc14]

Proceed ([y]/n)?

我输入y,回车,模块安装完成。我没有复制结果,但它表明成功 -- 但是当我试图在笔记本中导入它时没有找到该模块。

以下是我今天再次执行这些步骤时的结果:

(C:\Users\karls\Anaconda2) C:\Users\karls>activate py36

(py36) C:\Users\karls>conda install -c anaconda py-xgboost
Fetching package metadata ...............
Solving package specifications: .

# All requested packages already installed.
# packages in environment at C:\Users\karls\Anaconda2\envs\py36:
#
py-xgboost                0.71             py36h6538335_0    anaconda

(py36) C:\Users\karls>

编辑 2 示例 2:

我在 Windows 10 win-64 上发现了一个安装过程,它似乎在 jupyter notebook 中与 Anaconda 4.3 for python 3.6.4 一起工作。下面我详细说明我遵循的过程。在底部,我包含了已安装文件夹和文件的几个屏幕截图。如果您对如何改进此过程有任何建议,请告诉我。

此过程改编自 http://adataanalyst.com/machine-learning/installing-xgboost-for-windows-10/ which in turn are derived from 中的说明。

准备

  1. 如果没有git,请安装它并将其添加到您的 PATH。

  2. 作为之前尝试安装 xgboost 的一部分,我最近将 numpy 和 scipy 更新为最新版本

  3. 下载并安装 MinGW-64:http://sourceforge.net/projects/mingw-w64/

    一个。在“设置”对话框中,将架构设置为“x86_64”(原为 i686),将线程设置为“win32”(原为 posix)

    b。我将 MinGW-64 安装到 C:\Program Files 中的默认文件路径,因此我将 C:\Program Files\mingw-w64\x86_64-8.1.0-win32-seh-rt_v6-rev0\mingw64\bin 添加到我的 PATH 环境变量

    c。安装完成后,按照提示进入mingw64\bin文件夹,将mingw32-make重命名为make

    • 实际上,我制作了 mingw32-make副本 并将副本命名为 make

    • 这样做可能是我下面一些麻烦的根源,尽管我能够克服它们。我建议您尝试重命名该文件,而不是像我那样保留同一个文件的两个不同名称的副本

获取 XGBoost 源代码

  1. 启动 Windows 命令提示符:开始 | Windows系统|命令提示符

    • 这些步骤在MINGW64中也可能有效,我稍后切换到MINGW64,但在这里我尽量忠实地记录我按照我的说明进行的步骤)

    一个。输入 cd c:\,其中 c:\ 表示您要安装 xgboost 的位置。对我来说是 C:\...\Anaconda2\envs\py36\Lib\site-packages

    b。输入 git clone --recursive https://github.com/dmlc/xgboost

    • 这将运行并在显示下一步提示之前输出几十行输出

    c。输入 cd xgboost

    d。输入 git submodule init

    • 这没有产生任何输出并立即再次显示提示

    e。输入 git submodule update

    • 这没有产生任何输出并立即再次显示提示

    f。输入 copy make\mingw64.mk config.mk

    • 输出:“复制了 1 个文件。”

    • 注意:到目前为止,所有命令都是 运行 在 Windows 命令提示符中。下一个在那里不起作用,所以继续前进我切换到 mingw64 终端。我重新运行步骤"f"并继续下一步。

  2. 启动mingw64终端:开始 | MinGW--W64项目 | 运行 终端机

    一个。输入 cd C:\Users\karls\Anaconda2\envs\py36\Lib\site-packages\xgboost

    b。输入 copy make\mingw64.mk config.mk

    c。输入 make -j4

    • 此命令无效。我根据 Google 搜索的建议尝试了数十种变体:make.exemakefilecmakepymakemake.pymingw64-makemingw64-make.exe, C:\Program Files\mingw-w64\x86_64-8.1.0-win32-seh-rt_v6-rev0\mingw64\bin\make, 列表还在继续。没有任何效果。我尝试将目录更改为 site-packages\xgboost 内的其他文件夹。最后,虽然输出是可疑的,但我想到了以下内容并能够继续。

    d。将目录更改为 ...\site-packages\xgboost\make

    e。输入 mingw64.mk -j4

    • 这会弹出一个 "How do you want to open this file?" 对话框,这是我见过的最有希望的输出。我没有打开文件。这个命令有什么用吗?我不知道,但我继续下一步。

安装 PYTHON 软件包

f。将目录更改为 site-packages\xgboost\python-package

克。输入 python setup.py install

  • 这输出几十行:运行宁这个,创建那个,写入和读取和复制等

  • 我还有几行"warning: no files found matching ..."。

  • 大概在接下来的更多写作、安装、运行宁、创建、复制、字节编译、删除、处理、提取、添加和搜索

  • 最后一行读作"Finished processing dependencies for xgboost==0.71"

此时我可以在 jupyter notebook 中导入和使用 xgboost,所以我没有采取任何进一步的步骤。但是,我遵循的说明(上面的链接)包含您可能认为必要的其他步骤。如果您在我的过程中看到任何错误,请告诉我,因为我仍然怀疑我的安装不受以后更新问题的影响(例如,该目录似乎在多个地方包含相同文件的副本)。

下面是安装目录的几个屏幕截图: