如何使用 pip 处理 python 应用程序的 C 扩展？

Question

对于使用 pip 安装的 python 应用程序，您如何自动处理它们的 C 扩展要求？

例如，mysqlclient 模块需要在系统上安装 MySQL 的开发库。当您最初安装需要该模块的应用程序时，如果 MySQL 开发库不在系统上，它将失败。所以问题是我该如何解决这个问题？

有没有我不知道的 setup.py 解决这个问题的方法？
如果不是，我是否应该使用纯 python 模块实现？

注意；我不是寻找像“只是使用py2exe”这样的答案。

Answer 1

So the question is how do I solve this?

无论如何你都没有解决这个问题。在 setup.py 中，没有任何方法可以描述 python 生态系统之外的外部依赖关系。只需在自述文件中提供即可。

Answer 2

否。除非您正在编写 extension. Even in that case, you'll need to specify all .c files in ext_modules 以便它们都可以作为构建过程的一部分进行编译，否则无法将完全独立的 C 库作为构建过程的一部分，我知道不是你想要的。

如果mysql-devel（或lib mysqlclient-dev) 尚未安装。

了解 mysql-dev 是否安装的一种方法是编写一个简单的 C 函数导入 mysql.h 并检查它是否编译成功。

注意： mysql.h 和 my_global.h 是 libmysqlclient-dev 包的一部分。

test/test_mysqlclient.c

// Taken from: http://zetcode.com/db/mysqlc

#include <my_global.h>
#include <mysql.h>

int main(int argc, char **argv)
{
  printf("MySQL client version: %s\n", mysql_get_client_info());
  exit(0);
}

其次，让我们更新 setup.py 文件，以便将其作为构建过程的一部分包含在内。

setup.py

#!/usr/bin/env python

import os
import subprocess

from setuptools import setup, Extension

def mysql_test_extension():
    process = subprocess.Popen(['which', 'mysql_config'],
                               stdout=subprocess.PIPE,
                               stderr=subprocess.PIPE,
                               close_fds=True)

    result, error = process.communicate()
    if process.returncode > 0:
        raise RuntimeError(error)

    config_command = result.strip()

    cflags = subprocess.check_output([config_command, '--cflags'], close_fds=True).strip()

    include_dirs = []
    extra_compile_args = []
    for arg in cflags.split(' '):
        if not arg.strip():
            continue
        elif arg.startswith('-I'):
            include_dirs.append(arg[2:])
        elif arg.startswith('-'):
            extra_compile_args.append(arg)
        else:
            extra_compile_args[-1] = extra_compile_args[-1] + ' ' + arg

    libs = subprocess.check_output([config_command, '--libs'], close_fds=True).strip()

    libraries = []
    linkers = []
    for arg in libs.split(' '):
        if not arg.strip():
            continue
        elif arg.startswith('-L'):
            libraries.append(arg[2:])
        elif arg.startswith('-'):
            linkers.append(arg)
        else:
            linkers[-1] = extra_compile_args[-1] + ' ' + arg

    return Extension('test_mysqlclient', ['test/test_mysqlclient.c'],
                     include_dirs=include_dirs,
                     library_dirs=libraries,
                     extra_link_args=linkers,
                     extra_compile_args=extra_compile_args)



setup(name='python-project',
      version='1.0',
      description='Python Project',
      classifiers=[
          'Development Status :: 5 - Production/Stable',
          'Environment :: Console',
          'Intended Audience :: Developers',
          'License :: OSI Approved :: MIT License',
          'Operating System :: OS Independent',
          'Programming Language :: Python :: 2.7',
          'Natural Language :: English',
      ],
      keywords='mysql python project',
      author='Ozgur Vatansever',
      url='http://github.com/ozgur/python-project/',
      license='MIT',
      packages=['some_project'],
      ext_modules = [mysql_test_extension()]
)

您可以开始构建您的软件包以及 test_mysqlclient 文件：

$ python setup.py build

如果 mysql-devel 没有安装在你的系统上，你会得到类似这样的构建错误：

test/test_mysqlclient.c:3:10: fatal error: 'my_global.h' file not found
#include <my_global.h>
     ^
1 error generated.

如何使用 pip 处理 python 应用程序的 C 扩展？

How to handle C extensions for python apps with pip?

python

deployment