Runtime.ImportModuleError: Unable to import module 'lambda_function': No module named 'httplib2'

Question

我已经安装了所有这些库：

google-api-core 1.22.1
google-api-python-client 1.10.0
google-auth 1.20.1
google-auth-httplib2 0.0.4
google-auth-oauthlib 0.4.1
google-cloud 0.34.0
google-cloud-core 1.4.1
google-cloud-storage 1.31.0
google-crc32c 1.0.0
google-resumable-media 1.0.0
googleapis-common-protos 1.52.0
httplib2 0.18.1

到文件夹 --> 压缩 --> 上传到 AWS lambda 的层。然而，我一直在得到 [ERROR] Runtime.ImportModuleError: Unable to import module 'lambda_function': No module named 'httplib2' 甚至认为当我运行我的 pyhon 文件在本地并且这样的库在环境中时我在调用 import httplib2 后没有收到任何错误。注意：所有其他库都适用于 lambda，因此我的上传过程应该是正确的。

Answer 1

您可以使用您的包创建 Lambda custom layer。

为了检查这个解决方案，我创建了这样一个层，可以确认它有效。

使用的技术包括 docker 工具 在最近的 AWS 博客:

中描述

How do I create a Lambda layer using a simulated Lambda environment with Docker?

所以对于这个问题，我验证如下：

创建空文件夹，例如mylayer.
转到文件夹并创建 requirements.txt 文件，内容为

google-api-core==1.22.1
google-api-python-client==1.10.0
google-auth==1.20.1
google-auth-httplib2==0.0.4
google-auth-oauthlib==0.4.1
google-cloud==0.34.0
google-cloud-core==1.4.1
google-cloud-storage==1.31.0
google-crc32c==1.0.0
google-resumable-media==1.0.0
googleapis-common-protos==1.52.0
httplib2==0.18.1

运行以下 docker 命令：

docker run -v "$PWD":/var/task "lambci/lambda:build-python3.8" /bin/sh -c "pip install -r requirements.txt -t python/lib/python3.8/site-packages/; exit"

将图层创建为 zip：

zip -r -9 mylayer.zip python

在 AWS 控制台中基于 mylayer.zip 创建 lambda 层。不要忘记将 Compatible runtimes 指定为 python3.8.
使用以下 lambda 函数在 lambda 中测试层：

import httplib2

def lambda_handler(event, context):
    # TODO implement
    print(dir(httplib2))
    return

函数正确执行：

['AUTH_SCHEME_CLASSES', 'AUTH_SCHEME_ORDER', 'AllHosts', 'Authentication', 'BasicAuthentication', 'CA_CERTS', 'Credentials', 'DEFAULT_MAX_REDIRECTS', 'DEFAULT_TLS_VERSION', 'DigestAuthentication', 'FailedToDecompressContent', 'FileCache', 'GoogleLoginAuthentication', 'HOP_BY_HOP', 'HTTPConnectionWithTimeout', 'HTTPSConnectionWithTimeout', 'HmacDigestAuthentication', 'Http', 'HttpLib2Error', 'HttpLib2ErrorWithResponse', 'KeyCerts', 'MalformedHeader', 'NORMALIZE_SPACE', 'ProxiesUnavailableError', 'ProxyInfo', 'REDIRECT_CODES', 'RETRIES', 'RedirectLimit', 'RedirectMissingLocation', 'RelativeURIError', 'Response', 'SAFE_METHODS', 'SCHEME_TO_CONNECTION', 'ServerNotFoundError', 'UNQUOTE_PAIRS', 'URI', 'USE_WWW_AUTH_STRICT_PARSING', 'UnimplementedDigestAuthOptionError', 'UnimplementedHmacDigestAuthOptionError', 'WWW_AUTH_RELAXED', 'WWW_AUTH_STRICT', 'WsseAuthentication', '_', '__all__', '__author__', '__builtins__', '__cached__', '__contributors__', '__copyright__', '__doc__', '__file__', '__license__', '__loader__', '__name__', '__package__', '__path__', '__spec__', '__version__', '_bind_write_headers', '_build_ssl_context', '_cnonce', '_convert_byte_str', '_decompressContent', '_entry_disposition', '_get_end2end_headers', '_md5', '_normalize_headers', '_parse_cache_control', '_parse_www_authenticate', '_sha', '_updateCache', '_wsse_username_token', 'base64', 'calendar', 'certs', 'copy', 'debuglevel', 'email', 'errno', 'gzip', 'has_timeout', 'header', 'hmac', 'http', 'io', 'iri2uri', 'os', 'parse_uri', 'proxy_info_from_environment', 'proxy_info_from_url', 'random', 're', 're_unsafe', 're_url_scheme', 'safename', 'socket', 'socks', 'ssl', 'sys', 'time', 'urllib', 'urlnorm', 'zlib']

Runtime.ImportModuleError: Unable to import module 'lambda_function': No module named 'httplib2'

Runtime.ImportModuleError: Unable to import module 'lambda_function': No module named 'httplib2'

python

google-api

amazon-web-services

aws-lambda

aws-lambda-layers