在 Gunicorn 中使用 aiohttp 和 aiopg 时如何设置日志记录?
How do I setup logging when using aiohttp and aiopg with Gunicorn?
aiohttp
很棒,但是在使用 Gunicorn
.
时,在本地和生产环境中设置日志记录一直是一场噩梦
我找到的大多数用于设置日志记录的示例和文档都是针对 运行 在本机服务器模式下使用 make_handler()
按照文档中的建议,我使用 Gunicorn
作为要部署的 Web 服务器,因此我没有明确调用 make_handler
。
我没有看到 aiohttp.access 日志,也没有看到 aiohttp.server 日志,也没有看到 aiopg 日志,所有这些都应该默认设置
这是我在根级别中得到的 app.py
:
import logging
import aiopg
from aiohttp import web
async def some_handler(request):
id = request.match_info["id"]
# perform some SA query
return web.json_response({"foo": id})
async def close_postgres(app):
app['postgres'].close()
await app['postgres'].wait_closed
async def init(loop, logger, config):
app = web.Application(
loop=loop,
logger=logger
)
app['postgres'] = await aiopg.sa.create_engine(loop=loop, echo=True) # other args ommitted
app.on_cleanup.append(close_postgres)
app.router.add_route('GET', '/', some_handler, 'name')
return app
def run():
config = parse_yaml('config.yml') # => turns config.yml to dict
logging.config.dictConfig(config['logging'])
logger = logging.getLogger("api")
loop = asyncio.get_event_loop()
app = run_until_complete(init(loop, logger, config))
return app
我的config.yml文件
logging:
version: 1
formatters:
simple:
format: '[%(asctime)s] [%(process)d] [%(levelname)s] %(message)s'
datefmt: '%Y-%m-%d %H:%M:%S %z'
handlers:
console:
class: logging.StreamHandler
formatter: simple
level: DEBUG
stream: ext://sys.stdout
loggers:
api:
handlers:
- console
level: DEBUG
我使用以下命令启动 gunicorn:
gunicorn 'app:run()' --worker-class aiohttp.worker.GunicornWebWorker
无论我进行什么查询,我都只看到以下日志:
[2016-08-22 11:26:46 -0400] [41993] [INFO] Starting gunicorn 19.6.0
[2016-08-22 11:26:46 -0400] [41993] [INFO] Listening at: http://127.0.0.1:8000 (41993)
[2016-08-22 11:26:46 -0400] [41993] [INFO] Using worker: aiohttp.worker.GunicornWebWorker
[2016-08-22 11:26:46 -0400] [41996] [INFO] Booting worker with pid: 41996
我想要的:
- aiopg 日志(查询 运行)
- 访问日志
- 服务器日志
谢谢
文档最终不推荐使用 Gunicorn 进行部署,但有关于 运行在 Gunicorn 下部署的说明。
也许应该升级为访问记录器传递正确的格式。
从我的角度来看,运行 aiohttp 服务器最简单的方法就是 运行ning 它(通过使用 web.run_app()
处理程序或在其上构建自己的 运行ner ).
如果您需要多个 aiohttp 实例——在反向代理模式下使用 nginx(很可能您的工具链中已经有了它)并使用 supervisord 来控制服务器。
该组合无需中间层即可正常工作。就像人们开始龙卷风或扭曲。
aiohttp
很棒,但是在使用 Gunicorn
.
我找到的大多数用于设置日志记录的示例和文档都是针对 运行 在本机服务器模式下使用 make_handler()
按照文档中的建议,我使用 Gunicorn
作为要部署的 Web 服务器,因此我没有明确调用 make_handler
。
我没有看到 aiohttp.access 日志,也没有看到 aiohttp.server 日志,也没有看到 aiopg 日志,所有这些都应该默认设置
这是我在根级别中得到的 app.py
:
import logging
import aiopg
from aiohttp import web
async def some_handler(request):
id = request.match_info["id"]
# perform some SA query
return web.json_response({"foo": id})
async def close_postgres(app):
app['postgres'].close()
await app['postgres'].wait_closed
async def init(loop, logger, config):
app = web.Application(
loop=loop,
logger=logger
)
app['postgres'] = await aiopg.sa.create_engine(loop=loop, echo=True) # other args ommitted
app.on_cleanup.append(close_postgres)
app.router.add_route('GET', '/', some_handler, 'name')
return app
def run():
config = parse_yaml('config.yml') # => turns config.yml to dict
logging.config.dictConfig(config['logging'])
logger = logging.getLogger("api")
loop = asyncio.get_event_loop()
app = run_until_complete(init(loop, logger, config))
return app
我的config.yml文件
logging:
version: 1
formatters:
simple:
format: '[%(asctime)s] [%(process)d] [%(levelname)s] %(message)s'
datefmt: '%Y-%m-%d %H:%M:%S %z'
handlers:
console:
class: logging.StreamHandler
formatter: simple
level: DEBUG
stream: ext://sys.stdout
loggers:
api:
handlers:
- console
level: DEBUG
我使用以下命令启动 gunicorn:
gunicorn 'app:run()' --worker-class aiohttp.worker.GunicornWebWorker
无论我进行什么查询,我都只看到以下日志:
[2016-08-22 11:26:46 -0400] [41993] [INFO] Starting gunicorn 19.6.0
[2016-08-22 11:26:46 -0400] [41993] [INFO] Listening at: http://127.0.0.1:8000 (41993)
[2016-08-22 11:26:46 -0400] [41993] [INFO] Using worker: aiohttp.worker.GunicornWebWorker
[2016-08-22 11:26:46 -0400] [41996] [INFO] Booting worker with pid: 41996
我想要的:
- aiopg 日志(查询 运行)
- 访问日志
- 服务器日志
谢谢
文档最终不推荐使用 Gunicorn 进行部署,但有关于 运行在 Gunicorn 下部署的说明。
也许应该升级为访问记录器传递正确的格式。
从我的角度来看,运行 aiohttp 服务器最简单的方法就是 运行ning 它(通过使用 web.run_app()
处理程序或在其上构建自己的 运行ner ).
如果您需要多个 aiohttp 实例——在反向代理模式下使用 nginx(很可能您的工具链中已经有了它)并使用 supervisord 来控制服务器。
该组合无需中间层即可正常工作。就像人们开始龙卷风或扭曲。