如何为异步 gunicorn worker 使用 eventlet 库
How to use eventlet library for async gunicorn workers
我的一个 django 项目是使用 ansible(gunicorn 和 nginx) 部署的。下面是 gunicorn 配置:
bind = '127.0.0.1:8001'
backlog = 2048
workers = 8
worker_class = 'sync'
worker_connections = 1000
timeout = 300
keepalive = 2
spew = False
daemon = False
pidfile = None
umask = 0
user = None
group = None
tmp_upload_dir = None
loglevel = 'info'
errorlog = '/var/log/error.log'
accesslog = '/var/log/access.log'
proc_name = None
def pre_fork(server, worker):
pass
def pre_exec(server):
server.log.info("Forked child, re-executing.")
def when_ready(server):
server.log.info("Server is ready. Spawning workers")
def worker_int(worker):
worker.log.info("worker received INT or QUIT signal")
## get traceback info
import threading, sys, traceback
id2name = dict([(th.ident, th.name) for th in threading.enumerate()])
code = []
for threadId, stack in sys._current_frames().items():
code.append("\n# Thread: %s(%d)" % (id2name.get(threadId,""),
threadId))
for filename, lineno, name, line in traceback.extract_stack(stack):
code.append('File: "%s", line %d, in %s' % (filename,
lineno, name))
if line:
code.append(" %s" % (line.strip()))
worker.log.debug("\n".join(code))
def worker_abort(worker):
worker.log.info("worker received SIGABRT signal")
工作进程正在同步 运行。我希望他们同时 运行 因为我在这台服务器上每分钟有很多请求。在研究中我发现我可以使用 python 像 eventlet
这样的库,它使用 greenthreads 作为 concurrency.For 我需要改变 worker_class 到 eventlet 为:
worker_class = eventlet
可是我现在一头雾水。我不知道如何为这个项目实现异步绿色线程。可能这是一个愚蠢的问题,但我真的需要一些帮助。
提前致谢。
您已经完成了所需的一切。 worker_class = eventlet
或 gunicorn -k eventlet
足以并发 运行 个 HTTP 请求处理程序。然后你可以在它们的处理程序中使用 sleep 或 IO 服务许多并发请求。
首先,您需要安装软件包
pip install gunicorn[eventlet]
然后,将 worker_class 更改为 eventlet
我的一个 django 项目是使用 ansible(gunicorn 和 nginx) 部署的。下面是 gunicorn 配置:
bind = '127.0.0.1:8001'
backlog = 2048
workers = 8
worker_class = 'sync'
worker_connections = 1000
timeout = 300
keepalive = 2
spew = False
daemon = False
pidfile = None
umask = 0
user = None
group = None
tmp_upload_dir = None
loglevel = 'info'
errorlog = '/var/log/error.log'
accesslog = '/var/log/access.log'
proc_name = None
def pre_fork(server, worker):
pass
def pre_exec(server):
server.log.info("Forked child, re-executing.")
def when_ready(server):
server.log.info("Server is ready. Spawning workers")
def worker_int(worker):
worker.log.info("worker received INT or QUIT signal")
## get traceback info
import threading, sys, traceback
id2name = dict([(th.ident, th.name) for th in threading.enumerate()])
code = []
for threadId, stack in sys._current_frames().items():
code.append("\n# Thread: %s(%d)" % (id2name.get(threadId,""),
threadId))
for filename, lineno, name, line in traceback.extract_stack(stack):
code.append('File: "%s", line %d, in %s' % (filename,
lineno, name))
if line:
code.append(" %s" % (line.strip()))
worker.log.debug("\n".join(code))
def worker_abort(worker):
worker.log.info("worker received SIGABRT signal")
工作进程正在同步 运行。我希望他们同时 运行 因为我在这台服务器上每分钟有很多请求。在研究中我发现我可以使用 python 像 eventlet
这样的库,它使用 greenthreads 作为 concurrency.For 我需要改变 worker_class 到 eventlet 为:
worker_class = eventlet
可是我现在一头雾水。我不知道如何为这个项目实现异步绿色线程。可能这是一个愚蠢的问题,但我真的需要一些帮助。
提前致谢。
您已经完成了所需的一切。 worker_class = eventlet
或 gunicorn -k eventlet
足以并发 运行 个 HTTP 请求处理程序。然后你可以在它们的处理程序中使用 sleep 或 IO 服务许多并发请求。
首先,您需要安装软件包
pip install gunicorn[eventlet]
然后,将 worker_class 更改为 eventlet