gunicorn初探

1、Gunicorn初探初探Robby Zhou WSGIl WSGI，全称 Web Server Gateway Interface，或者 Python Web Server Gateway Interface ，是为 Python 语言定义的 Web 服务器和 Web 应用程序或框架之间的一种简单而通用的接口。l WSGI 是作为 Web 服务器与 Web 应用程序或应用框架之间的一种低级别的接口，以提升可移植 Web 应用开发的共同点。WSGI 是基于现存的 CGI 标准而设计的。l 很多框架都自带了 WSGI server ，比如 Flask，webpy，Django、CherryPy等等

2、。当然性能都不好，自带的 web server 更多的是测试用途，发布时则使用生产环境的 WSGI server或者是联合 nginx 做 uwsgi 。 WSGI的作用的作用l WSGI有两方：“服务器”或“网关”一方，以及“应用程序”或“应用框架”一方。服务方调用应用方，提供环境信息，以及一个回调函数（提供给应用程序用来将消息头传递给服务器方），并接收Web内容作为返回值。l 所谓的 WSGI中间件同时实现了API的两方，因此可以在WSGI服务和WSGI应用之间起调解作用：从WSGI服务器的角度来说，中间件扮演应用程序，而从应用程序的角度来说，中间件扮演服务器。 Whats Gunicor

3、nlGunicorn()是一个 Python WSGI UNIX 的 HTTP 服务器, 是基于”pre-fork worker”模型，从 Ruby 的独角兽（Unicorn）项目移植。l Gunicorn 服务器与各种 Web 框架兼容，只需非常简单的执行，轻量级的资源消耗，以及相当迅速。 Gunicorn的特点的特点l 支持 Django，paster，wsgi程序l 非常容易配置（相比较而言）l 自动管理多个worker进程l 可以采用不同的后台扩展接口（sync, gevent, tornado等）l 原生并发访问性能不高，与 uWSGI， Bjoern等有一定

4、的性能差距l HA的方案还不够完善 Gunicorn的设计的设计l Gunicorn是基于”pre-fork worker”模型，这就意味着有一个中心主控master进程，由它来管理一组worker进程l Worker进程可以支持不同的IO方式（sync, gevent, eventlet, tornado, meinheld 等） Gunicorn的的源码结构l 从 Application.run() 开始，首先初始化配置，从文件读取，终端读取等等方式完成 configurate。然后启动 Arbiter，Arbiter 是实质上的 master 进程的核心，它首先从配置类中读取并设置，然后

5、初始化信号处理函数，建立 socket。然后就是开始 spawn 工作进程，根据配置的工作进程数进行 spawn。然后就进入了轮询状态，收到信号，处理信号然后继续。这里唤醒进程的方式是建立一个 PIPE，通过信号处理函数往 pipe 里 write，然后 master 从 select.select() 中唤醒。l 工作进程在 spawn 后，开始初始化，然后同样对信号进行处理，并且开始轮询，处理 HTTP 请求，调用 WSGI 的应用端，得到 resopnse 返回。然后继续。 Geventl Gevent是一种基于协程的Python网络库，它用到Greenlet提供的协 程，封装了libe

6、vent事件循环的高层同步APIl Gevent实现了WSGI，可以很方便的当作python的web server服务 器使用 Gevent的优点的优点l Gevent最明显的特征就是它惊人的性能，尤其是当与传统线程解决方案对比的时候。在这一点上，当负载超过一定程度的时候，异步I/O的性能会大大的优于基于独立线程的同步I/O这几乎是常识了。l Gevent提供了看上去非常像传统的基于线程模型编程的接口，但是在隐藏在下面做的是异步I/O。更妙的是，它使得这一切透明。你可以继续使用这些普通的Python模块，比如用urllib2去处理HTTP请求，它会用Gevent替换那些普通的阻塞的Socket

7、操作。 Gevent的性能的性能 Gevent的不足之处的不足之处l Gevent不能支持多进程。这意味着如果你要完全用到多核，你需要在多个端口上运行多个监听进程。可能需要运行类似于Nginx的东西去在这些服务监听进程中分发请求。l 国内使用得比较少，相关资料比较匮乏。 Meinheldl Meinheld 是一个高性能的兼容WSGI的web服务器，其有效利用了 greenlet和picoev的优势，能够以一种轻量级的方式支持异步网络IO Meinheld的特点的特点l 并发性能好，基本可以接近nginxl 能够很好地支持gunicornl HTTP协议的完善支持l 相关资料比较少，国内外成熟使用案例较少 几种流行的几种流行的Web Server压力测试对比压力测试对比l hello world输出l ab c 100 n 100000 Gunicorn的几种的几种worker模式性能模式性能l sync 同步IO，性能较差l