Django项目部署（nginx+uWSGI+django+virtualenv+supervisor发布web服务器）

时间 2019-11-13

标签 django 项目部署 nginx+uwsgi+django+virtualenv+supervisor nginx uwsgi virtualenv supervisor 发布 web 服务器栏目 Python 繁體版

原文原文链接

1、简介

WSGI是Web服务器网关接口。它是一个规范，描述了Web服务器如何与Web应用程序通讯，以及Web应用程序如何连接在一块儿以处理一个请求，（接收请求，处理请求，响应请求）
基于wsgi运行的框架有bottle,DJango,Flask,用于解析动态HTTP请求
支持WSGI的服务器
    wsgiref
        python自带的web服务器
    Gunicorn
        用于linux的 python wsgi Http服务器，经常使用于各类django，flask结合部署服务器。
    mode_wsgi
        实现了Apache与wsgi应用程序的结合
    uWSGI
        C语言开发，快速，自我修复，开发人员友好的WSGI服务器，用于Python Web应用程序的专业部署和开发。

在部署python程序web应用程序时，能够根据性能的需求，选择合适的wsgi server，不一样的wsgi server区别在于并发支持上，有单线程，多进程，多线程，协程的区别，其功能仍是近似，无非是请求路由，执行对应的函数，返回处理结果。


Django部署

Django的主要部署平台是 WSGI，这是用于Web服务器和应用程序的Python标准。

Django的 startproject管理命令设置一个简单的默认WSGI配置，能够根据须要为您的项目进行调整，并指示任何符合WSGI的应用程序服务器使用。

application 
使用WSGI部署的关键概念是应用程序服务器用于与代码通讯的 application 可调用。它一般在服务器可访问的Python模块中做为名为 application 的对象提供。

startproject 命令建立包含这样的 application 可调用的文件 <project_name>/wsgi.py. ，它被Django的开发服务器和生产WSGI部署使用。
WSGI服务器从其配置中获取 application 可调用的路径。 Django的内置服务器，即 runserver 命令，从 WSGI_APPLICATION 设置读取它。

uwsgi 
    django默认启动 python  manager.py  runserver  它调用wsgiref单机web服务器模块，性能不好
    在线上启动django项目，选择的是 uWSGI + django  ,使用多进程高性能的web服务器运行，支持并发性更好
    
nginx
        1.由于nginx处理并发的良好性
        2.nginx对静态文件处理的良好性
        3.nginx负载均衡的一个做用

supervisor
            1、不在经过命令行的方式，启动项目
            2、进行进程管理（python、mysql、redis、nginx）
            3、经过supervisr统一化管理linux进程
            4、检测到你服务挂了，自动重启

重点标记：
 django建立时，会产生wsgi.py文件
 mysite/mysite/wsgi.py 
  #wsgi.py产生的application应用
  application = get_wsgi_application()
 可能出现的坑：
  1. no  application  xxxxxx   这个问题就是说，你指定的wsgi.py文件不正确

为何要用nginx,uwsgi？html

1 首先nginx 是对外的服务接口，外部浏览器经过url访问nginx,

2nginx 接收到浏览器发送过来的http请求，将包进行解析，分析url，若是是静态文件请求就直接访问用户给nginx配置的静态文件目录，直接返回用户请求的静态文件，

若是不是静态文件，而是一个动态的请求，那么nginx就将请求转发给uwsgi,uwsgi 接收到请求以后将包进行处理，处理成wsgi能够接受的格式，并发给wsgi,wsgi 根据请求调用应用程序的某个文件，某个文件的某个函数，最后处理完将返回值再次交给wsgi,wsgi将返回值进行打包，打包成uwsgi可以接收的格式，uwsgi接收wsgi 发送的请求，并转发给nginx,nginx最终将返回值返回给浏览器。

3要知道第一级的nginx并非必须的，uwsgi彻底能够完成整个的和浏览器交互的流程，可是要考虑到某些状况

1 安全问题，程序不能直接被浏览器访问到，而是经过nginx,nginx只开放某个接口，uwsgi自己是内网接口，这样运维人员在nginx上加上安全性的限制，能够达到保护程序的做用。

2负载均衡问题，一个uwsgi极可能不够用，即便开了多个work也是不行，毕竟一台机器的cpu和内存都是有限的，有了nginx作代理，一个nginx能够代理多台uwsgi完成uwsgi的负载均衡。

3静态文件问题，用django或是uwsgi这种东西来负责静态文件的处理是很浪费的行为，并且他们自己对文件的处理也不如nginx好，因此整个静态文件的处理都直接由nginx完成，静态文件的访问彻底不去通过uwsgi以及其后面的东西。

nginx、WSGI、uwsgi、uWSGI、django关系？python

wsgi    全称web server gateway interface，wsgi不是服务器，也不是python模块，只是一种协议，描述web server如何和web application通讯的规则。
运行在wsgi上的web框架有bottle，flask，django

uwsgi    和wsgi同样是通讯协议，是uWSGI服务器的单独协议，用于定义传输信息的类型

uWSGI    是一个web服务器，实现了WSGI协议，uwsgi协议。a

nginx    web服务器，更加安全，更好的处理处理静态资源，缓存功能，负载均衡，所以nginx的强劲性能，配合uWSGI服务器会更加安全，性能有保障。

django 高级的python web框架，用于快速开发，解决web开发的大部分麻烦，程序员能够更专一业务逻辑，无须从新造轮子

2、Django Nginx+uwsgi 安装配置

在前面的章节中咱们使用 python manage.py runserver 来运行服务器。这只适用测试环境中使用。mysql

正式发布的服务，须要一个能够稳定而持续的服务器。linux

一、基础开发环境配置nginx

yum groupinstall "Development tools"
yum install zlib-devel bzip2-devel pcre-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel

二、提早安装好python3环境程序员

三、virtualenv，请确保你的虚拟环境正常工做web

四、安装django1.11面试

pip3 install django==1.11
#建立django项目mysite
django-admin startproject mysite
#建立app01
python3 manage.py startapp app01

#settings.py设置
ALLOWED_HOSTS = ['*']
install app01

mysite/settings.py

from app01 import views
urlpatterns = [
    url(r'^admin/', admin.site.urls),
    url(r'^hello_django/', views.hello),
]

mysite/urls.py

from django.shortcuts import render,HttpResponse

# Create your views here.
def hello(request):
    print('request is :',request)
    return HttpResponse('django is ok ')

View Code

五、安装uWSGIredis

进入虚拟环境venv，安装uwsgi
(venv) [root@slave 192.168.11.64 /opt]$pip3 install uwsgi
检查uwsgi版本
(venv) [root@slave 192.168.11.64 /opt]$uwsgi --version
2.0.17.1
#检查uwsgi python版本
uwsgi --python-version

运行简单的uWSGIsql

#启动一个python
uwsgi --http :8000 --wsgi-file test.py
http :8000: 使用http协议，端口8000
wsgi-file test.py: 加载指定的文件，test.py
#test.py
def application(env, start_response):
    start_response('200 OK', [('Content-Type','text/html')])
    return [b"Hello World"] # python3

uWsgi热加载python程序：

在启动命令后面加上参数
uwsgi --http :8088 --module mysite.wsgi --py-autoreload=1 
#发布命令
command= /home/venv/bin/uwsgi --uwsgi 0.0.0.0:8000 --chdir /opt/mysite --home=/home/venv --module mysite.wsgi
#此时修改django代码，uWSGI会自动加载django程序，页面生效

运行django程序：

#mysite/wsgi.py  确保找到这个文件
uwsgi --http :8000 --module mysite.wsgi
module mysite.wsgi: 加载指定的wsgi模块

uwsgi配置文件：

# mysite_uwsgi.ini file
[uwsgi]

# Django-related settings
# the base directory (full path)
#项目工做目录，绝对路径，找到第一层
chdir           = /opt/mysite
# Django's wsgi file
#指定wsgi.py文件路径
module          = mysite.wsgi
# the virtualenv (full path)
#指定虚拟解释器的工做目录
home            = /root/Envs/nginx_uswgi
# process-related settings
# master
#uswgi的主进程
master          = true
# maximum number of worker processes
#启动uswgi的进程数
processes       = 5

#不适用nginx反向代理的时候，uwsgi经过http启动一个web服务
http=0.0.0.0:8888

#使用nginx反向代理，不能使用http协议，此时用socket一个链接启动uwsgi


# the socket (use the full path to be safe
#socket          = 0.0.0.0:8000
# ... with appropriate permissions - may be needed
# chmod-socket    = 664
# clear environment on exit
vacuum          = true

指定配置文件启动命令：

uwsgi --ini  /etc/uwsgi_nginx.ini

3、nginx

详细：https://www.cnblogs.com/pyyu/p/9468680.html

一、nginx是什么？

nginx是一个开源的，支持高性能，高并发的www服务和代理服务软件。它是一个俄罗斯人lgor sysoev开发的，做者将源代码开源出来供全球使用。
nginx比它大哥apache性能改进许多，nginx占用的系统资源更少，支持更高的并发链接，有更高的访问效率。
nginx不可是一个优秀的web服务软件，还能够做为反向代理，负载均衡，以及缓存服务使用。
安装更为简单，方便，灵活。
nginx能够说是很是nb了

面试回答nginx技巧：

支持高并发，能支持几万并发链接
资源消耗少，在3万并发链接下开启10个nginx线程消耗的内存不到200M
能够作http反向代理和负载均衡
支持异步网络i/o事件模型epoll

二、为何要使用nginx？

nginx 
    1.由于nginx处理并发的良好性、
    2.nginx对静态文件处理的良好性
        备注：由于uwsgi启动django项目，不会读取一个静态文件的配置参数
    3.nginx负载均衡的一个做用

三、安装配置nginx

一个远程传输工具：yum install lrzsz -y
　　经常使用命令：
　　　　sz #send 传输文件
　　　　rz #接收文件

1.yum install epel-*  -y
    yum install nginx -y  
       

    #须要提早备好epel源
    #检测nginx是否安装成功 
        rpm -qi nginx
    
    
    2.启动nginx web服务器
    /usr/sbin/nginx  启动nginx web服务

    3.配置nginx.conf配置反向代理uwsgi，以及静态资源处理
    若是找不到nginx.conf ，经过命令查找
        find / -name nginx.conf
    
    若是找不到uwsgi_params路径，能够经过如下命名查找
        find / -name uwsgi_params
        /etc/nginx/uwsgi_params
    
        vim /etc/nginx/nginx.conf
    
            location / {
                 include /etc/nginx/uwsgi_params;
                 uwsgi_pass 0.0.0.0:8000;
        }
        #静态资源入口
            location /static {
                  alias /opt/static/;
                }
            }
            
        而后在项目的uwsgi.ini文件中注释http，打开socket
            #不适用nginx反向代理的时候，uwsgi经过http启动一个web服务
            #http=0.0.0.0:8888

            #使用nginx反向代理，不能使用http协议，此时用socket一个链接启动uwsgi
            # the socket (use the full path to be safe
            socket          = 0.0.0.0:8000

        修改项目下的settings.py文件
            DEBUG = False


    
            
    4.修改完，重启nginx
    /usr/bin/nginx -s  reload 
    

配置项目的静态文件资源，经过nginx加载
    1.修改django的setings.py文件

    mysite/settings.py 
    加入如下信息
        #指定静态文件存放路径
        STATIC_ROOT='/opt/static'
        #指定静态资源，请求入口
        STATIC_URL = '/static/'
        STATICFILES_DIRS=[
            os.path.join(BASE_DIR,"static"),
        ]

    2.经过命令收集静态文件资源
        python3 manage.py collectstatic 收集全部你使用的静态文件保存到STATIC_ROOT！
        
    3.此时static_root下有了全部项目的静态资源
    
    4.  vim /etc/nginx/nginx.conf
        location /static {
            alias /opt/static/;
        }

4、supervisor

supervisor 是基于 python 的任务管理工具，用来自动运行各类后台任务，固然你也能直接利用 nohup 命令使任务自动后台运行，但若是要重启任务，每次都本身手动 kill 掉任务进程，这样很繁琐，并且一旦程序错误致使进程退出的话，系统也没法自动重载任务。

因为supervisor在python3下没法使用，所以只能用python2去下载！！！！！！

#注意此时已经退出虚拟环境了！！！！！
yum install python-setuptools
easy_install supervisor

经过命令生成supervisor的配支文件

echo_supervisord_conf > /etc/supervisord.conf

而后再/etc/supervisord.conf末尾添加上以下代码！！！！！！

supervisord.conf配置文件参数解释
[program:xx]是被管理的进程配置参数，xx是进程的名称
[program:xx]
command=/opt/apache-tomcat-8.0.35/bin/catalina.sh run  ; 程序启动命令
autostart=true       ; 在supervisord启动的时候也自动启动
startsecs=10         ; 启动10秒后没有异常退出，就表示进程正常启动了，默认为1秒
autorestart=true     ; 程序退出后自动重启,可选值：[unexpected,true,false]，默认为unexpected，表示进程意外杀死后才重启
startretries=3       ; 启动失败自动重试次数，默认是3
user=tomcat          ; 用哪一个用户启动进程，默认是root
priority=999         ; 进程启动优先级，默认999，值小的优先启动
redirect_stderr=true ; 把stderr重定向到stdout，默认false
stdout_logfile_maxbytes=20MB  ; stdout 日志文件大小，默认50MB
stdout_logfile_backups = 20   ; stdout 日志文件备份数，默认是10
; stdout 日志文件，须要注意当指定目录不存在时没法正常启动，因此须要手动建立目录（supervisord 会自动建立日志文件）
stdout_logfile=/opt/apache-tomcat-8.0.35/logs/catalina.out
stopasgroup=false     ;默认为false,进程被杀死时，是否向这个进程组发送stop信号，包括子进程
killasgroup=false     ;默认为false，向进程组发送kill信号，包括子进程

在配置文件中，添加任务，管理django项目
    vim /etc/supervisord.conf #写入信息
    
    [program:s21_django]
    #管理uwsgi的命令， 轻使用绝对路径
    command=/root/Envs/nginx_uwsgi/bin/uwsgi  --ini /home/mysite/uwsgi.ini
    #检测项目是否挂掉，自动重启
    autorestart=true

最后启动supervisor，完成uWSGI启动django，nginx反向代理

supervisord -c /etc/supervisord.conf #启动supervisor
supervisorctl -c /etxc/supervisord.conf restart my  #重启my项目
supervisorctl -c /etc/supervisord.conf [start|stop|restart] [program-name|all]

管理supervisor的命令

1、添加好配置文件后

2、更新新的配置到supervisord    

supervisorctl update
3、从新启动配置中的全部程序

supervisorctl reload
4、启动某个进程(program_name=你配置中写的程序名称)

supervisorctl start program_name
5、查看正在守候的进程

supervisorctl
6、中止某一进程 (program_name=你配置中写的程序名称)

pervisorctl stop program_name
7、重启某一进程 (program_name=你配置中写的程序名称)

supervisorctl restart program_name
8、中止所有进程

supervisorctl stop all
注意：显示用stop中止掉的进程，用reload或者update都不会自动重启

5、运行一个Django项目

一、使用virtualenv

1）把Django项目放在服务器的指定目录中；

2）修改settings.py文件

ALLOWED_HOSTS = ['*']

修改数据库驱动

DATABASES = {
    'default': {
        'ENGINE': 'django.db.backends.sqlite3',
        'NAME': os.path.join(BASE_DIR, 'db.sqlite3'),
    }
}

pip3 install pymysql 

__init__.py 文件中添加数据库驱动

import pymysql 
    pymysql.install()

3）建立虚拟环境

mkvirtualenv s21crm
cdvirtualenv

4）确认pip3和python3是否为虚拟环境下的

(s21crm) [root@localhost s21crm]# which pip3
/root/Envs/s21crm/bin/pip3
(s21crm) [root@localhost s21crm]# which python3
/root/Envs/s21crm/bin/python3

5）查看环境

(s21crm) [root@localhost s21crm]# pip3 list
Package    Version
---------- -------
pip        18.1   
setuptools 40.6.3 
wheel      0.32.3

6）若是没有安装Django环境，须要确认项目使用的Django版本，安装对应版本

pip3 install django==1.11.11

7）进入项目一级目录，运行server（记住关闭防火墙）

python3 manage.py runserver 0.0.0.0:7000

二、使用virtualenvwrapper

1）安装virtualenvwrapper

2）安装uwsgi

pip3 install uwsgi

3）启动项目

uwsgi --http :8001 --module s21crm.wsgi

4）安装nginx

which nginx #找到nginx所在路径
/usr/sbin/nginx #启动nginx

5）配置nginx.conf

# mysite_uwsgi.ini file
[uwsgi]

# Django-related settings
# the base directory (full path)
#项目工做目录，绝对路径，找到第一层
chdir           = /opt/s21crm
# Django's wsgi file
#指定wsgi.py文件路径
module          = s21crm.wsgi
# the virtualenv (full path)
#指定虚拟解释器的工做目录
home            = /root/Envs/s21crm
# process-related settings
# master
#uswgi的主进程
master          = true
# maximum number of worker processes
#启动uswgi的进程数
processes       = 5

#不适用nginx反向代理的时候，uwsgi经过http启动一个web服务
#http=0.0.0.0:8888

#使用nginx反向代理，不能使用http协议，此时用socket一个链接启动uwsgi


# the socket (use the full path to be safe
isocket          = 0.0.0.0:8000
# ... with appropriate permissions - may be needed
# chmod-socket    = 664
# clear environment on exit
vacuum          = true

6）修改settings.py文件

    加入如下信息
        #指定静态文件存放路径
        STATIC_ROOT='/opt/static'
        #指定静态资源，请求入口
        STATIC_URL = '/static/'
        STATICFILES_DIRS=[
            os.path.join(BASE_DIR,"static"),
        ]

7）经过命令收集静态文件资源

python3 manage.py collectstatic #收集全部你使用的静态文件保存到STATIC_ROOT！

8）进入项目一级目录，启动服务

uwsgi --ini uwsgi.ini

Django项目部署（nginx+uWSGI+django+virtualenv+supervisor发布web服务器 ）