• Linux 8 项目发布


    所需技术:nginx + virtualenvwrapper + supervisor + uWSGI + django + vue + mysql / mariadb + 阿里云服务器

    导论:

    WSGI是Web服务器网关接口。它是一个规范,描述了Web服务器如何与Web应用程序通信,以及Web应用程序如何链接在一起以处理一个请求,(接收请求,处理请求,响应请求)
    基于wsgi运行的框架有bottle,DJango,Flask,用于解析动态HTTP请求
    支持WSGI的服务器
        wsgiref
            python自带的web服务器
        Gunicorn
            用于linux的 python wsgi Http服务器,常用于各种django,flask结合部署服务器。
        mode_wsgi
            实现了Apache与wsgi应用程序的结合
        uWSGI
            C语言开发,快速,自我修复,开发人员友好的WSGI服务器,用于Python Web应用程序的专业部署和开发。
    
    在部署python程序web应用程序时,可以根据性能的需求,选择合适的wsgi server,不同的wsgi server区别在于并发支持上,有单线程,多进程,多线程,协程的区别,其功能还是近似,无非是请求路由,执行对应的函数,返回处理结果。
    
    
    
    
    Django部署
    
    Django的主要部署平台是 WSGI,这是用于Web服务器和应用程序的Python标准。
    
    Django的 startproject管理命令设置一个简单的默认WSGI配置,可以根据需要为您的项目进行调整,并指示任何符合WSGI的应用程序服务器使用。
    
    application 
    使用WSGI部署的关键概念是应用程序服务器用于与代码通信的 application 可调用。它通常在服务器可访问的Python模块中作为名为 application 的对象提供。
    
    startproject 命令创建包含这样的 application 可调用的文件 <project_name>/wsgi.py. ,它被Django的开发服务器和生产WSGI部署使用。
    WSGI服务器从其配置中获取 application 可调用的路径。 Django的内置服务器,即 runserver 命令,从 WSGI_APPLICATION 设置读取它。

    请求接受流程:

    1 首先nginx 是对外的服务接口,外部浏览器通过url访问nginx,
    
    2nginx 接收到浏览器发送过来的http请求,将包进行解析,分析url,如果是静态文件请求就直接访问用户给nginx配置的静态文件目录,直接返回用户请求的静态文件,
    
    如果不是静态文件,而是一个动态的请求,那么nginx就将请求转发给uwsgi,uwsgi 接收到请求之后将包进行处理,处理成wsgi可以接受的格式,并发给wsgi,wsgi 根据请求调用应用程序的某个文件,某个文件的某个函数,最后处理完将返回值再次交给wsgi,wsgi将返回值进行打包,打包成uwsgi能够接收的格式,uwsgi接收wsgi 发送的请求,并转发给nginx,nginx最终将返回值返回给浏览器。
    
    3要知道第一级的nginx并不是必须的,uwsgi完全可以完成整个的和浏览器交互的流程,但是要考虑到某些情况
    
    1 安全问题,程序不能直接被浏览器访问到,而是通过nginx,nginx只开放某个接口,uwsgi本身是内网接口,这样运维人员在nginx上加上安全性的限制,可以达到保护程序的作用。
    
    2负载均衡问题,一个uwsgi很可能不够用,即使开了多个work也是不行,毕竟一台机器的cpu和内存都是有限的,有了nginx做代理,一个nginx可以代理多台uwsgi完成uwsgi的负载均衡。
    
    3静态文件问题,用django或是uwsgi这种东西来负责静态文件的处理是很浪费的行为,而且他们本身对文件的处理也不如nginx好,所以整个静态文件的处理都直接由nginx完成,静态文件的访问完全不去经过uwsgi以及其后面的东西。

    区分:

    nginx是对外的服务器,对外只开辟一个接口,可以实现负载均衡、快速加载静态文件
    
    uWSGI也是服务器,负责把从nginx转发来的数据转换成符合wsgi规范的格式交给django
    
    wsgi是一种协议,规定了服务器和网络框架之间的通信规则
    
    uwsgi是基于wsgi的一种协议
    
    django是web开发框架,实现业务逻辑,处理数据

    uwsgi的安装使用:

    进入虚拟环境venv,安装uwsgi
    (venv) [root@slave 192.168.11.64 /opt]$pip3 install uwsgi
    检查uwsgi版本
    (venv) [root@slave 192.168.11.64 /opt]$uwsgi --version
    2.0.17.1
    #检查uwsgi python版本
    uwsgi --python-version

    运行简单的uwsgi:

    #启动一个python
    uwsgi --http :8000 --wsgi-file test.py
        http :8000: 使用http协议,端口8000
        wsgi-file test.py: 加载指定的文件,test.py
    #test.py
    def application(env, start_response):
        start_response('200 OK', [('Content-Type','text/html')])
        return [b"Hello World"] # python3

    uwsgi热加载django项目

    在启动命令后面加上参数
    uwsgi --http :8088 --module mysite.wsgi --py-autoreload=1 
    # uwsgi不处理static静态文件的配置
    #发布命令
    command= /home/venv/bin/uwsgi --uwsgi 0.0.0.0:8000 --chdir /opt/mysite --home=/home/venv --module mysite.wsgi
    #此时修改django代码,uWSGI会自动加载django程序,页面生效

    注意:uwsgi不加载静态文件!!!

    sipervisor的安装使用

    supervisor 是基于 python 的任务管理工具,用来自动运行各种后台任务,当然你也能直接利用 nohup 命令使任务自动后台运行,但如果要重启任务,每次都自己手动 kill 掉任务进程,这样很繁琐,而且一旦程序错误导致进程退出的话,系统也无法自动重载任务。

    由于supervisor在python3下无法使用,因此只能用python2去下载!!!!!!

    #注意此时已经退出虚拟环境了!!!!!
    yum install python-setuptools
    easy_install supervisor

    通过命令生成supervisor的配置文件:

    echo_supervisord_conf > /etc/supervisord.conf

    然后再/etc/supervisord.conf末尾添加上如下代码

    [program:s14nbcrm]
    #启动uwsgi的命令就是这个
    command=/root/Envs/nbcrm/bin/uwsgi --ini /opt/NB_crm/uwsgi.ini
    #自动启动uwsgi,挂了之后自动加载
    autorestart=true

    启动supervisor

    supervisord -c /etc/supervisord.conf #启动supervisor
    supervisorctl -c /etxc/supervisord.conf restart my  #重启my项目

    supervisorctl 直接回车,进入交互式管理状态

    也可以通过命令交互式的管理uwsgi
    #服务端启动后,通过命令管理软件

    supervisorctl start s14nbcrm
    supervisorctl stop s14nbcrm 
    supervisorctl status s14nbcrm

    项目发布示例:

    所需技术:nginx + virtualenvwrapper + supervisor + uWSGI + django + vue + mysql / mariadb + 阿里云服务器

    第一步、部署vue前端项目

    1、首先在本地对vue项目进行操作

    请注意,在vue中发送的所有请求地址都要修改成nginx接收的ip和port

    route的模式是history

    npm install  # 自动打包所有依赖包
    npm run build  # 生成一个dist文件夹,里面是打包好的vue,包涵一个static文件夹和一个index.html

    2、将dist文件夹上传到Linux下的/opt/my_projects

    3、在linux中下载node环境

    下载node二进制包,此包已经包含node,不需要再编译
    wget https://nodejs.org/download/release/v8.6.0/node-v8.6.0-linux-x64.tar.gz
    解压缩
    [root@web02 opt]# tar -zxvf node-v8.6.0-linux-x64.tar.gz
    [root@web02 opt]# cd node-v8.6.0-linux-x64/
    [root@web02 node-v8.6.0-linux-x64]# ./bin/node -v
    v8.6.0
    [root@web02 node-v8.6.0-linux-x64]# ./bin/npm -v
    5.3.0

    将node命令,添加至linux环境变量,修改/etc/profile,写入

    PATH=$PATH:/opt/node-v8.6.0-linux-x64/bin

    读取配置文件

    source /etc/profile

    测试:

    npm -v  # v8.6.0
    node -v  # 5.3.0

    4、配置nginx

    server {
       #用户访问域名或者ip,默认是nginx的80端口
            listen       80;
            server_name  60.205.225.178;
         #url匹配  /   也就是请求地址是192.168.119.12时,进入此location,返回vue的dist下index.html路飞学城首页
            location / {
            root /opt/my_projects/dist;
            index index.html index.htm;
    #这一条参数确保vue页面刷新时候,不会出现404页面
    try_files $uri $uri/ /index.html;
    } }

    第二步、开启数据库

    1、查看mysql编码格式

    进入mysql后输入命令:show variable like 'character%'  可以看到编码方式

     >show variables like 'character%';
    +--------------------------+----------------------------+
    | Variable_name | Value |
    +--------------------------+----------------------------+
    | character_set_client | latin1 |
    | character_set_connection | latin1 |
    | character_set_database | latin1 |
    | character_set_filesystem | binary |
    | character_set_results | latin1 |
    | character_set_server | latin1 |
    | character_set_system | utf8 |
    | character_sets_dir | /usr/share/mysql/charsets/ |
    +--------------------------+----------------------------+

    2、修改成中文编码

    1.退出mysql
    2.vim /etc/my.cnf
    3.将下面三句分别写到三个地方
    [client]
    default-character-set=utf8
    [mysqld]
    default-character-set=utf8
    [mysql]
    default-character-set=utf8

    3、删除之前创建的非中文编码数据库

    4、启动数据库并创建django项目需要的库

    system start mariadb
    mysql -uroot -p
    create database my_record_project

    第三步、构建虚拟环境

    1、创建虚拟环境

    mkvirtualenv Record_Project
    workon Record_Project

    2、安装python3、pip3

    1.下载源码包 
    wget https://www.python.org/ftp/python/3.6.7/Python-3.6.7.tar.xz
    2.解压源码包 
    xz -d Python-3.6.7.tar.xz 
    tar -xf Python-3.6.7.tar.xz 
    3.下载python3依赖包
    yum install gcc patch libffi-devel python-devel  zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel -y
    4.调用脚本文件
    ./configure --prefix=/opt/python36
    5.编译安装
    make && make install
    6.升级pip
    pip3 install --upgrade pip

    3、安装django程序需要的第三方库

    1.创建文本包含所有需要的第三方库
    touch requirement.txt
    Django==x.x.x
    djangorestframework==x.x.x
    ......
    2.递归安装
    pip3 install -r requirement.txt

    第四步、在虚拟环境中安装配置uwsgi

    1、安装

    进入虚拟环境venv,安装uwsgi
    (venv) [root@slave 192.168.11.64 /opt]$pip3 install uwsgi
    检查uwsgi版本
    (venv) [root@slave 192.168.11.64 /opt]$uwsgi --version
    2.0.17.1
    #检查uwsgi python版本
    uwsgi --python-version

    2、配置uwsgi

    1.手动创建/opt/my_projects/uwsgi.ini文件
    touch uwsgi.ini
    2.写入如下配置
    [uwsgi]
    #项目的绝对路径,定位到项目的第一层
    chdir           = /opt/record
    #指明项目的wsgi文件路径
    module          = record.wsgi
    #指明你的虚拟解释器的第一层路径
    home            = /root/envs/Record_Project
    #指明通过uwsgi,启动多少个进程
    processes       = 1
    
    #如果你已经配置了nginx(启动了nginx服务,配置了uwsgi_pass),请用这个socket连接
    #这个端口是用来接收vue发送给nginx,nginx转发给uwsgi的请求,然后uwsgi在转发给django socket
    = 0.0.0.0:9000 #如果你没用nginx,想通过uwsgi直接启动web服务,指明http协议 # http = 0.0.0.0:9999 #在退出uwsgi环境后,清空环境变量 vacuum = true
    3.通过配置文件启动(注意uwsgi不会处理静态文件,如果有,也是浏览器的缓存!!!!) uwsgi --ini /etc/uwsgi.ini

    第五步、部署django

    1、拷贝django程序到/opt/my_projects

    2、配置django

    ALLOWED_HOSTS = ['*']  # 允许所有主机访问
    DEBUG = False  # 不在网页出现报错信息
    
    STATIC_ROOT = '/opt/nginx1-12/conf/static'  # 用来收集静态资源

    3、创建static和media

    cd /opt/nginx1-12/conf
    mkdir static
    mkdir media

    4、收集静态资源

    cd /opt/my_projects/record
    python manage.py collectstatic

    5、清空django之前创建的数据库文件并重新创建表

    python manage.py flush
    再删除app的migrations文件夹下的文件
    python manage.py makemigrations
    python manage.py migrate

    第六步、配置nginx

    1、配置nginx配置文件

    worker_processes  1;
    
    events {
        worker_connections  1024;
    }
    
    
    http {
        include       mime.types;
        default_type  application/octet-stream;
        sendfile        on;
        keepalive_timeout  65;
        server {
            listen       80;
            server_name  60.205.227.178;
            location / {
            root /opt/my_projects/dist;
            index index.html;
          #这一条参数确保vue页面刷新时候,不会出现404页面
          try_files $uri $uri/ /index.html;
            }
            error_page   500 502 503 504  /50x.html;
            location = /50x.html {
               root   html;
            }
        }
    
        server {
            listen       8000;
            server_name  60.205.227.178;
            location / {
                uwsgi_pass 0.0.0.0:9000;  # 转发给uwsgi
                include /opt/nginx1-12/conf/uwsgi_params;
            }
            location /static {
                alias /opt/nginx1-12/conf/static;
            }
    location /media {
    alias /opt/nginx1-12/conf/media;
    } } }

    2、启动nginx

    cd /opt/nginx1-12/sbin
    ./nginx

    3、启动uwsgi

    cd /opt/my_projects
    uwsgi --ini uwsgi.ini

    大功告成啦!!!!但是注意,我使用的是阿里云服务器,服务器默认只开了80端口,所以8000端口是被墙的,需要在阿里云防火墙中添加规则:

     

  • 相关阅读:
    Redission 中 RPermitExpirableSemaphore 用法
    Linux查询CPU核数
    Http超时时间之SocketTimeout
    In Theano, how to do Reverse-MaxPooling in the Convolutional MaxPooling Auto-Encoder
    如何让Ubuntu中virtualbox虚拟机用上USB设备
    Deep Learning Stuffs(持续更新中……)
    实例描述如何用python组件ctypes调用c的dll中的函数
    放弃MATLAB!简述winpython为什么比MATLAB更方便
    虚拟机Ubuntu10.04无法显示windows中文目录和文件
    W: GPG 错误
  • 原文地址:https://www.cnblogs.com/yinwenjie/p/11422281.html
Copyright © 2020-2023  润新知