• python訪问redis


    python訪问redis

    1 Linux上安装redis

    a) 下载

    $ wget http://download.redis.io/releases/redis-3.0.5.tar.gz

    b) 编译

    # yum install gcc tcl
    # tar -zxf redis-3.0.5.tar.gz
    # cd redis-3.0.5
    # make
    # make test
    # sudo make install
    

    这样可运行文件redis-server等就从redis-3.0.5/src复制到/usr/local/bin

    c) 启动服务(6379端口要打开)

    $ redis-server

    $ redis-server /path/to/redis.conf

    1428:M 04 Feb 11:47:33.817 # WARNING: The TCP backlog setting of 511 cannot be enforced because /proc/sys/net/core/somaxconn is set to the lower value of 128.
    1428:M 04 Feb 11:47:33.817 # Server started, Redis version 3.0.5
    1428:M 04 Feb 11:47:33.818 # WARNING overcommit_memory is set to 0! Background save may fail under low memory condition. To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then reboot or run the command 'sysctl vm.overcommit_memory=1' for this to take effect.
    1428:M 04 Feb 11:47:33.818 # WARNING you have Transparent Huge Pages (THP) support enabled in your kernel. This will create latency and memory usage issues with Redis. To fix this issue run the command 'echo never > /sys/kernel/mm/transparent_hugepage/enabled' as root, and add it to your /etc/rc.local in order to retain the setting after a reboot. Redis must be restarted after THP is disabled.

    d) 服务器配置,以除去上面的警告

    以root用户操作

    1) 改动内核參数: somaxconn

    该内核參数默认值通常是128,对于负载非常大的服务程序来说大大的不够。

    通常会将它改动为2048或者更大。


    # echo 2048 > /proc/sys/net/core/somaxconn
    重新启动后保存:
    在/etc/sysctl.conf中加入例如以下
    net.core.somaxconn = 2048
    然后在终端中运行
    # sysctl -p

    2) 改动vm.overcommit_memory

    overcommit_memory 指定了内核针对内存分配的策略。其值能够是0、1、2。                 
    0, 表示内核将检查是否有足够的可用内存供应用进程使用;假设有足够的可用内存,内存申请同意。否则,内存申请失败,并把错误返回给应用进程。


    1。 表示内核同意分配全部的物理内存,而无论当前的内存状态怎样。
    2, 表示内核同意分配超过全部物理内存和交换空间总和的内存

    # vi  /etc/sysctl.conf

    添加以下一行:

    vm.overcommit_memory=1
    设置重新启动后保持, 运行命令:

    # sysctl vm.overcommit_memory=1

    3) transparent_hugepage

    禁用透明巨页内存配置以提高性能

    查看当前状态:

    $ cat /sys/kernel/mm/transparent_hugepage/enabled
    [always] madvise never

    參数说明
    never 关闭,不使用透明内存
    alway 尽量使用透明内存。扫描内存,有512个 4k页面能够整合。就整合成一个2M的页面
    madvise 避免改变内存占用

    禁用透明巨页内存:

    # echo never >/sys/kernel/mm/transparent_hugepage/enabled
    # cat /sys/kernel/mm/transparent_hugepage/enabled
    
    always madvise [never]

    永久禁用, 将命令加入到rc.local中:

    # vi rc.local

    ...
    
    # redis required never for transparent_hugepage
    if test -f /sys/kernel/mm/transparent_hugepage/enabled; then
       echo never > /sys/kernel/mm/transparent_hugepage/enabled
    fi
    if test -f /sys/kernel/mm/transparent_hugepage/defrag; then
       echo never > /sys/kernel/mm/transparent_hugepage/defrag
    fi
    
    exit 0 
    

    e) redis.conf配置

    參考以下的redis.conf的配置项: redis配置具体解释

    http://blog.csdn.net/ithomer/article/details/9232891

    2 redis-py

    redis-py 这是 Redis 眼下最成熟的 Python client开发包。


    redis 主页:

    https://github.com/andymccurdy/redis-py

    a) 下载源代码

    $ git clone https://github.com/andymccurdy/redis-py.git

    b) 安装

    $ cd redis-py
    $ sudo python redis install

    3 hiredis

    hiredis是redis数据库的C接口,眼下只能在linux下使用,几个主要的函数就能够操作redis数据库了。

    hiredis 是 Redis 官方指定的 C 语言client开发包,支持 Redis 完整的命令集、管线以及事件驱动编程。

    hiredis主页:

    https://github.com/redis/hiredis

    a) 下载安装

    $ git clone https://github.com/redis/hiredis.git
    $ cd hiredis
    $ make
    $ sudo make install
    

    样例:

    http://blog.csdn.net/mfc_vc_andy/article/details/8095839

    http://www.leoox.com/?

    p=304

    4 hiredis-py

    python对hiredis的包装类。

    主页:

    https://github.com/redis/hiredis-py

    a) 下载

    $ wget https://pypi.python.org/packages/source/h/hiredis/hiredis-0.2.0.tar.gz

    b) 安装

    $ tar zxf hiredis-0.2.0.tar.gz
    $ cd hiredis-0.2.0
    $ python setup.py build
    $ sudo python setup.py install
    

    5 python操作redis

    http://blog.csdn.net/chosen0ne/article/details/7319807

    http://blog.csdn.net/chenggong2dm/article/details/6102540


    6 优雅关闭redis-server

    $ redis-cli -h 127.0.0.1 -p 6379 shutdown

    7 redis-server启用password及简单样例

    a) 复制redis.conf到/etc/

    b) 创建redis数据库存储文件夹

    $ sudo mkdir /var/redis

    c) 改动/etc/redis.conf

    $ sudo vi redis.conf
    只改动的内容例如以下:

    daemonize yes
    loglevel warning
    logfile /var/log/redis.log
    dir /var/redis/
    requirepass Abc123
    

    d) 启动和关闭服务

    $ sudo redis-server /etc/redis.conf
    
    带password关闭服务:
    $ redis-cli -h 127.0.0.1 -p 6379 -a Abc123 shutdown
    

    e) clientpython

    此时client须要使用带password连接服务器:

    import redis
    
    r=redis.StrictRedis(host="127.0.0.1", port=6379, db=0, password="Abc123")
    r.set("city", "shanghai")
    r.get("city")
    

    给key设置过期时间。比方我们只保存60秒的数据,能够这样设置:

    r.expire("city", 60)
    紧接着訪问它:

    r.get("city")
    shanghai
    
    过60秒再訪问:

    r.get("city")

    没有了。

    8 附录

    更具体的样例參考:
    https://github.com/andymccurdy/redis-py

    redis的完整的參考:

    http://www.redis.net.cn/tutorial/3505.html


  • 相关阅读:
    webDriver自动化操作(二)浏览器/页面信息属性操作
    webDriver自动化操作(一)元素定位和基础操作
    Selenium(一) Selenium和ChromeDriver的安装与配置
    Fiddler设置爬取app网页
    pycharm新建项目配置虚拟环境
    AIRTEST安装配置流程
    Jquery树插件zTree学习总结
    HTML中head标签内的使用标签详解
    Highcharts图表学习(二)
    noty-jQuery插件
  • 原文地址:https://www.cnblogs.com/jhcelue/p/7217105.html
Copyright © 2020-2023  润新知