• 配置基于centos下的远程Jupyter Notebook访问


    最近在学习一些服务器上的操作,学着熟悉Liunx系统,记录下自己踩过的坑吧

    1、开机后更新系统:

      yum -y upgrade
      yum - y update

    2、查看已安装的应用

      yum list

    3、接下来因为要用到anaconda+Python环境,配置下:

      1.首先,你要知道系统现在的python的位置在哪儿:

    [root@root ~]# whereis python
    python: /usr/bin/python2.7 /usr/bin/python /usr/lib/python2.7 /usr/lib64/python2.7 /etc/python /usr/include/python2.7 /usr/share/man/man1/python.1.gz
    可以知道我们的python在 /usr/bin目录中
    [root@root ~]# cd /usr/bin/
    [root@root bin]# ll python*
    lrwxrwxrwx. 1 root root 7 2月 7 09:30 python -> python2
    lrwxrwxrwx. 1 root root 9 2月 7 09:30 python2 -> python2.7
    -rwxr-xr-x. 1 root root 7136 8月 4 2017 python2.7
    

     可以看到,python指向的是python2,python2指向的是python2.7,因此我们可以装个python3,然后将python指向python3,然后python2指向python2.7,那么两个版本的python就能共存了。

    2.因为我们要安装python3,所以要先安装相关包,用于下载编译python3:

      yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gcc make 
      #运行了以上命令以后,就安装了编译python3所用到的相关依赖

    3.默认的,centos7也没有安装pip。

    #运行这个命令添加epel扩展源
    yum -y install epel-release
    #安装pip
    yum install python-pip

    4.用pip装wget

    pip install wget

    5.用wget下载python3的源码包

    wget https://www.python.org/ftp/python/3.6.4/Python-3.6.4.tar.xz

    6.编译python3源码包

    #解压
    xz -d Python-3.6.4.tar.xz
    tar -xf Python-3.6.4.tar
    #进入解压后的目录,依次执行下面命令进行手动编译
    cd Python-3.6.4
    ./configure prefix=/usr/local/python3
    make && make install
    # 如果出现can't decompress data; zlib not available这个错误,则需要安装相关库
    #安装依赖zlib、zlib-devel
    yum install zlib zlib
    yum install zlib zlib-devel

    如果最后没提示出错,就代表正确安装了,在/usr/local/目录下就会有python3目录

    7.添加软链接

    #将原来的链接备份
    mv /usr/bin/python /usr/bin/python.bak
    #添加python3的软链接
    ln -s /usr/local/python3/bin/python3.6 /usr/bin/python
    #测试是否安装成功了
    python -V

    8.更改yum配置,因为其要用到python2才能执行,否则会导致yum不能正常使用

    vi /usr/bin/yum
    把#! /usr/bin/python修改为#! /usr/bin/python2
    vi /usr/libexec/urlgrabber-ext-down
    把#! /usr/bin/python 修改为#! /usr/bin/python2

    4、在Linux下删除文件用rm命令,具体用法如下:

    rm [选项] 文件
    选项说明:
    
    -f    -force      忽略不存在的文件,强制删除,无任何提示
    
    -i    --interactive    进行交互式地删除
    
    -r | -R  --recursive     递归式地删除列出的目录下的所有目录和文件
    
    -v      --verbose    详细显示进行的步骤
    
    命令实例:
    
    1、常规删除a.txt文件
    [root]# rm a.txt
    2、强行删除file.log文件
    [root]# rm -f file.log
    3、删除dirname目录下的所有东西
    [root]# rm -ivrf dirname

    5、在Centos下安装Anaconda

      下载:wget https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/Anaconda3-5.3.1-Linux-x86_64.sh

      安装:bash Anaconda3-5.3.1-Linux-x86_64.sh

      接下来会自动安装至:/root/anaconda/

      注:若没有将地址添加到PATH中可用:

      export PATH=/root/anaconda3/bin:$PATH
    测试anaconda已经安装好:conda -V

       创建专门的运行环境

        conda create -n tensorflow

       启动Tensorflow运行环境

    source activate tensorflow
    #关闭运行环境
    #source deactivate tensorflow
    #添加清华大学 TUNA提供的Anaconda仓库镜像
    conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
    conda config --set show_channel_urls yes
    conda install numpy #测试是否添加成功
    #搜索可用版本
    anaconda search -t conda tensorflow
    #选择一个较新的CPU或GPU版本,如jjh_cio_testing/tensorflow的1.0.1版本,输入如下命令查询安装命令
    anaconda show jjh_cio_testing/tensorflow
    #使用最后一行的提示命令进行安装
    conda install --channel https://conda.anaconda.org/jjh_cio_testing tensorflow
    #conda会自动检测安装此版本的Tensorflow所依赖的库,如果你的Anaconda缺少这些依赖库,会提示你安装。

      测试:

       import tensorflow as tf 
      hello = tf.constant('Hello, TensorFlow!') 
      sess = tf.Session() 
      print(sess.run(hello))    
    

    6、服务器端安装好Anaconda后就要进行远程访问了,此时我使用的是windows系统,之前一直使用Xshell的方式进行服务器配置环节。

      服务器端启动Jupyter Notebook: 

    检查本地是否安装成功并生成配置文件
    jupyter notebook –generate-config –allow-root
    生成远程访问密码
    #利用ipython生成密码
    [root@localhost ~]# ipython
    Python 3.6.2 |Anaconda, Inc.| (default, Sep 30 2017, 18:42:57)
    Type 'copyright', 'credits' or 'license' for more information
    IPython 6.1.0 -- An enhanced Interactive Python. Type '?' for help.
    In [1]: from notebook.auth import passwd
    In [2]: passwd()
    Enter password:
    Verify password:
    Out[2]: '*******'
    修改配置文件
    vi /root/.jupyter/jupyter_notebook_config.py
    c.NotebookApp.ip='*'
    c.NotebookApp.password = u'*******'将上述生成的密码复制到这里
    c.NotebookApp.open_browser = False
    c.NotebookApp.port =8888
    测试远程访问
    远程连接服务器后,终端输入Jupyter notebook 打开服务。在浏览器中输入<serverip>:8888,测试是否访问成功,访问不成功需将服务器防火墙关闭:
    systemctl stop firewalld.service

    7、当需要使用服务时:

      (1) 在服务端输入 shell 指令:

    jupyter notebook --ip=0.0.0.0 --no-browser --port=1111

    将会创建一个没有浏览器的notebook,ip这里指定为0.0.0.0(比较随意,不会和其他用户产生冲突),端口号为xxxx,一般端口选择1024-49151中任一即可,如1111,为避免与其他服务端口冲突,建议自己另设置一个端口号。本文以端口号 1111 为例。

    (2)在Windows上打开git的 bash 终端(或者PowerShell也可),输入:

    ssh -N -f -L localhost:1112:localhost:1111 username@serverIP

    第一个localhost填入xxxx+1,第一个localhost填入xxxx,username为服务器端的用户名,serverIP填入服务器ip。

    执行命令后需要输入服务器用户名密码,输出完成后没有其他显示,保持bash终端不要关闭。

    (3)在个人电脑上打开浏览器,输入http://localhost:xxxx+1 即可

    8、配置tensorflow时遇到两个小问题:

      (1).遇到了ERROR: Cannot uninstall 'wrapt'. It is a distutils installed project and thus we cannot accurately determine which files belong to it which would lead to only a partial uninstall.

        办法1:输入 pip install -U --ignore-installed wrapt enum34 simplejson netaddr

        参考:https://www.cnblogs.com/xiaowei2092/p/11025155.html

      (2)遇到了ERROR: tensorboard 1.14.0 has requirement setuptools>=41.0.0, but you'll have setuptools 39.1.0 which is incompatible.

        原因: setuptools 版本太低

        办法:更新setuptools版本 输入 pip install --upgrade setuptools

  • 相关阅读:
    SAP MM 启用批次管理的物料MB21创建预留单据时批次号可以为空!
    强化学习十大原则
    新手必看:生成对抗网络的初学者入门指导
    华为云总裁郑叶来:易获取、用得起、方便用的算力是人工智能发展的关键
    贝叶斯、香农、奥卡姆合写博客「机器学习是什么」
    诗人般的机器学习,ML工作原理大揭秘
    为什么AI的翻译水平还远不能和人类相比?
    2018-8-10-wpf-DoEvents-
    2018-2-13-win10-uwp-iot
    2019-9-11-.NET-Standard
  • 原文地址:https://www.cnblogs.com/lvpengbo/p/12087831.html
Copyright © 2020-2023  润新知