• 在spark2中的shell使用python3


    在spark2中的shell使用python3

    spark2.0.0中的python默认使用python2,可以通过以下两种方式之一使用python3:

    • PYSPARK_PYTHON=python3 ./bin/pyspark
    • 修改~/.profile,增加 PYSPARK_PYTHON=python3

    参考:http://stackoverflow.com/questions/30279783/apache-spark-how-to-use-pyspark-with-python-3

    Author: galaxy

    Created: 2016-08-14 Sun 11:50

    Emacs 24.5.6 (Org mode 8.2.10)

    Validate

  • 相关阅读:
    ubuntu19.04 redis启动和停止及连接
    ubuntu Redis安装及配置
    Django 基本使用及目录结构
    selenium设置chrome请求头
    多进程爬虫python——实例爬取酷狗歌单
    2020第一周学习记录
    爬取博客园最新文章
    python下用selenium的webdriver包如何在执行完点击下一页后没有获得下一页新打开页面的html源代码
    质量属性六个常见属性《钉钉》场景分析
    warnings.warn('Selenium support for PhantomJS has been deprecated, please use headless '报错
  • 原文地址:https://www.cnblogs.com/galaxy-gao/p/5769889.html
Copyright © 2020-2023  润新知