在spark2中的shell使用python3
spark2.0.0中的python默认使用python2,可以通过以下两种方式之一使用python3:
- PYSPARK_PYTHON=python3 ./bin/pyspark
- 修改~/.profile,增加 PYSPARK_PYTHON=python3
参考:http://stackoverflow.com/questions/30279783/apache-spark-how-to-use-pyspark-with-python-3
spark2.0.0中的python默认使用python2,可以通过以下两种方式之一使用python3:
参考:http://stackoverflow.com/questions/30279783/apache-spark-how-to-use-pyspark-with-python-3