conda 操作虛擬環境
1. 查看conda 版本
conda -v
2.查看當前環境存在哪些虛擬環境
conda list env
3.創建python 虛擬環境
conda create -n mypython_env python=3.7
4.使用或激活虛擬環境
source activate mypython_env
5. 安裝包
conda install -n mypython_env 包名
6. 退出虛擬環境
source deactivate
7. 刪除虛擬環境
conda remove -n mypython_env -all
8. 刪除環境中的某個包
conda remove -name mypython requests
9. 打包整個虛擬環境
cd anaconda/env
zip -r -9 -q pyspark_py37.zip mypython
10. 在pyspark中使用該打包好的虛擬環境
python_path="hdfs://deng/python-.7.3.tgz#python-3.7.3"
--conf spark.yarn.dist.archives=$python_path
--conf spark.pyspark.driver.python="./python-3.7.3/bin/python"
--conf.spark.pyspark.="./python-3.7.3/bin/python"