spark (python远程开发调试)

2.1 pycharm远程开发调试

• 2.1.1 python版本一致

#版本都保持3.6.6
#root cd /usr/local/python3/bin/pip3 list
备注：[python模块导入顺序是从sys.path中取，可以代码加入到sys.path。
当前目录->PYTHONPATH->安装目录，所以设置了PYTHONPATH，这里模块安装自动引进来。]
#检查 /etc/profile PYTHONPATH是否导入了pyspark py4j

• 2.2.2 pycharm配置

Deployment配置
Tools->Deployment->Configuration

集成远程sdk

Setting->Project Interpreter

Run configuration


本地引入pyspark py4j [本地开发调试需要]