xbing的博客

按照官网的文档采用以下操作即可： 进入CM界面 选择spark服务 配置 搜索spark-defaults.conf 添加spark.yarn.jars=hdfs://ns1/user/spark/jars 部署客户端并重启 但实际重启后发现节点上的配置文件依然是默认属性，没有分发覆盖，具体还没找到解决办法。 暂时采用软链的方式，如果不得已在CM界面修改了配置并部署，则需要重新创建软链...

安装完成CDH后，在yarn上不管是使用hive运行mapreduce还是spark，中文全都会乱码。 1. linux的环境变量设置字符集 vi /etc/profile export LANG=zh_CN.UTF-8 2. 修改mapreduce的环境变量 hadoop-env.sh export HADOOP_OPTS="-server -Dfile.encoding=...