scott的专栏

1、查看系统环境 [plain] view plain copy print? cat /etc/redhat-release  uname -r  uname -m  cat /etc/redhat-release uname -r uname -m关闭所有服务器的防火墙 [plain] view plain copy p

摘要：本文将要说明如何使用Spark来对Hive进行操作1、打jar包，提交Spark任务      通过提交spark任务的方式，如下面的scala代码。之后需要将成代码打包成一个jar包，然后提交到spark中去.一般情况下生产上建议使用这种方法，可以灵活控制sql里的各项参数[plain] view plain copy print?val conf = new SparkConf()  va