梁江江

今天在虚拟里做sqoop数据迁移，把Oralce的数据迁移到HBase和Hive中去，由于Mysql迁移只需要导入连接驱动jar包即可，而Oralce需要设置远程访问才可以。具体设置如下：一:修改配置文件      目录下的D:\app\Java\product\11.2.0\dbhome_1\NETWORK\ADMIN            具体安装根据自己情况选择

百度网盘账号：657137723@qq.com密码：Ljj657137723内容会不断更新

大部分时候，我们习惯Windows操作系统的图形化界面，如果在开始接触Linux系统的无图形化界面肯定有些不习惯。但是，有些项目需要的时候我们需要使用到Linux系统的VPS，然后安装图形化界面节省成本。毕竟在大部分海外VPS主机商提供的VPS服务中，Linux系统可选择性是比较大的，而且相比较Windows VPS主机，Linux VPS会便宜很多。我们在操作项目的时候，可以在Linux VPS

本篇文章是关于我在学习Spark过程中遇到的一些问题及总结，分为Spark优化、RDD join问题、遇到的问题、总结、参考资料几个部分。 一：Spark优化 1、设置序列化器为KryoSerializer 　　　Spark默认使用的是Java序列化机制，但是Spark也支持使用Kryo序列化库，Kryo序列化机制比Java序列化机制性能高10倍左右 　　　 2、压缩机制 　　　 如果数