poem_2010的博客

前言 平时喜欢研究一些东西，也愿意学习一些，但是进来发现自己有一些有心无力的感觉，对于一些东西想去学习，但是又提不起精神，所以想开源出来，大家一些讨论，一起学习。 酝酿一年的时间，中途修改了很多版本，功能推到了重做，为了一供能绞尽脑汁寻求解决办法，半夜还在想如何把一个功能实现，各种尝试，各种想法，最后终于走出来。但是，大多的时候，都是走不出来的，因为局限于自身的水平，自己的认知水平。 由于当前项目设计上存在一些问题，本应该一体的东西么有同步起来，而且在设...

在使用Idea进行Scala开发的时候，么有任务的语法检查，只是在最后编译的时候，会出错，导致开发效率。 瞬间就不开心了 搞一下 点一下，弄成一个小T就可以了 然后，idea就有scala的语法检查 ...

近期在使用spark-submit 提交任务, 并且执行, 碰到各种问题, 在实施现场卡了好几天. 现在终于解决了. 这个只包含自己的处理过程, 每一个人的不一样, 所以照着做了, 也不一定解决, 但是有一个已知的成功的方法还是不错的. 运行的环境是华为的大数据平台 FusionInsight HD V100R002C70SPC200 , 使用 kerberos 做为hive的访问权限认证,...