MyNameIsWangYi的博客

目录1.使用scala读取文件，生成hfile，bulkload2.展示一下java代码，不如scala快3.暂时认为最靠谱的put批量操作 如果你支持scala，恭喜你，很容易 一般写spark程序，文件路径都设置成hdfs路径，不容易报错；要不然容易踩坑，(⊙o⊙)…我踩坑了、将文件上传到hdfs吧。文件路径就写成 hdfs:/// 注意： 1.使用spark的saveAsNewAPIHadoopFile一定要对rowkey，列族，子列 进行排序，否则执行的时候会报错： java.io.IOExcept

scala隐式转换的概念 简单说，隐式转换就是：当Scala编译器进行类型匹配时，如果找不到合适的候选，那么隐式转化提供了另外一种途径来告诉编译器如何将当前的类型转换成预期类型。 隐式转换有四种常见的使用场景： 将某一类型转换成预期类型 类型增强与扩展 模拟新的语法 类型类 语法 隐式转换有新旧两种定义方法，旧的定义方法指是的“implict def”形式，这是Scala 2.10版本之前的写法，...