
hadoop
sheshouzuomeiyou
这个作者很懒,什么都没留下…
展开
-
hive的udf函数使用
(注:hive的相关学习视频慕课网https://www.imooc.com/learn/387 和https://www.imooc.com/video/8030,hadoop的相关学习视频https://www.imooc.com/learn/391和 https://www.imooc.com/learn/8901.编写类继承UDF类(需要导入hive的相关jar包)2.重写evalua...原创 2019-06-14 15:16:08 · 739 阅读 · 0 评论 -
hadoop idea本地开发环境搭建
1.新建java工程用于开发Mapper和Reducer2.导入hadoop的依赖包,依赖包在hadoop解压目录下的share/hadoop可以找到,添加成功如图所示:3.添加Artifacts-》添加一个空的JAR包添加Module Output选择当前目录3.新建ApplicationMain class中输入org.apache.hadoop.util.RunJarW...原创 2019-06-10 15:40:21 · 5376 阅读 · 2 评论 -
Windows 64位系统上搭建Hadoop伪分布式环境
1.安装jdk,设置环境变量2.下载hadoop2.7.7http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz3.解压hadoop2.7.7到文件夹下(用好压软件解压)4.下载hadooponwindows-master(已经上传至百度网盘)使用hadooponwindows-mast...原创 2019-06-10 16:35:08 · 2011 阅读 · 3 评论