
hadoop
程序攻城狮
莫愁前路无知己,天下谁人不识君
展开
-
数据仓库之数据采集
数据采集流程logFile --> 生产flume --> Kafka --> 消费flume --> HDFS生产flume(采集log日志)安装flume在your_flume_path/conf中创建file-flume-kafka.conf文件你的flume采集配置文件启动 在你的flume安装文件下$ nohup bin/flume-ng...原创 2019-10-30 20:43:42 · 914 阅读 · 0 评论 -
使用teragen产生数据
使用Teragen产生数据,使用 jar 包路径如下:/your hadoop path/share/hadoop/mapreduce2/hadoop-mapreduce-examples-2.6.0-cdh5.9.3.jar$ hadoop jar hadoop-mapreduce-examples-2.6.0-cdh5.9.3.jar teragen 参数1 参数2Teragen 参数...原创 2019-10-29 21:37:37 · 993 阅读 · 0 评论 -
CentOS7下Hadoop安装教程 (分布式安装)
1)相关技术: 1、在Vmware中安装CentOs7系统 2、克隆虚拟机 3、修改静态IP 查看当前IP信息 ip addr 修改配置文件 vim /etc/systemconfig/network-scripts/ifcfg-ens33...原创 2019-10-16 21:45:26 · 621 阅读 · 0 评论