
大数据
文章平均质量分 76
胡卡卡啦啦
高冷的逗比,怕冷,爱笑,程序界的菜鸟
展开
-
大数据各部分功能组件启动命令
hadoop部分hive的启动命令1.启动hiveserver2: 输入hive --service hiveserver2 --hiveconf hive.server2.thrift.port=100002.这时hive的服务器开启,再重新打开一个窗口输入beeline,出现beeline version的信息3.在输入!connect jdbc:hive2://17原创 2018-01-19 22:05:48 · 499 阅读 · 2 评论 -
Kafka实现生产者消费者 自定义partition
KafkaAPI实现生产者与消费者自定义Partition,奇数、偶数数据分在不同的Partition.思路创建三个类,包括Consumer、Producer、Partition在Producer端产生消息,Consumer端接收消息,Partition实现分区规则。Producer根据随机函数随机产生十个数据,其中包括奇数和偶数。因为是将奇数和偶数划分到不同的partition当中去,所...原创 2018-05-14 20:19:41 · 3621 阅读 · 1 评论