云计算/大数据
关于Hadoop系列技术栈, Elastic Stack栈相关的学习
逛逛1973
一位知识构架全面,学术,工程能力强的算法工程师
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop分布式集群的搭建
一、 机器的准备,三台虚拟机二、 ssh免密码登陆三、 jdk的安装(仅在hadoop000)四、Hadoop环境配置五、 hadoop集群环境的分发(执行拷贝命令)记得要在各个节点让环境生效六、 HDFS NameNode格式化在bin目录下面七、Hadoop集群的启动八、验证停止集群...原创 2019-04-16 22:07:17 · 182 阅读 · 0 评论 -
Elastic Stack 入门手记(一)
一、Elastic Search(1)本地快速启动es集群的方法启动命令:D:\Downloads\ElasticSearch\es-rtf-master\bin>elasticsearchD:\Downloads\ElasticSearch\es-rtf-master\bin>elasticsearch -Ehttp.port=8100 -Epath.data=nod...原创 2019-04-15 18:43:30 · 268 阅读 · 0 评论 -
MapReduce分布式框架-WordCount案例实战
combiner - 本地统计,减少传输partitioner - 分发规则自定义jobhistory - 记录完整的mapreduce运行信息 - logpackage wordcount;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import ...原创 2019-04-13 22:11:06 · 274 阅读 · 0 评论 -
ELK学习 - 环境的搭建
一、es安装使用下载es安装包之前必须先安装好java,并且在环境变量中新建环境变量JAVA_HOME,设置值是jdk文件夹地址,如:1、从官方下载中心 ElasticSearch Download 下载ElasticSearch安装包2、安装完es后,去es目录下/bin/下,启动elasticsearch.bat完了以后再去启动es服务看到如图即启动成功...原创 2019-04-11 14:38:02 · 220 阅读 · 0 评论 -
Java Api 操作HDFS实战及HDFS读写原理
新建maven工程 - quickstart1. pom文件引入依赖 <!-- hdfs 依赖 --> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifact...原创 2019-04-11 13:27:46 · 1454 阅读 · 0 评论 -
zookeeper安装教程- Dubbo注册中心(Zookeeper-3.4.6)
基于 Dubbo 的分布式系统架构视频教程安装 Dubbo注册中心(Zookeeper-3.4.6)Dubbo建议使用Zookeeper 作为服务的注册中心。注册中心服务器(192.168.3.71)配置,安装Zookeeper:1、 修改操作系统的/etc/hosts 文件中添加:# zookeeper servers192.168.3.71 edu-p...原创 2019-08-26 15:13:43 · 301 阅读 · 0 评论
分享