- 博客(14)
- 资源 (7)
- 收藏
- 关注
原创 Elasticsearch的安装与启动
Elasticsearch的安装与启动演示目标安装与启动配置远程服务器访问启动时异常与解决方法演示目标在Linux环境中安装并启动Elasticsearch 7.x版本。安装与启动下载EShttps://www.elastic.co/cn/downloads/elasticsearch在Linux中使用tar -zxvf命令解压创建ES用户组及ES用户(ES不能使用Root用户运行):# 增加ES用户组和ES用户groupadd esuseradd es -g espasswd e
2021-06-27 15:20:46
244
原创 Git常用命令及使用
Git常用命令根据分支名查询分支根据分支名查询分支# 根据输入的分支名模糊匹配本地和远程分支git branch -a | grep <分支名># 根据输入的分支名模糊匹配远程分支git branch -r | grep <分支名>...
2020-09-15 19:53:38
363
原创 CentOS7下安装各类命令及使用
netstat命令# 安装yum -y install net-tools# 查看当前所有tcp端口netstat -ntlp# 查看所有80端口使用情况netstat -ntulp | grep 80
2020-09-01 14:28:10
533
原创 CentOS7下安装各类软件及使用
CentOS7下安装各类软件安装JDK8安装JDK8下载压缩包,例如jdk-8u211-linux-x64.tar.gz使用tar -zxvf命令解压压缩包在/etc/profile文件中配置Java环境变量,如下:# JAVA_HOME路径已实际路径为准export JAVA_HOME=/opt/jdk1.8.0_211export PATH=$JAVA_HOME/bin:$PATHexport CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/li
2020-08-31 14:27:09
662
原创 使用Scala编写第一个Spark程序
使用Scala编写第一个Spark工程演示目标演示环境创建Spark工程运行Spark工程本地运行Yarn-Cluster运行演示目标在Windows环境中使用Scala编写一个spark工程(WordCount),并分别使用“本地”三种方式运行。在开始之前,请确保HDFS与YARN环境已搭建完毕,可参考下列博文:从0开始搭建Hadoop2.x高可用集群(HDFS篇)从0开始搭建Hadoop2.x高可用集群(YARN篇)演示环境软件备注JDKjdk-8u211Scal
2020-06-07 14:34:14
5993
原创 基于CentOS安装Docker
基于CentOS安装Docker-ce演示目标演示环境卸载Docker设置仓库安装最新版Docker安装指定版本Docker运行Docker设置开机启动安装Docker缓慢如何解决?Docker拉取镜像缓慢如何解决?演示目标在CentOS下安装Docker,并解决下载Docker缓慢和镜像由于网络问题无法下载的问题。演示环境基于64位CentOS7(或更高版本);确保centos-ex...
2020-02-20 23:14:21
321
1
原创 使用IDEA本地调试MapReduce程序
使用IDEA本地调试MapReduce程序演示目标演示环境文件下载完整配置开始调试演示目标在Windows开发环境下,直接使用IDEA运行MapReduce程序,并支持Debug调试。演示环境基于Hadoop2.6.5;启动HDFS与YARN高可用集群环境,可参考以下两篇博客:从0开始搭建Hadoop2.x高可用集群(HDFS篇)从0开始搭建Hadoop2.x高可用集群(YARN...
2020-02-14 16:29:42
1950
原创 使用Python编写第一个MapReduce程序
使用Python编写第一个MapReduce程序演示目标演示环境编写MR编写mapper编写reducer部署MR上传python文件到服务器编写Sheel脚本运行MR演示目标编写一个MapReduce,用于计算文章中所有词语的出现次数(WordCount)。演示环境基于Hadoop2.6.5;完整环境请参考以下两篇博客:从0开始搭建Hadoop2.x高可用集群(HDFS篇)从0...
2019-07-31 17:52:49
639
原创 使用Java编写第一个MapReduce程序
使用Java编写第一个MapReduce程序演示目标演示环境搭建MR工程配置pom.xml编写WordCountMapper.java编写WordCountReducer.java编写启动类Startup.java打包工程部署MR工程上传jar包到服务器运行jar包演示目标编写一个MapReduce,用于计算文章中所有词语的出现次数(WordCount)。演示环境基于Hadoop2.6....
2019-07-31 17:34:23
2924
2
原创 解决Win10菜单栏中搜索框无法搜索应用
解决Win10菜单栏中搜索框无法搜索应用如图,在任务管理器中找到Windows资源管理器,重新启动即可。
2019-07-31 09:32:41
4158
原创 从0开始搭建Hadoop2.x高可用集群(YARN篇)
从0开始搭建Hadoop2.x高可用集群(YARN篇)演示目标演示环境准备YARN配置yarn-site.xml配置mapred-site.xml拷贝配置启动YARN集群验证高可用(HA)演示目标搭建双ResourceManager节点的高可用集群。当主节点发生故障时,standby节点能自动接管并切换为主节点。在开始之前,请确保HDFS环境已搭建完毕,可参考从0开始搭建Hadoop2.x高可...
2019-07-19 16:53:06
1007
1
原创 从0开始搭建Hadoop2.x高可用集群(HDFS篇)
从0开始搭建Hadoop2.x高可用集群(HDFS篇)演示目标演示环境配置虚拟机使用root用户登录关闭防火墙检查系统时间修改host设置免密登录演示目标搭建双NameNode节点的HDFS高可用集群,其中一台节点的状态为Active,另一台是Standby。当Active节点发生故障时,Standby节点能自动接管并切换到Active状态。演示环境软件备注VMware...
2019-07-15 16:10:25
2878
1
原创 使用VMware创建CentOS7虚拟机并设置网络环境(桥接、NAT、内网)
使用VMware Workstation创建CentOS7虚拟机并设置网络环境演示目标演示环境创建虚拟机设置网络(外网)设置网络(内网)演示目标使用VMware Workstation创建三台CentOS7虚拟机,使其之间能够相互Ping通,并可以访问外网。演示环境软件备注VMware Workstation12CentOSCentOS-7-x86_64-DV...
2019-07-12 18:15:19
2315
使用Scala编写第一个Spark程序.txt
2020-06-07
VMware15.5及CentOS7镜像.txt
2019-11-01
Hadoop2.x软件环境.txt
2019-07-12
jdk-8u211-windows-x64.7z
2019-07-11
jdk-8u211-linux-x64.tar.gz.7z
2019-07-11
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人