自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(14)
  • 收藏
  • 关注

原创 mysql与hive安装部署教程

1.上传对应版本的安装包2.安装linux版mysql在中,经常使用yum来进行软件的安装,更新与卸载,yum -y install xx命令将y直接以参数的方式附在指令上,后面就不会有“ is that ok?”这种询问语句。3.安装数据库服务4.重新启动mysql服务5.查看mysql初始密码,并复制粘贴注意:如果初始密码不显示,就做免密(),添加修改密码后将以上的删除,然后重启6.登录mysql7.输入初始密码8.设置密码强度9.设置密码长度10.修改密码11.退出mysqlexit;

2024-11-11 12:16:03 791

原创 spark部署教程

14.进入/opt/module/spark-3.5.0/conf下,编辑 spark-defaults.conf最后几行内容(第一行要修改成自己对应的主机名)7.再进入/opt/module/spark-3.5.0/conf/下,编辑spark-env.sh,在末尾添加以下内容。(5)从节点执行计算任务(多个计算任务:每个计算任务会分配一个执行器)主节点:Master---资源管理调度和任务的分配(类似yarn)(6)从节点会将任务的结果返回到主节点,主节点再继续做相应的操作。

2024-09-25 14:14:34 613

原创 Web前端学习

方法一:行内样式方法二:内部样式方式三:链接外部样式表一个外部样式表可以被多个网页引用,一个网页也可以引用多个外部样式表。

2024-06-27 11:49:30 909

原创 Java小结---API

2.public String substring(int begin,int end)::截取从索引为begin到end中间的字符串【)4.public int indexoOf(String str):查找参数字符串在本字符串首次出现的索引位置,若找不到,则返回-1。1.public String substring(int index):截取从参数的索引位置到末尾的新字符串。public String replace(旧字符串,新字符串):将所有出现的旧字符串替换成新字符串,并返回。

2024-06-08 19:00:30 591 1

原创 Java小结---方法

注意:1.public static void main(String[] args) {}也表示一个方法,只不过是固定的, 一个程序 的主方法。(翻译:定义一个方法,你帮我算两数之和,算完之后你自己打印结果,无返回值)1.方法重载和参数名无关,比如sum(int a,int b) or sum(int x,int y):方法的()里有内容,当一个方法需要一些数据输入才能完成任务的时候,:方法的()里无内容,当一个方法不需要数据输入就能完成任务的时候,

2024-06-06 15:53:01 874

原创 Java小结---基本语法

2.逻辑与又称短路运算符,若&&前面的部分为false,最终的结果也为false,所以&&后面。(2)高向低转:等号前的数据类型要改变成你要转换的数据类型,等号后面加上(要转换的数据类型)相同点:在表示逻辑运算的时候,只有&符号两边都是true,结果才为true;当表达式1为真的时候,执行表达式2。当表达式1为假的时候,执行表达式3。:表达式2:表达式3。比较运算符:>,=,

2024-06-04 21:06:33 388

原创 HDFS基本操作

1.创建目录(文件夹)单层文件夹 hdfs dfs -mkdir 文件夹名多层文件夹 hdfs dfs -mkdir -p /文件夹1/文件夹2......2.上传文件hdfs dfs -put 源文件的路径 目标路径 将本地的源文件上传到hdfshdfs dfs -moveFromLocal 源文件的路径 目标路径 将本地的源文件移动到hdfs上(本地源文件删除)

2024-05-29 23:38:45 1063

原创 搭建平台相关问题

1.二次格式化hdfs,需要将data文件夹下的内容清空(直接删除data文件夹),还要删除logs文件夹下的内容(直接删除logs文件夹)hdfs dfs -moveFromLocal 源文件的路径 目标路径 将本地的源文件移动到hdfs上(本地源文件删除)hdfs dfs -copyFromLocal 源文件的路径 目标路径 将本地的源文件复制到hdfs上。hdfs dfs -put 源文件的路径 目标路径 将本地的源文件上传到hdfs。

2024-05-23 10:42:38 928

原创 大数据集群搭建

进入windows下的hosts,以记事本打开,删除原有的输入以下文字。

2024-04-16 11:07:56 543 1

原创 Hadoop集群配置文件

11.添加修改环境变量相关设置代码如下:

2024-04-02 11:05:46 1286 1

原创 配置Hadoop环境变量

1.停止NetworkManager服务2.查看NetworkManager服务状态3.移除NetworkManger服务4.进入/opt/module目录5.进入/etc/profile.d/my_env.sh,编辑Hadoop环境变量6.进入hadoop-3.1.4,使用pwd查看路径7.进入/etc/profile.d/my_env.sh,补全路径8.生效环境变量的配置9.验证环境是否安装成功注意:如果配置文件输错,显示未找到命令,改正的方法:10.返回/opt

2024-03-28 13:07:32 878

原创 配置jdk环境变量

再将JAVA_HOME引用到path环境变量中。新建系统变量JAVA_HOME export。

2024-03-28 10:36:46 978

原创 搭建Hadoop平台后续

其他两台从虚拟机也按此操作即可。5、将子节点的公钥拷贝到主节点并添加到授权密钥。:以上步骤全为在Master主虚拟机操作,2、修改hosts文件,ip地址加主机名。1、生成公钥密钥对---执行时,出现此框,输入。,查看目录下所有文件。7、再进行5、6操作。

2024-03-19 10:31:47 875 1

原创 搭建Hadoop平台

注意:1.修改主机名命令:hostnamectl set-hostname 主机名。12.选择合适磁盘大小,并且选择将虚拟磁盘拆分成多个文件,下一步。17.uuidgen命令,生成新的uuid,并且复制。10.更改主机名并应用,打开以太网连接,完成。15.关闭并移除防火墙,查看防火墙状态。8.选择使用网络地址转换,下一步。11.选择创建新虚拟磁盘,下一步。3.稍后安装操作系统,下一步。4.选择中文,简体中文,继续。1.选择自定义高级,下一步。4.选择LINUX,下一步。6.选择处理器数量,下一步。

2024-03-16 23:32:25 365

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除