- 博客(14)
- 收藏
- 关注
原创 mysql与hive安装部署教程
1.上传对应版本的安装包2.安装linux版mysql在中,经常使用yum来进行软件的安装,更新与卸载,yum -y install xx命令将y直接以参数的方式附在指令上,后面就不会有“ is that ok?”这种询问语句。3.安装数据库服务4.重新启动mysql服务5.查看mysql初始密码,并复制粘贴注意:如果初始密码不显示,就做免密(),添加修改密码后将以上的删除,然后重启6.登录mysql7.输入初始密码8.设置密码强度9.设置密码长度10.修改密码11.退出mysqlexit;
2024-11-11 12:16:03
791
原创 spark部署教程
14.进入/opt/module/spark-3.5.0/conf下,编辑 spark-defaults.conf最后几行内容(第一行要修改成自己对应的主机名)7.再进入/opt/module/spark-3.5.0/conf/下,编辑spark-env.sh,在末尾添加以下内容。(5)从节点执行计算任务(多个计算任务:每个计算任务会分配一个执行器)主节点:Master---资源管理调度和任务的分配(类似yarn)(6)从节点会将任务的结果返回到主节点,主节点再继续做相应的操作。
2024-09-25 14:14:34
613
原创 Java小结---API
2.public String substring(int begin,int end)::截取从索引为begin到end中间的字符串【)4.public int indexoOf(String str):查找参数字符串在本字符串首次出现的索引位置,若找不到,则返回-1。1.public String substring(int index):截取从参数的索引位置到末尾的新字符串。public String replace(旧字符串,新字符串):将所有出现的旧字符串替换成新字符串,并返回。
2024-06-08 19:00:30
591
1
原创 Java小结---方法
注意:1.public static void main(String[] args) {}也表示一个方法,只不过是固定的, 一个程序 的主方法。(翻译:定义一个方法,你帮我算两数之和,算完之后你自己打印结果,无返回值)1.方法重载和参数名无关,比如sum(int a,int b) or sum(int x,int y):方法的()里有内容,当一个方法需要一些数据输入才能完成任务的时候,:方法的()里无内容,当一个方法不需要数据输入就能完成任务的时候,
2024-06-06 15:53:01
874
原创 Java小结---基本语法
2.逻辑与又称短路运算符,若&&前面的部分为false,最终的结果也为false,所以&&后面。(2)高向低转:等号前的数据类型要改变成你要转换的数据类型,等号后面加上(要转换的数据类型)相同点:在表示逻辑运算的时候,只有&符号两边都是true,结果才为true;当表达式1为真的时候,执行表达式2。当表达式1为假的时候,执行表达式3。:表达式2:表达式3。比较运算符:>,=,
2024-06-04 21:06:33
388
原创 HDFS基本操作
1.创建目录(文件夹)单层文件夹 hdfs dfs -mkdir 文件夹名多层文件夹 hdfs dfs -mkdir -p /文件夹1/文件夹2......2.上传文件hdfs dfs -put 源文件的路径 目标路径 将本地的源文件上传到hdfshdfs dfs -moveFromLocal 源文件的路径 目标路径 将本地的源文件移动到hdfs上(本地源文件删除)
2024-05-29 23:38:45
1063
原创 搭建平台相关问题
1.二次格式化hdfs,需要将data文件夹下的内容清空(直接删除data文件夹),还要删除logs文件夹下的内容(直接删除logs文件夹)hdfs dfs -moveFromLocal 源文件的路径 目标路径 将本地的源文件移动到hdfs上(本地源文件删除)hdfs dfs -copyFromLocal 源文件的路径 目标路径 将本地的源文件复制到hdfs上。hdfs dfs -put 源文件的路径 目标路径 将本地的源文件上传到hdfs。
2024-05-23 10:42:38
928
原创 配置Hadoop环境变量
1.停止NetworkManager服务2.查看NetworkManager服务状态3.移除NetworkManger服务4.进入/opt/module目录5.进入/etc/profile.d/my_env.sh,编辑Hadoop环境变量6.进入hadoop-3.1.4,使用pwd查看路径7.进入/etc/profile.d/my_env.sh,补全路径8.生效环境变量的配置9.验证环境是否安装成功注意:如果配置文件输错,显示未找到命令,改正的方法:10.返回/opt
2024-03-28 13:07:32
878
原创 搭建Hadoop平台后续
其他两台从虚拟机也按此操作即可。5、将子节点的公钥拷贝到主节点并添加到授权密钥。:以上步骤全为在Master主虚拟机操作,2、修改hosts文件,ip地址加主机名。1、生成公钥密钥对---执行时,出现此框,输入。,查看目录下所有文件。7、再进行5、6操作。
2024-03-19 10:31:47
875
1
原创 搭建Hadoop平台
注意:1.修改主机名命令:hostnamectl set-hostname 主机名。12.选择合适磁盘大小,并且选择将虚拟磁盘拆分成多个文件,下一步。17.uuidgen命令,生成新的uuid,并且复制。10.更改主机名并应用,打开以太网连接,完成。15.关闭并移除防火墙,查看防火墙状态。8.选择使用网络地址转换,下一步。11.选择创建新虚拟磁盘,下一步。3.稍后安装操作系统,下一步。4.选择中文,简体中文,继续。1.选择自定义高级,下一步。4.选择LINUX,下一步。6.选择处理器数量,下一步。
2024-03-16 23:32:25
365
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人