- 博客(3)
- 收藏
- 关注
原创 Hadoop 集群安装(Centos7)(摆脱繁杂步骤,20分钟快速安装!)[学生版]
注:细节决定成败!准备环境:虚拟机:Vmwareworkstation16Projava :1.8hadoop:3.1本演示文档中hadoop文件目录:/home/hadoop/hadoopjava文件目录: /home/hadoop/javalinux常用命令:cd 切换目录ll 查看当前目录下所有的文件vim filename 编辑或创建文件sudo -s 进入超级用户tar -zxvf 解压压缩包pwd 查看当前目录所在位置。
2023-10-11 13:44:33
844
原创 Hadoop单机安装
1, 右击 此电脑--->属性--->高级系统设置--->环境变量 找到系统变量:新建--变量名:Hadoop目录:例如:D:\hadoop-x.x.x 然后找到path--->编辑--->新建 ,添加如下: %HADOOP_HOME%\bin。1, 初始化:按住Shift并右击hadoop.x.x.x下的bin目录-->在此处打开powerShell窗口--->在窗口中输入:hdfs namenode -format。这里将解压后的Hadoop文件放到D盘下:D:\hadoop-x.x.x。
2023-09-17 17:18:14
157
1
原创 Python爬取某招网站获取有用信息
一,数据采集: 在这里,主要采用selenium技术对boss直聘进行自动化爬取: from selenium import webdriver from selenium.webdriver.common.keys import Keys from selenium.webdriver import ChromeOptions import time option = ChromeOptions() option.add_experimental_option('excludeSwitches',
2022-05-28 12:56:51
509
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人