Jiaaazx-优快云博客

原创论文撰写总结-公式篇

描述，定义式子结合重写是肯定的解释式子中的变量含义证明完成DefineasDesignConstructasForasApplyingis used toκpqone has(得到)

2023-03-31 16:36:16 139

1、修改主机名(三台)hostnamectl set-hostname masterbash #立即生效hostnamectl set-hostname slave1bash #立即生效hostnamectl set-hostname slave2bash #立即生效2、配置本地源(三台，练习不执行，比赛执行)发信号给 yum 进程：pkill -9 yum进入 yum 源配置文件：cd /etc/yum.repos.d删除所有文件：rm -rf *下载 yum 源：wget

2021-05-16 10:27:18 1042

原创红亚华宇杯环境变量

1、打开文件vim /etc/profile2、各种环境变量#set jdkexport JAVA_HOME=/usr/java/jdk1.8.0_171export CLASSPATH=$JAVA_HOME/lib/export PATH=$PATH:$JAVA_HOME/binexport PATH JAVA_HOME CLASSPATH#set zookeeper environmentexport ZOOKEEPER_HOME=/usr/zookeeper/zookeeper-3

2021-05-16 10:11:17 209

原创红亚华宇杯爬虫

1、导入第三方库import requestsimport jsonfrom bs4 import BeautifulSoupimport reimport timeimport osimport pandas as pdimport random2、获取网页内容def fetchURL(url): ''' 功能：访问 url 的网页，获取网页内容并返回参数： url ：目标网页的 url 返回：目标网页的 html 内容 ''

2021-05-15 17:10:06 647

原创安装zookeeper3.5.7

1、下载压缩包网上说3.5.5之后需要安装bin的压缩包，我就直接下载了bin的，有可能不带bin的也可以，但是我没试2、传入虚拟机创建工作文件夹mkdir -p /usr/zookeeperxshell里用rz，在windows中找到下载的文件3、解压并改名tar -zxvf apache-zookeeper-3.5.7-bin.tar.gzmv apache-zookeeper-3.5.7-bin zk4、在zookeeper下创建所需文件夹在 zk 的目录中，创建配置中所需的 z

2020-09-02 11:50:04 954

原创 python模拟登陆人人网（selenium、cookies、表单）

以爬取包贝尔主页信息为例代码解释模拟登陆1、导入所需第三方库from selenium import webdriverfrom selenium.webdriver.common.by import Byfrom selenium.webdriver.support.ui import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as ECfrom selenium.webdriver.comm

2020-05-27 09:39:42 690

原创 PYTHON爬取京东商品评论

京东商品评论是动态网页，用get请求，但是得到之后不是json，所以就需要去一个参数或者返回text，然后用切片1、更改url参数返回jsonurl获取方法：打开京东商品，用谷歌开发者工具，找到network，然后刷新，查找comments,找到返回评论的那个文件。找到url后，去除参数callback即可返回json(1)获取import requestsdef get_commen...

2020-03-15 16:58:31 923 1

原创常用hadoop shell 命令

1、创建文件夹hadoop fs -mkdir [path]hadoop fs -mkdir /test12、创建文件hadoop fs -touch [path]hadoop fs -touch /test1/first.txt3、查看目录下文件hadoop fs -ls [path]hadoop fs -ls /递归查看hadoop fs -find /4、将本地文件上传...

2020-03-07 22:28:25 240

原创 hadoop全分布模式搭建

第一次写博客，有点小激动，这个集群只有三个节点，在网上找了一堆参考资料，配置了前前后后四天才搞清。1、文件准备centos7 jdk1.8 hadoop3.1.3这些文件官网上都有，自己寻找下载下载Hadoop文件的时候，一定要注意，下载不带src的，src的是源代码包，和正常操作的不一样。。。。2、创建3台虚拟机如果选择典型，则只有一个终端界面，并且一直在root下，是管理员模...

2020-03-04 20:02:48 231

NorthWest1的博客