- 博客(23)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 五集群环境搭建-使用root用户
搭建zookeeper集群，Hadoop HA集群，Hbase HA集群，Spark HA集群，kafka集群
2022-09-26 21:48:05
2552
原创 hive-2.3.4的安装配置及与hadoop上传脚本使用的简单实验
所需文件：Mysql57-community-release-el7-11.noarch.rpmMysql-connector-java-5.1.48-bin.jarapache-hive-2.3.4-bin.tar.gz下载安装包：大数据部分组件（包含Mysql-connector-java-5.1.48-bin.jarapache-hive-2.3.4-bin.tar.gz）一、Mysql准备工作0.切换root用户su root1.下载MySQL的Yum Repository
2022-05-12 19:00:19
588
原创 三台主机关于ntp时间同步的实验
目标：设置master为ntp服务器master连接外网服务器进行时间同步slave1和slave2与master进行时间同步master IP地址192.168.18.130slave1 IP地址192.168.18.131slave2 IP地址192.168.18.132一、安装ntp服务三台机子都要安装ntp服务查看是否安装rpm -qa | grep ntp没有安装ntp使用如下命令安装yum –y install ntp二、配置ntp服务master修改/
2022-04-18 20:45:38
725
原创 spark-2.3.3-bin-hadoop2.7的安装
一、下载解压spark2.3.3官网下载地址:spark-2.3.3-bin-hadoop2.7解压到/usr/local/spark二、修改配置文件（1）修改文件主并赋予权限sudo chown -R djl:djl /usr/local/sparksudo chmod -R 777 /usr/local/spark(2)配置spark-env.sh 、slaves 、log4j.propertiessudo mv spark-env.sh.template spark-env.sh
2022-04-14 18:02:02
3745
原创 Zookeeper-3.4.13集群配置
一、下载Zookeeper-3.4.13官网下载地址二、解压Zookeeper-3.4.13到/usr/local/,并该名为zookeeper略三、配置Zookeeper1.复制模版文件zoo_sample.cfg为zoo.cfgcp /usr/local/zookeeper/conf/zoo_sample.cfg /usr/local/zookeeper/conf/zoo.cfg2.修改配置文件zoo.cfg# The number of milliseconds of each
2022-03-09 22:55:33
2346
原创 hbase分布式部署
实验平台：操作系统：Ubuntu：16.04Hadoop：3.3.1Hbase版本：2.4.9JDK版本：1.8hbase官网下载地址hbase-2.4.9-bin.tar.gz1.解压hbase-2.4.9-bin.tar.gz到/usr/local/并改名为hbase2.在~/.bashrc文件中配置环境变量sudo vim ~/.bashrcexport PATH=$PATH:/usr/local/hbase/binsource ~/.bashrcsudo chown -
2022-01-02 16:09:32
1342
原创 Ubuntu16.04 配置 hadoop-3.2.2 分布式模式
1.安装vim2.安装jdk-8u211-linux-x64.tar.gz3.安装配置ssh4.安装配置hadoop-3.3.1环境：第一台虚拟机：IP地址：192.168.157.130机器名：Master第二台虚拟机：IP地址：192.168.157.131机器名：Slave1两台虚拟Ubuntu中 /etc/hosts 文件添加配置如下：192.168.157.130 Master192.168.157.131 Slave1一、安装vimsudo apt instal
2021-11-09 21:19:46
1649
原创 .bashrc文件部分配置
export HADOOP_HOME=/usr/local/hadoopexport HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/nativeexport PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:export JAVA_LIBRAY_PATH=/usr/local/hadoop/lib/nativeexport LD_LIBRARY_PATH=$JAVA_LIBRARY_PATHexport J
2021-11-01 20:57:22
1099
原创 Ubuntu Hadoop3.3.1 伪分布式安装 草稿
一、cd /usr/local/hadoop/etc/hadoop/vim core-site.xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://hadoop1:9000</value> </property> &l
2021-10-11 23:23:00
120
原创 Ubuntu安装Hadoop-3.3.1
Hadoop包括3种安装模式1.单机模式2.伪分布模式3.分布式模式一、下载Hadoop安装文件文件名称：hadoop-3.3.1.tar.gz网页地址：https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz直接下载链接地址：https://dlcdn.apache.org/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz假设我们
2021-09-23 21:24:56
636
原创 Ubuntu安装java JDK
一、下载JDK在Ubuntu系统中下载JDK文件名称：jre-8u301-linux-x64.tar.gzjdk下载地址：https://java.com/en/download/manual.jsp这里假设将下载得到的JDK安装文件保存在Ubuntu系统的用户桌面下（例如：/home/用户名/桌面）二、对JDK安装文件解压缩1.执行如下命令创建/usr/lib/jvm目录用来存放JDK文件cd /usr/libsudo mkdir jvm2.对JDK安装文件解压缩 sudo
2021-09-23 20:58:37
616
原创 Django3.1.8 引用css、images、js等文件
问题：使用Django3.1.8搭建网站过程中，发现css，js等类型文件加载失败解决：目录结构通过查找资料发现需要在Django的setting.py中提供静态文件目录于是有第一步在setting.py中修改末尾：STATIC_URL = '/static/'#添加静态文件目录地址STATICFILES_DIRS = ( os.path.join(BASE_DIR, "static/"),)#BASE_DIR = Path(__file__).resolve(
2021-05-07 18:41:48
177
原创 win10使用composer安装Elasticsearch-php
本机安装环境：win10phpstudy8.1.1.2–>Apache2.4.39–>php7.3.4nts–>MySQL5.7.26–>composer1.8.5elasticsearch7.12.0一、下载安装配置phpstudyphpstudy官网下载地址：https://www.xp.cn测试配置：–>Apache2.4.39–>php7.3.4nts–>MySQL5.7.26在软件管理安装composer二、使用阿里compo
2021-04-21 23:31:06
631
原创 查WiFi密码
@echo offcolor 2fmode con: cols=40 lines=15title WiFi密码查询echo 正在查询结果setlocal enabledelayedexpansionfor /f "tokens=2* delims=:" %%i in ('netsh wlan show profiles') do ( set str=%%i for /f "tokens=3* delims= " %%d in ('netsh wlan show profiles
2021-03-14 11:38:05
1619
原创 Centos7 命令行界面转图形界面（跳板）
https://www.linuxidc.com/Linux/2018-04/152000.htmhttps://blog.51cto.com/xwxhvip/2052205
2021-03-11 12:52:59
370
原创 Python基础
2.1.1常量与变量python中不需要事先声明变量及其类型，直接赋值即可创建任意类型的对象变量。x = 3 #整型变量x = "hello" #字符串变量x = [1,2,3] #创建列表对象python中的变量并不是直接储存值，而是储存了值的 内存地址或者引用，这也是变量类型随时可以改变的原因。定义变量名注意事项1.变量名必须要以字母或下划线开头。最好用字母2.变量名里不能有空格或标点符号。3.不能使用关键字作为变量名。4.变量名对大小写敏感，student与Student
2020-12-02 19:04:33
152
原创 MySQL的安装
win10-64位 MySQL 8.0.22的安装一、打开官网-下载二、根据操作系统选择要安装的版本三、解压并配置my.ini文件[mysqld]#设置3306端口port=3306#设置mysql的安装目录basedir=C:\Program Files\MySQL#设置mysql数据库的数据的存放目录datadir=C:\Program Files\MySQL\Data#允许最大连接数max_connections=200#允许连接失败的次数。max_connect_e
2020-11-14 18:20:10
313
原创 第二天 办公软件和计算机网络与多媒体技术（结束） 2020-10-31-11
word文字处理Excel电子表格PowerPoint演示文档计算机等级考题库计算机网络基础一. 计算机网络定义及发展历程计算机网络定义： 计算机网络是指将地理位置不同的具有独立功能的多台计算机及其外部设备，通过通信线路连接起来，在网络操作系统，网络管理软件及网络通信协议的管理和协调下，实现资源共享和信息传递的计算机系统。第一阶段： 20世纪60年代末到20世纪70年代初为计算机网络发展的萌芽阶段。其主要特征是：为了增加系统的计算能力和资源共享，把小型计算机连成实验性的网络。第一个远程分
2020-10-31 11:20:34
442
原创 第一天 计算机基础知识 2020-10-25-23
计算机基础知识计算机-百度百科一.计算机基本概念二.计算机系统组成三.计算机硬件组成四.计算机工作原理五.计算机进制编码六.计算机安全2.计算机系统由 硬件系统 与 软件系统 组成3.微型计算机硬件组成微型计算机总线与接口总线（Bus）是计算机各种功能部件之间传送信息的公共通信干线，它是由导线组成的传输线束， 按照计算机所传输的信息种类，计算机的总线可以划分为数据总线、地址总线和控制总线，分别用来传输数据、数据地址和控制信号。总线是一种内部结构，它是cpu、内存
2020-10-25 23:10:57
217
原创 记录开始 2020-10-25
学习目标：一周掌握 计算机基础学习内容：1、 计算机基础知识2、 windows操作系统3、 word文字处理4、 Excel电子表格5、PowerPoint演示文档6、计算机网络基础7、多媒体技术基础学习时间：空闲时间学习产出：1、 技术笔记 N 遍2、优快云 技术博客 N 篇...
2020-10-25 21:59:39
80
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人