- 博客(14)
- 收藏
- 关注
RSS订阅转载 2020-12-12
Kubernetes 部署 Kubernetes-Dashboard v2.1.0!版权声明：本博客内容均均为原创,每篇博文作为知识积累,写博不易,转载请注明出处。目录[-]. 一、简介. 二、兼容性. 三、部署 Kubernetes Dashboard. 1、Dashboard RBAC. 2、创建 ConfigMap、Secret. 3、kubernetes-dashboard. 4、创建 kubernetes-metrics-scraper. 5、创建访问的 ServiceAcco
2020-12-12 22:14:12
497
原创 https://llovewxm1314.blog.youkuaiyun.com/article/details/108458197
[root@k8s-master ~]# kubectl get csWarning: v1 ComponentStatus is deprecated in v1.19+NAME STATUS MESSAGE ERRORcontroller-manager Unhealthy G...
2020-12-12 22:09:09
1328
原创 安装fastDFS
安装FastDFSyum -y install gcc unzip pcre-devel zlib zlib-devel openssl openssl-develyum -y install gcc gcc-c++ libstdc++-devel pcre-devel zlib-devel wget makeyum -y groupinstall 'Development Tools'yum -y install gcc pcre-devel zlib-devel openssl openssl-
2020-11-27 09:27:20
196
原创 MinIO配置集群
1、获取Miniohttps://dl.min.io/server/minio/release/linux-amd64/minio2、修改主机名及hostshostnamectl set-hostname minio1hostnamectl set-hostname minio2cat >> /etc/hosts <<EOF192.168.100.20 minio1192.168.100.21 minio2EOF3、系统最大文件数修改挂在了2块硬盘，集群部署
2020-11-26 21:05:29
1633
原创 hive 插入数据的时候，不能直接运行，报错FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.
hive 插入数据的时候，不能直接运行，报错错误原因：namenode内存空间不够，JVM剩余内存空间不够新job运行所致错误提示Starting Job = job_1594085668614_0006, Tracking URL = http://kudu:8088/proxy/application_1594085668614_0006/Kill Command = /root/soft/hadoop-3.2.1/bin/mapred job -kill job_1594085668614
2020-07-07 09:54:54
2873
2
原创 修改kafka、zookeeper启动内存大小
1.修改bin目录下的 zookeeper-server-start.sh，将初始堆的大小(-Xms)设置小一些export KAFKA_HEAP_OPTS="-Xmx512M -Xms512M"修改bin目录下的kafka-server-start.sh文件，将初始堆的大小(-Xms)设置小一些 export KAFKA_HEAP_OPTS="-Xmx1G -Xms128M"在config目录下的server.properties中增加 log.cleaner.dedupe.buffer.
2020-07-06 14:57:23
5655
原创 linux 上传文件 yum -y install lrzsz
从本地上传文件到linux 服务器运行yum -y install lrzsz直接拖拽就可以实现
2020-06-30 13:23:33
2331
原创 centos 7安装nodejs
1.安装wgetyum install wget2.下载对应文件wget -c https://nodejs.org/dist/v8.9.1/node-v8.9.1-linux-x64.tar.xz3.解压tar -xvf node-v8.9.1-linux-x64.tar.xz4.重命名mv node-v8.9.1-linux-x64 nodejs5.查看版本node --version7.解决npm安装失效问题 sudo vim /etc/profile#在文件的底部
2020-06-30 11:31:14
218
原创 pyenv & virtualenv 的安装与使用
1、 安装pyenv、创建安装目录mkdir /.pyenv 3、 下载安装文件git clone https://github.com/yyuu/pyenv.git ~/.pyenv5、 配置环境变量echo ‘export PYENV_ROOT="$HOME/.pyenv"‘ >> ~/.bash_profileecho ‘export PATH="$PYENV_ROOT/bin:$PATH"‘ >> ~/.bash_profile8、 添加pyenv初始化到
2020-06-29 09:23:40
407
原创 Spark RDD 操作
1、创建SparkSession//创建一个SparkSession，在Spark2.1中，SparkSession包括了SparkContext，若想使用SparkContext，用sc.sparkContext即可 val sc = SparkSession .builder() .appName("ttt") //.enableHiveSupport() .getOrCreate() 2、RDD创建 //创建intRDD
2020-06-28 09:10:04
277
原创 安装单机版本hadoop
安装单机版本hadoop1、安装java 略…2、下载hadoop3.2.1wget https://mirror.bit.edu.cn/apache/hadoop/common/hadoop-3.2.1/hadoop-3.2.1.tar.gz3、解压缩tar zxvf hadoop-3.2.1/hadoop-3.2.1.tar.gz -C /root/soft/4、进入目录更改配置文件cd /root/soft/hadoop-3.2.1/etc/hadoop/5、添加环境变量vi
2020-06-24 10:40:07
205
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人