p715306030的博客

vi编辑器，中命令模式，编辑模式，末行模式，常用命令以及三种模式的相互切换

shell数组,分支语句，判断语句，循环语句，函数的使用

1、Bourne shell（sh）2、C-shell（csh）3、Bash4、Korn shellshell环境变量1、环境变量的优先顺序（1）可写的环境变量（2）只读的shell环境变量shell变量赋值通配符shell中命令执行顺序注释，转义，后台操作

linux中文件容量排查

初始状态（硬盘已经加上）lsblk在这里插入图片描述总体步骤物理卷（PV）卷组（VG）/dev/sdX/dev/sdX1pvdisplay/dev/sdX1resize2fsxfs_growfs。

准备好三台安装好docker的主机、虚拟机或者云服务器均可，并且这些主机在同一局域网内部。

ubuntu防火常用配置

docker compose编排容器

Docker网络及实践

windows通过WSL使用linux子系统

docker常用基本命令包括镜像和容器两个部分

docker数据共享，卷挂载数据共享

旨在为开发、产品、测试人员提供更优雅的接口管理服务。可以帮助开发者轻松创建、发布、维护 API

Hive是构建在Hadoop之上的数据仓库平台- Hive是一个SQL解析引擎,它将SQL语句转译成MapReduce作业并在Hadoop上执行。- Hive表是HDFS的一个文件目录，一个表名对应一个目录名，如果有分区表的话，则分区值对应子目录名。- 其实质将hdfs文件内容变成了表的映射，然后通过mr查询。- 底层存储是HDFS,中间执行时MR，或可视为中转代理。

hadoop生态圈HDFS（分布式存储系统）Sqoop（数据库导入导出工具）hadoop用于数据画像特征向量防止维度爆炸，向量降维数据矩阵，获取样本库通过神经网络（权重不同），获取数据结果，冲突学习，控制误差，递归获取权重体系，优化计算复杂性（分布式，切割数据，通过并行计算优化时间）...

Xrdp是一个开源工具，允许用户通过Windows RDP访问Linux远程桌面。 除了Windows RDP之外，xrdp工具还接受来自其他RDP客户端的连接，如FreeRDP，rdesktop和NeutrinoRDP。 Xrdp现在支持TLS安全层。

shell是在控制台执行的脚本代码，它是客户端访问HDFS的方式之一。## 它是由两大部分组成，a. 一个是Hadoop头部指令（特定的hdfs关键字）可以有三种写法，我们一般使用 hadoop fs 。b. 一个是具体的文件执行指令（与Linux操作指令类似,指令也分为两大部分，一个是保留关键字（作为执行事务）；另一个为参数项，即操作对象），比如 mkdir /tmp 表示在根目录下创建tmp的新目录

Hadoop shell指令idea big data tool使用HDFS-java编程与

hadoop属于分布式技术 框架，需要搭设集群环境，由于物理机有限，通过虚拟化技术可以实现集群节点的创建；hadoop应用的生产环境多使用Linux；社区资源多，学习方便；工具支持多，hadoop属于开源项目，与linux有共同点，有些开源工具方便使用；

安装iptables-services ：yum install iptables-services 修改配置年间进入下面目录进行修改：/etc/sysconfig/iptables查看对外开放的端口状态查询已开放的端口 netstat -anp查询指定端口是否已开 firewall-cmd --query-port=666/tcp提示 yes，表示开启；no表示未开启。对外开发端口查看想开的端口是否已开：firewall-cmd --query-port=6379/tcp

添加用户用户名以newname为例子[root@localhost /]useradd newname #创建用户 haha是用户名[root@localhost /]passwd newname #为该用户设置密码删除用户 [root@localhost /]# userdel -r newname 查看用户列表 [root@localhost /]# cat /etc/passwd...

frp 是一个专注于内网穿透的高性能的反向代理应用，支持 TCP、UDP、HTTP、HTTPS 等多种协议。可以将内网服务以安全、便捷的方式通过具有公网 IP 节点的中转暴露到公网。

Linux进程管理进程属性：系统启动后第一个运行进程systemd，他的进程号是1，是唯一的一个系统内核直接运行的进程；系统进程：操作系统启动后，运行在系统平台；用户进程：与终端关联，使用一个用户的id；守护进程，没有屏幕提示，后台等待请求；

Linux下网络配置文件，配置IP地址，使用vi编辑器（一个很强大的文本编辑器），重启网络服务，显示当前网卡设置

linux文件系统，文件都是挂在"/"下，无后缀概念，但同类文件应该使用同后缀名或扩展名。ls //查看当前目录下的文件，rm //删除文件mv //移动文件，cp //复制文件，more //q退出，enter下一行，空格下一屏（翻页），创建，合并文件，切换目录，创建文件，创建目录，删除目录，排序命令，文件查找

rpm包，软件包管理，软件仓库配置，zip，gzip包的安装、卸载、升级、查询、验证

用户和组管理、用户和组的配置文件、账户管理命令

NFS网络文件系统架设及挂载方法NFS网络文件系统，类似于网上邻居，他是计算机之间共享文件的方法不占本地磁盘空间，通过同步写磁盘实现分布式处理功能。

链接目的：避免多次复制，创建文件链接，各用户可以存取同一文件，实现文件共享。

前后台操作常用命令ctrl + z，jobs，fg，bg.....

远程管理的途径，不同种类的管理途径的管理方法，管理工具的安装，和访问方式。

防火墙：将内网和外网分开的方法，是一种网络隔离技术，在可信得网络和不可信的网络之间设置一道屏障.

Linux系统常用的日志管理命令列出所有用户醉经登录的消息：lastlog列出当前和曾经登入系统的用户信息：last列出失败尝试信息：lastb

文件权限、更改文件属主属组、文件访问权限、文件权限表示方法、三组九位表示、三组九位二进制、文件的特殊权限umask掩码、链接含义、硬链接、号链接（链接路径）软链接、软链接的应用