qq_61604164的博客

第1关：单节点 Kafka 的安装单节点 Kafka 安装

Spark运行架构及流程第1关：Spark运行架构及流程检测

关闭防火墙

设置主机名

Spark的安装与使用第2关：安装与配置Spark开发环境

Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefusedEncountered IOException running export job:org.apache.hadoop.mapreduce.lib.input.InvalidInputException: Input path does not exist: hdfs://hadoop1:9000/app/text.tx

Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster

Caused by: java.net.ConnectException: Call From hadoop1/192.168.69.137 to hadoop1:9000 failed on connection exception: java.net.ConnectException: Connection refused; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused

启动Mysql时报错系列

rz上传文件失败

Unable to locate package libmysqlclient-dev

WARNING: Use of this script to execute namenode is deprecated.WARNING: Attempting to execute replacement "hdfs namenode" instead.2022-11-04 03:40:58,790 INFO namenode.NameNode: STARTUP_MSG:WARNING: HADOOP_SECURE_DN_USER has been replaced by HDFS_DATA

ssh免密登录

locate命令，updatedb命令，which命令，whereis命令

setuid命令,setgid命令,stick bit命令chattr命令,lsattr命令

df命令详解,du命令详解,Linux硬链接,Linux软链接

Linux创建文件，Linux删除文件，Linux创建目录，Linux删除目录，Linux拷贝文件，Linux重命名文件，Linux拷贝目录，Linux重命名目录，Linux查看文件内容（cat命令，head命令，tail），Linux查看目录内容

用户密码存放地及方式，使用passwd命令修改用户密码，使用chpasswd命令修改用户密码

Linux创建用户命令；Linux删除用户命令

Linux man命令 Linux info命令

Linux文件/目录所属组修改

Linux修改文件/目录所有者

1.hadoop：首先要进入到hadoop的目录下，执行sh.sbin/start-dfs.sh命令启动dfs执行sh.sbin/start-yarn.sh命令启动yarn集群 使用start-all.sh。启动完成后利用jps命令查看节点。2.zookeeper：也要进入到该目下下，执行sh bin/zkServer.sh start命令启动zookeeper3.hbase：进入到该目录下，执行sh bin/start-hbase.sh命令进行启动hbase。关闭集群时，把start换

文件权限管理三种基本权限R 读 数值表示为4W 写 数值表示为2X 可执行 数值表示为1

系统信息arch 显示机器的处理器架构(1)uname -m 显示机器的处理器架构(2)uname -r 显示正在使用的内核版本dmidecode -q 显示硬件系统部件 - (SMBIOS / DMI)hdparm -i /dev/hda 罗列一个磁盘的架构特性hdparm -tT /dev/sda 在磁盘上执行测试性读取操作cat /proc/cpuinfo 显示CPU info的信息cat /proc/interrupts 显示中断cat /proc/meminf...