
Big Data
大数据错误总结
骑着蜗牛ひ追导弹'
鲸落于海,星沉于洼,风隐于密林,蝉鸣漏进夏至。
抖音:51288024251 第七章欢迎您来听歌!
展开
-
【Docker】服务容器端口占用重启失败 bind: address already in use
服务容器端口占用重启失败 bind: address already in use原创 2022-08-18 00:15:49 · 966 阅读 · 0 评论 -
【CentOS】rpm受损导致yum下载失败(错误:无法从 /var/lib/rpm 打开软件包数据库)
rpm受损导致yum下载失败原创 2022-08-16 22:27:53 · 1311 阅读 · 0 评论 -
【Hbase】Could not start ZK with 3 ZK servers in local mode deployment.
报错安装完hbase启动的时候报错:Could not start ZK with 3 ZK servers in local mode deployment. Aborting as clients (e.g. shell) will not be able to find this ZK quorum.分析翻译:无法在本地模式部署中使用3台ZK服务器启动ZK。由于客户端(如shell)将无法找到此ZK仲裁,正在中止.也就是说不能够实现分布式的部署,找到配置文件 hbase-site.xml.原创 2022-05-05 19:18:16 · 2695 阅读 · 0 评论 -
【ZooKeeper】Error contacting service. It is probably not running.
报错[root@ha bin]# ./zkServer.sh startJMX enabled by defaultUsing config: /usr/local/src/zookeeper/bin/../conf/zoo.cfgStarting zookeeper ... STARTED[root@ha bin]# ./zkServer.sh statusJMX enabled by defaultUsing config: /usr/local/src/zookeeper/bin/..原创 2022-04-29 10:27:06 · 1010 阅读 · 0 评论 -
【Linux】安装MySQL后初始化失败锦集
文章目录1、Can't change dir to '/usr/local/src/mysql/data/' (Errcode: 13 - Permission denied)2、unknown variable 'defaults-file=/etc/my.cnf'1、Can’t change dir to ‘/usr/local/src/mysql/data/’ (Errcode: 13 - Permission denied)[root@slave1 bin]# ./mysqld --use..原创 2022-04-13 11:49:44 · 10481 阅读 · 1 评论 -
【Spark】项目导入报错:java.lang.NoSuchMethodError: scala.Product.$init$(Lscala/Product;)V
报错Exception in thread "main" java.lang.NoSuchMethodError: scala.Product.$init$(Lscala/Product;)V at org.apache.spark.SparkConf$DeprecatedConfig.<init>(SparkConf.scala:809) at org.apache.spark.SparkConf$.<init>(SparkConf.scala:642) at org.a.原创 2022-03-25 15:21:33 · 4005 阅读 · 0 评论 -
【CentOS】Hadoop 初始化 NameNode 后启动,查看进程报错
报错在执行 hdfs namenode -format 初始化 NameNode 后,启动 hadoop 集群查看进程时,发现从节点机器一台有NameNode,一台没有:[root@b dfs]# jpsError occurred during initialization of VMjava.lang.Error: Properties init: Could not determine current working directory. at java.lang.System.initP.原创 2022-03-16 17:42:05 · 2807 阅读 · 0 评论 -
【CentOS】MySQL安装失败 - 错误:依赖检测失败:/usr/bin/perl 被 xxx.x86_64 & 需要 net-tools 被 xxx.x86_64 需要
在安装mysql的时候,先开始安装的几个包都没有问题:[root@server mysql-5.7.22]# rpm -ivh mysql-community-common-5.7.22-1.el7.x86_64.rpm 警告:mysql-community-common-5.7.22-1.el7.x86_64.rpm: 头V3 DSA/SHA1 Signature, 密钥 ID 5072e1f5: NOKEY准备中... #############.原创 2022-02-24 21:22:58 · 5738 阅读 · 3 评论 -
【CentOS】无法访问此网站 检查 server 中是否有拼写错误。
Hadoop集群搭建完成后,使用浏览器查看节点状态,输入网址 http://server:50070/,然后报错,如下图所示:解决:原因是 windows系统无法识别出 server,类似于 /etc/hosts 文件中的ip地址映射配置,我们在 windows系统下找到 hosts文件,同样进行ip映射配置。这里推荐使用火绒软件,单击安全工具:选择 修改HOST 文件:追加IP映射配置:保存退出,重新登陆网址:...原创 2022-02-20 23:58:38 · 2555 阅读 · 0 评论 -
【CentOS】Not a valid JAR: /usr/local/src/hadoop
安装了 hadoop 单机版,想利用自身携带的案例jar测试wordcount,却一直报错:[root@server sbin]# hadoop jar /usr/local/src/hadoop 2.7.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.1.jar wordcount ~/input/data.txt ~/outputNot a valid JAR: /usr/local/src/hadoop经过一番查找后,原因是执行该.原创 2022-02-20 18:30:21 · 3922 阅读 · 0 评论 -
【CentOS】ping: baidu.com: Name or service not known
重装CentOS 7 最简版的时候在一开始配置网络出现了无法ping:上网查了半天,也试了半天没找到问题。然后就回到 /etc/sysconfig/network-scripts/ifcfg-ens33 文件,对比了一下,发现问题,再配DNS的时候没有将其大写。果真如此,修改好了后,重启一下网络服务再次 ping就可以了!...原创 2022-02-20 16:38:43 · 545 阅读 · 0 评论 -
【CentOS】flume 报错:“SinkRunner-PollingRunner-DefaultSinkProcessor“
在执行flume任务的时候报了错,如下:Exception in thread "SinkRunner-PollingRunner-DefaultSinkProcessor" java.lang.ExceptionInInitializerError at org.apache.hadoop.tracing.SpanReceiverHost.get(SpanReceiverHost.java:79) at org.apache.hadoop.hdfs.DFSClient.<init>(D.原创 2022-02-20 15:17:57 · 2347 阅读 · 0 评论 -
【CentOS】Sqoop连接数据库报错
安装好Sqoop后尝试安装mysql数据库,结果报错:[hadoop@master ~]$ sqoop list-database --connect jdbc:mysql://127.0.0.1:3306/ --username root -pWarning: /usr/local/src/sqoop/../hbase does not exist! HBase imports will fail.Please set $HBASE_HOME to the root of your HBase i.原创 2022-02-20 13:26:09 · 2818 阅读 · 0 评论 -
【CentOS】bash: rz: 未找到命令
**最近在学习hadoop平台的搭建,创建了分布式环境后,利用xshell进行安装包的本地传输,结果遇到了问题,上传半天没有反应,然后xshell中给出了回应:bash: rz: 未找到命令,猜测是安装的centos最小安装缺少工具,上网一查果真如此,需要安装一下 lrzsz **yum install lrzsz再次传输一下jar包:...原创 2022-02-20 10:13:53 · 7261 阅读 · 4 评论 -
【Hive】 ---- 启动Hive报错 exceptions. jdbc Communications Exception: Communications link failure
报错 :org. apache hadoop. hive. metastore. HiveMetaException: Failed to get schema version / Underlying cause: com mysql jdbc. exceptions. jdbc Communications Exception: Communications link failure解决方案:在启动Hive前,没有启动mysql服务,service mysql start打开mysql服务原创 2020-12-25 19:36:59 · 1514 阅读 · 0 评论 -
【Hadoop】The program ‘jps‘ can be found in the following packages: * openjdk-8-jdk...
报错:以下是网上找的解决而方案,意思就是没有配置jdk。但是我配置过了,还是会出现。然后尝试让配置文件再生效一次,结果就好了。source /etc/profile也就是说它有时候,反应不过来,可以试试再让配置生效一次再去查看。...原创 2021-03-24 14:47:31 · 1540 阅读 · 0 评论 -
【HDFS】 文件下载失败:找不到 XXX 的服务器 IP 地址(主机访问找不到虚拟机IP)
问题:在将jar包放在集群中运行成功后,转存到hdfs上。打开hdfs,想要下载结果文件查看时,出现了找不到虚拟机的IP地址。分析下载访问hdfs的时候,域名解析没有找到相对应的IP地址。解决方案 — 在hosts文件中添加虚拟机IP找到C盘下的hosts文件打开 ,在最后添加上虚拟机IP及其名称由于是C盘可能会有权限原因,这里我使用火绒安全软件直接修改,然后保存退出。再次进入hdfs,点击下载,就可以了~当然,如果添加的虚拟机含有主从节点(伪分布式.原创 2020-12-26 19:12:09 · 1695 阅读 · 2 评论