
java大数据
小五冲冲冲
分享日常学习心得
展开
-
idea连接hive老是自动断开连接java.net.ConnectException: Connection refused: connect.
原因:hive的jdbc服务hiveserver2服务不稳定,容易掉线,导致idea无法连上hive,实际上idea能连上hive靠的就是hiveserver2服务。解决办法:在hive的配置文件hive-site.xml中开启hiveserver2服务的高可用,即掉线了会马上再开启一个,配置如下。原创 2022-12-17 01:55:12 · 1537 阅读 · 0 评论 -
idea连hive出现要密码
原因:hive-site.xml的hiveserver2服务(连jdbc的服务)没配好。idea连hive和beeline连hive是一个道理。指定hiveserver2连接的host。两个配置(注意缩进)原创 2022-12-15 22:32:22 · 315 阅读 · 0 评论 -
配置了高可用的hadoop怎么格式化namenode
配置了高可用的hadoop怎么格式化namenode原创 2022-12-03 15:50:28 · 826 阅读 · 0 评论 -
Clickhouse出现Code: 210. DB::NetException: Connection refused (localhost:9000)-clickhouse无法连接问题
clickhouse原创 2022-08-18 22:04:40 · 790 阅读 · 0 评论 -
DBeaver配置phoenix
DBeaver Pheonix原创 2022-08-11 16:49:03 · 405 阅读 · 0 评论 -
同时操作多行的方法,idea,notepad++
sql原创 2022-07-15 14:07:17 · 996 阅读 · 0 评论 -
Hive中出现 Display all 528 possibilities? (y or n)
hive原创 2022-07-15 10:37:20 · 1137 阅读 · 0 评论 -
Yarn上(Hadoop上)跑Spark出现Retring connect to server. 集群间机器无法连接的问题
如果配置都正常的话,尝试格式化hadoop,可能时hadoop很久没用了,做过系统,迁移过虚拟机等导致删除所有集群机器hadoop目录中的data和logs文件夹,没有没找到就不用删直接格式化格式化集群...原创 2022-05-10 18:37:44 · 630 阅读 · 0 评论 -
Maven模块出现java文件框灰色
右键模块名,增加框架支持Add Frameworks Support,添加Maven和Scala找到右边的Maven刷新原创 2022-05-10 01:44:06 · 279 阅读 · 0 评论 -
Idea中改Maven地址和仓库地址
原创 2022-05-10 01:56:25 · 318 阅读 · 0 评论 -
Hbase报错解决方法ERROR: KeeperErrorCode = NoNode for /hbase/master
原因:断电(包括电脑睡眠等)导致Hmaster连不上,zookeeper中找不到master节点解决方法:删除zookeeper中的hbase节点,开启hbase会自动建立这个节点1)登陆zookeeper客户端:zkCli.sh2)删除hbase节点:deleteall /hbase最关键的一步:重启hbase、重启zookeeper1)关闭zookeeper:my_zk.sh stop 这是我的开启zk的脚本,别抄2)关闭hbase:stop-hbase.sh无效,使用jps命..原创 2021-11-08 23:30:33 · 8946 阅读 · 0 评论 -
1 partitions have leader brokers without a matching listener
kafka集群有机器的kafka服务掉了,重启kafka服务尝试不行的话可能有什么冲突,比如kafka eagle与kafka的冲突关闭kafka eagle服务,更换kafka eagle的版本即可原创 2021-10-30 23:48:18 · 2225 阅读 · 0 评论 -
Diamond types are not supported at this language level 语法级别没到jdk1.8
改项目语法级别改模块语法级别原创 2021-10-28 15:07:20 · 198 阅读 · 0 评论 -
安装ganglia后,访问浏览器出现“You don‘t have permission to access /ganglia/ on this server“
sudo vim /etc/httpd/conf.d/ganglia.conf<Location /ganglia>#Order deny,allow#Deny from all#Allow from all#Allow from 127.0.0.1#Allow from ::1Allow from.example.comRequire all granted改成对任何ip授权,你的浏览器就能打开了原创 2021-10-24 23:12:29 · 1893 阅读 · 0 评论 -
namenode无法启动
未配置高可用HA此时删除hadoop目录下的data和logs目录,重新格式化namenode即可, hdfs namenode -format配置了高可用HA(有多个namenode)在一台主机的HA目录下中的hadoop目录下删除data和logs目录,利用分发脚本或一个一个分发,将HA目录分发到其它机器,例如我的分发脚本是my_rsync.sh ha/ ,HA目录一致很重要,接下来继续在操作的主机上进行namenode格式化hdfs namenode -format,就会产生新的data和.原创 2021-10-11 12:26:38 · 629 阅读 · 0 评论 -
Beeline连接报错:Could not open client transport with JDBC Uri: jdbc:hive2://localhost:10000/default
还要单独开一个窗口启动hiveserver2服务,这个服务是beeline连接的,提供jdbc协议帮助操作hive的hive --service hiveserver2配置了元数据服务,必须单独开一个窗口先开启这个元数据服务,这个服务是上面操作了hive后,hive又会通过操作元数据的方式操作mysqlhive --service metastore...原创 2021-10-06 11:15:32 · 1625 阅读 · 0 评论 -
hive卡在Logging initialized
hive没找到nn你没启动hdfs启动了没有nn处于active状态如果配置了zookeeper,要先启动zookeeper集群,再启动hdfs集群,才会有active状态的nn原创 2021-10-01 10:27:03 · 848 阅读 · 0 评论 -
Hadoop中mapreduce常见代码错误
入口错误import com.sun.jersey.core.impl.provider.entity.XMLJAXBElementProvider.Text;import org.apache.hadoop.io.Text;下面正确map输出的k,v类型与reduce输入的k,v类型不一致public class ByteCalculationMapper extends Mapper<LongWritable, Text, Text, IntWritable> {publ..原创 2021-09-11 22:08:13 · 362 阅读 · 0 评论 -
Maven依赖爆红
将依赖剪切,再粘贴换放jar包的仓库血泪总结,有用麻烦给个赞!原创 2021-09-02 14:45:52 · 289 阅读 · 0 评论 -
hadoop checknative过程中出现false,如zstd、openssl为false或全部false
全部false:不要到网上找答案了,版本不兼容,直接用centos7(如果你用的centos6)zstd:false(输入下面代码,下载即可)yum -y install epel-releaseyum -y install zstdopenssl:false(同理,非root用户命令前面加sudo不用说吧)yum -y install openssl-devel...原创 2021-08-25 20:02:47 · 1332 阅读 · 1 评论 -
yum更换镜像源时(makecache)出现The requested URL returned error: 404 Not Found
原因:镜像源地址无效了,CentoS 6 停止维护更新日期:2020年11月30日,阿里、网易镜像源统统无效,更改镜像源即可输入命令vi /etc/yum.repos.d/CentOS-Base.repo修改镜像源(文件内容全部删掉,输入以下命令)[centos-office]name=centos-officefailovermethod=prioritybaseurl=https://vault.centos.org/6.10/os/x86_64/gpgcheck=1gpgkey=htt原创 2021-08-19 18:30:15 · 334 阅读 · 0 评论 -
centos配置静态ip重启后无效
原因:CentOS系统上有NetworkManager和network两种网络管理工具。如果两种都配置会引起冲突,而且NetworkManager在网络断开的时候,会清理路由,如果一些自定义的路由,没有加入到NetworkManager的配置文件中,路由就被清理掉,网络连接后需要自定义添加上去,因此是路由重启被NetworkManager清理了。解决方法:都能配置网络,就是说network可以替代NetworkMagement,停掉NetworkMagement即可解决这种冲突servi..原创 2021-08-12 13:09:42 · 2002 阅读 · 0 评论 -
配置静态ip出现 eth0: 错误:未知连接:f7d2609a-d666-4c4e-9ce8-01ae908dc239
配置文件中的UUID出现错误,删掉或注释即可。只需要把/etc/sysconfig/network-scripts/ifcfg-eth0配置文件中的UUID="f7d2609a-d666-4c4e-9ce8-01ae908dc239"注释掉就行了,删掉也可以。UUID(Universally Unique Identifier)是系统层面的全局唯一标识符号,Mac地址以及IP地址是网络层面的标识号;两台不同的Linux系统拥有相同的UUID并不影响系统的使用以及系统之间的通信;UUID并不是网络配置的原创 2021-08-12 12:39:59 · 1258 阅读 · 0 评论 -
Idea web.xml报错 ‘org.springframework.web.servlet.DispatcherServlet‘ is not assignable to
目标Servlet不是可指定的可转让的,即找不到目标servlet问题:没有依赖Tomcat Library类库解决:到项目架构中添加Tomcat Library的依赖原创 2021-08-08 00:12:48 · 2056 阅读 · 1 评论 -
Idea新建模块没有Spring Initializr选项
原因是没有安装spring boot的插件,安装后重启Idea即可(第一次用都要安装插件,如Tomcat也是)原创 2021-06-24 16:52:03 · 1177 阅读 · 0 评论 -
Maven: Failed to read artifact descriptor解决方法,maven project报红(终极版)
读取工件描述符失败(此文价值较高,建议收藏)删除我们的出问题的文件夹(jar包文件夹,这是我的本地仓库,放jar包的地址,初始位置在c盘搜.m2即可,或者查看一下Idea或eclipse里面的默认位置,图二Idea为例),如此处的junit进入Idea或eclipse,update更新,会自动下载刚刚删除的文件(因为你在配置),一般此时解决问题如果此时还不行,说明下载出了问题,找到Maven安装目录---->conf---->setting.xml(可用notepad++原创 2021-06-21 23:04:52 · 2019 阅读 · 0 评论 -
idea部署Tomcat出现找不到chrome文件
1.去桌面找到chrome图标,右击复制目标地址2.更改目录原创 2021-06-19 23:27:57 · 1135 阅读 · 1 评论 -
idea部署Tomcat出现找不到 localhost 的网页
在配置时,点部署Deployment,然后+号,下面划重点,下面的根目录一条斜杠即可原创 2021-06-19 23:25:49 · 2884 阅读 · 0 评论 -
IDEA中Edit Configurations中没有tomcat的问题
到插件配置中将Tomcat插件勾上即可原创 2021-06-19 22:41:24 · 668 阅读 · 0 评论 -
Missing node.js
Wild Web Developer插件能够调试node.js程序,node.js是js的一种运行环境卸载这个插件即可解除警报Help---->install new software 1原创 2021-06-19 15:51:26 · 1016 阅读 · 0 评论 -
Date cannot be resolved to a type
无法将日期解析为一个类型,简单说就是没导包,一般情况出现在写jsp中,因为其它会提示导包解决方法:在开头命令集中,加入导入java工具类的代码即可原创 2021-06-18 17:34:43 · 1831 阅读 · 0 评论 -
调eclipse背景颜色(绿色为例)
实际为调编辑区域颜色,绿色保护眼睛,window ----> preference原创 2021-06-05 23:15:38 · 530 阅读 · 2 评论 -
eclipse中搜不到javaee透视图
解决办法:在eclipse里面下载打开eclipse ----> help ----> install…最后记得重启eclipse原创 2021-06-05 21:29:53 · 479 阅读 · 0 评论 -
You have an error in your SQL syntax; check the manual that corresponds to y
sql语法错误,一般是少了逗号,极小概率是单词有重复的字母出错原创 2021-06-04 19:43:59 · 315 阅读 · 0 评论 -
java.lang.Exception: No tests found matching [{ExactMatcher:fDisplayName=test5], {ExactMatcher:fDisp
没有测试被发现能匹配, 没加@Test注解,粗心导致原创 2021-06-04 19:41:36 · 136 阅读 · 0 评论