- 博客(17)
- 收藏
- 关注
原创 Hive union 操作产生空文件,导致 DataX 同步 MySQL失败
Hive union 操作产生空文件,导致 DataX 同步 MySQL失败
2025-02-24 07:13:39
866
原创 Linux的MySQL又崩溃了!!!
背景:常规安装MySQL,MySQL启动无异常,配置binlog后,MySQL也运行正常,关闭虚拟机一段时间后,重启虚拟机,MySQL启动失败。猜测原因:(1)binlog配置后,MySQL配置文件出现问题(2)Linux虚拟机系统文件问题(3)其他未知原因(4)selinux服务(此服务已关闭,不考虑)总结:binlog配置格式错误,导致MySQL启动失败,看journal -xe没看出问题,看/var/log/mysqld.log即MySQL日志找到问题所在。1.查看日志,发现binlog配置有问题。
2025-01-16 22:08:42
187
原创 Hive元数据服务启动失败
2 (SRV_FORCE_NO_BACKGROUND): 阻止主线程的运行,如主线程需要执行 full purge 操作,会导致 crash。”,遂排查文件系统磁盘容量,发现挂载点“/”占用100%,接着猜想很可能是某一个文件占据大量磁盘空间,经过寻找,发现mysql日志文件“/var/log/mysqld.log”占据65G,遂清空(最好备份再清空),此时观察mysql状态。5 (SRV_FORCE_NO_UNDO_LOG_SCAN): 不查看重做日志,InnoDB 存储引擎会将未提交的事务视为已提交。
2024-12-30 16:07:51
730
原创 启动Hive报错:Exception in thread “main“ java.lang.RuntimeException: java.net.ConnectException:
经过观察发现namenode未启动,启动namenode之后,问题解决。
2024-12-09 19:29:59
1116
原创 Datagrip/Beeline 无法连接 Hive
Hadoop未进行相应用户配置(hdfs-site.xml、core-site.xml)随后重启Hadoop,然后就可以成功连接到Hive啦!添加属性,“darren”要改成你自己的用户名。
2024-11-29 22:34:37
471
原创 网易云音乐ncm格式转mp3格式exe文件执行问题(闪退加exe文件自动删除)
已经确定win10安全中心病毒查杀关闭,文件执行时,也找不到保护历史记录,证明这个问题与win10自带病毒查杀关系不大。总结:exe文件执行问题很有可能是其他防护软件产生影响,不仅仅是系统自带防护软件问题。今天执行ncm转mp3格式exe文件时,此exe文件直接闪退并自动删除。最后经过排查,发现电脑自带迈克菲,遂卸载,问题解决。
2024-10-24 16:48:57
230
原创 hadoop namenode和datanode启动后,jps无namenode和datanode
问题解决方法:删除hadoop的data和logs文件夹,重新格式化namenode。
2024-10-10 13:22:05
474
原创 /etc/sysconfig/network-scripts/ifcfg-ens33配置文件冲突
Hadoop集群节点/etc/sysconfig/network-scripts/ifcfg-ens33文件UUID相同,UUID冲突节点网络出现不稳定以及节点ip为非指定静态ip的问题。
2024-10-09 14:02:45
271
原创 Linux 网卡报错mtu 1500 qdisc noop state DOWN group default qlen 1000
【代码】Linux 网卡报错mtu 1500 qdisc noop state DOWN group default qlen 1000。
2024-10-06 17:47:57
576
原创 MyBatis无接口绑定的多个集合参数传递
当我们需要向SQL语句中传递多个集合参数的时候,一般使用接口绑定来实现。但是不通过接口绑定,能不能实现多集合参数传递呢?
2023-06-11 12:07:18
300
原创 MySQL的一些基本概念
RDBMS(Relational Database Management System):关系型数据库管理系统,允许表之间相互关联。SQL(Structured Query Language):结构化查询语言,是一种与数据库管理系统沟通的语言。DBMS(Database Management System):数据库管理系统。DB(Database):数据库。
2023-04-19 20:12:54
91
2
空空如也
Linux脚本一段时间后乱码
2024-12-05
TA创建的收藏夹 TA关注的收藏夹
TA关注的人