湖仓一体
努力有什么不好
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
StarRocks集群的数据存储在CFS上,集群重启后服务卡在初始化起不来问题原因
博主的StarRocks生产集群部署在虚拟机中,三台虚拟机,FE、BE混合部署,随着业务使用增加,CPU和内存资源不够,所以停机扩容,但是在扩容完成重启集群后发现StarRocks集群FE、BE都写入不了CFS上的文件。StarRocks的FE、BE数据目录都是存储在CFS上。jstack检查JVM,一直卡在某个启动类中,原因是FE进程写入fe.pid文件失败。导致StarRocks无法写入CFS,服务一直处于初始化阶段。但是重启机器后,配置文件/etc/fstab中挂载参数却为。原创 2025-12-18 18:37:15 · 459 阅读 · 0 评论 -
StarRocks使用ProxySQL代理的连接巡检
查询结果:字段如下图,通过l_srv_host, l_srv_port定位到匹配上述代理IP和端口,通过cli_host, cli_port定位到MySQL客户端。如定位到异常SQL,比如某个连接一直发送SET autocommit=1死循环,先定位a.clientIp,找到代理的IP和端口。原创 2025-08-18 11:34:55 · 396 阅读 · 0 评论 -
DataX同步hive数据到starrocks
如果在目录datax/plugin/writer 中直接解压,解压后需要把starrockswriter.tar.gz删掉。下载地址https://github.com/StarRocks/DataX/releases。StarRocks官方提供了DataX的Writer插件。解压至目录datax/plugin/writer。原创 2025-06-09 17:08:42 · 481 阅读 · 0 评论 -
iceberg轨迹表生成
或者指定时间戳,获取指定时间范围的数据变化轨迹。能够捕捉数据的增、删、改。_change_type:更改的类型。它具有以下值之一:INSERT、DELETE、UPDATE_BEFORE 或 UPDATE_AFTER。identifier_columns:用于捕捉数据变化的标识列。可设置为主键,捕捉这条记录的增、删、改。_commit_snapshot_id:发生更改的快照 ID。_change_ordinal:更改顺序,从0开始。changelog_view:创建视图的名称。table:必输,表名。原创 2025-05-06 12:02:04 · 407 阅读 · 0 评论
分享