- 博客(10)
- 收藏
- 关注
RSS订阅原创 doris-2.1.1 bug，时间函数导致宕机
在使用Doris的过程中，跑SQL的时候发现跑完一条sql后，doris所有节点都挂了，原因是因为某些时间函数导致的，记录一下。
2024-06-27 11:48:31
350
原创 kettle 采集API接口数据，入湖（入库），部署Windows同步任务
本文旨在分享记录利用kettle进行数据采集，采集API接口的数据并将其入数据湖(ps：数据库流程也是一样的)。这里kettle使用kettle7.0，接口类型为可直接读取，无需token，有接口头参数的get接口。接口的数据形式为{"total": 32,"rows": [{"列1": null,"列2": "12"}],"code": 200,"msg": "查询成功"}
2024-06-26 15:56:17
2555
原创 spark jdbc读取mysql|doris过慢
针对spark jdbc读取mysql过慢的情况，原因是因为在参数配置时，没有进行分区，此时并行度只有1，运行容易出现GC和数据拥堵的情况，针对此种情况，解决方式是增加并行度。
2024-06-12 16:14:47
441
1
原创 doris union all的问题报错及解决办法
union all的用法，其实不陌生的。union all上下的字段名要一致，字段数据类型要一致。但是满足上面两点后还是报错(doris 可以正常查询，但是当把下面这段sql做成逻辑视图时，就会报错)。后面发现，原来是doris不支持顶层查询，换句话说，换成下面的代码就可以了。
2024-06-12 08:44:37
548
原创 dolphinscheduler-3.0.6伪集群部署坑点
原因：此版本的对应的mysql连接的jar包版本需要8.0.16以上，且需要将对应版本jar包复制至alert-server,api-server,master-server,worker-server,tools目录下的lib目录下。1、伪集群部署需要对应修改install_env.sh和dolphinscheduler_env.sh。2、部署完成后，海豚调度UI界面无法打开，显示拒绝访问。
2023-11-03 11:56:58
410
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人