大数据
关注
分享
扫一扫
xxz_phoebe
流水不争先，争的是滔滔不绝
展开
-
springboot 使用clickhouse实时大数据分析引擎的方法
声明：因项目中使用clickhouse引擎这里springboot使用的方式是jdbc方式连接，这种方式的好处是可以使用clickhouse 自带的fetch方法批量从clickhouse中获取数据，对于大量数据的下载来说，比较好因为如果全部拿到内存中处理，大量数据会有内存溢出的结果如果批量多次请求数据库对于数据库查询等也不靠谱，所有直接使用clickhouse jdbc连接来满足这种...原创 2018-12-11 16:42:03 · 17728 阅读 · 1 评论 -
springboot配置多种类型多数据源（mysql+postgresql+presto（数据仓库））yml方式集成分页
声明：此处示例为mysql和postgresql数据库和presto 三种类型数据库源mysql与postgresql都属于数据库所以这里简写只配置postgresql库presto是数据仓库在配置数据源测试时会遇到很多坑，等下详细描述首先声明：我项目的springboot配置数据源的文件是yml方式的，对于properties格式的请童鞋自行转换写法第一步：yml配置数据...原创 2018-07-09 20:11:11 · 11656 阅读 · 5 评论 -
clickhouse实时大数据分析引擎的SQL写法详解
ClickHouse的优点单个查询的并行处理（利用多个核心） 多个服务器上的分布式处理 非常快速的扫描（参见下面的基准测试），可用于实时查询 列存储非常适合使用“宽”/“非规范化”表（许多列） 压缩性好 SQL支持（有限制） 良好的功能集，包括支持近似计算 不同的存储引擎（磁盘存储格式） 非常适合结构日志/事件数据以及时间序列数据（引擎MergeTree需要日期字段） ...原创 2019-01-15 17:53:35 · 13012 阅读 · 0 评论