- 博客(25)
- 问答 (1)
- 收藏
- 关注
原创 小米数据平台大改造:一年省下巨额成本,性能提升6倍的秘密
小米技术团队最近公开了一个重磅改造项目:把原本乱七八糟的数据平台架构彻底重构了。效果有多夸张?**查询性能直接提升 6 倍,高并发场景下延迟最高降低 300%。**按小米的数据规模,光服务器成本一年就能省下千万级别。更关键的是,技术栈从原来的七八套系统简化到现在的两三套,运维同学终于不用半夜起来救火了。
2025-09-05 18:30:00
1064
原创 Doris FE 应急恢复手册:六大经典故障场景与解决方案
大家好,我是向光。在上一篇文章里,我们一起聊了排查FE问题的基本思路,并准备好了我们的“应急工具箱”(SOP清单)。。我从社区和日常支持中,整理了几个最高频的FE故障场景。希望这份手册能帮你做到“心中有数,手上有招”。
2025-08-15 19:27:14
1225
原创 Doris FE 运维进阶:从“救火队员”到“系统专家”的SOP
我想,每个负责线上服务的技术同学,可能都经历过类似的场景:凌晨三点,刺耳的告警电话把人从梦中惊醒,打开电脑,看到群里业务方一连串的“系统是不是有问题?那一刻,压力瞬间拉满。Doris FE 作为集群的“大脑”,它的稳定性至关重要。但作为一个复杂的分布式系统,我们必须承认,意外总会发生。当意外来临时,最考验一个团队的,不是不出问题,而是在问题发生后,我们能否从容、有序地去应对。我见过太多手忙脚乱的“救火”现场,大家凭着感觉和零散的经验各自为战,不仅效率低下,还可能因为误操作引发二次故障。
2025-08-15 19:26:18
846
原创 当 FastGPT 遇见 Doris:无需手写 SQL,丝滑实现自助 ChatBI
本文介绍了如何利用FastGPT和Apache Doris构建一个自助式ChatBI工具,解决企业日常数据查询需求积压的问题。通过配置MCP Server作为中间件,将FastGPT的自然语言指令转换为Doris可执行的SQL查询。文章详细演示了从安装依赖、启动服务到FastGPT界面配置的全过程,并通过两个实际查询案例展示了该方案的高效性:不仅能准确返回表信息,还能智能分析销售趋势并给出专业建议。这种LLM与实时分析型数据库的结合,显著降低了数据消费门槛,使非技术人员也能通过自然语言获取数据洞察,为未来实
2025-08-15 19:23:09
862
原创 5分钟搞定!让 Cursor + Doris 成为你的数据分析助理,从此动口不动手
【保姆级教程】手把手教你配置 Cursor + Doris,彻底告别手写SQL的痛苦 (内含cursor无限续杯方法)
2025-07-15 20:00:56
836
原创 零基础上手!用 Dify + DeepSeek + Doris MCP Server,实现秒级 SQL 调用
MCP(Message‑based Control Plane)正是为了解决这些问题而生——它在智能助手和 Doris 之间架起一条“高速公路”,让 SQL 请求能够迅速、稳定地直达数据库,帮助你更专注于业务逻辑,而不是基础设施搭建。若 Dify 和 MCP Server 位于不同网络,需要外部调用 MCP 服务,可借助 ngrok 等工具进行内网穿透。保存配置后,若看到绿色的 “已授权” 提示,说明 Dify 已与 MCP Server 成功连通。面板,点击 添加,分别添加两次 MCP 工具。
2025-07-03 21:00:00
1813
原创 【5分钟速成】零基础上手 Tableau + Apache Doris,搭建超炫可视化大屏(附视频教程)
为了保证Tableau能够顺利地和MySQL驱动“沟通”,从而连接到Doris,我们的Tableau也必须选择相同的架构,也就是英特尔版本。“用数据说话” 已不再是口号,掌握一套简单、高效的 BI 工具,才能让你的业务指标一目了然。打开Tableau官网 (一般来说,官网底部可以找到所有版本链接),划到页面最底部,点击【all releases】。:百亿级数据实时分析利器,兼容 MySQL 协议,秒速响应 OLAP 查询,助你告别卡顿与复杂 ETL。首先,我们要准备好连接Doris的“桥梁”和“工具”。
2025-05-30 10:56:57
1048
原创 3分钟教你用 Apache Superset 一键可视化 Doris 数据库!(附视频教程)
视频中提到,特定版本的 Superset 可能需要特定版本的 marshmallow。请注意,较新版本的 Superset 可能有不同的依赖管理方式,建议查阅 Superset 官方文档获取最新信息。从今天起,你只需几分钟,就能把 Doris 里的海量数据秒级可视化,真正做到「看得见、改得了、管得住」。心动不如行动,今天就带大家看——如何用 Apache Superset 快速连接 Apache Doris,实现 BI 可视化!如果一切顺利,你就能看到 Superset 的登录界面啦!
2025-05-30 10:18:24
1187
原创 Doris磁盘均衡问题深度解析
在Doris集群运维中,磁盘均衡是保证数据高效存储和查询性能的关键。然而,由于数据分布不均、参数配置不当或环境异常,磁盘不均衡问题时有发生。本文将深入解析Doris磁盘均衡的优化方法、排查流程及常见问题解决方案,助你快速定位并解决问题。
2025-03-12 11:29:31
508
原创 Doris磁盘均衡问题排查指南
在Doris集群运维中,磁盘均衡是保证数据高效存储和查询性能的关键。然而,由于数据分布不均、参数配置不当或环境异常,磁盘不均衡问题时有发生。本文将深入解析Doris磁盘均衡的优化方法、排查流程及常见问题解决方案,助你快速定位并解决问题。
2025-02-27 20:02:16
742
原创 从源码到运行:深入解析 Apache Doris 的编译与 Debug 流程
Apache Doris 作为一款高性能、实时的分析型数据库,其底层架构和代码设计令人称道。对于开发者来说,掌握源码编译与调试运行是理解 Doris 内核的关键。然而,Doris 的编译流程涉及多种工具链和依赖配置,Debug 过程中也可能遇到各种复杂问题,初学者常常感到无从下手。本篇文章将以源码到运行为主线,详细解析 Apache Doris 的编译与 Debug 流程。从环境准备、源码拉取到常见问题排查,我们将结合实际案例,帮助您快速上手 Doris 的开发调试工作。
2025-01-08 15:35:23
1296
原创 成为 Apache 顶级项目贡献者之路:Apache Doris 的语法迁移攻略
Apache Doris 是一个开源的 MPP(大规模并行处理)数据库,作为 Apache 顶级项目之一,它提供了高性能、高扩展性的分析能力。在 Doris 的发展过程中,新优化器在增强开箱即用的能力方面扮演了重要角色,但是有些老优化器的语法在新优化器还没有支持,因此有了这个旧优化器语法迁移到新优化器的任务。本文将带你深入了解如何实现一个语法迁移任务,探索从入门到贡献者的全过程,助力您成为 Apache Doris Contributor。
2024-12-26 20:08:28
1144
原创 「FE 倒下了,但我挺住了」—— Doris FE 挂机应急指南
所以当我们被问及一个集群有多少 FE,都是什么角色时,正确的回答当时应该是所有 FE 节点的个数,以及 Follower 角色的个数和 Observer 角色的个数。在上面这个节点中image.4157960的后缀数字是最大的,需要与其他的 FE 对应的image文件进行比较,找后缀数字最大的节点当作要恢复的节点。命令,应该可以看到之前所添加的所有 FE,并且当前 FE 是 master,然后把其他 FE 节点下线。那么此时已经恢复一个节点了,对于其他还未恢复的节点,可以参考恢复方案1来恢复。
2024-12-18 17:17:39
1543
1
原创 Doris部分列更新
在需要频繁更新某些字段的场景中,例如用户标签表中的行为信息更新,以支持广告或推荐系统的实时分析和决策。:将多张源表的数据合并成一张大宽表,可以通过部分列更新来实现。:在需要修正某些数据的场景中,部分列更新可以有效减少更新的开销。:部分列更新支持高频的并发写入,适用于需要实时更新大量行但仅涉及少数列的场景。:在更新少数列时,部分列更新可以显著提高性能,尤其是在涉及大量行的情况下。这些场景中,部分列更新通过减少不必要的数据写入和锁定,提升了系统的整体性能和响应速度。
2024-10-22 17:30:00
3147
3
原创 This beta version of Typora is expired, please download and install a newer version.
快速永久解决typora 升级问题
2022-08-05 09:53:17
212
1
原创 SQLZOO习题详解(04)——SELECT within SELECT Tutorial
SQLZOO习题详解(04)——SELECT within SELECT Tutorial
2022-06-18 16:36:17
590
原创 双线性映射(Bilinear Maps)实现(有限域、循环群)
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言一、前置知识1.域1.1有限域2.群2.1 群2.2 循环群二、什么是双线性映射?三、验证1.导包2.实现代码3.运行结果前言对于学习双线性映射知识过程中的一些理解一、前置知识如果对这部分知识比较了解可略过1.域域中元素进行加法、减法、乘法、除法之后运算的结果依然在域内ex: 有理数集合,实数集合 反例:整数集合1.1有限域域F只包含有限个元素阶:有限域中元素的个数称为有限域的阶;每个.
2022-04-17 16:07:30
5548
10
密文策略属性加密(CP-ABE)属性撤销实现
2022-06-11
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅