Databend 开源周报第 145 期

Github 2024-09-16 开源项目周报 Top14 根据Github Trendings的统计,本周(2024-09-16统计)共有14个项目上榜。 阅读详情

Databend 是一款现代云数仓。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务:https://app.databend.cn 。

What's On In Databend

探索 Databend 本周新进展,遇到更贴近你心意的 Databend 。

支持从 Stage 加载 UDF 脚本

Databend 支持从 Stage 中加载 UDF 脚本,大大简化了脚本的管理和部署流程。

现在你可以将 UDF 脚本存储在 Databend 支持的一揽子外部存储服务中,并通过简单的 SQL 语句加载到 Databend 中。对于云环境,还可以结合预签名 URL 以更好地管理脚本的上传。

下面是一个 JavaScript UDF 的示例:

CREATE OR REPLACE FUNCTION gcd_js (INT, INT) RETURNS BIGINT 
LANGUAGE javascript HANDLER = 'gcd_js' 
AS 'data/udf/gcd.js'

SELECT number, gcd_js(number * 3, number * 6) 
FROM numbers(5) 
WHERE number > 0 
ORDER BY 1

如果您想了解更多信息,欢迎联系 Databend 团队,或查看下面列出的资源。

Code Corner

一起来探索 Databend 和周边生态中的代码片段或项目。

Databend Cloud 上的 Databend 发布流程

  1. 在GitHub上发布新版本:Releases · datafuselabs/databend · GitHub
  2. 选择稳定版本以确保部署的可靠性。
  3. 经历开发、预备、冒烟测试和生产阶段,以确保质量。
  4. 完成所有阶段后,自动更新所有客户仓库。

欢迎访问 https://databend.cn 或 https://databend.com 体验 Databend Cloud 。

Highlights

以下是一些值得注意的事件,也许您可以找到感兴趣的内容。

  • 支持在 CREATE TABLE 时创建倒排索引。
  • 支持剖析多表插入语句。
  • 支持使用 WITH CONSUME 子句消费流。
  • 为磁盘缓存增加 fuzzy 重载模式。

What's Up Next

我们始终对前沿技术和创新理念持开放态度,欢迎您加入社区,为 Databend 注入活力。

时间聚合索引

在 Speeding up Temporal Aggregation in DataFusion by 60-60000x 这篇博客中 µWheel 展现了其加速时间聚合查询的潜力。这可能有助于 Databend 构建时间聚合索引(Temporal Aggregating Index),通过预物化(pre-materialize)时间上的聚合结果,从而提高查询效率。

µWheel 是一个可嵌入的流和查询聚合管理系统。它具有高度优化的空间效率,支持在低延迟下执行时间聚合查询,其优化器可以根据 SIMD、代数属性和时间等上下文找到最优计划。

Issue #15553 | Feature: Temporal Aggregating Inde

如果你对这个主题感兴趣,可以尝试解决其中的部分问题或者参与讨论和 PR review 。或者,你可以点击 make use of sled metrics feature for collect sled metrics · Issue #7233 · datafuselabs/databend · GitHub 来挑选一个随机问题,祝好运!

New Contributors

一起认识社区中的新伙伴,Databend 因你们而变得更加美好。

Changelog

前往查看 Databend 每日构建的变更日志,以了解开发的最新动态。

地址:Releases · datafuselabs/databend · GitHub

Contributors

非常感谢贡献者们在本周的卓越工作。

Connect With Us

Databend 是一款开源、弹性、低成本,基于对象存储也可以做实时分析的新式数仓。期待您的关注,一起探索云原生数仓解决方案,打造新一代开源 Data Cloud。

Github 2024-07-15 开源项目周报 Top15 根据Github Trendings的统计,本周(2024-07-15统计)共有15个项目上榜。 阅读详情

相关推荐

Github2024-05-20 开源项目周报 Top15

根据Github Trendings的统计,本周(2024-05-20统计)共有15个项目上榜。

老孙正经胡说 798

【亲测免费】 基于Flask的开源周报系统——WeeklyReport

WeeklyReport 是一个基于 Flask 的开源周报系统。该项目主要使用 Python 语言开发,通过 Flask 框架实现了周报的创建、管理、查看等功能。WeeklyReport 支持快速 Docker 部署,使得用户可以轻松地在自己的服务器或云平台上搭建和使用。 ## 2. 项目核心功能 - **周报创建与提交**:用户可以创建并提交自己的周报,包括本周工作总结、下周工作计划等内容...

gitblog_01003的博客 889

Github 2024-07-04 开源项目日报Top10

根据Github Trendings的统计,今日(2024-07-04统计)共有10个项目上榜。

老孙正经胡说 1070

5分钟快速部署:基于Flask的开源周报系统完整指南

还在为团队周报管理头疼吗?WeeklyReport是一个基于Flask的开源周报系统,能够帮助团队快速建立规范的周报制度。这个系统支持多角色权限管理、邮件提醒功能,并且通过Docker实现一键部署,让周报管理变得简单高效。 ## 🚀 快速上手:5分钟完成部署 ### 环境准备与一键启动 只需确保系统已安装Docker和Docker Compose,就能快速启动整个系统: ```bash

gitblog_01044的博客 495

Github 2024-11-25 开源项目周报 Top15

根据Github Trendings的统计,本周(2024-11-25统计)共有15个项目上榜。

老孙正经胡说 1111

Github 2024-06-10开源项目周报 Top15

根据Github Trendings的统计,本周(2024-06-10统计)共有15个项目上榜。

老孙正经胡说 1593

【亲测免费】 开源项目《每周报告》(WeeklyReport) 使用指南

--- ## 项目目录结构及介绍 **GitHub仓库**: [https://github.com/CodingCrush/WeeklyReport.git](https://github.com/CodingCrush/WeeklyReport.git) 本开源项目《每周报告》设计用于便捷地创建和管理个人或团队的周报。其结构布局精心规划,以支持高效的内容组织。 ``` WeeklyRe...

gitblog_00183的博客 943

Github 2025-06-30 开源项目周报 Top11

根据Github Trendings的统计,本周(2025-06-30统计)共有11个项目上榜。

老孙正经胡说 777

OS开源项目周报0105

出品的iOS开源项目周报第四期来啦。iOS开源周报集合了OpenDigg一周来新收录的优质的iOS开发方面的开源项目,方便iOS开发人员便捷的找到自己需要的项目工具等。能够插入到UIScrollView实例中的UI组件。Swift项目配置编译时间的命令行实用工具。基于SKTagView的技能选择的View。仿Apple的照片应用的UI组件库。引入多选照片并引用照片的功能模块。高性能动态gif表情聊天方案。独特的信用卡输入验证控件。配合UIFont快速工作。类型安全的键值数据缓存。酷炫的iOS动画引擎。

lmrylll的博客 787

Github 2024-12-09 开源项目周报 Top15

根据Github Trendings的统计,本周(2024-12-09统计)共有15个项目上榜。

老孙正经胡说 849

基于OpenClaw的自动化工作内容分析与周报日报生成系统研究

本文探讨了基于OpenClaw框架构建自动化工作内容分析与报告生成系统的设计与实现。该系统旨在解决传统周报日报编写方式存在的效率低下、格式不统一、内容质量参差不齐等问题。系统采用分层架构设计,包含数据采集层、处理层、分析层和报告生成层,支持从Git、任务管理系统等多源自动采集数据,并通过自然语言处理技术实现工作内容的智能分析与高质量报告生成。研究重点分析了系统面临的挑战,包括多源数据整合、语义理解、性能优化等关键技术问题,并提出了相应的解决方案。该系统可显著提升企业工作效率和管理水平,实现工作内容的自动化分

一键难忘的博客 1019

开源开发工具周报(OSDT Weekly)使用教程

开源开发工具周报(OSDT Weekly)使用教程 1. 项目介绍 开源开发工具周报(OSDT Weekly)是由HelloGCC及HelloLLVM社区发起和维护的摘要类周刊。该周刊旨在为开发人员提供关于GCC、LLVM、GDB、Binutils、TVM、QEMU等常用开源项目的最新动态、技术文章和社区消息。周刊每周三晚上更新,内容通过Git仓库托管在HelloGCC的GitHub账号上,欢迎读...

gitblog_00519的博客 532

打工人救星!用OpenClaw自动写周报:日均节省2.3小时,完整Python脚本开源

自定义模板# 在config.yaml中指定report:核心收获:时间节省是真实的:日均2.3小时,一年就是500+小时质量提升是明显的:数据完整度从75%→96%员工满意度是高的:100%愿意继续使用实施成本是低的:1天部署,1周调优团队规模推荐方案预期收益<10人基础版(Git+任务)节省1.5小时/人/周10-50人标准版(+日历+邮件)节省2.0小时/人/周>50人企业版(+聚合+分析)节省2.5小时/人/周周报的本质不是"汇报",而是"复盘"。

2601_94871597的博客 362

OSCS开源安全周报第 56 期:Apache Airflow Spark Provider 任意文件读取漏洞

OSCS 社区共收录安全漏洞 3 个,公开漏洞值得关注的是 Apache NiFi 连接 URL 验证绕过漏洞(CVE-2023-40037)、PowerJob 未授权访问漏洞(CVE-2023-36106)、Apache Airflow Spark Provider 任意文件读取漏洞(CVE-2023-40272) 针对 NPM 、PyPI 仓库,共监测到 81 个不同版本的毒组件,其中 NPM 组件包 mall-front-babel-directive 等携带远控木马,该系列的组件包具有持续性威胁行为

OSCS开源安全社区 2111

Chipyard------介绍与环境搭建

Chipyard是一个开源的、可扩展的、集成化的芯片设计平台,旨在帮助芯片设计人员快速、高效地开发自己的定制芯片。由伯克利大学架构研究小组开发,它基于Chisel语言和Scala编程语言,提供了一整套硬件设计工具和流程,包括RTL设计、验证、物理布局、仿真等,以及支持多种芯片体系结构的库和模块。

qq_38798111的博客 9479

基于淘宝商城用户购物行为数据分析系统

本文使用HIve+superset技术对阿里云天池提供的淘宝用户购物数据进行处理分析,得到有价值的信息并对平台提出有建设性意义的意见。

m0_51388399的博客 2822

Databend 开源周报第 102 期

是一款现代云数仓。专为弹性和高效设计,为您的大规模分析需求保驾护航。自由且开源。。

Databend的博客 1966

Unity资源提取实战指南:工具、工程与效率三维框架

Unity资源提取是游戏维护、外包接手和逆向分析中的基础技术动作,其本质是理解Unity序列化机制与资源加载流程。核心原理在于解析SerializedFile结构、TypeTree类型树及Addressables/AssetBundle双轨架构;技术价值体现在打破加密/压缩/混淆导致的资源不可见性,支撑美术还原、性能优化与项目交接;典型应用场景包括老项目资产抢救、AR仿真数据导出、手游换皮资源复用等。本文聚焦Unity 2019.4+现代管线,深度融合AssetRipper内存注入与三层穿透法,提供可复用的

weixin_30699955的博客 319

开源技术周报三期

我就一直在想这个是什么东西,从字面意思理解,就是收养个锁,去msdn搜了搜,msdn是这样解释的,我也没看懂,后来看了几篇博客,大概理解了。分布式缓存非常适合使用 GPU 集群进行深度学习模型训练的场景,通过把训练数据集缓存到集群所有节点的内存或 SSD 中,提供高性能的数据访问能力,让 GPU 不会因为数据读取太慢而闲置。JuiceFS 客户端的缓存默认是单机独享的,但当大量客户端需要反复访问同一个数据集时,可以开启「分布式缓存」功能,让大量客户端共享同一批缓存数据,有效提升性能。

一叶舟的专栏 789

LT9611EX芯片实战:如何用双端口MIPI转HDMI1.4打造高清播放器(附配置代码)

本文详细介绍了如何使用龙迅半导体的LT9611EX芯片实现双端口MIPI转HDMI1.4的高清播放器开发。内容涵盖芯片特性、硬件设计要点、寄存器配置技巧及完整代码实现,特别适合嵌入式视频处理应用,如机顶盒和便携式媒体播放器。

weixin_29256771的博客 324

使用BK3432芯片进行蓝牙开发的详细指南:编程手册与实际应用

BK3432是一款蓝牙4.2双模式芯片,支持蓝牙低功耗(BLE)和经典蓝牙(BR/EDR)模式。它集成了高性能的RF收发器、基带处理器、ARM9E内核、丰富的功能外设单元,并支持BLE应用的可编程协议和概要文件。蓝牙版本:4.2数据速率:最高支持2Mbps内核:ARM9ERF收发器:高性能、低功耗外设单元:包括UART、SPI、I2C、GPIO等功耗:超低功耗设计,适合电池供电的应用。

m0_57781768的博客 4460

Databend 开源周报 #67

或者,你可以点击 https://link.databend.rs/i-m-feeling-lucky 来挑选一个随机问题,祝好运!与使用其他格式文件类似,在 SQL 语句中唯一需要特别关注的是指定 “format” 选项为 “XML”。地址:https://github.com/datafuselabs/databend/releases。在 #8610 合并后,Databend 现在支持设定 “collation” 来选择字符串的编码。遇到你可能会感兴趣的问题,欢迎试着解决它。

Databend的博客 469

IEC 104电力规约详细解读(五) - 遥控

主站下发遥控选择命令,子站进行遥控选择返校,若成功则回答遥控选择成功报文,若失败则回答失败报文。主站下发取消遥控命令或者遥控执行命令行。子站皆以报文的镜像确认。遥控命令用来实现对一个可操作设备状态的改变。在配电自动化中,包括单点命令和双点命令。通常,单点命令用于控制单点信息对象;双点命令用于控制双点信息对象。

张二狗的博客 7353

177.Agent-LangGraph-MCP的构成说明

MCP架构通过MCP主机、客户端与服务器的协同,实现工具、资源与提示词的统一管理。MCP服务器提供Tools、Resources、Prompts能力,MCP客户端则负责发现、调用与读取,使Agent可按需获取上下文。其核心在于将工具从Agent中抽离,封装为可复用的服务,提升灵活性与可维护性,推动AI应用高效协作。

计算机王的博客 317

摆脱英文束缚!群晖Transmission4.0.4全新中文界面攻略

在群晖安装完官方Transmission4.0.4套件后,界面是英文状态的,不太好用。但是按照网上分享的原来4.0以前版本的方法更新UI又失败,所以自己搞了下成功了,分享给需要的朋友。

XiaoqiangClub的博客 5227

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

上一篇: 对话 Databend Labs 联合创始人王吟:大模型浪潮里,云数仓是宠儿 | 极新企服直播实录
下一篇: Databend 倒排索引的设计与实现
Databend
博客等级 码龄5年 1458粉丝 363原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值