weixin_39873434的博客

原创 五月天限定团综《陪你守岁》：揭秘成员昵称背后的故事

五月天的《陪你守岁》是一个不容错过的节目，它不仅记录了五月天的成长和变化，也见证了他们与粉丝之间的深厚情感。让我们一起跟随五月天的脚步，回顾过去，展望未来，感受音乐的力量和生活的美好。五月天，这个华语乐坛的传奇乐队，以其独特的音乐魅力和深厚的粉丝基础，一直活跃在大众视野中。《陪你守岁》不仅仅是一个普通的综艺节目，它包含了五月天对音乐的热爱、对生活的态度，以及对粉丝的感激。在节目中，五月天不仅会分享他们的音乐，还会展示他们私下的生活和互动，让粉丝们能够更加深入地了解这个乐队。

原创 编译时权限控制

原创 Byzer 引擎部署指引

Byzer 引擎为 Byzer-lang 提供了 Runtime 执行环境，有多种部署方式可以部署 Byzer 引擎，用户可以根据自己的情况和部署环境（开发，测试，生产）来选择不同的部署方式。 Byzer 引擎本质上来讲就是一个 Spark Service 实例， 分为 Driver 端和 Executor 端。得益于 Spark 的生态， Byzer 引擎部署从技术架构上来讲，可以同时支持Lo...

原创 Byzer-LLM 快速使用指南

安装 参考文档：https://docs.byzer.org/#/byzer-lang/zh-cn/byzer-llm/deploy 注意，即使你已经有安装过大模型相关的环境，建议你依然使用裸机全自动化部署, Byzer LLM 会创新一个 byzerllm 用户，该用户的环境变量和配置文件都是独立的，不会影响到你的其他环境。 一旦安装好环境之后，就可以通过http://127.0.0.1:900...

原创 Byzer-LLM 如何处理PDF

本文内容同时适合其他非结构化文本，诸如 Word,Markdown 等。 首先我们可以以二进制文本方式加载 PDF: load binaryFile.`/tmp/upload/**/*.pdf` as pdfs_temp; select content from pdfs_temp as pdfs; !emptyTable; 这样会递归加载所有 PDF 文件。注意，我们最后使用 !emptyTab...

原创 Byzer-LLM 示例

在这个章节我们会基于 Byzer-LLM 构建一个写案例，帮助大家理解 Byzer-LLM 引擎的使用方式以及带来的价值，同时帮助企业快速验证效果以及 快速部署到生产环境。 虚拟外教 构建一个虚拟外教，会涉及到三个大模型： 语音转文本大预言模型文本合成语音 我们分别使用： fast whisperLLama 13BBark 在继续后面的步骤之前，请确保按官方文档部署好环境。 部署 Fast Whi...

原创 Byzer SQL 和 Byzer Data+AI 数据库

背景 多年以来，SQL 一直在各路 solo。 什么计算机语言适合入门数据行业、交互快、用途广、可扩展性好？答案总是 SQL。 只有 SQL 开发者才能看得懂的笑话 一个 SQL 查询走进了一个酒吧，看到两张 Table，它和两张 Table 说，“我能 Join 你们吗？”有人会问，也许近些年 Py...

原创 Byzer SQL 设计原理

设计理念 在抽象业务能力的时候，数据的处理和流转承载着信息传递的核心任务，而数据的载体往往就是二维数据表或多维数据表，SQL 语言其实就是抽象在二维数据表上的各种数据操作。Byzer 语言的核心设计是万物皆表（Everything is a table），无论是结构化数据、半结构化数据、非结构化数据，我们希望用户可以非常容易的将任何实体对象通过 Byzer 来抽象成二维表，从而能够基于表来进行数据...

原创 Byzer 支持 JDBC 聚合下推

原创 Byzer 术语表

原创 性能调优实例

原创 集成测试框架设计

原创 Readiness 探针

原创 Byzer 元信息存储

原创 推理接口 API：/model/predict 接口

原创 脚本执行 API：/run/script 接口

原创 插件开发

原创 修改 Byzer-lang

原创 Byzer-python 并行度

原创 K8S 下的 Byzer-python 资源限制

原创 PyJava API简介

原创 模型部署

在 Byzer 中，我们可以使用和内置算法一样的方式将一个基于 Byzer-python 训练出的 AI 模型注册成一个 UDF 函数，这样可以将模型应用于批、流，以及 Web 服务中。接下来我们将展示 Byzer-python 基于 Ray 从模型训练再到模型部署的全流程 demo。 1. 数据准备 首先，安装tensorflow和keras: pip install keras tensorf...

原创 模型训练

原创 数据处理

原创 Byzer-python参数详解

原创 环境依赖

原创 Byzer-python 介绍

原创 外置 Estimator/Transformer 插件

原创 内置 Estimator/Transformer 插件

原创 插件日常操作

原创 部署算法 API 服务

原创 内置算法

原创 特征工程

原创 探索式数据分析 / Exploratory Data Analysis

原创 通过 REST API 存储数据

原创 存储为文件

原创 写入数据仓库 / 数据湖

原创 写入 JDBC

原创 Byzer 的 UDF 功能

原创 使用 Byzer 处理数据