Flink SQL: SET Statements

最新推荐文章于 2024-06-27 10:04:35 发布
原创 最新推荐文章于 2024-06-27 10:04:35 发布 · 1.5k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#sql #flink #数据库

SET Statements

SET statements are used to modify the configuration or list the configuration.
SET语句用于修改配置或列出配置。

Run a SET statement

SQL CLI
SET statements can be executed in SQL CLI.
SET语句可以在SQL CLI中执行。

The following examples show how to run a SET statement in SQL CLI.
以下示例显示了如何在SQL CLI中运行SET语句。

Flink SQL> SET 'table.local-time-zone' = 'Europe/Berlin';
[INFO] Session property has been set
最低0.47元/天 解锁文章

200万优质内容无限畅学
【Flink】FlinkSQL如何触发执行计算
一杯咖啡半杯糖的博客
03-02 875
Table （通过 StatementSet.addInsert() 输出给某个 Sink）和 INSERT 语句 （通过调用 StatementSet.addInsertSql()）会先被缓存到 StatementSet 中，StatementSet.execute() 方法被调用时，所有的 sink 会被优化成一张有向无环图。该方法是用来将一个表的内容插入到目标表中，一旦该方法被调用， TABLE API 程序立即被翻译。该方法是用来执行一个 SQL 语句，一旦该方法被调用， SQL 语句立即被翻译。
Flink实战（七十四）：flink-sql使用（二）简介（二）入门
微信搜：import_bigdata，大数据领域硬核原创作者
01-23 1051
声明：本系列博客是根据SGG的视频整理而成，非常适合大家入门学习。 《2021年最新版大数据面试题全面开启更新》 1 SQL 客户端 Flink 的 Table & SQL API 可以处理 SQL 语言编写的查询语句，但是这些查询需要嵌入用 Java 或 Scala 编写的表程序中。此外，这些程序在提交到集群前需要用构建工具打包。这或多或少限制了 Java/Scala 程序员对 Flink 的使用。 SQL 客户端的目的是提供一种简单的方式来编写、调试和提交表程序到 Flink 集群上，.
flink使用StatementSet降低资源浪费
oTianShangDiXia的博客
06-27 811
项目中有很多ods层（mysql 通过cannal）kafka，需要对这些ods kakfa做一些etl操作后写入下一层的kafka（dwd层）。当有多个ods->dwd操作放在同一个flink作业中时，发现这种方式会导致每次insert操作都是单独的DAG,非常消耗资源，特别是这些处理都是比较轻量级的，最好是能融合在同一个DAG中共享资源。
Flink SQL: EXPLAIN Statements
weixin_48813624的博客
11-07 419
Flink SQL: EXPLAIN Statements
SET Statements (Transact-SQL)
jzt_designer的专栏
07-24 714
APPLIES TO:SQL ServerAzure SQL DatabaseAzure SQL Data WarehouseParallel Data Warehouse The Transact-SQL programming language provides several SET statements that change the current session handli...
flink-sql查询配置与性能优化参数详解-1.13
第一片心意的博客
08-02 4870
本博客是对 flink 1.13 版本的 flink sql 中所有配置的翻译整理。
Flink SQL:INSERT Statements
weixin_48813624的博客
11-07 1434
Flink SQL:INSERT Statements
Flink SQL:CREATE Statements
weixin_48813624的博客
11-06 568
Flink SQL:CREATE Statements
Flink SQL: RESET Statements
weixin_48813624的博客
11-08 574
Flink SQL: RESET Statements
Flink SQL:ALTER Statements
weixin_48813624的博客
11-07 455
Flink SQL:ALTER Statements
【Flink SQL】Flink SQL 语法篇（十）：EXPLAIN、USE、LOAD、SET、SQL Hints
Code · Cloud · Think · Repeat
02-29 2899
如果熟悉 MySQL 的同学会非常熟悉这个子句，在 MySQL 中，USE 子句通常被用于切换库，那么在 Flink SQL 体系中，它的作用也是和 MySQL 中 USE 子句的功能基本一致，用于切换 Catalog，DataBase，使用 Module。
flink1.14 sql基础语法（一） flink sql表查询详解
qq_44665283的博客
07-21 8123
flink sql表查询详解
Flink SQL: USE Statements
weixin_48813624的博客
11-07 350
Flink SQL: USE Statements
oracle SQL*PLUS - SET Statement
产品经理，程序人生
04-24 1651
<br />Set sqlplus system settings and defaults. Syntax: SET option value SHO[W] option Options: most of the options listed below have an abbreviated and a long form e.g. APPINFO or APPI will do the same thing -- APPI[NFO]{ON|OFF|tex
Flink实战之Flink SQL connector支持并行度配置
weixin_41608066的博客
09-13 6824
背景 目前flink sql是不支持source/sink并行度配置的，flink sql中各算子并行度默认是根据source的partition数或文件数来决定的，比如常用的kafka source topic的partition是100，那么fink sql任务的并发就是100。但有时任务相对简单，比如datax任务，没有逻辑根本不需要很大的并发，100并发显然会造成资源的严重浪费。那么就有必要扩展connector使其支持并发度配置。 如何做 一、首先，需要在ddl的with参数中支持并发的配置，比如
Flink SQL Blink Planner 执行流程解析(上)
http://www.54tianzhisheng.cn/
09-09 698
点击上方 "zhisheng"关注,星标或置顶一起成长Flink 从入门到精通系列文章https://blog.youkuaiyun.com/nazeniwaresakini/a...
尚硅谷Flink（完）FlinkSQL
qq_58551342的博客
10-17 2448
⚫ 标量函数（Scalar Functions）：将输入的标量值转换成一个新的标量值；⚫ 表函数（Table Functions）：将标量值转换成一个或多个新的行数据，也就是扩展成一个表；⚫ 聚合函数（Aggregate Functions）：将多行数据里的标量值转换成一个新的标量值；⚫ 表聚合函数（Table Aggregate Functions）：将多行数据里的标量值转换成一个或多个新的行数据。要想在代码中使用自定义的函数，我们需要首先自定义对应 UDF 抽象类的实现，并在表环境中注册。
26、Flink 的SQL之概览与入门示例
热门推荐
alanchanchn的专栏
09-08 6万+
20、Flink SQL之SQL Client: 不用编写代码就可以尝试 Flink SQL，可以直接提交 SQL 任务到集群上与所有 SQL 引擎一样，Flink 查询操作是在表上进行。与传统数据库不同，Flink 不在本地管理静态数据；相反，它的查询在外部表上连续运行。Flink 数据处理流水线开始于 source 表。source 表产生在查询执行期间可以被操作的行；它们是查询时 FROM 子句中引用的表。
flink-sql所有语法详解
begefefsef的博客
09-09 1万+
SET语句用于修改配置或列出配置。RESET语句用于将配置重置为默认值。CREATE语句用于将表/视图/函数注册到当前或指定的 Catalog 中。已注册的表/视图/函数可以在SQL查询中使用。NSERT语句用于向表中添加行数据。USE语句用于设置当前数据库或catalog，或更改模块的解析顺序和启用状态。select语句主要是从表中查询数据，然后将数据插入到其他表中。直接在页面中查看select的结果，目前平台还不支持。单个反斜杠就可以作为转义字符使用，在select查询中可以直接使用。
flink The main method caused an error: only single statement supported
最新发布
07-15
<think>我们正在处理用户的问题：Flink error: only single statement supported 解决方法 根据用户描述，错误信息为'only single statement supported'，这通常发生在Flink SQL执行时。 结合引用内容，特别是引用[3]中提到了在Flink SQL CLI中使用DDL创建表等操作，我们可以推断用户可能在尝试执行多个SQL语句时遇到了问题。 原因分析： Flink SQL CLI 或通过程序提交SQL时，一次只能执行一条SQL语句。如果用户在一个请求中提交了多条语句（例如，用分号分隔的多个语句），就会触发这个错误。 解决方案： 1. 确保每次只提交一条SQL语句。 2. 如果是在Flink SQL CLI中，可以逐条执行语句，不要一次粘贴多条。 3. 如果通过程序（如Java/Scala）提交，需要将SQL字符串拆分成单条语句再分别执行。 引用[3]中的操作步骤就是逐条执行的，例如： 4.2 对于数据库中的表 products, orders, shipments，使用Flink SQL CLI创建对应的表（这里应该是分别执行三条CREATE TABLE语句） 另外，注意在Flink 1.13及以后版本，Flink SQL支持SET语句和CREATE语句等，但同样要求每次执行一条。 示例： 错误方式（在同一个字符串中包含多条语句）： String sql = "CREATE TABLE ...; INSERT INTO ...;"; 正确方式： 拆分成两条，分别执行： String sql1 = "CREATE TABLE ..."; String sql2 = "INSERT INTO ..."; 在Flink SQL CLI中，用户应该逐条输入并执行。 如果用户使用的是Flink SQL Gateway（引用[1]提到），那么同样需要确保每次请求只包含一条语句。 引用[2]提到单元测试不能捕获所有错误，但这里的问题不是代码逻辑错误，而是使用方式问题。 因此，解决方法总结为：将多条SQL语句拆分成单条语句，逐条执行。 相关问题： 1. Flink SQL CLI 如何执行SQL文件？ 2. 如何在Java程序中通过Flink Table API执行多条SQL语句？ 3. Flink SQL Gateway 如何配置以支持批量提交？ 注意：在Flink 1.16版本中，Flink SQL支持了语句集（STATEMENT SET），允许将多个INSERT语句组合在一起执行，但DDL和DML（INSERT）仍然需要分开。对于非INSERT语句，仍然需要单条执行。 如果用户需要在一个作业中执行多个INSERT，可以使用STATEMENT SET，例如： BEGIN STATEMENT SET; INSERT INTO ... SELECT ...; INSERT INTO ... SELECT ...; END; 但是，CREATE TABLE等DDL语句不能包含在STATEMENT SET中。 因此，用户需要根据语句类型分别处理。</think>### Flink SQL 错误 "only single statement supported" 的解决方法 当 Flink SQL 报错 `only single statement supported` 时，表示**当前执行环境只支持单条 SQL 语句**。以下是常见原因和解决方案： --- #### 一、错误原因分析 1. **批量执行限制** 在 Flink SQL CLI 或 JDBC 驱动中，默认**不支持分号分隔的多语句执行**（如 `CREATE TABLE...; INSERT INTO...;`）[^3]。 2. **SQL 客户端模式限制** Flink SQL CLI 的交互模式（非文件模式）一次仅接受单条语句[^3]。 3. **程序调用方式错误** 通过 `TableEnvironment.executeSql()` 方法执行时传入多条语句会导致此错误。 --- #### 二、解决方案 ##### 方法 1：拆分 SQL 语句（推荐） 将多条语句拆分为独立的执行单元： ```java // Java/Scala 示例 TableEnvironment tableEnv = ...; // ✅ 正确：单条执行 tableEnv.executeSql("CREATE TABLE Orders (...)"); tableEnv.executeSql("INSERT INTO Orders SELECT ..."); ``` ##### 方法 2：使用 STATEMENT SET（适用于批量 INSERT） 对多个 `INSERT` 语句使用 `STATEMENT SET` 包装： ```sql -- Flink SQL 示例 BEGIN STATEMENT SET; INSERT INTO TargetTable1 SELECT ... FROM Source1; INSERT INTO TargetTable2 SELECT ... FROM Source2; END; ``` ##### 方法 3：SQL 文件执行模式 在 Flink SQL CLI 中通过文件执行： ```bash # 创建 SQL 文件（每行一条独立语句） echo "CREATE TABLE T1 (...);" > commands.sql echo "INSERT INTO T1 VALUES (1);" >> commands.sql # 通过文件执行 ./bin/sql-client.sh -f commands.sql ``` ##### 方法 4：启用多语句支持（部分环境） 在 Flink SQL CLI 启动时添加参数（需 Flink 1.15+）： ```bash ./bin/sql-client.sh -e "SET sql-client.execution.max-queued-statements = 10;" ``` --- #### 三、验证示例 ```sql -- ✅ 单条执行（成功） CREATE TABLE Orders ( id INT, product STRING ) WITH (...); -- ✅ 使用 STATEMENT SET（成功） BEGIN STATEMENT SET; INSERT INTO Orders VALUES (1, 'Phone'); INSERT INTO Orders VALUES (2, 'Laptop'); END; -- ❌ 错误方式（触发 only single statement supported） CREATE TABLE Test (...); INSERT INTO Test VALUES (1); ``` --- #### 四、最佳实践建议 1. **开发阶段**：使用 `EXPLAIN` 验证单条语句语法 ```sql EXPLAIN INSERT INTO Orders SELECT ...; ``` 2. **流水线管理**：通过 CI/CD 工具（如 Jenkins）拆分 SQL 执行步骤 3. **监控**：在 Flink Web UI 的 **JobManager Logs** 中检查完整错误堆栈 > **关键提示**：该错误通常出现在 SQL 初始化脚本中（如引用[3]的建表语句），确保按单条语句拆分执行[^3]。 ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值