Kettle (学习001) 表输入->插入 更新_kettle 插入更新

1.首先我们创建两个表,分别叫做user_a和user_b表,在a表中新增几条数据

创建user_a表

create table `user\_a` (
  `id` varchar(60),
  `name` varchar(60),
  `age` int(10),
  `sex` varchar(60),
  `stature` int(100),
  `occupation` varchar(60)
);

创建user_b表

create table `user\_b`(
  `id\_b` varchar(60),
  `username` varchar(60),
  `age` int(10),
  `sex` varchar(60),
  `stature` varchar(60),
  `occupation` varchar(60)
);

user_a表新增几条数据

insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a1','张测试','18','男','176',软件工程师');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a2','李测试','19','男','176','建筑工程师');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a3','王测试','20','女','156','文员');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a4','徐测试','21','男','174','保安');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a5','徐测试','22','女','166','前台');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a6','刘测试','23','男','186','健身教练');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a7','黄测试','24','女','170','java工程师');
insert into `user\_a` (`id`,`name`,`age`,`sex`,`stature`,`occupation`) values ('a8','陈测试','25','男','171','大数据工程师');

查看a表
在这里插入图片描述
查看b表

这里分享一份由字节前端面试官整理的「2021大厂前端面试手册」,内容囊括Html、CSS、Javascript、Vue、HTTP、浏览器面试题、数据结构与算法。全部整理在下方文档中,共计111道

HTML

  • HTML5有哪些新特性?

  • Doctype作⽤? 严格模式与混杂模式如何区分?它们有何意义?

  • 如何实现浏览器内多个标签页之间的通信?

  • ⾏内元素有哪些?块级元素有哪些? 空(void)元素有那些?⾏内元 素和块级元素有什么区别?

  • 简述⼀下src与href的区别?

  • cookies,sessionStorage,localStorage 的区别?

  • HTML5 的离线储存的使用和原理?

  • 怎样处理 移动端 1px 被 渲染成 2px 问题?

  • iframe 的优缺点?

  • Canvas 和 SVG 图形的区别是什么?

JavaScript

  • 问:0.1 + 0.2 === 0.3 嘛?为什么?

  • JS 数据类型

  • 写代码:实现函数能够深度克隆基本类型

  • 事件流

  • 事件是如何实现的?

  • new 一个函数发生了什么

  • 什么是作用域?

  • JS 隐式转换,显示转换

  • 了解 this 嘛,bind,call,apply 具体指什么

  • 手写 bind、apply、call

  • setTimeout(fn, 0)多久才执行,Event Loop

  • 手写题:Promise 原理

  • 说一下原型链和原型链的继承吧

  • 数组能够调用的函数有那些?

  • PWA使用过吗?serviceWorker的使用原理是啥?

  • ES6 之前使用 prototype 实现继承

  • 箭头函数和普通函数有啥区别?箭头函数能当构造函数吗?

  • 事件循环机制 (Event Loop)

### Kettle 中实现顺序执行插入更新以及输入的方法 在 Pentaho Data Integration (Kettle) 中,可以通过合理配置转换和作业来实现复杂的顺序执行逻辑。以下是具体实现方式: #### 转换中的顺序执行 为了确保插入更新以及其他操作按照预期顺序执行,可以利用 **阻塞数据直到步骤都完成** 的功能或者通过分离不同的操作到多个转换中。 1. **设置转换的执行顺序** 使用“阻塞数据直到步骤都完成”的组件可以帮助控制转换内部各步骤之间的依赖关系[^1]。如果不需要此组件,则可以将复杂操作拆分为多个独立的转换,并将其组合在一个作业中按需调用。 2. **禁用批量提交** 如果希望某些数据库操作(如插入)不进行批量提交,可以在相关步骤中调整属性。“提交记录数量”设为 `0` 可以关闭自动提交机制。 3. **自定义 SQL 执行** 对于需要动态执行的 SQL 操作(如插入更新),可以选择使用“执行 SQL 脚本”步骤。需要注意的是,默认情况下,SQL 脚本会在整个转换加载完成后立即运行。为了避免这种情况,应启用“单独执行每一行”选项并勾选“替换 SQL 语句中的变量”,从而允许逐条处理带有参数化的查询[^3]。 #### 示例流程设计 假设目标是从 CSV 文件提取数据至数仓,并最终更新时间戳字段,下面是一个可能的设计方案: - 创建第一个转换用于读取 CSV 数据并通过“输出”步骤写入目标- 将上述过程封装成子转换 A。 ```python # 子转换A的主要逻辑伪代码示如下: def process_csv_to_warehouse(): read_data_from_csv() write_to_target_table() ``` - 构建第二个转换专门负责修改时间戳值。这里可以从源检索最新记录的时间信息,然后存储为全局可用的环境变量供其他部分访问。 - 把这部分打包进子转换 B。 ```bash # 子转换B的核心思路描述如下: get_latest_timestamp_value() -> set_as_global_variable("TIMESTAMP_VAR") ``` - 组合以上两个子单元形成完整的 ETL 流程图即 Job 定义文件。在此过程中明确指定先后次序即可达成目的。 #### 注意事项 尽管理论上能够把全部动作集中放置单一转换里头,但从维护性和清晰度角度出发推荐分开构建各自专注的任务模块再加以串联[^2]。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值