livemetee-优快云博客

该示例展示了最核心的“读取数据 -> 处理数据 -> 写入数据”（Chunk 模式）的完整流程。// 4. 定义 Step (每次处理 100 条数据作为一个 Chunk 提交事务).linesToSkip(1) // 跳过CSV标题行。// 2. 数据处理器 (ItemProcessor)// 1. 数据读取器 (ItemReader)// 3. 数据写入器 (ItemWriter)// 示例处理逻辑：将邮箱统一转换为小写。配置批处理任务（Job & Step）// 5. 定义 Job。

2026-06-08 01:34:41 229

原创 Flink数据倾斜根因与解法

场景特征推荐方案核心思想Key 分布严重不均，存在少数超大 KeyKey 加盐或广播热点 Key将大 Key 拆分为多个小 Key 或广播到所有节点处理。窗口聚合触发时倾斜启用 LocalAggregation（预聚合）在窗口内先进行本地合并，减少 shuffle 数据量。常规聚合操作（sum/count）倾斜两阶段聚合先局部聚合，再全局汇总，是通用且有效的模式。已知固定热点 Key自定义分区器针对特定 Key 设计独立的分区策略，避免干扰。资源利用不均或并行度失配调整并行度与资源。

2026-05-27 08:31:31 589

原创 Java自定义线程池核心参数解析

以下示例展示了如何创建一个功能完整的自定义线程池，包括任务提交、状态监控和优雅关闭。// 1. 自定义线程工厂：设置线程名称、优先级、是否为守护线程等@Override// 设置为非守护线程// 2. 自定义拒绝策略：当线程池和队列都满时，由调用者线程直接执行任务@OverrideSystem.err.println("任务被拒绝，由调用者线程直接执行: " + r.toString());if (!r.run();// 由提交任务的线程直接执行// 3. 创建自定义线程池。

2026-05-11 19:50:35 419

原创提示语规则引擎：spring-ai整合liteflow

提示语规则引擎：spring-ai整合liteflow

2025-09-06 18:50:43 300

原创 Flink2.0学习笔记：stream-api source源：jdbc 流式处理（自定义支持多数库的连接池）和批次处理(使用mysql-flax 预加载数据)

Flink2.0学习笔记：stream-api：jdbc 流式处理（自定义支持多数库的连接池）和批次处理(使用mysql-flax 预加载数据)

2025-08-30 11:58:57 470

原创 Flink2.0学习笔记：使用HikariCP 自定义sink实现数据库连接池化

Flink2.0学习笔记：使用HikariCP 自定义sink实现数据库连接池化

2025-08-23 18:38:57 1463

原创 Flink2.0学习笔记：Flink服务器搭建与flink作业提交

Flink2.0学习笔记：Flink服务器搭建与flink作业提交

2025-08-17 00:29:37 940

原创 Flink2.0学习笔记：Stream API 窗口

flink 窗口

2025-08-02 11:42:10 1313

原创 Flink2.0学习笔记：Stream API 常用转换算子

Stream API 常用转换算子

2025-07-27 15:02:51 503

原创 Flink2.0学习笔记：Table API & SQL

Flink2.0：Table API & SQL

2025-07-20 13:52:29 853

原创 springboot 整合spring-kafka客户端：SASL_SSL+PLAINTEXT方式

首先cd 到kafka目录：D:\kafka_2.13-4.0.0\config\ssl。先确定最新版kafka_2.13-4.0.0的配：server.properties。最后使用命令将证书导入信任库：这一步需要以管理员的身份运行cmd。以及：jaas.conf。到这里所有的配置就完成了。确保kafka正常启动。

2025-07-17 21:54:56 863

原创一个基于数据库的分布式锁：乐观与悲观实现

一个基于数据库的分布式锁：乐观与悲观实现

2025-07-12 18:16:37 502

原创 spring-ai 1.0.0 （3）交互增强：Advisor 顾问模块

spring-ai 1.0.0 （3）交互增强：Advisor 顾问模块

2025-07-06 13:09:04 586

原创 spring-ai 1.0.0 （2）提示词，消息构建和移植能力

spring-ai 1.0.0 （2）提示词，消息构建和移植能力

2025-06-28 16:06:48 525

原创 spring-ai 1.0.0 （1）模型调用能力

spring-ai 1.0.0 模型调用能力

2025-06-26 23:47:26 519 1

原创关于spring懒加载

配置类（使用 `@Configuration` 注解的类）中定义的 `@Bean` 方法会在容器启动时进行解析，但只有当这些方法返回的 Bean 被请求或用于依赖注入时才会真正执行构造逻辑。某些扩展点（如 `BeanFactoryPostProcessor` 或 `BeanPostProcessor`）可能会影响 Bean 的初始化流程。在 Spring Boot 应用启动过程中，带有 `@Bean` 注解的方法所定义的 Bean 是否被初始化，取决于这些 Bean 是否被实际引用或使用。

2025-06-24 08:01:37 583