Spring , Hadoop, Spark , BI , ML

Mybatis二级缓存配置在很多场合中需要用到数据库缓存。 此文档简单描述如何在spring + mybatis场合下配置缓存。1. Mybatis缓存简介Mybatis提供功能强大的缓存机制。缓存共可以分为两类：一级缓存和二级缓存。一级缓存是SqlSession级别的，二级缓存为整个应用级别，即一个数据源级别。缓存的具体实现可以有以下几种方式：[x] Mybatis内置的缓存实现[x] 扩展自

在Sping中，一般使用这样的元素来配置一个bean

前言OLTP： 联机事务处理 业务与技术分离 资料： 官方文档，Pro Spring Batch,Spring Batch In Action1第一章 Spring Batch 简介批处理典型应用场景： - 银行对账或利率调整 - 跨系统数据同步批处理的特点 - 自动执行 - 数据量大 - 定时执行批处理流程的三个步骤 1. 读数据 2. 处理数据 3. 写数据

针对批处理，Spring Batch提供ItemReader、ItemProcessor、ItemWriter三个核心组件，类似ETL的三个步骤。5.1 ItemReaderItemReader支持从多种数据源读入数据，接口定义如下：public interface ItemReader<T> { T read() throws Exception, UnexpectedInputExcep

面向chunk处理1 抽象Step与继承2 commit interval3 重启4 跳过5 重试6 事务属性与回滚7 在Step中注册ItemStream流8 拦截Step执行TaskletStep控制Step执行流程1 next2 flow3 JobStep在Step中结束Job1 end2 fail3 stopLate Binding与StepJob sc

第四章 配置作业Job4.1 基本配置Job的配置有3个必须的属性，name，jobRepository，steps。一个简单的Job配置如下：<job id="footballJob"> <step id="playerload" parent="s1" next="gameLoad"/> <step id="gameLoad" parent

1. 概述Spring Batch提供了多种方式用于处理并行，提高性能。主要分为2大类： - 单个进程，多线程 - 多个进程因此，可以细分为以下几类： - 多线程Step（Multi-thread Step,single process) - 并行Step（Parallel Steps, single process ) - Remote Chunking of Step(