1、缓存使用场景
1、解释缓存
就是数据暂存的地方,可以理解为从磁盘里取出来数据,暂时存放在内存,以待后面处理来读取。而能存放在缓存的数据,通常是频繁访问的,不会经常修改的数据。
2、缓存的方式
缓存的操作主要是两种方式,一种是使用程序自带的map对象(像jdk的hashmap),一种是缓存软件(如:redis)
(1) redis为例
服务器端写数据时,同时更新redis和mysql,读的话,如果缓存有数据,就从缓存里取,如果没有,就从mysql里取。
使用redis称为分布式缓存,在多实例的情况下,各实例共用一份缓存数据,缓存具有一致性。缺点是需要保持redis或memcached服务的高可用,整个程序架构上较为复杂。
(2) map 缓存
缓存分为本地缓存和分布式缓存。以java为例,使用自带的map或者guava实现的是本地缓存,最主要的特点是轻量以及快速,生命周期随着jvm的销毁而结束,并且在多实例的情况下,每个实例都需要各自保存一份缓存,缓存不具有一致性。
项目中用到使用map的缓存:
在静态变量map实现缓存中如:
public static Map<String, ArrayList> codeMap;
该变量存储着书籍句子信息 codeMap的key为书的id(bookId)
value存储着(保存句子内容的数组)
具体每个DdbResourceCode对象中的属性:code ,text,fkBookId,fkCatalogId,page
优化缓存数据案例
有717个文件.txt 文件
优化前每个文件存储
{"id":"dddc529854624460b98bd872295fb733","code":2,"fkBookId":"0c4ca0ecb3e942938b2d4824dda07a11","fkCatalogId":"03dd64d1b27344db9ecb0059e95c7729","page":"2","number":1}
大概文件总共有141M
打到common jar包中 为15.3M
但程序中需要用的有code ,text,fkCatalogId,page,numberz字段,则把id,fkBookId去掉,
优化后的总文件68M
打成jar包 为5.20M
另外程序中DdbResourceCode的对象有许多无用的属性,去掉无用属性,映射到内存中的对象占用内存减少。
3、本地缓存和redis缓存优缺点
【优点】
本地缓存:低延迟,状态容易控制
redis:如果有多个服务实例,可以一份内存;另外,可以保留一些变量,方便不同服务实例交换变量
【缺点】
本地缓存:每个进程要用一份内存;进程之间不能交换状态
redis:访问有延迟;占用网络带宽;有些时候更新控制复杂;依赖redis
举个例子:
1)用户登陆session,是个理想的redis
数据量小,可以一个后台服务进程设置,所有后台进程都可以看到
2)项目中用到使用map的缓存书籍句子信息,用本地更适合
代码简单,快,不堵塞网络
2、Mapper层单元测试
1 案例:
final List selectAll = ddbLearnTextbookMapper.selectAll();
Assert.assertEquals(selectAll != null, true);
评论:
只是检查Assert.assertEquals(selectAll != null, true); 这个检查比较弱。
现在单元测试的要求要高一些。可以用以下一个比较完整流程:
1)selectAll,并且记下返回结果的size
2)insert,然后selectAll,这时检查:返回结果size比以前大1;并且这个insert的数据在返回的list里面
3)delete,然后selectAll,这时检查:返回结果size比以前少1;并且这个delete的数据不在返回的list里面
如果要加强测试,还可以多次insert和delete
更改后的单元测试:
// 第一次 查询出全部数据
final List<DdbLearnTextbook> selectAll = ddbLearnTextbookMapper.selectAll();
// 第一次查询出的数据尺寸
final int size = selectAll.size();
final String id = CommUtil.genRecordKey();
final DdbLearnTextbook ddbLearnTextbook = new DdbLearnTextbook(id, "test", "test",
"000ab75a399343a4a54166ca591def17", "1", null);
// 插入数据
ddbLearnTextbookMapper.insert(ddbLearnTextbook);
// 第二次 查询出全部数据
final List<DdbLearnTextbook> selectAllTwo = ddbLearnTextbookMapper.selectAll();
// 第二次查询出数据尺寸
final int size2 = selectAllTwo.size();
// 第二次返回结果比第一次大于1
Assert.assertEquals(size2, size, 1);
// 根据fkBookId查询数据
final List<DdbLearnTextbook> selectbyBookId = ddbLearnTextbookMapper
.selectbyBookId(ddbLearnTextbook.getFkBookId());
Assert.assertEquals(selectbyBookId != null, true);
// 删除数据
ddbLearnTextbookMapper.delete(ddbLearnTextbook.getId());
// 删除数据后,根据fkBookId查询数据
final List<DdbLearnTextbook> selectbyBookIdDel = ddbLearnTextbookMapper
.selectbyBookId(ddbLearnTextbook.getFkBookId());
Assert.assertEquals(selectbyBookIdDel .size()== 0, true);
// 第三次查询出数据
final List<DdbLearnTextbook> selectAllThree = ddbLearnTextbookMapper.selectAll();
// 第三次查询出数据尺寸
final int size3 = selectAllThree.size();
// 第一次与第三次数据相等
Assert.assertEquals(size3, size, 0);
for (DdbLearnTextbook ddbLearnTextbook3 : selectAllThree) {
if (ddbLearnTextbook3.getId().equals(id)) {
Assert.assertTrue(false);
}
}
2 案例:更加完善的测试流程
针对一条记录的操作
(1)get (2)add
(3)get
(4)delete
(5)get
例
@Test
public void testDdbUserOralFixedDetailMapper() {
final DdbUserOralFixedDetail ddbUserOralFixedDetail = new DdbUserOralFixedDetail(
"c966d14e18644a28bb9a7ccf1a2b5125", "15689014876", "15c5242a--1da14004-00000000-9200108f",
"2e20683c44c245e89572e4668e46", 1, 1, 1, "answer", 1542707504924L, 1542711207779L, 1542711245287L,
false, ExamTitleType.OBJECTIVE);
// get
final DdbUserOralFixedDetail userOralInfo = ddbUserOralFixedDetailMapper.getUserOralInfo(
ddbUserOralFixedDetail.getFkBookId(), ddbUserOralFixedDetail.getExamNum(),
ddbUserOralFixedDetail.getNum(), ddbUserOralFixedDetail.getLoginId());
Assert.assertEquals(userOralInfo == null, true);
// add
boolean save = ddbUserOralFixedDetailMapper.save(ddbUserOralFixedDetail);
Assert.assertEquals(save, true);
// get
final DdbUserOralFixedDetail userOralInfo01 = ddbUserOralFixedDetailMapper.getUserOralInfo(
ddbUserOralFixedDetail.getFkBookId(), ddbUserOralFixedDetail.getExamNum(),
ddbUserOralFixedDetail.getNum(), ddbUserOralFixedDetail.getLoginId());
Assert.assertEquals(userOralInfo01.getId().equals("c966d14e18644a28bb9a7ccf1a2b5125"), true);
// delete
final boolean deleteUserOralInfo = ddbUserOralFixedDetailMapper.deleteUserOralInfo(ddbUserOralFixedDetail.getId());
Assert.assertEquals(deleteUserOralInfo, true);
// get
final DdbUserOralFixedDetail userOralInfoDel = ddbUserOralFixedDetailMapper.getUserOralInfo(
ddbUserOralFixedDetail.getFkBookId(), ddbUserOralFixedDetail.getExamNum(),
ddbUserOralFixedDetail.getNum(), ddbUserOralFixedDetail.getLoginId());
Assert.assertEquals(userOralInfoDel == null, true);
}