Kafka实战笔记
关于这份笔记,为了不影响大家的阅读体验,我只能在文章中展示部分的章节内容和核心截图
- Kafka入门
- 为什么选择Kafka
- Karka的安装、管理和配置
- Kafka的集群
- 第一个Kafka程序
afka的生产者
- Kafka的消费者
- 深入理解Kafka
- 可靠的数据传递
- Spring和Kalka的整合
- Sprinboot和Kafka的整合
- Kafka实战之削峰填谷
- 数据管道和流式处理(了解即可)
- Kafka实战之削峰填谷
使用Java8的新特性Stream流式处理,可以提高对于集合的一些操作效率,再配合lambda表达式,可以极致的简化代码,尤其还有并行流这个东东,可以去 了解一下,在一些场合还是可以提高效率的,而且编码起来也不费事。
并且流式处理的核心就是一个浅拷贝和引用管道,其内部实现了一个引用管道ReferencePipeline, 他把需要处理的数据的引用拷贝了一份,然后处理数据,最后收集结果也是将这些引用放到了另一个集合中。
今天要讲的就是stream处理中的map和flatMap这俩个的比较和使用
首先看一下源代码
Stream map(Function<? super T, ? extends R> mapper);
Stream flatMap(Function<? super T, ? extends Stream<? extends R>> mapper);
共同点
-
都是依赖stream进行转换,结合lambda的入参和返回值,将一个类型依据程序逻辑转换成另一种类型。
-
最后结果返回都还是一个流,还可以对其进行继续的流式处理或者进行收集。
区别
-
方法参数不同,第一个参数是一样的,但是第二个不一样,对于map第二个参数没啥要求,但是使用flatMap时,第二个参数还得用流来接收。
-
所以flatMap多用于多对多,一对多,也就是map是将一个数据流中的一个数据节点,映射成另外一个数据节点,而flatMap是将一个数据流中的一个数据节点映射成另外一个数据流,这个另外的数据流可以是一个数据节点也可以是多个数据节点。
-
flatmap既可以单一转换也可以一对多/多对多转换,flatmap要求返回Observable,因此可以再内部进行from/just的再次事件分发,一一取出单一对象(转换对象的能力不同)
比如我们使用map将一个per对象映射成一个字符串对象
static class Per {
public String name;
public int age;
public Per(String name, int age) {
this.name = name;
this.age = age;
}
public String getName() {
return name;
}
public void setName(String name) {
this.name = name;
}
public int getAge() {
return age;
}
public void setAge(int age) {
this.age = age;
}
@Override
public String toString() {
return “Per{” +
“name='” + name + ‘’’ +
“, age=” + age +
‘}’;
}
}
public static void main(String[] args) {
List list = new ArrayList<>();
list.add(new Per(“listen”, 22));
list.add(new Per(“bike”, 24));
list.add(new Per(“milk”, 27));
List collect = list.stream().map(Per::toString).collect(Collectors.toList());
System.out.println(list);
System.out.println(“—”);
System.out.println(collect);
}
一对一可以实现,那我们该需求,假设一个per人有多个孩子,我们想获取这多个孩子,使用map可以实现吗?比如下面代码。
static class Child {
public String name;
public int age;
public Child(String name, int age) {
this.name = name;
this.age = age;
}
@Override
public String toString() {
return “Child{” +
“name='” + name + ‘’’ +
“, age=” + age +
‘}’;
}
}
static class Per {
public String name;
public int age;
public Child[] Children;
public Per(String name, int age) {
this.name = name;
this.age = age;
}
最后
分享一些系统的面试题,大家可以拿去刷一刷,准备面试涨薪。
这些面试题相对应的技术点:
- JVM
- MySQL
- Mybatis
- MongoDB
- Redis
- Spring
- Spring boot
- Spring cloud
- Kafka
- RabbitMQ
- Nginx
- …
大类就是:
- Java基础
- 数据结构与算法
- 并发编程
- 数据库
- 设计模式
- 微服务
- 消息中间件
KS5qIL2-1714912444861)]
[外链图片转存中…(img-EDITVCnn-1714912444861)]
[外链图片转存中…(img-OGFhHrUs-1714912444862)]
[外链图片转存中…(img-oDNjMc9S-1714912444862)]