- 博客(2)
- 收藏
- 关注
RSS订阅原创 spark源码分析，master如何开启，master和worker是怎么通信
master的开启，开启了master，会在本机开启master netty服务端，用来接收远程或者本地客户端发送数据，再对master服务进行绑定。开启流程如:https://blog.youkuaiyun.com/LinkStars/article/details/112982187spark源码学习 -worker启动消息通信，inbox，outbox创建netty 服务端发送消息:master消息接收会存放到master 的inbox中，master 的inbox会不断轮询进行process，master
2021-01-31 12:34:36
1050
6
原创 spark源码学习 -worker启动消息通信，inbox，outbox创建
注意：建议各位看如下代码，一定要导入一份源码到自己本地电脑中哦，可以导入进行调试。流程代码我删除许多，保留重点。本章主要介绍的是，worker 开启，并与master通信流程，以及inbox收件箱outbox发件箱的创建。认真学习你可以收获许多哦，举例使用该inbox,outbox处理模式，可以嵌入到聊天程序当中哦，处理高并发请求。废话不多说，进入主题。park业务操作和数据传输相隔里，数据传输就交给netty，netty不涉及业务，提高netty服务器的响应时间，提高代码的复用性，降低耦合性。wor
2021-01-22 18:02:54
4861
10
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人