9 张脑图梳理下分布式数据计算系统【附高福利】

写在前面

 

有时候，人的眼界真挺重要的。

 

知乎张佳玮先生，文艺界中 80 后五虎将。获得这个名号的时候，张公子还是高中毕业生。彼时的张先生早已读书破万卷，脑袋灵光，通晓中外文学，玲珑脱俗于应试教育体制下。想想那时的我，还与语数外苦苦做着斗争。以至于本科毕业了很长时间，依然还是个只会 ABC 的脑残，没错，我是智力方面的残疾人，简称“脑残”。

 

初入外企职场，我认为凭着一手说得过去的 SQL 编码手，加上不那么烂的外语口语，可以有一番作为。但经过7,8年的职场历练之后，依旧发现自己是个脑残，外企职场并不是我想象中那么玩的。早点拜个牛师学习下，估计现在早已肉身去了大美农村。

 

故，早已认了命，好好做技术！

 

技术就像你的钞票一样，你累积的越多，带给你的红利也越多。只要你不玩游艇，不玩直升机，烧起来不那么没边没际，总有一口安稳饭吃。偶尔还是可以任性一把欧洲 15 日自由行。近些年也越发觉得，技术还是蛮适合我这种脑残人的。反应慢点怎么了，每天我读 2,3页书，一年就可以读完 《Thinking In Java》；每天写1,2个 SQL 存储过程，一年我可以写完一套 ERP/MES/CRM. 

 

而最重要的，我不会造高精尖的轮子，但我可以买这些轮子拆开来学。站在巨人/牛人的肩膀上，才能高瞻远瞩嘛。进不去 BAT，我花钱去看他们在做什么，遇到什么问题，怎么解决的，总可以了吧。所以这两年我对技术的窥探欲是越发强烈了。

 

窥来的脑图

 

70 年代起，数据的天下一直是关系型数据库的。 但 Google 的 BigTable 理论出来之后，数据的世界充满了动荡与惊喜。SOAP、WSDL、XML、Restful、Json、Pub/Sub、SOA、NoSQL, NewSQL, Not Only SQL、Distributed Cluster 等概念强制轮番上场。

 

为了彻底弄清楚这些概念，相继翻看了万方数据库，维普数据库，Google Scholar , IEEE 等学术期刊，购入了相当数量的极客时间专栏和课程，总结了以下几张脑图，方便来时用到可以及时复盘，拿来就用。

 

分享出来，供大家批评和指正。

 

 

 

 

整个梳理的过程中，包含了分布式数据计算系统，MPP, 数据仓库，数据治理以及数据可视化的探讨。当然不全面，日后完善。知识框架的整理和代码一样，并不是一蹴而就，肯定是持续集成。

 

当然也有同学会好奇这些参考资源的来路，除了极客时间，大部分在网上可以找到。原意付费就去专业的知识库找，时间多就去百度文库，360doc, 或者道客巴巴。