
软夜
文章平均质量分 69
断剑走江湖
始终生活在编码的梦想中,不抛弃不放弃,坚持Coding。
展开
-
常见分布式计算框架特点
Hadoop: Hadoop在使用原理上基本上遵照了Map、Reduce这样的一种模式进行项目的实际开发与交互,将一个个任务分解成映射与合并两种方式,然而通过映射进行分类与简化,从而产生部分归并结果,然后对同类结果进行归并计算; 由于Hadoop的中间结果需要依托于hdfs,从而需要经历硬盘及网络io的过程所以在实时性方面表现稍差; Hadoop主要处理hdfs上的文本文件,而文本文件内容本原创 2015-07-07 18:19:44 · 2128 阅读 · 0 评论 -
LOD你好,LOD再见
受前任领导临行托孤,结果LOD项目,由于涉及干系故将全名隐去,且做LOD。然而,该项目本身带有不少研究性质,故而可能需要稍动脑筋进行解决,或方案取巧或结果可人,然而项目交付性质偏重,所以当时权当锻炼一番为目的因而选择不少新鲜技术,由此为课题结项埋下隐患。 项目已经两年,与相关参与方沟通过两次,由于直接利害关系不明朗,所以沟通过程场面话居多,不过交流的过程中也可以看出来他们是比较希望项目能继续开展原创 2016-02-01 11:12:33 · 848 阅读 · 0 评论