
Hadoop
文章平均质量分 96
iofu728
A lazy man
展开
-
『HDFS』伪分布式Hadoop集群
『HDFS』伪分布式Hadoop集群博客引流本文是『Hadoop』MapReduce 处理 日志log(单机版)的旭文, maybe还有后续在搭建环境的时候发现很难搜到合适的教程,所以这篇应该会有一定受众伪分布式就是假分布式,假在哪里,假就假在他只有一台机器而不是多台机器来完成一个任务,但是他模拟了分布式的这个过程,所以伪分布式下Hadoop也就是你在一个机器上配置了hadoop的所有节...原创 2018-10-25 13:05:22 · 426 阅读 · 0 评论 -
『Hadoop』MapReduce 处理 日志log(单机版)
『Hadoop』MapReduce 处理 日志log(单机版)博客引流本文为Hadoop单机版,伪分布版请移步『HDFS』伪分布式Hadoop集群10.2晚又出现上次CPU打满于是痛定思痛 检查了下业务流程发现处理日志和build两块很吃内存尤其是日志处理,随着日志量的增大,不可避免的是处理越来越慢,对性能要求越来越高这个时候不免想到利用MapReduce对处理过程进行分布式操作S...原创 2018-10-26 16:34:00 · 1067 阅读 · 0 评论