上白书妖

知识源于积累,登峰造极源于自律. 整理自己发在博客上的大数据笔记，方便查找。索引持续更新中… 大数据开发(基础笔记) Linux Linux命令收集 Hadoop 什么是大数据 从Hadoop框架讨论大数据生态 hadoop组成模块及各模块的简介 hadoop组成模块之HDFS分布式存储详解 hadoop组成模块之HDFS-HA高可用 hadoop组成模块之MapReduce概述 MapReduce框架原理之InputFormat数据输入 hadoop组成模块之mapreduce的MapTask机制和re

大家好, 我是上白书妖! 知识源于积累,登峰造极源于自律 今天学习spark遇到了一个小困难,网上有解决办法,此处纯属为了做笔记 关于spark查看日志报错问题的解决方式 解决方法:在hadoop的yarn-site.xml中加入这个属性即可 只需要加上这个属性就可以了,然后分发到其他服务器集群上 <!--指定yarn.log.server.url所在节点--> <property> <name>yarn.log.server.url</name&g