<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[daybreak98的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/weixin_42906348</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; weixin_42906348]]></copyright><item><title><![CDATA[大数据学习——YARN]]></title><link>https://blog.youkuaiyun.com/weixin_42906348/article/details/130876842</link><guid>https://blog.youkuaiyun.com/weixin_42906348/article/details/130876842</guid><author>weixin_42906348</author><pubDate>Sat, 27 May 2023 23:29:02 +0800</pubDate><description><![CDATA[（2）根据Application状态过滤：yarn application -list -appStates （所有状态：ALL、NEW、NEW_SAVING、SUBMITTED、ACCEPTED、RUNNING、FINISHED、FAILED、KILLED）ApplicationMaster 负责协调来自 ResourceManager 的资源，负责任务的监控与容错，根据应用的运行状态和资源使用情况动态计算资源需求。YARN 中的资源抽象，封装了某个节点上的多维度资源，如内存、CPU、磁盘、网络等。]]></description><category></category></item><item><title><![CDATA[大数据学习——MapReduce]]></title><link>https://blog.youkuaiyun.com/weixin_42906348/article/details/130729013</link><guid>https://blog.youkuaiyun.com/weixin_42906348/article/details/130729013</guid><author>weixin_42906348</author><pubDate>Wed, 17 May 2023 21:39:54 +0800</pubDate><description><![CDATA[具体实现bean对象序列化步骤如下。（1）实现Writable接口（2）反序列化时，需要反射调用空参构造函数，所以必须有空参构造（3）重写序列化和反序列化方法，同时要求顺序一致（4）如果需要将自定义的bean放在key中传输，则还需要实现Comparable接口，因为MapReduce框中的Shuffle过程要求对key必须能排序。默认分区通过key的hashCode对ReduceTask个数取模得到。]]></description><category></category></item><item><title><![CDATA[大数据学习——HDFS]]></title><link>https://blog.youkuaiyun.com/weixin_42906348/article/details/130442653</link><guid>https://blog.youkuaiyun.com/weixin_42906348/article/details/130442653</guid><author>weixin_42906348</author><pubDate>Sat, 29 Apr 2023 18:42:49 +0800</pubDate><description><![CDATA[HDFS是一种分布式文件管理系统，适合一次写入，多次读出的场景。]]></description><category></category></item></channel></rss>