weixin_41350766的博客

see Kerberos主从搭建1.备用节点安装kerberosyum -y install krb5-server krb5-libs krb5-auth-dialog krb5-workstation2.主节点配置新增kdcvi /etc/krb5.conf [realms] POSINDA.COM = { kdc = master_hostname kdc = ...

原文 see http://blog.sina.com.cn/s/blog_8c243ea30101k0k1.html1关于Storm集群1.1关于storm集群的环境变量配置问题安装好JDK后，需要配置环境变量，通常情况下出于经验，我们往往会修改/etc/profile的值进行环境变量配置，但这在安装JDK以及后面安装的storm集群、zookeeper集群以及metaq集群...

原文 see http://blog.youkuaiyun.com/prstaxy/article/details/55261330理想情况下，应用对YARN发起的资源请求应该立刻得到满足，但现实情况资源往往是有限的，特别是在一个很繁忙的集群，一个应用对资源的请求经常需要等待一段时间才能获取到相应的资源。在YARN中，Scheduler的职责就是根据定义的策略给应用分配资源。其实调度本身就是一个难题，很难...

storm集群耗尽jvm线程资源，记录优化过程。另起一文论述storm集群，jvm，服务器资源分配。JVM运行状态分析。jstack 查看线程，jstat 性能分析，jmap 内存占用。 see JVM状态分析。Linux服务器资源分配。调整线程数上限。ulimit -u 打开系统的限制文件：vi /etc/security/limits.conf，

YARN是资源管理系统，理论上支持多种资源，目前支持CPU和内存两种资源YARN产生背景 直接源于MRv1在几个方面的缺陷 扩展性受限 单点故障 难以支持MR之外的计算 多计算框架各自为战，数据共享困难 MR：离线计算框架 Storm：实时...