
大数据
qq_31102103
这个作者很懒,什么都没留下…
展开
-
大数据平台搭建------CDH单机部署
转载https://blog.youkuaiyun.com/sinat_32176947/article/details/79591449?utm_source=blogxgwz3 一、部署前的准备 1、检查jdk是否安装:参考jdk安装配置文档(jdk7或jdk8,所有节点都要一致) 2、兼容性建议:CentOS6.8+CDH5.11.x(x>1)+mysql5.x+jdk1.7u80 ...转载 2019-04-27 21:33:44 · 2093 阅读 · 1 评论 -
/etc/security/limits.conf 和ulimit 命令 linux的资源配置适用文件
limits.conf文件实际上是linux PAM中pam_limits.so的配置文件,而且只针对于单个会话。 limits.conf的格式如下: <domain> <type> <item> <value> domain有好几种格式,具体可以用man limits.conf来查看,不过一般来说,我们都是用的用户名和组名的...原创 2019-05-14 11:22:38 · 972 阅读 · 0 评论 -
hadoop大数据各个组件常用的端口
hadoop集群的各部分一般都会使用到多个端口,有些是daemon之间进行交互之用,有些是用于RPC访问以及HTTP访问。而随着hadoop周边组件的增多,完全记不住哪个端口对应哪个应用,特收集记录如此,以便查询。这里包含我们使用到的组件:HDFS, YARN,Hbase,Hive, ZooKeeper: 组件 节点 默认端口 配置 用途说明 HDFS ...转载 2019-05-27 10:48:36 · 922 阅读 · 0 评论