Hadoop
Chen6810
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop2.X Yarn框架原理及运作机制
<link rel="stylesheet" href="https://csdnimg.cn/release/phoenix/template/css/ck_htmledit_views-e2445db1a8.css"> <div class="htmledit_views&转载 2018-07-31 15:59:01 · 303 阅读 · 0 评论 -
hadoop能用到的系统端口
hadoop能用到的系统端口 hadoop系统部署时用到不少端口。有的是Web UI所使用的,有的是内部通信所使用的,有的是监控所使用的。实际系统中可能用于防火墙的端口设计。一些内部通信用的端口可能也需要外部能访问。如两个集群的数据对拷。 1.系统 8080,80 用于tomca...转载 2018-08-05 16:36:10 · 337 阅读 · 0 评论 -
Hadoop学习笔记
配置历史服务器 (查看监听已经运行完成的MapReduce任务的执行情况) mapred-site.xml mapreduce.jobhistory.address master.bigdata.com:10020 mapreduce.jobhistory.webapp.address master.bigdata.com:19888...原创 2018-08-06 14:35:09 · 343 阅读 · 0 评论 -
如何更改htpd的默认网站目录
操作步骤: 1、vi /etc/httpd/conf/httpd.conf 找到 DocumentRoot "/var/www/html" 这一段 #apache的根目录 把/var/www/html 这个目录改为/home/wwwroot/web1/htdocs 再找到 <Directory "/var/www/html"> #定义apache /var/www/html这个区域 把...原创 2018-08-10 17:30:32 · 875 阅读 · 0 评论 -
一步步教你Hadoop多节点集群安装配置
转载地址:http://www.cnblogs.com/lanxuezaipiao/p/3525554.html 1、集群部署介绍 1.1 Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统HDFS(Hadoop Distrib...转载 2018-08-02 10:52:38 · 3563 阅读 · 0 评论 -
HDFS Java API使用之获取FileSystem对象
package com.ibeifeng.hadoop.senior.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; public class HdfsApp { public static FileSystem getFileSystem() th...原创 2018-08-07 15:15:01 · 787 阅读 · 0 评论 -
HDFS Java API使用之读取文件内容
package com.ibeifeng.hadoop.senior.hdfs; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FSDataInputStream; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoo...原创 2018-08-07 16:40:43 · 4092 阅读 · 0 评论 -
ambari安装遇到的问题
ambari 安装Hortonworks HDP 时在检测host时异常。 The following hosts have Transparent Huge Pages (THP) enabled。THP should be disabled to avoid potential Hadoop performance issues. 解决办法,linux下执行代码 echo never &...原创 2018-08-13 13:36:21 · 1381 阅读 · 0 评论
分享