
Hadoop
李天泉
本科(计算机科学与技术、化学)双学士、北师大软件工程硕士,拥有复合专业背景,曾就职于中国一汽、用友软件、联想集团、达内IT培训集团,从事过企业管理软件、互联网平台等若干项目的研发、实施、管理、咨询等工作,有深厚的技术、业务、管理经验
项目管理经验12年,部门管理经验10年,团队人数最多达到百余人
开发经验15年,架构设计经验12年,IT软件方向从业16年
展开
-
大数据环境搭建步骤详解(Hadoop,Hive,Zookeeper,Kafka,Flume,Hbase,Spark等安装与配置)
大数据环境安装和配置(Hadoop2.7.7,Hive2.3.4,Zookeeper3.4.10,Kafka2.1.0,Flume1.8.0,Hbase2.1.1,Spark2.4.0等)系统说明 搭建步骤详述 一、节点基础配置 二、Hadoop安装和配置 三、Hive安装和配置 四、ZooKeeper安装和配置 五、Kafka安装和配置 六、Flume安装和配置 七、Hbase安装和配置 八、Spark安装和配置 总结前言:本篇文章是以Hadoop为基础,.转载 2020-09-13 18:56:52 · 3684 阅读 · 3 评论 -
hadoop学习之hadoop2.8.0完全分布式集群安装
目录(?)[-]全部软件下载百度云链接失效请评论告诉我密码1kcl1准备工作 1软硬件环境 2集群网络环境 3注意 环境搭建 1操作系统安装 2本地环境配置 3操作系统设置 4SSH无密码验证配置 软件安装及环境配置 1Java安装及其环境配置 32Hadoop安装及其环境配置 33Slave服务器上的文件安装及配置 启动及验证 1启动 运行Ha转载 2017-10-30 07:53:29 · 378 阅读 · 0 评论 -
hadoop2.7.3在centos7上部署安装(单机版)
(1)hadoop2.7.3下载(前提:先安装java环境)下载地址:http://hadoop.apache.org/releases.html(注意是binary文件,source那个是源码)(2)解压tar.gz (3)配置hadoop1.修改/usr/hadoop/hadoop-2.7.3/et转载 2017-11-11 07:46:15 · 262 阅读 · 0 评论 -
Hadoop和Hive单机环境搭建
下载hadoophadoop下载地址:http://www.apache.org/dyn/closer.cgi/hadoop/core/这里下载的版本是1.0.3$ mkdir hadoop$ wget http://www.fayea.com/apache-mirror/hadoop/core/stable/hadoop-1.0.3.tar.gz .安装jav转载 2017-11-11 21:41:43 · 870 阅读 · 0 评论 -
Spark On Yarn 详细配置流程
1、系统与软件准备系统:centos7软件: hadoop-2.7.2.tar.gz,请勿选择src版本,否则需要自行编译 jdk-7u79-linux-x64.tar.gz scala-2.10.3.tgz spark-1.6.1-bin-hadoop2.6.tgz,选择hadooppre-built版本,否则需要安装后编译 zookeeper-3.3.转载 2017-11-19 17:38:10 · 486 阅读 · 0 评论 -
CentOS7.5,CDH6安装部署
https://blog.youkuaiyun.com/TXBSW/article/details/84648269转载 2019-06-12 08:03:06 · 382 阅读 · 0 评论 -
CentOS7安装部署CDH6.1.0
https://blog.youkuaiyun.com/ITshu/article/details/87165409转载 2019-06-12 08:08:31 · 339 阅读 · 0 评论