
Service_Build
大数据单环境搭建
会撸代码的懒羊羊
自评:11年末e语言使我捞到本不属于那个年纪的第一桶金;13年相望于江葫芦漫漫,回首数据只是一串代码,如遇支付请开飞行模式,少年得志,实乃大不幸!憧憬做个普通人,平凡有点理想,渴望碎银几两。
展开
-
五篇博文讲透大数据伪分布式环境搭建——YARN 伪分布式集群搭建
3.YARN 伪分布式集群搭建 操作一览 掌握 YARN 集群的相关配置 启动和关闭 YARN 集群的两种方式 使用 jps 命令查看进程的启动情况 通过 UI 查看 YARN 集群的运行状态 操作清单 操作 1:YARN 集群主要配置文件讲解 操作 2:YARN 集群测试 操作步骤 1.YARN 集群主要配置文件讲解 注:所有操作均依附于上3篇博文完成,如果有疑问请回阅其他博文 1.1 配置环境变量 yarn-env.sh 该文件是 YARN 框架运行环境的配置,同样需要修改 JDK 所在位置。我原创 2020-08-02 08:52:19 · 499 阅读 · 0 评论 -
五篇博文讲透大数据伪分布式环境搭建——HDFS伪分布式集群搭建
2.2 HDFS 伪分布式集群搭建 目的 了解 Hadoop 集群的组成和规划 重点掌握 HDFS 集群的相关配置 掌握格式化文件系统的命令 学会启动和关闭 HDFS 集群的两种方式 能够使用 jps 命令查看进程的启动情况 能够通过 UI 查看 HDFS 集群的运行状态 配置清单 任务 1:Hadoop 集群简介 任务 2:安装包准备 任务 3:HDFS 集群主要配置文件讲解 任务 4:配置 Hadoop 系统环境变量 任务 5:HDFS 集群测试 1:集群简介 Hadoop 集群具体来说包含两个原创 2020-06-08 19:50:13 · 1555 阅读 · 3 评论 -
五篇博文讲透大数据伪分布式环境搭建——ssh免密登录
2:配置 SSH 免密登录 简述 如果按照上一篇博文操作的铁汁应该已经完成了 JDK 的安装和基本配置,每篇博文缓缓相扣,如果真的想学到对应的东西,请回戳上一篇仔细阅读大数据环境前置准备jdk的配置完成的铁汁请继续往下阅读虽然这个节点已经可以正常使用了,但是依然存在诸多问题,请听我一一道来。 (1)实际工作中,服务器被放置在机房中,同时受到地域和管理的限制,开发人员通常不会进入机房直接上机操作,而是通过远程连接服务器进行相关操作。 (2)在集群开发中,主节点通常会对集群中各个节点频繁地访问,就需要不原创 2020-06-08 17:07:47 · 620 阅读 · 0 评论 -
五篇博文讲透大数据伪分布式环境搭建——Linux环境准备
前言 最清晰的简洁的伪分布式大数据环境搭建 失踪了差不多一周的时间,没有为大家更新博文,非常抱歉,这一周里博主也没有闲置,一方面为大数据比赛做准备,另一方面翻书查阅相关资料进行总结,现在也准备的差不多了,决定为铁汁们开始为期两个月的大数据集群环境搭建实战分享,希望能够帮助到有需要的铁汁,也希望帮助大家深层次的了解何为大数据大数据集群 大数据环境软件包下载链接: https://pan.baidu.com/s/1MrKJurWu-ZTfO-tVCfcF3g 提取码: fe7j 有需要的铁汁自取 1.Liunx原创 2020-06-08 16:38:10 · 325 阅读 · 0 评论 -
Kali从入门到银手镯加身①
作为一个程序爱好者,几乎都有一个黑客梦,本篇博文帮助大家配备基本的环境,开启Kali的第一章 Kali改root密码 进入普通用户 执行sudo passwd root 先输入我们设置的密码 之后输入要设置的root密码,两次回车结束 输入命令切换用户 su root Kali换国内源 1.安装文本编辑器 sudo apt-get install leafpad 2.编辑sources.list leafpad /etc/apt/sources.list 3.添加镜像源 注意:#号后面代表不执行,把原创 2020-09-27 18:44:08 · 488 阅读 · 0 评论 -
Ngrok——5min上手网站部署
Ngrok 适用场景 在开发Web开发时,会出现如下的需求: 让朋友可以访问到你本地运行的程序,页面展示 在本地测试各类服务(比如:微信公众号/小程序等) 有一台废弃的PC,你想让它作为一台服务器来运行你的博客程序,或是运行其他简单的程序,挂载在后台去跑 以上要求Ngrok均可以满足,想要了解更多详请戳此Ngork ...原创 2020-05-31 19:45:03 · 275 阅读 · 0 评论