在这里说的都是踩过的一些坑,和一些操作步骤,如果需要可以认真的去阅读一下。本文不代表任何立场,仅仅是简单的记录下自己遇到的坑,给自己的经历做一个点点滴滴的记录。如有任何侵权或者其他问题,请立刻联系我进行雪藏,甚至删除,谢谢大家的合作。
邮箱:1326330617@qq.com
需要准备的材料,注意事项
- 官方提供的iso镜像文件,内含所有数据,包括项目数据等。
- 根据内含数据和项目,选择合适的软件,推荐使用官方说明文档内规定的软件,也可以自选,避免系统的不兼容性(比如在虚拟机方面,windows10 对VirtualBox 4.X直接不兼容,需要安装VirtualBox 5.X版本),还请注意下软件的兼容性问题。
- 网络的问题,推荐使用路由器做局域网,而且这个路由器不要进行大批量下载任务(如迅雷下载、百度网盘等下载工具),这是为了避免网络堵塞可能导致的连接超时,设置路由器局域网内ip可以互相访问(路由器默认是可以访问的),建议在路由器配置好后进行ping操作,保证网络一定是通畅的,毕竟磨刀不误砍柴工。
- 笔记本或者单台PC可能会因为性能,造成程序运行缓慢,甚至连接超时或假死。建议使用多台PC进行任务处理,在内网(局域网)对各台PC进行连接,一定要了解各台服务器服务通讯方式、协议、端口号,准确判断服务连接错误的原因,准确定位。
- Hadoop环境配置,严格按照操作手册进行,不能遗漏任何步骤,尤其是第一遍配置,按部就班的重复。再熟悉了流程之后,再去了解每一步做了什么,什么用。
- 微信小程序……未完待续
各项的实际操作步骤
在写这篇文章的时候,基本工作都已经完成,就不再此提供每一步骤的操作截图。还请各位认真去看文章,慢慢去了解每一个步骤。有不懂的我还是推荐搭建去百度搜索自己想要的答案,高效的利用搜索引擎,也是提高工作效率的一种方式。
一、大数据环境搭建与操作
开发环境
- 开发语言:Java和JavaEE框架。
- HBase数据库镜像和HbaseExplorer工具。
- MongoDB数据库
- Eclipse开发工具Robo 3T工具
- MySQL数据库
软件版本对应
软件会提供,在无法运行时可使用其他版本,仅是在自行训练时,正式环境下都是预先配置好的,无需自行配置安装。
| 序号 | 软件名称 | 版本 | 版本对应 | 系统版本 | 下载地址 |
|---|---|---|---|---|---|
| 1 | JDK |

这篇博客详细记录了云计算环境的搭建过程,特别是大数据环境的配置,包括Hadoop的环境变量设置、Eclipse的插件安装以及解决可能出现的各种问题。作者提醒注意软件兼容性、网络设置和服务器连接,并提供了遇到问题时的排查方法。
最低0.47元/天 解锁文章
25

被折叠的 条评论
为什么被折叠?



