RHadoop（一）

最新推荐文章于 2021-01-14 17:11:06 发布

我在呢呵呵

最新推荐文章于 2021-01-14 17:11:06 发布

阅读量2.1k

点赞数

分类专栏：开发笔记文章标签： hadoop 大数据海量数据

本文链接：https://blog.youkuaiyun.com/qq_32967001/article/details/53183877

版权

这篇博客介绍了在Hadoop环境中配置RHadoop的步骤。首先强调使用Oracle JDK 1.6.x以避免兼容性问题，然后详细描述了如何在5台虚拟机上搭建完全分布式Hadoop集群，包括内存、硬盘配置及外接硬盘的挂载。接着，创建Hadoop用户和目录，并设置SSH自动登录以实现集群间无密码访问。最后提到了下载RHadoop的相关R语言包，如rhdfs、rmr和rhbase，用于R语言与Hadoop的集成。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Hadoop主要用来存储海量数据，R语言完成MapReduce 算法，用来替代Java的MapReduce实现。有了RHadoop可以让广大的R语言爱好者，有更强大的工具处理大数据1G, 10G, 100G, TB, PB。 由于大数据所带来的单机性能问题，可能会一去不复返了。
最近的一本新书Big Data Analytics with R and Hadoop是关于R和Hadoop实践的第一本图书。
RHadoop的发布页：https://github.com/RevolutionAnalytics/RHadoop/wiki

RHadoop实践系列文章：http://blog.fens.me/series-rhadoop/
这里写图片描述
Haddop环境准备
但JDK一定要用Oracle SUN官方的版本，请从官网下载，操作系统的自带的OpenJDK会有各种不兼容。JDK请选择1.6.x的版本，JDK1.7版本也会有各种的不兼容情况。
http://www.oracle.com/technetwork/java/javase/downloads/index.html