Ubuntu编译64bit Hadoop

最新推荐文章于 2019-05-13 13:09:01 发布
原创 最新推荐文章于 2019-05-13 13:09:01 发布 · 162 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#大数据 #java

本文介绍了在Ubuntu系统中安装和配置多种开发相关软件的过程，包括SVN、ncurses-devel、openssl-devel等，并特别强调了在编译过程中遇到的问题及解决方法，如未安装libssl-dev导致的问题以及protobuf编译失败的解决方案。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

安装相关软件

SVN

Ubuntu中SVN对应subversion


autoconf automake libtool cmake



 

ncurses-devel

Ubuntu对应为lib64ncurses5-dev


openssl-devel

Ubuntu下对应为openssl


还需要安装libssl-dev，一开始没有安装libssl-dev，当编译到hadoop pipes时总是不能通过。

gcc

Ubuntu中对应命令是apt-get build-dep gcc


maven



 

 

把maven-home加入path



 

安装protobuf



 

./configure

make

make check

make install



 

 

在Ubuntu中运行protoc –version时，不能执行，由此可见，protoc没能安装成功。

 

如下是解决办法：

参考：http://blog.youkuaiyun.com/xocoder/article/details/9155901



 

 

编译

 使用 mvn package -Pdist,native -DskipTests -Dtar



 

编译成果



 

Ubuntu手动编译Hadoop服务器
AsfSql的博客
10-04 113
在Ubuntu操作系统上手动编译Hadoop服务器可以为用户提供更多的灵活性和定制化选项。本文将详细介绍在Ubuntu上手动编译Hadoop服务器的步骤，并提供相应的源代码。至此，您已成功在Ubuntu上手动编译和安装了Hadoop服务器。通过以上步骤，您已成功在Ubuntu上手动编译和安装了Hadoop服务器。编译Hadoop服务器是在Ubuntu操作系统上安装和配置Hadoop的过程。该命令将使用Maven编译Hadoop，并生成二进制分发包。此命令将根据系统配置生成Hadoop的配置文件。
基于Ubuntu系统下的Hadoop 环境搭建(新手可尝)
墨染的博客
04-15 8510
文章目录Hadoop 环境搭建1、安装虚拟机2.安装 Ubuntu 操作系统3、关闭防火墙4、 SSH 安装5、 安装 Xshell 及 Xftp6、 安装 JDK7、安装 hadoop8. 结语 Hadoop 环境搭建 1、安装虚拟机 在一切行动的前提，我们需要先安装好虚拟机，毕竟是供我们学习用的，因此我们需要通过虚拟机利用Linux系统来实现我们的Hadoop环境。 安装虚拟机步骤： (1）下载 VMware 安装包。到 VMware® Workstation Pro 官网，选择对应的版本 进行下载。本
Ubuntu下编译Hadoop
weixin_34279579的博客
05-13 242
Ubuntu 下编译 Hadoop-2.9.2 系统环境 系统： ubuntu-18.10-desktop-amd64 maven： Apache Maven 3.6.0 jdk: jdk_1.8.0_201 ProtocolBuffer： portoc-2.5.0 OpenSSL： OpenSSL 1.1.1 cmake： cmake3.12.1 hadoop： hadoop-2.9.2 复制代...
Ubuntu 编译安装 hadoop 2.2.0
Jack‘s bolg
12-11 2914
本文属于转载，打patch部分是自己遇到的问题 转自：http://blog.changecong.com/2013/10/ubuntu-%E7%BC%96%E8%AF%91%E5%AE%89%E8%A3%85-hadoop-2-2-0/ 编译环境 OS: Ubuntu 12.04 64-bit hadoop version: 2.2.0 Java: Jdk1.7.0
ubuntu 编译hadoop
houzhiwei123456789的专栏
12-17 486
1、安装JDK显示版本信息： java version “1.7.0_65” OpenJDK Runtime Environment (IcedTea 2.5.3) (7u71-2.5.3-0ubuntu0.14.04.1) OpenJDK 64-Bit Server VM (build 24.65-b04, mixed mode)2、安装maven sudo apt-get install
ubuntu下编译hadoop
qq_24761901的博客
09-08 1060
http://my.oschina.net/laigous/blog/356552
Ubuntu下hadoop-2.5.2编译好的64bit的native库
10-31
标题提到的"Ubuntu下hadoop-2.5.2编译好的64bit的native库"，意味着这是一个专门为64位Ubuntu系统优化的Hadoop原生库包。这个库包包含了与Hadoop 2.5.2版本兼容的所有必要的C/C++编译的库文件，它们可以显著提高...
hadoop2.8.1 64bit native 编译
10-04
本文将深入探讨关于“hadoop2.8.1 64bit native 编译”的相关知识点，帮助你理解如何在64位环境下编译Hadoop的本地库。 1. **Hadoop Native Libraries**： Hadoop的Native Libraries是一组C/C++编写的库，它们提供...
Hadoop-2.7.1已编译64位
04-24
1. **下载Hadoop-2.7.1**：可以通过官方网站或其他可靠的渠道下载预编译好的二进制包。 2. **解压并设置环境变量**：将下载的压缩包解压到指定目录，并设置`HADOOP_HOME`环境变量指向解压后的目录。 3. **配置Hadoop...
Ubuntu 13.10 编译hadoop
ding
10-24 1950
操作系统： Ubuntu 13.10 Server 64-bit 安装svn sudo apt-get install subversion 下载hadoop最新源代码 svn checkout http://svn.apache.org/repos/asf/hadoop/common/trunk/ 安装jdk 安装maven cmake
ubantu下编译hadoop
kent_kent_kent的专栏
01-06 1121
本文主要讲述：ubantu16.04.1 Desktop下编译hadoop-2.7.3-src 1.编译前准备 1.1查看hadoop-2.7.3-src编译要求 解压hadoop-2.7.3-src.tar.gz，进入文件夹hadoop-2.7.3-src中，打开BUILDING.txt 由编译向导可知，需要安装的相关工具软件及注意事项 1.2安装相关工具软件
Ubuntu 14.04 64位编译hadoop 2.7.3
scorpion_zs的专栏
11-11 1906
1 下载解压 $ wget http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.7.3/hadoop-2.7.3-src.tar.gz $ tar -zxvf hadoop-2.7.3/hadoop-2.7.3-src.tar.gz 2 安装依赖在hadoop的根目录下有一个BUILDING.txt文件，该文件列出了当前h
ubuntu14.04中编译Hadoop2.6.0 64位版本
南国的博客
08-10 875
ubuntu14.04中编译Hadoop2.6.0 64位版本
Ubuntu 16.04 编译Hadoop2.7.2源码，并导入eclipse
lucyLee的博客
07-12 700
Ubuntu 16.04 编译Hadoop2.7.2源码，并导入eclipse
编译Hadoop2.7.1（Ubuntu）
明月阁
04-29 868
操作系统准备：$ sudo apt-get update $ sudo apt-get upgrade $ sudo apt-get install build-essential openjdk-7-jdk git maven subversion $ sudo apt-get install g++ autoconf automake libtool cmake zlib1g-dev pkg-c
Ubuntu14.04 (x64) 下hadoop2.5.0的编译
hechenghai
06-12 987
Ubuntu14.04 (x64) 下hadoop2.5.0的编译 详情见原文地址：http://jeyzhang.com/154/ 1.  前言 2. 操作系统及版本说明 Ubuntu14.04  64位。 如果你的操作系统是32位的，可以跳过这篇，因为只有64位的linux系统需要进行hadoop的编译。 > 如何查看linux系统的位数 1 2 3 4
32位ubuntu14.04手动编译hadoop2.6.0
Ran
01-06 8324
32位ubuntu14.04手动编译hadoop2.6.0
ubuntu编译hadoop源码
xingyyn78的博客
07-14 1193
1.环境配置 1.1安装JDK 详细步骤可查看JDK安装教程 1.2安装maven
Ubuntu下安装Hadoop-2.5.2的64位原生库指南
总结来说，"Ubuntu下hadoop-2.5.2编译好的64bit的native库"涉及了在Ubuntu系统上安装和配置Hadoop所需了解的一系列关键知识点。从操作系统的选择、Hadoop版本的特性、native库的编译与配置，到环境变量的设置，每...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值