kudu-python安装

最新推荐文章于 2024-04-14 16:19:54 发布

原创

最新推荐文章于 2024-04-14 16:19:54 发布 · 2.5k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#kudu #python #impala #cloudera #大数据

本文详细介绍如何在Ubuntu系统上安装Kudu客户端和kudu-python包，实现对Kudu数据库的远程连接及CRUD操作。文章提供具体安装步骤，解决版本匹配问题，探讨连接超时错误的可能原因。

对kudu数据库进行CRUD操作可以通过impala或者直接连接kudu库，前者有impyla的python包，但速度较慢，后者有kudu-python包，速度我目前还不清楚，但猜测应该会快。

impyla的使用较简单，最近想通过kudu-python进行连接，但仅仅是完成了kudu-python的安装，并没有完成连接，有待继续研究。

官方给的安装说明中，貌似是将kudu服务端、客户端、kudu-python安装在了同一台服务器上，但我希望通过远程连接的方式进行连接，本机的操作系统是Ubuntu 18.04，故以下安装仅适用Ubuntu系统，CentOS系统安装过程类似。

首先安装kudu-client0和kudu-client-devel，但貌似apt方式安装需要加入源，比较麻烦，因而下载deb包进行安装。
deb下载地址：http://archive.cloudera.com/kudu/ubuntu/xenial/amd64/kudu/pool/contrib/k/kudu/
rpm下载地址：https://archive.cloudera.com/cdh5/redhat/6/x86_64/cdh/5/RPMS/x86_64/
（貌似deb的版本比rpm的版本要低不少）
我下载的是：
libkuduclient-dev_1.4.0+cdh5.12.2+0-1.cdh5.12.2.p0.8_xenial-kudu5.12.2_amd64.deb
libkuduclient0_1.4.0+cdh5.12.2+0-1.cdh5.12.2.p0.8_xenial-kudu5.12.2_amd64.deb
需要根据自己kudu版本和cdh版本进行选择。这里顺带提一下查看kudu和cdh版本的方法：
在这里插入图片描述
安装：

>>> sudo dpkg -i libkuduclient0_1.4.0+cdh5.12.2+0-1.cdh5.12.2.p0.8_xenial-kudu5.12.2_amd64.deb
Selecting previously unselected package libkuduclient0.
(Reading database ... 240290 files and directories currently installed.)
Preparing to unpack libkuduclient0_1.4.0+cdh