python 连接HBase服务器遇到的一个坑

最新推荐文章于 2023-09-08 18:14:23 发布
最新推荐文章于 2023-09-08 18:14:23 发布
阅读量2k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_37587216/article/details/81185471
在使用Python3.5连接HBase1.2.6过程中，遇到生成gen-py包的问题。通过选择使用thrift2下的hbase.thrift文件，成功解决了thrift-genpy命令执行时出现的警告信息。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在使用python连接HBase安装各种依赖包的过程中需要根据  HBase 的源码来生成一个gen-py包，我使用的是python3.5,HBase的版本是1.2.6，在/hbase-1.2.6.1/hbase-thrift/src/main/resources/org/apache/hadoop/hbase 文件夹下面有两个文件夹  thrift  thrift2，网上查来的许多资料都是使用 thrift下的 Hbase,执行thrift -gen py Hbase.thrift ：但是在我这里总是报一个错：

 [WARNING:/webapps/hbase-1.2.6.1/hbase-thrift/src/main/resources/org/apache/hadoop/hbase/thrift/Hbase.thrift:89] The "byte" type is a compatibility alias for "i8". Use "i8" to emphasize the signedness of this type.

后来我选择使用  thrift 下的 hbase.thrift:果然成功了

[bigdata-128] python3以thrift2的方式连接hbase
大数据和机器学习研究
11-16 2442
1.hbase的版本是1.2.6。hbase必须启动thrift2服务。 2.客户端操作系统是ubuntu 16.04。python版本3.5 3.客户端 安装 thrift 3.1 官网 http://thrift.apache.org/ 3.1 获取源码 git clone https://github.com/apache/thrift.git 3.2 编译 cd th...
python操作hbase 远程连接
TENLIU2099的博客
10-19 5108
更多内容请访问我的个人博客 目的 用python操作hbase。 这里是在linux上搭建的是一个测试环境，所以hbase是单机版本安装，安装thrift是为了支持python操作hbase。 网上也有类似教程，但是坑也不少，这里记录我的安装和使用过程。 我的linux安装习惯 我linux安装的习惯，是会在工具目录下（例如tools），建立build和src两个文件。src文件放
python3连接hbase包
07-06
网上好多Hbase.py都是python2的，各种报错，我提供一种python3的，无报错，欢迎大家下载。
python3 连接HBase
weixin_30794499的博客
08-08 1015
db_url = 'http://47.93.89.99:8765' from traceback import format_exc import phoenixdb as pb class Utils(object): def get_db_conn(self, url): """ this function is able to...
python3 使用hbase
静待花开时，终有重逢日。
04-21 1440
本人用的ubuntu 先下载 wget http://mirror.bit.edu.cn/apache/thrift/0.10.0/thrift-0.10.0.tar.gz 然后我们解压一下 tar zvxf thrift-0.10.0.tar.gz cd thrift-0.10.0/ ./configure sudo make && make install 然后我们查...
Python连接HBase
浩兄的博客
06-24 9022
测试环境：Python3.5、HBase1.2.0 1、安装依赖包 sudo pip install thrift sudo pip install hbase-thrift 2、替换本地py文件（python3版本需要） 替换/usr/local/lib/python3.5/site-paceages/hbase/下的Hbase.py、ttypes.py两个文件； 获取路径：https://g...
Python访问Hbase的库文件
10-18
然而，在学习和开发过程中，`Hbase.py`和`ttypes.py`可以作为一个有用的临时工具，帮助开发者更快地上手HBase。 总结起来，`Hbase.py`和`ttypes.py`是为了解决Python在访问HBase时遇到的导入问题而创建的，它们通过...
hbase的搭建、hbase shell的使用、Hbase的Python操作、Hbase整合Hive
weixin_50722238的博客
10-18 1515
搭建hbase
python连接hbase:ConnectionRefusedError: [WinError 10061] 由于目标计算机积极拒绝，无法连接。
最新发布
12-28
### Python连接HBase时遇到`ConnectionRefusedError`解决方案 当尝试通过Python连接到HBase却遭遇`ConnectionRefusedError`或Windows错误号10061（即目标计算机积极拒绝连接），这通常意味着客户端试图建立的TCP/IP...
Python3通过thrift连接hbase库_修改版，个人已验证
08-22
python3通过thrift连接hbase模块修改版,其中hbase-python3,里面的path，根据实际实际路径修改.
Python连接Hbase
02-14
Python环境下通过thrift操作hbase所需的模块
python3 hbase 库
09-07
解压后复制到dist-packages/目录下即可。 具体用法可以查看源码。。。。。。。。。。。。。。。。。。。。。
python3 使用 thrift 操作hbase 安装hbase-thirft后有一个Hbase报错
11-16
python3 使用 thrift 操作hbase 安装hbase-thirft后有一个Hbase报错 使用这个修改完成的Hbase类替换掉原来的Hbase类问题全部解决 主要是因为python版本兼容性带来的问题
python3使用thrift操作hbase hbase-thirft报错解决
10-24
python连接hbase需要用到hbase-thirft类库，但是hbase-thirft只在python2下能正常使用，如果在python3下，会报错，主要有一下几个错误 except IOError, io: SyntaxError: invalid syntax ModuleNotFoundError: No module named 'ttypes' NameError:name ‘xrange’ is not defined 这几个都是python3和python2语法不兼容导致的，下载的包已经把这些错误结果了，在python下能正常使用
Python连接hbase错误原因详解
lIujunXHU的博客
09-08 1186
要解决这个问题，你可以将 hbase.regionserver.thrift.http 的值设置为 false，重启 HBase Thrift 服务，并使用 HappyBase 基于 Thrift 协议进行连接和数据操作。由于 HappyBase 是基于原生的 Thrift 协议实现的 Python 客户端库，它不直接支持通过 HTTP 进行连接和读取数据。因此，如果你在 HappyBase 中尝试通过 HTTP 访问 HBase Thrift 服务，可能会导致无法读取数据的问题。
python3访问HBase数据库
on the way . . .
01-17 3349
python3访问HBase数据库1 介绍2 启动thrift-server3 安装thrift-client3.1 安装依赖3.2 安装boost3.3 安装thrift客户端4 使用python3连接Hbase（hbase-thrift）5 常用方法介绍 1 介绍 Hbase是用Java写的，它原生地提供了Java接口，对非Java程序人员，它也提供了thrift接口，因此也可以采用其他语...
Python通过Phoenix访问HBase
czdsdhryes的博客
06-09 517
直接上代码 首先是安装方式 pip install phoenixdb==0.7 记得加上版本号，不加的话在ubuntu 18.04及以上各种报错，类似g++、gcc找不到等等 测试代码 import phoenixdb import phoenixdb.cursor database_url = 'http://192.170.41.197:8765/' #Phoenix默认端口号8765 conn = phoenixdb.connect(database_url, autocommit=True)
【python 连接hbase】python连接hbase 简单
赖德发的博客
08-01 3465
python是通过thrift去访问操作hbase 1、首先需要先安装happyhbase和thrift pip install happybase pip install thrift 2、需要修改源码一个文件parser.py 如果执行的时候报错： py.parser.exc.ThriftParserError: ThriftPy does not support generati...
使用python通过Thrift连接Hbase(Demo)
code_lab
09-27 393
# coding=utf-8 from thrift.transport import TSocket, TTransport from thrift.protocol import TBinaryProtocol from hbase import Hbase socket = TSocket.TSocket('xxx.xxx.xxx.xxx', port) socket.setTimeou...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值