python读取hbase数据和分析_Python 读写 hbase 数据的正确姿势（四）

最新推荐文章于 2025-05-14 16:24:51 发布

原创

最新推荐文章于 2025-05-14 16:24:51 发布 · 507 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python读取hbase数据和分析

本文详细分析了在使用Python的Happybase库操作HBase时遇到的查询异常TApplicationException: Missing result，以及其与timeout: timed out超时错误的关系。通过复现问题并调整timeout值，发现增大timeout能减少此类异常。最后，通过在timeout时重置连接池，成功避免了Missing result错误。文章探讨了问题背后的原因，并提出了有效的解决方案。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

title: Python 读写 hbase 数据的正确姿势(四)

tags:

hbase

happybase

python

categories:

�Hbase

comments: true

date: 2017-10-08 16:00:00

问题4: 查询异常 TApplicationException: Missing result

在上一篇文章中讨论了线上测试时出现 [Errno 32] Broken pipe 错误，这里继续分析另一个错误 TApplicationException: Missing result。

问题描述

在解决了问题 3 后，又遇到了古怪的错误：在查询的过程中，出现了大量的 TApplicationException: Missing result 错误：

File "/usr/local/lib/python2.7/site-packages/happybase/table.py", line 402, in scan

self.name, scan, {})

File "/usr/local/lib/python2.7/site-packages/thriftpy/thrift.py", line 198, in _req

return self._recv(_api)

File "/usr/local/lib/python2.7/site-packages/thriftpy/thrift.py", line 234, in _recv

raise TApplicationException(TApplicationException.MISSING_RESULT)

thriftpy.thrift.TApplicationException: Missing result

而且，在大量出现此类错误之前伴有 timeout: timed out 超时：

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_39525007

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

python读取hbase数据

yy的博客

11-09

1826

happybase官方文档 HappyBase — HappyBase 1.2.0 documentation 代码 # 注意我这里表小,使用scan全表扫描hbase数据,如果你数据量大,建议看官方文档. import happybase ''' 本脚本的需求是从hbase获取到rowkey的set,然后和hive中某列比较,下面的代码会说去hbase中rowkey组成的set ''' ''' 导入包: pip install thrift pip install...

python读取hbase数据和分析_python访问hbase数据

weixin_36243739的博客

02-04

475

python还过thrift接口，获取hbase数据的方法1.[代码]python访问hbase数据#!/usr/bin/pythonimport getopt,sys,timefrom thrift.transport.TSocket import TSocketfrom thrift.transport.TTransport import TBufferedTransportfrom thri...

参与评论您还未登录，请先登录后发表或查看评论

python快速写入hbase_Python 读写 hbase 数据的正确姿势（四）

weixin_39975055的博客

11-28

378

title: Python 读写 hbase 数据的正确姿势（四）tags:hbasehappybasepythoncategories:�Hbasecomments: truedate: 2017-10-08 16:00:00问题4: 查询异常 TApplicationException: Missing result在上一篇文章中讨论了线上测试时出现 [Errno 32] Broken pi...

Python读取hbase数据库

Trisyp的博客

03-01

1590

Python读取hbase数据库

python hbase_python操作 hbase 数据的方法

weixin_39849762的博客

11-28

168

配置 thriftpython使用的包 thrift个人使用的python 编译器是pycharm community edition. 在工程中设置中，找到project interpreter，在相应的工程下，找到package，然后选择 “+” 添加，搜索 hbase-thrift (Python client for HBase Thrift interface),然后安装包。安装服务...

python读取hbase数据和分析_Python 读写 hbase 数据的正确姿势（二）

weixin_39988888的博客

12-18

633

title: Python 读写 hbase 数据的正确姿势(二)tags:hbasehappybasepythoncategories:�Hbasecomments: truedate: 2017-09-17 18:00:00问题1：小续上一篇文章中讨论了，在使用 filter 查询 hbase 的过程中，使用python 容易忽略的一个问题：存储整型数据的时候，容易忽略将整型数据转换成 byt...

python操作 hbase 数据的方法

09-21

### Python 操作 HBase 数据的方法 #### 一、前言在大数据处理场景中，HBase 作为一种分布式列式存储系统，被广泛应用于海量...这不仅适用于数据工程师进行数据处理工作，也是学习 Python 和 HBase 交互的良好起点。

python hbase读取数据发送kafka的方法

09-19

本文将详细介绍如何使用Python从HBase数据库中读取数据，并将这些数据发送到Kafka消息队列。首先，我们需要了解HBase和Kafka的基本...这种方法可以用于实时监控和处理HBase中的数据变化，适用于大数据分析和实时应用。

【Spark分析HBase数据】Spark读取并分析HBase数据

05-14

1629

Apache Spark 是一个强大的大数据处理引擎，而 HBase 是一个分布式 NoSQL 数据库，适合存储海量数据。通过结合 Spark 和 HBase，可以实现高效的数据处理和分析。本文以 Spark 2.3.2 读取 HBase 1.4.8 中的 hbase_emp_table 表数据为例，展示了如何实现这一过程。首先，在 IDEA 中创建工程 SparkReadHBaseData，并在 pom.xml 中添加必要的依赖，包括 Spark、HBase 和 Hadoop 的相关库。接着，在 com.

python读写hbase

WangYouJin321的博客

05-25

790

#!/usr/bin/env python -- coding:utf-8 -- import hashlib,time from thrift.transport.TSocket import TSocket from thrift.transport.TTransport import TBufferedTransport from thrift.protocol import TBinaryProtocol from hbase import Hbase import threading from h

python利用thrift服务读取hbase数据的方法

12-25

因工作需要用python通过hbase的thrift服务读取Hbase表数据，发现公司的测试环境还不支持，于是自己动手准备环境，在此我将在安装步骤尽可能描述清楚，旨在给第一次动手安装的朋友，此过程亲测成功！安装过程如下： 1、首先确保hbase安装测试成功，再者确认下hbase的thrift服务是否启动，注意目前的Hbase(本文基于版本0.98.17）有两套thrift接口thrift和thrift2，本文使用thrift，启动命令：hbase thrift -p 9090 start，确保该端口没有被占用，使用lsof -i:9090查看)，本公司测试环境该端口被占用，如果被占用换一个没

Python访问Hbase的库文件

10-18

Hbase.py 和 ttypes.py 用来替换原有的 hbase包里的文件，解决 from hbase import Hbase 报错问题。

python通过thrift访问hbase.docx

11-25

python通过thrift访问hbase.docx

【python 读取hbase数据】happybase 轻松读取hbase数据集

赖德发的博客

09-27

2295

HappyBase是开发人员友好的Python库，可与Apache HBase进行交互。HappyBase设计用于标准HBase设置，并为应用程序开发人员提供了Pythonic API以与HBase进行交互。在表面之下，HappyBase使用Python Thrift库通过其Thrift网关连接到HBase ，该网关包含在标准HBase 0.9x版本中。这个包非常好用，简单高效读取。官方文档学习点这里 import happybase connection = happybase.Connection

Python编程：happybase读写HBase数据库

计算机毕业论文源码，学生个人网页制作html源码。贴近用户做网络推广和互联网优化。

08-18

198

　　1、安装　　与Java可以直接操作HBase数据库不同，python需要借助thrift完成对hbase数据库的操作。　　Thrift是Facebook公布的一款开源跨语言的RPC框架，而RPC (Remote Procedure Call Protocal)，远程过程调用协议是指在一台机器上调用另一...

python提取hbase数据_python访问hbase数据

weixin_39625337的博客

11-28

170

1 #!/usr/bin/python23 importgetopt,sys,time4 from thrift.transport.TSocket importTSocket5 from thrift.transport.TTransport importTBufferedTransport6 from thrift.protocol importTBinaryProtocol7 from hb...

python访问hbase数据

qq_21153619的博客

09-11

4775

使用Python调用happybase库。thrift 是facebook开发并开源的一个二进制通讯中间件，通过thrift，我们可以用Python来操作Hbase 1、概述 Thrift最初由Facebook开发的，后来提交给了Apache基金会将Thrift作为一个开源项目。当时facebook开发使用它是为了解决系统中各系统间大数据量的传输通信以及系统之间语言环境不同需要跨平台的特性问题...

python读取hbase数据和分析_Python 读写 hbase 数据的正确姿势（五）

weixin_42505397的博客

12-29

485

title: Python 读写 hbase 数据的正确姿势(五)tags:hbasehappybasepythoncategories:�Hbasecomments: truedate: 2017-10-31 23:00:00为什么一条异常的连接会出现在 connect pool 中，而且总会拿到这条连接？在本系列第三篇文章末尾提出了这样一个问题『为什么一条异常的连接会出现在 connec...

Python3操作HBase库安装使用指南

Python与HBase交互的库可以方便地执行数据的CRUD（创建、读取、更新、删除）操作。通常这些库都是HBase Thrift API的封装。 - **安装库**: 可以通过Python的包管理工具pip进行安装，或者将压缩包解压后复制到dist...