golang hbase数据库基本操作笔记

本文介绍了如何使用Golang进行HBase数据库的基本操作,包括建立连接、添加数据到表`hbase_table`(列族CF1和CF2,列如name、gender、Chinese、Math),更新和查看数据,检查Rowkey存在性以及删除数据。主要依赖的库有`github.com/tsuna/gohbase`、`github.com/tsuna/gohbase/filter`和`github.com/tsuna/gohbase/hrpc`。

HBase是一个面向列的分布式数据库,适合一些需要实时随机地访问超大规模数据集的场合,hbase可以提供高并发读写操作的支持。表是由Key-Value组成的,下面主要介绍一下golang下hbase的一些基本操作。本文用到的库主要有:
“github.com/tsuna/gohbase”
“github.com/tsuna/gohbase/filter”
“github.com/tsuna/gohbase/hrpc”
1、Hbase的连接

var client gohbase.Client

func ConnectHBase() {
	hbaseUrl := beego.AppConfig.String("hbaseHost")
	user := beego.AppConfig.String("userName")
	option := gohbase.EffectiveUser(user)
	client = gohbase.NewClient(hbaseUrl, option)

}

2,向表中添加数据

func PutsByRowkey(table, rowKey string, values map[string]map[string][]byte) (err error) {
	putRequest, err := hrpc.NewPutStr(context.Background(), table, rowKey, values)
	if err != nil {
		log4go.Error("hrpc.NewPutStr: %s", err.Error())
		return err
	}
	_, err = client.Put(putRequest)
	if err != nil {
		log4go.Error("hbase clients: %s", err.Error())
		return err
	}
	return
}

例如在hbase中建表hbase_table

hbase(main):041:0> create 'hbase_table',  {NAME=>'CF1'}, {NAME=>'CF2'}

此表此表中Key为NAME,有两个列族CF1和CF2,其中CF1和CF2下分别有两个列name和gender,Chinese和Math

values := map[string]map[string][]byte{
					"CF1": map[string][]byte{
						"name": []byte("TigerwolfC"),
						"gender":[]byte("man")},
					"CF2": map[string][]byte{
						"Chinese":   []byte("99"),
						"Math": []byte("100")}}
PutsByRowkey(table, rowkey, values)

3,更新表中数据

func UpdataHbase(table, rowKey string, values map[string]map[string][]byte) (err error) {
	putRequest, err := hrpc.NewPutStr(context.Background(), table, rowKey, values)
	if err != nil {
		log4go.Error("hrpc.NewPutStr: %s", err.Error())
		return err
	}
	res, err := client.Put(putRequest)
	if err != nil {
		log4go.Error("hbase clients: %s", err.Error())
		return err
	}
	return
}

4、查看数据

func Gets(table, rowKey string) (*hrpc.Result, error) {

	getRequest, err := hrpc.NewGetStr(context.Background(), table, rowKey)
	if err != nil {
		log4go.Error("hrpc.NewGetStr: %s", err.Error())
		return nil,err
	}
	res, err := client.Get(getRequest)
	if err != nil {
		log4go.Error("hbase clients: %s", err.Error())
		return nil,err
	}
	defer func() {
		if errs := recover(); errs != nil {
			switch fmt.Sprintf("%v", errs) {
			case "runtime error: index out of range":
				err = errors.New("no such rowKey or qualifier exception")
			case "runtime error: invalid memory address or nil pointer dereference":
				err = errors.New("no such colFamily exception")
			default:
				err = fmt.Errorf("%v", errs)
			}
		}
	}()
	return res, nil
}

5、查看rowkey是否存在

func IsExistRowkey(table, rowKey string) bool {
	getRequest, err := hrpc.NewGetStr(context.Background(), table, rowKey)
	if err != nil {
		log4go.Error("hrpc.NewGetStr: %s", err.Error())
		return false
	}
	res, err := client.Get(getRequest)
	if err != nil {
		log4go.Error("get from hbase: %s", err.Error())
		return false
	}
	if len(res.Cells) > 0 {
		return true
	} else {
		return false
	}
}

6,删除数据

func DeleteByRowkey(table, rowkey string, value map[string]map[string][]byte) (err error) {
	deleteRequest, err := hrpc.NewDelStr(context.Background(), table, rowkey, value)
	if err != nil {
		log4go.Error("hrpc.NewDelStrRef: %s", err.Error())
		return err
	}
	//fmt.Println("deleteRequest:", deleteRequest)
	res, err := client.Delete(deleteRequest)
	if err != nil {
		log4go.Error("hrpc.Scan: %s", err.Error())
		return err
	}
	return
}

按照rowkey删除整条记录可以如下操作

DeleteByRowkey(table, rowkey, nil)

如有不对欢迎指正,相互学习,共同进步。


评论 3
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值