hbase API

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.*;
import org.apache.hadoop.hbase.client.*;
import org.apache.hadoop.hbase.protobuf.generated.MasterProtos;
import org.apache.hadoop.hbase.util.Bytes;

import javax.swing.text.rtf.RTFEditorKit;
import java.io.IOException;

public class TestAPI {

    private static Connection connection = null;
    private static Admin admin = null;

    /**
     *  公用静态代码块
     */
    static {
        try {
            //hbase客户端对象(客户端配置文件信息)
            Configuration conf = new Configuration();
            // hbase conf hbase-site.xml
            conf.set("hbase.zookeeper.quorum", "node01:2181,node02:2181,node03:2181");
            //创建连接对象
            connection = ConnectionFactory.createConnection(conf);
            //创建管理员对象
            admin = connection.getAdmin();
        } catch (IOException e) {
            e.printStackTrace();
        }
    }

    /**
     * 关流
     */
    public static void close() {
        if (admin != null) {
            try {
                admin.close();
            } catch (IOException e) {
                e.printStackTrace();
            }
        }
        if (connection != null) {
            try {
                connection.close();
            } catch (IOException e) {
                e.printStackTrace();
            }
        }
    }

    /**
     * DDL
     *
     * @param tableName
     * @return 表是否存在
     * @throws Exception
     */
    public static boolean isTableExist(String tableName) throws Exception {
        // 判断表是否存在
        boolean tableExists = admin.tableExists(TableName.valueOf(tableName));
        // 关流
        return tableExists;
    }

    /**
     * DDL
     *
     * @param tableName
     * @param cfs
     * @throws Exception
     */
    //2 创建表
    public static void createTable(String tableName, String... cfs) throws Exception {
        // 判断是否存在列族信息
        if (cfs.length <= 0) {
            System.out.println("请设置列族信息");
            return;
        }
        // 判断表是否存在
        if (isTableExist(tableName)) {
            System.out.println(tableName + " 表已存在");
            return;
        }
        // 创建表描述器
        HTableDescriptor hTableDescriptor = new HTableDescriptor(TableName.valueOf(tableName));
        // 循环添加列族信息
        for (String cf : cfs) {
            //创建列族描述器
            HColumnDescriptor hColumnDescriptor = new HColumnDescriptor(cf);
            //添加具体的列族信息
            hTableDescriptor.addFamily(hColumnDescriptor);
        }
        // 创建表
        admin.createTable(hTableDescriptor);
        System.out.println(tableName + " 表创建成功");
    }

    /**
     * DDL
     *
     * @param tableName
     * @throws Exception
     */
    //3 删除表
    public static void dropTable(String tableName) throws Exception {
        // 先判断表是否存在
        if (!isTableExist(tableName)) {
            System.out.println(tableName + " 表不存在!!!");
        }
        // 先把表下线
        admin.disableTable(TableName.valueOf(tableName));
        // 删除表
        admin.deleteTable(TableName.valueOf(tableName));
        System.out.println(tableName + " 表已删除");
    }

    /**
     * DDL
     *
     * @param ns
     */
    //4 创建命名空间
    public static void createNameSpace(String ns) {
        // 创建命名空间描述器
        NamespaceDescriptor namespaceDescriptor = NamespaceDescriptor.create(ns).build();
        //创建命名空间
        try {
            admin.createNamespace(namespaceDescriptor);
        } catch (NamespaceExistException e) {
            System.out.println(ns + " 命名空间已存在!!!");
        } catch (IOException e) {
            e.printStackTrace();
        }
    }


    //DML 数据

    /** DML
     * @param tableName
     * @param rowKey
     * @param cf        列族
     * @param cn        列
     * @param value
     * @throws Exception
     */
    //1 插入数据
    public static void putData(String tableName, String rowKey, String cf, String cn, String value) throws Exception {
        //创建表对象
        Table table = connection.getTable(TableName.valueOf(tableName));
        // 创建put对象
        Put put = new Put(Bytes.toBytes(rowKey));
        // 给put对象赋值
        put.addColumn(Bytes.toBytes(cf), Bytes.toBytes(cn), Bytes.toBytes(value));
        // 插入数据
        table.put(put);
        // 关闭表连接(因为表不能保证每次一样,所以不能单独拿出去关闭)
        table.close();
    }

    /** DML
     * @param tableName 表名
     * @param rowKey    rk
     * @param cf        列族
     * @param cn        列
     * @throws Exception
     */
    //2 查数据(get)
    public static void getData(String tableName, String rowKey, String cf, String cn) throws Exception {
        // 获取表对象
        Table table = connection.getTable(TableName.valueOf(tableName));
        // 创建get对象
        Get get = new Get(Bytes.toBytes(rowKey));
        // 指定获取的列族
//        get.addFamily(Bytes.toBytes(cf));
        // 指定列族和列
        get.addColumn(Bytes.toBytes(cf), Bytes.toBytes(cn));
        // 设置获取数据的版本数
        get.setMaxVersions();
        // 获取数据
        Result result = table.get(get);
        // 解析result并打印
        for (Cell cell : result.rawCells()) {
            // 打印数据
            System.out.println(" cf: " + Bytes.toString(CellUtil.cloneFamily(cell)));
            System.out.println(" cn: " + Bytes.toString(CellUtil.cloneQualifier(cell)));
            System.out.println(" value: " + Bytes.toString(CellUtil.cloneValue(cell)));
        }
    }

    /** DML
     * @param tableName
     * @throws Exception
     */
    //3 查数据(scan)
    public static void scanTable(String tableName) throws Exception {
        // 获取表对象
        Table table = connection.getTable(TableName.valueOf(tableName));
        // 获取scan对象      空参表示扫描全表
        Scan scan = new Scan();
//        Scan scan = new Scan("rk0002".getBytes());  //左闭右开
        // 扫描全表
        ResultScanner resultScanner = table.getScanner(scan);
        // 解析resultScanner
        for (Result result : resultScanner) {
            // 解析result
            for (Cell cell : result.rawCells()) {
                System.out.println("rowKey" + Bytes.toString(CellUtil.cloneRow(cell)));
                System.out.println(" cf: " + Bytes.toString(CellUtil.cloneFamily(cell)));
                System.out.println(" cn: " + Bytes.toString(CellUtil.cloneQualifier(cell)));
                System.out.println(" value: " + Bytes.toString(CellUtil.cloneValue(cell)));
            }
        }
        table.close();
    }

    //4 删除数据
    // delete -> cn -> DeleteColumn
    // deleteall -> rk -> DeleteFamily (小于等于时间戳的)多个版本
    //  ----------------> Delete 删除单个时间戳版本
    // addColumns  -> (小于等于时间戳的)删除指定列的所有的版本 ->deleteColumn
    // addColumn  -> 没有时间戳就删除最新版本的数据   有时间戳就删除单个时间戳的版本 -> delete
    public static void deleteData(String tableName,String rowKey,String cf,String cn) throws Exception {
        // 获取表对象
        Table table = connection.getTable(TableName.valueOf(tableName));
        // 构建删除对象
        Delete delete = new Delete(Bytes.toBytes(rowKey));
        // 设置删除的列
//        delete.addColumns(Bytes.toBytes(cf),Bytes.toBytes(cn));  //删除所有版本或 等于小于时间戳的版本
//        delete.addColumn(Bytes.toBytes(cf),Bytes.toBytes(cn));  //最好不要用 用的话最好加时间戳删除固定时间戳的版本
        //删除指定列族
        delete.addFamily(Bytes.toBytes(cf));
        // 执行删除操作
        table.delete(delete);

        table.close();
    }

    public static void main(String[] args) throws Exception {
        //DDL 表
        //1 表是否存在
//        if (isTableExist("myuser")) {
//            System.out.println("表已存在");
//        } else {
//            System.out.println("表不存在");
//        }

        //2 创建表
//       createTable("stu","info","car");

        //3 删除表
//        dropTable("stu");

        //4 创建命名空间测试
//        createNameSpace("0408");
        //在新的命名空间下创建个表
//        createTable("0408:stu","info","car");

        //DML 数据
        //1 插入数据
//        putData("user","rk003","info","name","zhangsansan");

        //2 查数据(get)(用rowKey查询单行数据)
//        getData("user","rk0001","info","name");

        //3 查数据(scan)
        scanTable("user");

        //4 删除数据


        // 关流
        close();
    }
}

### HBase API 编程入门 #### 使用Java进行HBase操作 对于希望利用 Java 对 HBase 进行编程的开发者来说,官方提供的 `org.apache.hadoop.hbase.client` 包提供了必要的工具来创建表、插入数据以及执行查询等基本功能[^1]。 下面是一个简单的例子展示如何连接到 HBase 并向其中写入一些测试数据: ```java import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.HBaseConfiguration; import org.apache.hadoop.hbase.TableName; import org.apache.hadoop.hbase.client.Connection; import org.apache.hadoop.hbase.client.ConnectionFactory; import org.apache.hadoop.hbase.client.Put; import org.apache.hadoop.hbase.client.Table; public class HBaseExample { public static void main(String[] args) throws Exception { Configuration config = HBaseConfiguration.create(); Connection connection = ConnectionFactory.createConnection(config); Table table = connection.getTable(TableName.valueOf("test_table")); Put put = new Put(Bytes.toBytes("row_key_001")); put.addColumn(Bytes.toBytes("cf"), Bytes.toBytes("qualifier"), Bytes.toBytes("value")); table.put(put); System.out.println("Data inserted successfully."); table.close(); connection.close(); } } ``` 这段代码展示了怎样建立与 HBase 的连接并往指定表格内添加一条记录。需要注意的是,在实际应用中应当处理好异常情况,并合理配置参数以适应不同的环境需求。 #### 利用Thrift接口访问HBase 除了直接通过 Java API 访问外,还可以借助 Apache Thrift 来构建跨语言的应用程序。这涉及到对 `hbase.thrift` 文件的理解及其编译过程,从而使得其他支持的语言也能方便地调用 HBase 提供的服务[^2]。 例如,如果想要开发基于 Python 的应用程序,则可以按照如下方式安装依赖项并与 HBase 交互: ```bash thrift --gen py hbase.thrift pip install . ``` 之后就可以编写类似于这样的Python脚本来读取或修改数据库中的内容了: ```python from thrift.transport import TSocket from thrift.transport import TTransport from thrift.protocol import TBinaryProtocol from hbase import THBaseService from hbase.ttypes import * transport = TSocket.TSocket('localhost', 9090) transport = TTransport.TBufferedTransport(transport) protocol = TBinaryProtocol.TBinaryProtocol(transport) client = THBaseService.Client(protocol) transport.open() # Your operations here... transport.close() ``` 此部分仅作为概念性的介绍;具体实现细节会依据所使用的编程语言而有所不同。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值