hbase 根据timestamp获取最新的数据

本文介绍了如何在HBase中利用scan和timeRange功能来获取最近的数据。通过设定起始于前一天的结束时间为当前时间,逐步回溯以寻找包含数据的时间范围。虽然这种方法不能精确到具体某条记录,但能大致确定数据所在的时段。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

网上找了很多都没有找到类似的,于是自己想办法,只能大概满足要求吧,并不能确切的定位到哪一条数据,

具体的思路是:通过scan,设置timeRange,需要起始时间和结束时间,结束时间可以定为当前时间,起始时间可以定为当前时间前一天(时间粒度可以更改为小时,分钟,或者秒,粒度越细,结果越准确),然后去scan,判断是否扫描到数据,如果没有,则把起始时间再往前一天,直到扫描到数据为止。此方法只能大概定位到哪个时间范围。

public static void queryDataTime2(String tableName) throws IOException, ParseException {
        TableName name = TableName.valueOf(tableName);
        Table table = connection.getTable(name);

        Scan scan = new Scan();
        SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
        Date parse = sdf.parse("2019-07-24 00:00:00");
        long now = parse.getTime();
        long start = 0L;

        Calendar c = Calendar.getInstance();
        c.setTime(parse);
        ResultScanner rs = null;
        while (true){
            c.add(Calendar.HOUR_OF_DAY, -1);
            start = c.getTimeInMillis();
            scan.setTimeRange(start, now);
            try {
                rs = table.getScanner(scan);
                Iterator<Result> iterator = rs.iterator();

                System.out.println(new Date(start));
                if (iterator.hasNext()){
                    System.out.println("扫描结束 "+new Date(start));
                    break;
                }
            } catch (IOException e) {
                System.out.println("遍历查询指定表中的所有数据失败");
                e.printStackTrace();
            }
        }
    }

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值