web-dev-qa-db-ja.com

HBaseのタイムスタンプベースのスキャン？

Hbaseテーブル 'test_table'の例では、挿入される値は次のとおりです。

Row1 - Val1 => t
Row1 - Val2 => t + 3
Row1 - Val3 => t + 5

Row2 - Val1 => t
Row2 - Val2 => t + 3
Row2 - Val3 => t + 5

スキャン 'test_table'で、バージョン= t + 4が返される必要があります

Row1 - Val1 => t + 3
Row2 - Val2 => t + 3

HBaseでタイムスタンプベースのスキャン（タイムスタンプ以下の最新の利用可能な値に基づく）を達成するにはどうすればよいですか？

hadoophbase
15
Krishna Kalyan

次の表を検討してください。

hbase(main):009:0> create 't1', { NAME => 'f1', VERSIONS => 100 }
hbase(main):010:0> put 't1', 'key1', 'f1:a', 'value1'
hbase(main):011:0> put 't1', 'key1', 'f1:a', 'value2'
hbase(main):012:0> put 't1', 'key1', 'f1:a', 'value3'
hbase(main):013:0> put 't1', 'key2', 'f1:a', 'value4'
hbase(main):014:0> put 't1', 'key2', 'f1:a', 'value5'
hbase(main):015:0> put 't1', 'key1', 'f1:a', 'value6'

すべてのバージョンでのシェルでのスキャンは次のとおりです。

hbase(main):003:0> scan 't1', {VERSIONS => 100 }
ROW              COLUMN+CELL
 key1            column=f1:a, timestamp=1416083314098, value=value6
 key1            column=f1:a, timestamp=1416083294981, value=value3
 key1            column=f1:a, timestamp=1416083293273, value=value2
 key1            column=f1:a, timestamp=1416083291009, value=value1
 key2            column=f1:a, timestamp=1416083305050, value=value5
 key2            column=f1:a, timestamp=1416083299840, value=value4

要求されたように、特定のタイムスタンプに制限されたスキャンは次のとおりです。

hbase(main):002:0> scan 't1', { TIMERANGE => [0, 1416083300000] }
ROW              COLUMN+CELL
 key1            column=f1:a, timestamp=1416083294981, value=value3
 key2            column=f1:a, timestamp=1416083299840, value=value4

Javaコードでも同じです：

package org.example.test;
import org.Apache.hadoop.hbase.HBaseConfiguration;
import org.Apache.hadoop.hbase.client.*;
import org.Apache.hadoop.hbase.util.Bytes;
import Java.io.IOException;

public class test {
    public static void main (String[] args) throws IOException {
        HTable table = new HTable(HBaseConfiguration.create(), "t1");
        Scan s = new Scan();
        s.setMaxVersions(1);
        s.setTimeRange (0L, 1416083300000L);
        ResultScanner scanner = table.getScanner(s);
        for (Result rr = scanner.next(); rr != null; rr = scanner.next()) {
            System.out.println(Bytes.toString(rr.getRow()) + " => " +
                    Bytes.toString(rr.getValue(Bytes.toBytes("f1"), Bytes.toBytes("a"))));
        }
    }
}

時間範囲の最大値の指定は excluded であることに注意してください。つまり、最大タイムスタンプTを持つすべてのキーの最後の値を取得する場合は、範囲の上限をT +に指定する必要があります。 1

33
0x0FFF