web-dev-qa-db-fra.com

Analyses basées sur l'horodatage dans HBase?

Pour l'exemple de la table de base 'test_table', les valeurs insérées sont:

Row1 - Val1 => t
Row1 - Val2 => t + 3
Row1 - Val3 => t + 5

Row2 - Val1 => t
Row2 - Val2 => t + 3
Row2 - Val3 => t + 5

sur l'analyse 'test_table' où version = t + 4 doit retourner

Row1 - Val1 => t + 3
Row2 - Val2 => t + 3

Comment puis-je obtenir des analyses basées sur l'horodatage (basées sur la dernière valeur disponible inférieure ou égale à l'horodatage) dans HBase?

hadoophbase
15
Krishna Kalyan

Considérez ce tableau:

hbase(main):009:0> create 't1', { NAME => 'f1', VERSIONS => 100 }
hbase(main):010:0> put 't1', 'key1', 'f1:a', 'value1'
hbase(main):011:0> put 't1', 'key1', 'f1:a', 'value2'
hbase(main):012:0> put 't1', 'key1', 'f1:a', 'value3'
hbase(main):013:0> put 't1', 'key2', 'f1:a', 'value4'
hbase(main):014:0> put 't1', 'key2', 'f1:a', 'value5'
hbase(main):015:0> put 't1', 'key1', 'f1:a', 'value6'

Voici son scan dans Shell avec toutes les versions:

hbase(main):003:0> scan 't1', {VERSIONS => 100 }
ROW              COLUMN+CELL
 key1            column=f1:a, timestamp=1416083314098, value=value6
 key1            column=f1:a, timestamp=1416083294981, value=value3
 key1            column=f1:a, timestamp=1416083293273, value=value2
 key1            column=f1:a, timestamp=1416083291009, value=value1
 key2            column=f1:a, timestamp=1416083305050, value=value5
 key2            column=f1:a, timestamp=1416083299840, value=value4

Voici l'analyse limitée à un horodatage spécifique, comme vous l'avez demandé:

hbase(main):002:0> scan 't1', { TIMERANGE => [0, 1416083300000] }
ROW              COLUMN+CELL
 key1            column=f1:a, timestamp=1416083294981, value=value3
 key2            column=f1:a, timestamp=1416083299840, value=value4

Voici la même chose dans Java code:

package org.example.test;
import org.Apache.hadoop.hbase.HBaseConfiguration;
import org.Apache.hadoop.hbase.client.*;
import org.Apache.hadoop.hbase.util.Bytes;
import Java.io.IOException;

public class test {
    public static void main (String[] args) throws IOException {
        HTable table = new HTable(HBaseConfiguration.create(), "t1");
        Scan s = new Scan();
        s.setMaxVersions(1);
        s.setTimeRange (0L, 1416083300000L);
        ResultScanner scanner = table.getScanner(s);
        for (Result rr = scanner.next(); rr != null; rr = scanner.next()) {
            System.out.println(Bytes.toString(rr.getRow()) + " => " +
                    Bytes.toString(rr.getValue(Bytes.toBytes("f1"), Bytes.toBytes("a"))));
        }
    }
}

Sachez que spécifier la valeur maximale de la plage de temps est excl , ce qui signifie que si vous souhaitez obtenir la dernière valeur de toutes les clés avec l'horodatage maximal T, vous devez spécifier la limite supérieure de la plage à T + 1

33
0x0FFF