Logo



hbase中ttl的源码的简单介绍

HBase的数据版本的确界以及TTL

1、面向列:HBase 的数据在表中是按照某列存储的,根据数据动态地增加列,并且可以单独对列进行各种操作。

2、字符串类型(String):HBase中的字符串类型是最常见的一种数据类型,可以存储任何字符串,不论是ASCII字符还是Unicode字符。字节数组类型(byte[]):字节数组是HBase中的基本数据类型,可以用于存储任何类型的数据。

3、在底层实现上,HBase使用了基于Hadoop的分布式文件系统HDFS来存储数据,并且使用了一种称为LSM-Tree(Log-Structured Merge-Tree)的数据结构来管理数据。

HBase是什么呢,都有哪些特点呢?

1、Hbase是一种NoSQL数据库,这意味着它不像传统的RDBMS数据库那样支持SQL作为查询语言。

2、容量大:HBase 分布式数据库中的表可以存储成千上万的行和列组成的数据。面向列:HBase 的数据在表中是按照某列存储的,根据数据动态地增加列,并且可以单独对列进行各种操作。

3、非关系型数据库,列存储和文档存储(查询低延迟),hbase是nosql的一个种类,其特点是列式存储。

HBase宕机恢复-SplitWAL

在0版本 HBase 实现了新的分布式事务框架 Procedure V2(HBASE-12439),使用 HLog 存储这种单机事务(DDL、Split、Move 等操作)的中间状态。

猜测是GC或者split过程中没有及时和ZK通信,导致与ZK连接时间超时,zk返回dead region到master,当Hbase Region恢复正常后,找不到wal,产生如下报错。

发现有张HBase表丢失了一半数据,然后在HBase Master UI上发现Region的数量少了一半,但是随后进入HDFS目录中查看,其实Region数据是存在的,那么原因就确定了,是META表中数据丢失,想要恢复数据,需要对META表进行数据修复。

HBase 运行在 HDFS 上,HDFS 的多副本存储可以让它在岀现故障时自动恢复,同时 HBase 内部也提供 WAL 和 Replication 机制。

  hbase中ttl的源码 


评论


最新评论