第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號安全,請及時綁定郵箱和手機立即綁定

hbase查詢解析

標(biāo)簽:
NoSql

hbase查找流程图

图片描述

流程说明

从zk获取meta地址

客户端查询一个数据,先根据zookeeper获取meta表所在的region信息,meta表里存着region的各种信息,但是他也是在region里的,会被一个regionserver管理,信息存放在节点meta-region-server中。

查找数据对应的regionserver

region表中存放着所有region的信息,key是由表名,起始行,时间,散列值组成的,column有server,serverstartcode,regioninfo。server中存放的是regionserver的ip和port。regioninfo中有表名,startkey,endkey。根据这些信息可以知道你查的数据的regionserver。

hbase支持三种查询,rowkey,rowkey范围,全表扫描。根据startkey和endkey。保证了rowkey和rowkey范围的需求,剩下的就是全表扫描了。

查询regionserver的地址

每个regionserver的数据是两部分组成的,一部分在内存中,称为memstore,查询memstore的过程叫做memstorescan。一部分存在文件中,称为storefile,查询storefile的过程教程storefilescan。

storefile的查询

hbase的文件存储格式如下

data meta fileinfo dataindex metaindex trailer

trailer记录fileinfo,dataindex,metaindex的偏移量。根据trailer可以找到dataindex。dataindex存放的是data数据的偏移量。

data块的存储如下

magic key value key value key value

这里的存储是按照key的字典顺序存的。

小结

hbase的查询是一个多级查找索引的过程,根据zk找meta,根据meta找regionserver。犹豫hbase lsm的数据结构,数据分散成两块,一部分在内存,一部分在文件。此时就分成了两部分查询任务,在文件查询的过程中,先读取trailer找到dataindex,根据dataindex再找到data模块的索引,然后根据data里rowkey排序的存储模式来定位数据。

點擊查看更多內(nèi)容
TA 點贊

若覺得本文不錯,就分享一下吧!

評論

作者其他優(yōu)質(zhì)文章

正在加載中
JAVA開發(fā)工程師
手記
粉絲
1.6萬
獲贊與收藏
380

關(guān)注作者,訂閱最新文章

閱讀免費教程

  • 推薦
  • 評論
  • 收藏
  • 共同學(xué)習(xí),寫下你的評論
感謝您的支持,我會繼續(xù)努力的~
掃碼打賞,你說多少就多少
贊賞金額會直接到老師賬戶
支付方式
打開微信掃一掃,即可進(jìn)行掃碼打賞哦
今天注冊有機會得

100積分直接送

付費專欄免費學(xué)

大額優(yōu)惠券免費領(lǐng)

立即參與 放棄機會
微信客服

購課補貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動學(xué)習(xí)伙伴

公眾號

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號

舉報

0/150
提交
取消