Hbase數(shù)據(jù)讀取過(guò)程

Hbase數(shù)據(jù)讀取過(guò)程2知識(shí)目標(biāo)Hbase的兩種讀取模式Hbase讀取機(jī)制01能力目標(biāo)了解Hbase讀取機(jī)制掌握Hbase的兩種讀取模式02學(xué)習(xí)目標(biāo)3目錄01Hbase的兩種讀取模式02Hbase讀取機(jī)制Hbase的兩種讀取模式-Get4Get是指基于確切的RowKey去獲取一行數(shù)據(jù)，通常被稱之為隨機(jī)點(diǎn)查，這正是HBase所擅長(zhǎng)的讀取模式。一次Get操作，包含兩個(gè)主要步驟：構(gòu)建Get基于RowKey構(gòu)建Get對(duì)象可以為構(gòu)建的Get對(duì)象指定返回的列族也可以直接指定返回某列族中的指定列發(fā)送Get請(qǐng)求并且獲取對(duì)應(yīng)的記錄與寫數(shù)據(jù)類似，發(fā)送Get請(qǐng)求的接口也是由Table提供的，獲取到的一行記錄，被封裝成一個(gè)Result對(duì)象。也可以這么理解一個(gè)Result對(duì)象：-關(guān)聯(lián)一行數(shù)據(jù)，一定不可能包含跨行的結(jié)果-包含一個(gè)或多個(gè)被請(qǐng)求的列(可能包含所有列，也可能僅包含部分列)Hbase的兩種讀取模式-Scan5HBase中的數(shù)據(jù)表通過(guò)劃分成一個(gè)個(gè)的Region來(lái)實(shí)現(xiàn)數(shù)據(jù)的分片，每一個(gè)Region關(guān)聯(lián)一個(gè)RowKey 的范圍區(qū)間，而每一個(gè)Region中的數(shù)據(jù)，按RowKey的字典順序進(jìn)行組織。正是基于這種設(shè)計(jì)，使得HBase能夠輕松應(yīng)對(duì)這類查詢："指定一個(gè)RowKey的范圍區(qū)間，獲取該區(qū)間的所有記錄"，這類查詢?cè)贖Base被稱之為Scan。一次Scan操作，包括如下幾個(gè)關(guān)鍵步驟：構(gòu)建Scan最簡(jiǎn)單也最常用的構(gòu)建Scan對(duì)象的方法，就是僅僅指定Scan的StartRow與StopRow。如果StartRow未指定，則本次Scan將從表的第一行數(shù)據(jù)開始讀取。如果StopRow未指定，而且在不主動(dòng)停止本次Scan操作的前提下，本次Scan將會(huì)一直讀取到表的最后一行記錄。如果StartRow與StopRow都未指定，那本次Scan就是一次全表掃描操作。同Get類似，Scan也可以主動(dòng)指定返回的列族或列6Hbase的兩種讀取模式-Scan獲取ResultScanner遍歷查詢結(jié)果關(guān)閉ResultScanner7Hbase讀取機(jī)制上述的兩種讀取數(shù)據(jù)方式，都基于hbase的讀取機(jī)制?？蛻舳送ㄟ^(guò)ZooKeeper以及-ROOT-表和.META.表找到目標(biāo)數(shù)據(jù)所在的RegionServer(就是數(shù)據(jù)所在的Region的主機(jī)地址)zk返回結(jié)果給客戶端聯(lián)系RegionServer查詢目標(biāo)數(shù)據(jù)RegionServer定位到目標(biāo)數(shù)據(jù)所在的Region，發(fā)出查詢請(qǐng)求Region先在Memstore中查找，命中則返回如果在Memstore中找不到，則在Storefile中掃描為了能快速的判斷要查詢的數(shù)據(jù)在不在這個(gè)StoreFile中，應(yīng)用了BloomFilter（BloomFilter，布隆過(guò)濾器：迅速判斷一個(gè)元素是不是在一個(gè)龐大的集合內(nèi)，但是他有一個(gè)弱點(diǎn)：它有一定的誤判率。誤判率：原本不存在與該集合的元素，布隆過(guò)濾器有可能會(huì)判斷說(shuō)它存在，但是，如果布隆過(guò)濾器判斷說(shuō)某一個(gè)元素不存在該集合，那么該元素就一定不在該集合內(nèi)）BlockCache稱為讀緩存HBase