今天我們換一個(gè)CGFT考試科目知識(shí)說一說,我們知道CGFT考試中的科技模塊是有兩部分組成的,今天我們看看《大數(shù)據(jù)技術(shù)原理及應(yīng)用》大數(shù)據(jù)是金融科技之源與基中的Region服務(wù)器的工作原理!
Region服務(wù)器是HBase中核心的模塊,Region服務(wù)器內(nèi)部管理了一系列Region對(duì)象和一個(gè)HLog文件,其中,HLog是磁盤上面的記錄文件,它記錄著所有的更新操作。
每個(gè)Region對(duì)象又是由多個(gè)Store組成的,每個(gè)Store對(duì)應(yīng)了表中的一個(gè)列族的存儲(chǔ)。每個(gè)Store又包含了一個(gè)MemStore和若干個(gè)StoreFile,其中,MemStore是在內(nèi)存中的緩存,保存*近更新的數(shù)據(jù),StoreFile是磁盤中的文件,這些文件都是B樹結(jié)構(gòu)的,方便快速讀取。StoreFile在底層的實(shí)現(xiàn)方式是HDFS文件系統(tǒng)的HFile,HFile的數(shù)據(jù)塊通常采用壓縮方式存儲(chǔ),壓縮之后可以大大減少網(wǎng)絡(luò)I/O和磁盤I/O。
聲明:本文章為學(xué)習(xí)相關(guān)信息展示文章,非課程及服務(wù)廣告文章,產(chǎn)品及服務(wù)詳情可咨詢網(wǎng)站客服微信。
文章轉(zhuǎn)載須注明來(lái)源,文章素材來(lái)源于網(wǎng)絡(luò),若侵權(quán)請(qǐng)與我們聯(lián)系,我們將及時(shí)處理。