欧美成人午夜免费全部完,亚洲午夜福利精品久久,а√最新版在线天堂,另类亚洲综合区图片小说区,亚洲欧美日韩精品色xxx

扣丁學(xué)堂大數(shù)據(jù)培訓(xùn)HBase從入門(mén)到精通誤刪數(shù)據(jù)如何恢復(fù)

2018-07-17 15:54:26 1327瀏覽

在現(xiàn)如今，有很多同學(xué)在操作數(shù)據(jù)庫(kù)的時(shí)候不小心誤刪數(shù)據(jù)，這時(shí)候如何找回？比如mysql里有binlog可以幫助我們恢復(fù)數(shù)據(jù)，但是沒(méi)有開(kāi)binlog也沒(méi)有備份就尷尬了，比如如果是大數(shù)據(jù)開(kāi)發(fā)HBase，你沒(méi)有做備份誤刪了又如何恢復(fù)呢？下面我們來(lái)看一下關(guān)于大數(shù)據(jù)培訓(xùn)老師給大家介紹一下吧。


數(shù)據(jù)保護(hù)

當(dāng)誤刪數(shù)據(jù)發(fā)生時(shí)候，不管三七二十一，第一要?jiǎng)?wù)是進(jìn)入hbaseshell，執(zhí)行如下命令：

如果誤刪一張表的有多個(gè)family里的數(shù)據(jù)，需要都執(zhí)行一下：

alter'tt',{NAME=>'f1',KEEP_DELETED_CELLS=>TRUE},{NAME=>'f2',KEEP_DELETED_CELLS=>TRUE}

設(shè)置KEEP_DELETED_CELLS為T(mén)rue的目的在于防止數(shù)據(jù)被物理刪除。這里有必要解釋一下HBase清理數(shù)據(jù)的原理：

首先HBase是一個(gè)LSM架構(gòu)，不斷發(fā)生著數(shù)據(jù)文件的寫(xiě)入和合并當(dāng)刪除操作發(fā)生時(shí)，不會(huì)去清理數(shù)據(jù)文件中的數(shù)據(jù)，而是寫(xiě)入一個(gè)刪除標(biāo)記到新文件中。當(dāng)某一刻majorcompaction發(fā)生時(shí)，在合并文件的同時(shí)會(huì)根據(jù)刪除標(biāo)記清理數(shù)據(jù)，新合并出來(lái)的數(shù)據(jù)文件不會(huì)再有舊數(shù)據(jù)。

KEEP_DELETED_CELLS的作用就是在majorcompaction發(fā)生的時(shí)候，決定要不要清理舊數(shù)據(jù)。這里需要注意一點(diǎn)，即便KEEP_DELETED_CELLS設(shè)置為T(mén)rue，數(shù)據(jù)仍然會(huì)因?yàn)檫^(guò)期而被清理（HBsae表中的TTL屬性）。這個(gè)設(shè)定無(wú)可厚非，既然過(guò)期了，誤刪不誤刪也無(wú)所謂了。

數(shù)據(jù)恢復(fù)

數(shù)據(jù)恢復(fù)的前提數(shù)據(jù)沒(méi)有被物理刪除，也就是上文提及的。你只需要在查詢(xún)（Scan）的時(shí)候，指定raw模式來(lái)搜索數(shù)據(jù)，就能看到被刪除的數(shù)據(jù)，之后你要做就是把數(shù)據(jù)再寫(xiě)入一次。我們來(lái)看一個(gè)簡(jiǎn)單的例子，還是以hbaseshell為例子：

1、首先我們準(zhǔn)備幾行數(shù)據(jù)


2、然后我們刪掉y開(kāi)頭掉數(shù)據(jù)


3、查一下，現(xiàn)在只有3行了


4、現(xiàn)在我們帶上raw再次查找數(shù)據(jù)，不僅能看到被刪除數(shù)據(jù)，還能看到刪除標(biāo)記。


這里我設(shè)置了TIMERANGE，指定的是數(shù)據(jù)寫(xiě)入的時(shí)間。對(duì)于我這個(gè)case其實(shí)并沒(méi)有什么用，我只是想說(shuō)明幾點(diǎn)：

即便不設(shè)置RAW，也可以通過(guò)時(shí)間搜索到被刪數(shù)據(jù)。比如數(shù)據(jù)寫(xiě)入時(shí)間是T，delete時(shí)間是T+2，那么查找[0,T+1]的話(huà)就能看見(jiàn)數(shù)據(jù)。前提是設(shè)置了KEEP_DELETED_CELLS=TRUE如果你后續(xù)寫(xiě)入重復(fù)的Key，那你必須指定好TIMERANGE，不然你可能看到的不是原先刪除的keyVlaue。delete操作默認(rèn)的時(shí)間不是當(dāng)前server的時(shí)間，也不是構(gòu)造Delete對(duì)象的時(shí)間，而是被刪除的這個(gè)keyValue的寫(xiě)入時(shí)間。當(dāng)然這個(gè)得看版本，測(cè)試時(shí)候發(fā)現(xiàn)1.x和2.x還是不一樣的，有點(diǎn)坑，還以為高版本不能僅通過(guò)TIMERAGE搜素被刪數(shù)據(jù)了。如果你的Deletemark的時(shí)間和數(shù)據(jù)的時(shí)間一樣，那只能通過(guò)RAW看到。

數(shù)據(jù)恢復(fù)完，建議關(guān)閉KEEP_DELETED_CELLS，節(jié)省空間，提高查詢(xún)效率。

其他

上文使用的是hbaseshell演示，你可以使用任何語(yǔ)言的API完成上面的操作。如果你使用的是云HBase，即便因?yàn)閙ajorcompaction物理刪除了數(shù)據(jù)，只要你開(kāi)啟了備份功能，依然可以恢復(fù)。

以上就是關(guān)于扣丁學(xué)堂大數(shù)據(jù)開(kāi)發(fā)HBase從入門(mén)到精通誤刪數(shù)據(jù)如何恢復(fù)的詳細(xì)介紹，希望對(duì)小伙伴們能有所幫助，想要了解更多內(nèi)容的小伙伴可以登錄扣丁學(xué)堂官網(wǎng)咨詢(xún)?？鄱W(xué)堂大數(shù)據(jù)學(xué)習(xí)群：209080834。

【關(guān)注微信公眾號(hào)獲取更多學(xué)習(xí)資料】

查看更多關(guān)于“大數(shù)據(jù)培訓(xùn)資訊”的相關(guān)文章>>