麻豆黑色丝袜jk制服福利网站-麻豆精品传媒视频观看-麻豆精品传媒一二三区在线视频-麻豆精选传媒4区2021-在线视频99-在线视频a

千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機構(gòu)

手機站
千鋒教育

千鋒學(xué)習(xí)站 | 隨時隨地免費學(xué)

千鋒教育

掃一掃進入千鋒手機站

領(lǐng)取全套視頻
千鋒教育

關(guān)注千鋒學(xué)習(xí)站小程序
隨時隨地免費學(xué)習(xí)課程

當(dāng)前位置:首頁  >  技術(shù)干貨  > OceanBase的memtable設(shè)計成key為主鍵,value為行操作鏈表的目的是什么?

OceanBase的memtable設(shè)計成key為主鍵,value為行操作鏈表的目的是什么?

來源:千鋒教育
發(fā)布人:xqq
時間: 2023-10-13 08:30:34 1697157034

一、OceanBase的memtable設(shè)計成key為主鍵,value為行操作鏈表的目的

這是MVCC多版本并發(fā)控制的一種實現(xiàn)方式,寫不阻塞讀,并且讀可以讀到一個快照版本。實現(xiàn)MVCC可以有多種方法,下面我解釋一下幾種可能的實現(xiàn)方法,并分析一下各方法的優(yōu)劣

B+tree是索引,可以通過一行的key,索引到其value,索引還可以是其它的,比如Rocksdb和MemSQL用的是skiplist,還可以是Hashtable,還有一些新的數(shù)據(jù)結(jié)構(gòu)微軟Hekaton用的bw-tree,HyPer用的adaptive radix tree等。B+tree是非常合適的,對范圍查詢和點查詢都不錯,對于CPU Cache非常友好,可以做到很高的性能,至于用skiplist的數(shù)據(jù)庫,看了一他們選擇這個的理由,文檔里基本都是說因為實現(xiàn)起來比較簡單,B+tree實現(xiàn)起來太復(fù)雜了。不過OceanBase的前輩們把內(nèi)存B+tree實現(xiàn)的非常好,可以看到實力非常強,不需要因為某些東西簡單而去選擇用那個東西。

下面說一下幾種實現(xiàn)方法,主要說的是MVCC,就不說B+tree了

1. 完整數(shù)據(jù)直接存Row里,新版本在前

讀的時候,有一個snapshot version,比如是7,就需要找到名列前茅個小于7的版本,v=6的那個數(shù)據(jù)

優(yōu)點:如果更新不頻繁,大部分查詢所需的數(shù)據(jù)版本都是最新的,通過索引找到某一行,直接通過指針就可以找到所需數(shù)據(jù)。通過指針就是一次內(nèi)存的隨機訪問,100ns,當(dāng)然還有其它處理數(shù)據(jù)的開銷。

缺點:更新數(shù)據(jù)的時候,需要申請一塊新的內(nèi)存空間存儲數(shù)據(jù),由于它需要被放鏈表首位置,索引就需要指向它,因此需要更新一下索引的指針,使其指向新的數(shù)據(jù)。

2. 完整數(shù)據(jù)直接存Row里,老版本在前

優(yōu)點:更新的時候,直接插到鏈表的最后就好了,不需要再更新索引的指針

缺點:查詢的時候,可能需要順著鏈表找很多結(jié)點才能找到所需版本的數(shù)據(jù),而每一次都是一次內(nèi)存隨機訪問,需要(n*100)ns。

3. 更新數(shù)據(jù)存在Node里,然后通過Row指向Node,定期做壓縮

優(yōu)點:更新的時候,直接插入Row的指針指向的名列前茅個位置就好了,而且不需要像第1種方法那樣更新索引。另一個優(yōu)點是,由于只存儲增量數(shù)據(jù),能節(jié)省很多內(nèi)存,尤其是當(dāng)一個表的列數(shù)非常多的時候

缺點:查詢的時候,就算是需要查詢最新的版本,也可能需要遍歷多個node才能得到完整的數(shù)據(jù)。不過當(dāng)更新過多時,可以通過壓縮,將多個更新合并成完整數(shù)據(jù),存到一個新的node中,一定程度上緩解這個問題

4. 數(shù)據(jù)存到一塊連續(xù)的內(nèi)存中

前面幾種方法都是,當(dāng)插入一行新的數(shù)據(jù)時,申請一塊內(nèi)存,存數(shù)據(jù),或者存更新node,這會導(dǎo)致做scan的時候比較慢。因為做scan的時候,需要通過索引中的指針才能找到數(shù)據(jù),做scan是先對索引進行scan,再找到相應(yīng)的數(shù)據(jù),而每一次內(nèi)存隨機訪問是100ns,也就是每秒掃描的數(shù)據(jù)量不可能超過1s/100ns=1000萬

所以可以申請一塊大內(nèi)存,類似一個存struct的數(shù)組,然后把每一行存到這個數(shù)組里,定長數(shù)據(jù)直接存,變長數(shù)據(jù)用指針,對于小字符串,可以做一個優(yōu)化,將字符串分成2部分,前面小的一部分可以直接存數(shù)據(jù)里,然后通過指針指向另一部分

至于多版本和增量數(shù)據(jù),可以按照前面幾種方法做選擇

做點查詢的時候,通過索引查,做scan的時候,看查詢的數(shù)據(jù)情況,當(dāng)數(shù)據(jù)量大時,直接scan數(shù)組是更快的,數(shù)據(jù)量小時,仍然通過索引做范圍查找

優(yōu)點:一些情況下,scan的性能更高

缺點:由于是原地更改row里的數(shù)據(jù),讀寫的時候都需要加鎖(latch),更新多的時候,對讀不友好

延伸閱讀:

二、網(wǎng)絡(luò)附加存儲(NAS)

NAS指Network Area Storage,即網(wǎng)絡(luò)附加存儲。它一般是將本地的存儲空間共享給其他主機使用,一般通過C/S架構(gòu)實現(xiàn)通信。它實現(xiàn)的是文件級別的共享,計算機通常將共享的設(shè)別識別為一個文件系統(tǒng),其文件服務(wù)器會管理鎖以實現(xiàn)并發(fā)訪問。網(wǎng)絡(luò)文件系統(tǒng),以文件模塊的形式進行共享,工作在應(yīng)用層上,常見的NAS有NFS和CIFS(FTP)。

聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
10年以上業(yè)內(nèi)強師集結(jié),手把手帶你蛻變精英
請您保持通訊暢通,專屬學(xué)習(xí)老師24小時內(nèi)將與您1V1溝通
免費領(lǐng)取
今日已有369人領(lǐng)取成功
劉同學(xué) 138****2860 剛剛成功領(lǐng)取
王同學(xué) 131****2015 剛剛成功領(lǐng)取
張同學(xué) 133****4652 剛剛成功領(lǐng)取
李同學(xué) 135****8607 剛剛成功領(lǐng)取
楊同學(xué) 132****5667 剛剛成功領(lǐng)取
岳同學(xué) 134****6652 剛剛成功領(lǐng)取
梁同學(xué) 157****2950 剛剛成功領(lǐng)取
劉同學(xué) 189****1015 剛剛成功領(lǐng)取
張同學(xué) 155****4678 剛剛成功領(lǐng)取
鄒同學(xué) 139****2907 剛剛成功領(lǐng)取
董同學(xué) 138****2867 剛剛成功領(lǐng)取
周同學(xué) 136****3602 剛剛成功領(lǐng)取
相關(guān)推薦HOT
app的啟動流程都包括哪些步驟?

一、app的啟動流程包括的步驟1、創(chuàng)建進程App發(fā)起進程:當(dāng)從桌面啟動應(yīng)用,則發(fā)起進程便是Launcher所在進程;當(dāng)從某App內(nèi)啟動遠程進程,則發(fā)送進...詳情>>

2023-10-13 10:03:27
怎么理解Mongodb是介于關(guān)系型和非關(guān)系型的數(shù)據(jù)庫?

一、怎么理解Mongodb是介于關(guān)系型和非關(guān)系型的數(shù)據(jù)庫MongoDB被稱為介于關(guān)系型數(shù)據(jù)庫(RDBMS)和非關(guān)系型數(shù)據(jù)庫(NoSQL)之間,這是因為它在以下...詳情>>

2023-10-13 09:55:50
DBeaver怎么保持數(shù)據(jù)庫連接?

一、DBeaver保持數(shù)據(jù)庫連接的方法1、連接到數(shù)據(jù)庫打開DBeaver并選擇連接到您的目標數(shù)據(jù)庫。選擇適當(dāng)?shù)臄?shù)據(jù)庫類型,輸入必要的連接信息,如主機...詳情>>

2023-10-13 09:05:04
Kettle連接MySQL為什么會報錯?

一、Kettle連接MySQL會報錯的原因1、驅(qū)動程序缺失Kettle需要使用MySQL的JDBC驅(qū)動程序來連接MySQL數(shù)據(jù)庫。如果沒有正確配置或提供JDBC驅(qū)動程序,...詳情>>

2023-10-13 08:53:41
wait()、sleep()、join()和yield()區(qū)別是什么?

一、wait()wait()方法是Object類中的方法,主要用于線程間的同步和協(xié)作。當(dāng)一個線程調(diào)用某個對象的wait()方法時,它會釋放該對象的鎖,并進入等...詳情>>

2023-10-13 08:45:29
快速通道
主站蜘蛛池模板: 好吊妞视频988在线播放| 蜜桃成熟时仙子| 又大又硬又黄又刺激的免费视频| 交换人生在线| 可播放的gαy片男男| 一本大道一卡2卡三卡4卡麻豆| 一级大黄色片| 中文字幕第一页亚洲| 99热在线看| 国产一级做a爰片久久毛片| 2021国产精品自产拍在线观看| 亚洲国产免费| 成年美女黄网站色大片免费看| av成人在线电影| 久久精品中文字幕第一页| 老阿姨哔哩哔哩b站肉片茄子芒果| 久久99精品国产麻豆宅宅| 一本色道久久88加勒比—综合 | www.久久99| 日本a√在线| 欧美金发大战黑人video| 黑人一个接一个上来糟蹋| 99在线精品视频在线观看| 最好看的2018中文字幕国语免费| 男男车车的车车网站免费| 国产国产成人精品久久| 四虎永久免费地址ww484e5566| 最近高清中文字幕在线国语5| 国产69久久精品成人看| 日本全套xxxx按摩| 91精品麻豆| 久久综合九色欧美综合狠狠| 欧美日韩电影网| 极品丝袜系列列表| 亚洲国产成人久久精品app| 四虎影视永久在线精品免费| 午夜网站在线观看| 啊灬啊灬啊灬喷出来了| 欧美黑人xxxx| 免费a级黄色片| 亚洲欧美中文日韩在线|