中文字幕av高清_国产视频一二区_男女羞羞羞视频午夜视频_成人精品一区_欧美色视_在线视频这里只有精品

千鋒教育-做有情懷、有良心、有品質的職業教育機構

手機站
千鋒教育

千鋒學習站 | 隨時隨地免費學

千鋒教育

掃一掃進入千鋒手機站

領取全套視頻
千鋒教育

關注千鋒學習站小程序
隨時隨地免費學習課程

當前位置:首頁  >  技術干貨  > 為什么分布式數據庫這么喜歡用kv store?

為什么分布式數據庫這么喜歡用kv store?

來源:千鋒教育
發布人:xqq
時間: 2023-10-12 22:21:18 1697120478

一、為什么分布式數據庫這么喜歡用kv store

雖然不論是單機數據庫(MySQL、PostgreSQL等等),還是題主說到的分布式數據庫(CockroachDB、TiDB),都存在KV這個抽象,但對于KV這個接口的設計,還是存在差別的。

數據庫通常會有這么幾個模塊,KV存儲、事務、索引,這三者之間的關系看起來涇渭分明,但實際上交織耦合,其中存在很多設計點。

名列前茅種設計是目前share-nothing分布式數據庫用的比較多的:基于單機KV存儲實現分布式KV,再基于分布式KV實現事務,在distributed transactional key-value store的基礎上再實現global index,以及查詢引擎。在這種設計下,單機的KV存儲甚至不需要支持事務,因為完全可以基于這個KV實現分布式事務。典型代表是TiDB。

這種設計的好處不再贅述,看一下局限性:分層太過清晰,想打通多個層次的時候反而比較復雜。例如分布式事務,是不是可以和Consensus Protocol融合,實現安全的MVCC Follower Read?是不是可以借助單機引擎的事務,來優化單個region內的事務避免分布式事務的開銷?

所以第二種設計,保留單機事務的概念,把單機事務當做common case,而分布式事務只是錦上添花。奠定了這么一個基本概念之后,通常索引也會優先做成單機的,全局索引的優先級降低甚至不做。在這種設計下,單機的KV存儲,事實上就需要支持事務,甚至,為了在此基礎上做分布式事務,還需要提供一些額外的接口,例如point-in-time snapshot read。典型代表是MongoDB。

由于具有了原生的單機事務,因此在common case下會很高效,可以當單機數據庫來用。但其痛點也隨之產生:如何基于單機事務做分布式事務,兩階段提交怎么做,事務隔離怎么做,多版本讀怎么做?并且,這些功能往往會耦合于單機的事務引擎,可想而知其復雜度。

如果單獨考慮第二種設計中的索引實現,又會產生多種的KV接口設計。索引是基于KV做,還是下沉到KV中?

前面一種相對清晰,但性能方面有所折衷,由于索引的創建是基于純粹的KV接口,bulk load不好做,并且索引本身也是多版本的后面一種設計,由于存儲引擎具有了schema信息,索引可以有更多的優化空間。例如索引可以做成單版本的(PostgreSQL),指向多版本的heap file,以省去多版本的開銷;例如像X-Engine那樣,利用LSM 的特性實現更加高效的Fast DDL

簡單總結一下,雖然大部分數據庫都有KV存儲這個抽象,但仍然存在很大的設計空間,例如單機的KV是否需要支持事務,是否需要感知schema,是否需要暴露多版本的接口。因此,不能籠統地說分布式數據庫都喜歡用KV store。

延伸閱讀:

二、主要的單機存儲引擎

1、哈希存儲:hash的CRUD是非常快的。但缺點是不支持順序掃描。bitcask是一個基于hash表結構的存儲系統。他將寫操作(包括刪除標識)追加到文件尾。并定期合并新老文件&記錄。

2、B樹:既支持隨機讀取又支持范圍查找的系統。查找時間復雜度為logd(n)(d為每個節點的出度)。Mysql的InnoDB的引擎和OS的文件系統使用的就是B+樹。(為什么選擇使用B樹的變種B+樹,讀者有興趣可以去探究下。提示:磁盤讀取)

3、LSM樹(Log Structured Merge Tree):由B+數改進而來。其思想為:將增量寫操作保存在內存中,超過閾值時刷入磁盤,從而減少隨機寫磁盤操作。讀操作則需要合并磁盤數據和內存中的寫操作。通過Memtable/SSTable實現,實現細節在此不做深入探究。比較適合寫操作較多的業務場景。BigTable/HBase/Cassandra中的列簇的數據存儲方式采用的即是LSM樹。

聲明:本站稿件版權均屬千鋒教育所有,未經許可不得擅自轉載。
10年以上業內強師集結,手把手帶你蛻變精英
請您保持通訊暢通,專屬學習老師24小時內將與您1V1溝通
免費領取
今日已有369人領取成功
劉同學 138****2860 剛剛成功領取
王同學 131****2015 剛剛成功領取
張同學 133****4652 剛剛成功領取
李同學 135****8607 剛剛成功領取
楊同學 132****5667 剛剛成功領取
岳同學 134****6652 剛剛成功領取
梁同學 157****2950 剛剛成功領取
劉同學 189****1015 剛剛成功領取
張同學 155****4678 剛剛成功領取
鄒同學 139****2907 剛剛成功領取
董同學 138****2867 剛剛成功領取
周同學 136****3602 剛剛成功領取
相關推薦HOT
主站蜘蛛池模板: 中文字幕一二三区有限公司 | 在线成人 | 日韩三级免费观看 | 欧亚视频在线观看 | 国产精品成人在线观看 | 精品美女在线观看视频在线观看 | 美国一级黄色片 | 国产精品久久久久久影视 | 91亚洲国产成人久久精品网站 | 国产无遮挡呻吟娇喘视频 | 中文在线a在线 | 久久久久久亚洲 | 精品亚洲永久免费精品 | 黑人巨大精品欧美一区二区三区 | 91精品国产综合久久婷婷香蕉 | 五月婷婷色 | 日韩在线观看网站 | 精品www| 欧美日韩中文字幕在线 | 日韩欧美亚洲 | 久久精品av | 欧美日影院 | 成人在线视频免费观看 | 欧美精品在线一区 | 视频在线亚洲 | 日韩一区二区三免费高清在线观看 | 国产三区在线观看视频 | 一区二区三区免费在线观看 | 爱爱视频免费播放 | 欧美一级片在线观看 | 亚洲午夜精品 | 久久精品毛片 | 日韩专区一区二区 | 国精产品一区二区三区黑人免费看 | 亚洲精品久久久久久久久久久 | 亚洲六月丁香色婷婷综合久久 | 日韩成人在线一区 | 国产精品亚洲精品日韩已方 | 日韩www | 国产精品一区二区久久精品涩爱 | 日韩理伦在线 |