成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

五分鐘技術趣談 | 數據庫之互聯網常用架構方案一覽及應用場景淺析

數據庫
本文通過列舉出當下互聯網領域常見的數據庫架構方案,結合數據庫架構的設計原則,對各個方案場景初步淺析,幫助大家知曉各方案優劣及適用場景;并結合實踐經驗,給出各個方案后續典型的演化方向,供大家作為今后數據庫架構選型參照。

Part 01

數據庫架構原則 

 高可用

高可用指的是數據庫應盡可能地使其服務持續可用,以消除或最小化停機時間。這可以通過減少單點故障、故障切換解決方案、數據冗余等方式實現。

 高性能

這指的是數據庫在查詢和數據操作上的處理速度。高性能數據庫系統能迅速響應查詢請求,甚至在處理大量數據時也能保持高性能。這在互聯網場景下尤為重要,因為用戶通常期望快速響應。

 一致性

在數據庫領域,一致性指的是在任何給定時間點,所有的復制數據都必須相同。數據庫系統采取多種策略來保證一致性,比如操作的原子性(一個操作要么全部成功,要么全部失敗,不會出現部分完成的情況)和事務的隔離性(通過鎖和其他并發控制機制來防止多個事務交叉執行產生的數據不一致問題)。

 擴展性

擴展性指的是數據庫在增加硬件資源(如存儲和處理能力)時能有效提升性能的能力。水平擴展(增加更多服務器)和垂直擴展(增強單個服務器能力)是兩種常見的擴展策略。一個具有高擴展性的數據庫能夠應對數據增長和查詢量的增長,保證數據庫系統的性能和穩定性。

Part 02

常見的架構方案 

方案一:主備架構,只有主庫提供讀寫服務,備庫冗余作故障轉移用

圖片

jdbc:mysql://vip:3306/xxdb

1、高可用分析:高可用,主庫掛了,keepalive(只是一種工具)會自動切換到備庫。這個過程對業務層是透明的,無需修改代碼或配置。 

2、高性能分析:讀寫都操作主庫,很容易產生瓶頸。大部分互聯網應用讀多寫少,讀會先成為瓶頸,進而影響寫性能。另外,備庫只是單純的備份,資源利用率50%,這點方案二可解決。 

3、一致性分析:讀寫都操作主庫,不存在數據一致性問題。 

4、擴展性分析:無法通過加從庫來擴展讀性能,進而提高整體性能。

5、可落地分析:兩點影響落地使用。第一,性能一般,這點可以通過建立高效的索引和引入緩存來增加讀性能,進而提高性能。這也是通用的方案。第二,擴展性差,這點可以通過分庫分表來擴展。

方案二:雙主架構,兩個主庫同時提供服務,負載均衡

圖片

jdbc:mysql://vip:3306/xxdb

1、高可用分析:高可用,一個主庫掛了,不影響另一臺主庫提供服務。這個過程對業務層是透明的,無需修改代碼或配置。 

2、高性能分析:讀寫性能相比于方案一都得到提升,提升一倍。

3、一致性分析:存在數據一致性問題。一致性解決方案。 

4、擴展性分析:當然可以擴展成三主循環,但筆者不建議(會多一層數據同步,這樣同步的時間會更長)。如果非得在數據庫架構層面擴展的話,擴展為方案四。 

5、可落地分析:兩點影響落地使用。第一,數據一致性問題,一致性解決方案可解決問題。第二,主鍵沖突問題,ID統一地由分布式ID生成服務來生成可解決問題。

方案三:主從架構,一主多從,讀寫分離

圖片

jdbc:mysql://master-ip:3306/xxdb
jdbc:mysql://slave1-ip:3306/xxdb
jdbc:mysql://slave2-ip:3306/xxdb

1、高可用分析:主庫單點,從庫高可用。一旦主庫掛了,寫服務也就無法提供。

2、高性能分析:大部分互聯網應用讀多寫少,讀會先成為瓶頸,進而影響整體性能。讀的性能提高了,整體性能也提高了。另外,主庫可以不用索引,線上從庫和線下從庫也可以建立不同的索引(線上從庫如果有多個還是要建立相同的索引,不然得不償失;線下從庫是平時開發人員排查線上問題時查的庫,可以建更多的索引)。

3、一致性分析:存在數據一致性問題。請看,一致性解決方案。 

4、擴展性分析:可以通過加從庫來擴展讀性能,進而提高整體性能。(帶來的問題是,從庫越多需要從主庫拉取binlog日志的端就越多,進而影響主庫的性能,并且數據同步完成的時間也會更長) 

5、可落地分析:兩點影響落地使用。第一,數據一致性問題,一致性解決方案可解決問題。第二,主庫單點問題,筆者暫時沒想到很好的解決方案。注:思考一個問題,一臺從庫掛了會怎樣?讀寫分離之讀的負載均衡策略怎么容錯?

方案四:雙主+主從架構,看似完美的方案

圖片

jdbc:mysql://vip:3306/xxdb
jdbc:mysql://slave1-ip:3306/xxdb
jdbc:mysql://slave2-ip:3306/xxdb

1、高可用分析:高可用。

2、高性能分析:高性能。 

3、一致性分析:存在數據一致性問題。請看,一致性解決方案。

4、擴展性分析:可以通過加從庫來擴展讀性能,進而提高整體性能。(帶來的問題同方案二)

5、可落地分析:同方案二,但數據同步又多了一層,數據延遲更嚴重。

Part 03

 一致性解決方案 

第一類:主庫和從庫一致性解決方案

圖片

注:圖中圈出的是數據同步的地方,數據同步(從庫從主庫拉取binlog日志,再執行一遍)是需要時間的,這個同步時間內主庫和從庫的數據會存在不一致的情況。如果同步過程中有讀請求,那么讀到的就是從庫中的老數據。如下圖:

圖片

既然知道了數據不一致性產生的原因,有下面幾個解決方案供參考:

1、直接忽略,如果業務允許延時存在,那么就不去管它。 

2、強制讀主,采用主備架構方案,讀寫都走主庫。用緩存來擴展數據庫讀性能 。有一點需要知道,如果緩存掛了,可能會產生雪崩現象,不過一般分布式緩存都是高可用的。

圖片

3、選擇讀主,寫操作時根據庫+表+業務特征生成一個key放到Cache里并設置超時時間(大于等于主從數據同步時間)。讀請求時,同樣的方式生成key先去查Cache,再判斷是否命中。若命中,則讀主庫,否則讀從庫。代價是多了一次緩存讀寫,基本可以忽略。

圖片

4、半同步復制,等主從同步完成,寫請求才返回。就是大家常說的“半同步復制”semi-sync。這可以利用數據庫原生功能,實現比較簡單。代價是寫請求時延增長,吞吐量降低。

5、數據庫中間件,引入開源(mycat等)或自研的數據庫中間層。個人理解,思路同選擇讀主。數據庫中間件的成本比較高,并且還多引入了一層。

圖片

第二類:DB和緩存一致性解決方案

圖片

先來看一下常用的緩存使用方式:

第一步:淘汰緩存;

第二步:寫入數據庫;

第三步:讀取緩存?返回:讀取數據庫;

第四步:讀取數據庫后寫入緩存注:如果按照這種方式,圖一,不會產生DB和緩存不一致問題;圖二,會產生DB和緩存不一致問題,即4.read先于3.sync執行。如果不做處理,緩存里的數據可能一直是臟數據。解決方式如下:

圖片

注:設置緩存時,一定要加上有效時間,以防延時淘汰緩存失敗的情況!

Part 04

架構演變方案 

架構演變一:方案一 -> 方案一+分庫分表 -> 方案二+分庫分表 -> 方案四+分庫分表; 

架構演變二:方案一 -> 方案一+分庫分表 -> 方案三+分庫分表 -> 方案四+分庫分表; 

架構演變三:方案一 -> 方案二 -> 方案四 -> 方案四+分庫分表; 

架構演變四:方案一 -> 方案三 -> 方案四 -> 方案四+分庫分表;

Part 05

結語  

1、加緩存和索引是通用的提升數據庫性能的方式。

2、分庫分表帶來的好處是巨大的,但同樣也會帶來一些問題,詳見前日推文。

3、不管是主備+分庫分表還是主從+讀寫分離+分庫分表,都要考慮具體的業務場景。絕大部分的數據庫架構還是采用方案一和方案一+分庫分表,只有極少部分用方案三+讀寫分離+分庫分表。另外,阿里云提供的數據庫云服務也都是主備方案,要想主從+讀寫分離需要二次架構。 

4、記住一句話:不考慮業務場景的架構都是耍流氓。

責任編輯:龐桂玉 來源: 移動Labs
相關推薦

2023-07-12 15:56:08

2023-07-30 10:09:36

MMD數據庫

2023-09-18 07:10:48

限流算法

2023-09-12 07:10:13

Nacos架構

2023-07-12 16:03:37

Android開發架構

2023-04-15 20:33:35

圖形數據庫數據庫

2023-09-17 17:51:43

Android 14

2023-09-12 07:19:41

2023-09-03 19:06:42

2023-09-03 19:21:07

大數據架構

2023-08-15 14:46:03

2023-08-06 07:00:59

Openstack網絡

2023-08-06 06:55:29

數字可視化物聯網

2023-07-23 18:47:59

Docker開源

2023-07-16 18:49:42

HTTP網絡

2023-08-15 14:54:02

數據庫容災

2023-08-29 07:02:09

3D

2023-04-15 20:25:23

微前端

2021-11-01 09:54:45

互聯網安全協議IPSec網絡協議

2015-10-09 10:12:23

ZooKeeper
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 天天爽天天干 | 成人欧美一区二区三区黑人孕妇 | 久久天天综合 | 一级做a爰片性色毛片16 | 日日摸日日碰夜夜爽亚洲精品蜜乳 | 亚洲成人av | 成人精品一区二区户外勾搭野战 | 亚洲国产欧美日韩 | 欧美视频日韩 | 欧美精品一区二区三区在线播放 | xxxxx黄色片| 激情五月综合网 | 黄色一级片aaa | 亚洲电影一区二区三区 | 成人国产精品免费观看 | 欧美日本在线 | 婷婷色国产偷v国产偷v小说 | 99精品视频一区二区三区 | 亚洲欧美精品在线观看 | 久久男人| 亚洲 欧美 另类 日韩 | 亚洲综合视频 | 视频一区在线观看 | 久久中文字幕av | 欧美高清性xxxxhd | 午夜精品一区二区三区在线视频 | 在线国产视频 | 精品免费国产一区二区三区四区 | av黄色国产 | 国产精品久久欧美久久一区 | 中文字幕在线一区二区三区 | 欧美 日韩 亚洲91麻豆精品 | 免费的av网站 | 色五月激情五月 | 久久综合av| 国产精品久久久久久影院8一贰佰 | 久久不射电影网 | 亚洲九九 | 男人av的天堂 | 啪啪精品 | 国产成人一区二 |