成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

我們為什么在MySQL中幾乎不使用分區表

數據庫 MySQL
在Oracle中,使用分區表是一種很自然的事情,數據庫容量基本都是500G起,大小在5T以上都是很常見的。

[[386198]]

在Oracle中,使用分區表是一種很自然的事情,數據庫容量基本都是500G起,大小在5T以上都是很常見的。

但是在MySQL的使用中,我們幾乎不使用分區表,今天有同學在群里一起溝通,我就按照我的理解做了梳理。整體來說從功能上來說,Oracle有的大部分功能在MySQL分區表中基本存在,包括一些分區的細粒度管理。

所以如果單純從功能入手,確實難以找到很直接的理由來拒絕分區表。

我覺得主要是使用模式的差異,我們不使用的主要原因是避免單庫存儲過大,而且分區表變更相對會比較麻煩,在MySQL側,我們的目標是讓數據庫更小巧輕量一些,可能更偏TP一些,我們目前是排除了分區表的設計,而且也明確寫進了開發規范,如果按照數據類型來說,狀態表,流水表和配置表,這三種類型中也就只有流水日志表的數據都是建議使用周期表的形式進行存儲,方便隨時擴展,表結構變更也方便T+1的變更模式

在這個基礎上,可以把這個問題轉化為,是使用分區表還是單表來存儲數據?這個問題我們調研過,目前來看,查詢復雜度的一些變更業務基本都能夠接受,而且風險覆蓋度要小一些(程序側也不能完全保證SQL一定好使不走全表掃描)目前我們實現周期表(日表,月表,周表,年表,季表)中的日表和月表的自動擴展,已經接管了300多個周期表的自動管理。

此外,數據流轉體系中,分區表的模式對于數倉體系也不夠友好,如果ETL直接抽數據,基本需要在過濾條件的部分做一些取舍,影響還是相對很大的。

問題1:為啥Oracle分區表用的很常見 MySQL卻不推薦呢 挺疑問的。

因為是兩種不同的數據庫,拿MySQL當Oracle用,會有很多不如意的地方。Oracle單庫過T很正常,TP+AP很強,原生的HTAP的支持,MySQL的AP相對要弱很多,單庫過T是不建議,我們的容量規劃目前是按照300G的容量規格設計的,基本上從設計層面能夠做到冷熱數據分離和規避數據過度增長。

問題2:日表和月表什么關系呢?月表是日表的聯合查詢還是數據鏡像?

日表和月表目前沒有直接的關聯,就是按照業務維度包括數據量進行綜合評估選定的,如果有的業務數據量不大,范圍查詢多一些,就推薦月表,如果數據量抖動大,數據量大,而且還會有變更操作,一般建議是日表,我們日表和月表的比例差不多是20:1

問題3:這些都是前期系統架構設計時規劃好的?有沒有后期改造的案例?如何去推動研發難度會不會很大

這個我認為不算前期規劃,算是迭代改進,我們提供的一個福利就是改造成日表后,日表的擴展和數據清理都是我們來干了,業務很happy,而在以前,可能還會有手工維護Excel列表或者一些元數據配置的模式來記錄不同業務的表的擴展情況,有種手工記賬的感覺,如果DBA或者業務同學忘記了,基本碰上就是一次數據故障。

所以我們寫了自動管理的服務,包括單機和集群中間件的周期表管理,基本上我們就不用手工干預了。

對于業務來說很大的痛點就是表如何擴展(有時候忘記了后果挺嚴重的),數據清理(如果不拆表,按照delete模式很痛苦)和表變更(T+1的模式對于業務來說是可用接受的,對于DBA完全可控)

小結:

 

我們不使用分區表,一方面是業務所需,另一方面我們提供了周期表解決了業務痛點,所以也算是一拍即合的一種策略。

本文轉載自微信公眾號「楊建榮的學習筆記 」,可以通過以下二維碼關注。轉載本文請聯系楊建榮的學習筆記公眾號。

 

責任編輯:武曉燕 來源: 楊建榮的學習筆記
相關推薦

2016-09-23 09:29:08

mysq分區表l互聯網

2023-10-11 13:42:21

2021-01-20 08:07:52

oracle分區單表

2010-10-11 10:16:17

Mysql分區表

2010-11-22 15:06:46

MySQL分區表

2021-01-26 05:37:08

分庫分表內存

2011-06-08 10:30:08

MongoDB

2010-10-11 09:50:32

Mysql分區表

2009-11-19 09:13:36

2021-04-19 08:16:38

Hive數據類型大數據技術

2013-09-27 11:33:57

交換機技術Vlan技術

2017-08-30 16:59:54

PostgreSQL分區表

2009-06-24 10:26:41

Oracle約束分區表

2020-07-10 08:27:55

王者榮耀微服務架構

2020-09-01 10:46:55

微服務架構服務器

2022-04-16 14:20:29

MySQL數據庫

2019-03-04 13:54:18

MySQL分區表數據

2013-03-25 10:14:18

NginxApache

2022-01-11 08:46:56

Oracle 在線重定義數據庫

2020-03-12 08:00:34

MySQL遷移TiDB
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产成人综合一区二区三区 | 国产一区二区三区免费观看在线 | 中文字幕91av| 精品一区二区久久久久久久网站 | aaaaaaa片毛片免费观看 | 亚洲视频在线观看 | 精品福利一区二区三区 | 亚洲性视频 | 成人福利片 | 国产成人精品a视频一区www | 高清亚洲| 免费毛片网站在线观看 | 亚洲欧美aⅴ| 免费视频色 | 成人亚洲精品久久久久软件 | 超碰最新在线 | 精品免费国产一区二区三区 | 国产精品久久久久久久久久免费看 | 国产成人一区二区三区精 | 亚洲精品永久免费 | 精品国产99| 国产高清视频一区二区 | 日韩欧美亚洲一区 | 国产成人午夜电影网 | 中文字幕在线免费观看 | 999精品在线| 国产成人av一区二区三区 | 欧美一区二 | 成人国产免费视频 | 久久久久国产精品午夜一区 | 人人干在线 | 狠狠躁躁夜夜躁波多野结依 | 中文字幕精 | 91精品国产日韩91久久久久久 | 成人99| 久久日韩粉嫩一区二区三区 | av在线免费观看网址 | 国产亚洲日本精品 | 久久精品久久久 | 天天综合91| 91短视频网址 |