成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

分庫分表有哪些思路和技巧?

運維 數據庫運維
在系統的研發過程中,隨著數據量的不斷增長,單庫單表已無法滿足數據的存儲需求,此時,我們就需要對數據庫進行分庫分表操作。

[[431967]]

在系統的研發過程中,隨著數據量的不斷增長,單庫單表已無法滿足數據的存儲需求,此時,我們就需要對數據庫進行分庫分表操作。

那在互聯網大廠,分庫分表通常有哪些思路和技巧呢?

今天,我就將這些思路和技巧分享給大家。

分庫分表

分庫分表是隨著業務的不斷發展,單庫單表無法承載整體的數據存儲時,采取的一種將整體數據分散存儲到不同服務器上的不同數據庫中的不同數據表的存儲方案。

分庫分表能夠有效的緩解數據的存儲壓力,分庫分表是數據存儲達到一定規模時必然會遇到的問題。

掌握分庫分表的思路和技巧有助于小伙伴們更好的解決實際工作中,有關數據拆分的問題。

接下來,我們就分別對分表和分庫來談談一些使用的思路和技巧。

分表

分表,最直白的意思,就是將一個表結構分為多個表,然后,可以在同一個庫里,也可以放到不同的庫。

當然,首先要知道什么情況下,才需要分表。個人覺得單表記錄條數達到百萬到千萬級別時就要使用分表了。

分表的分類

1.縱向分表

將本來可以在同一個表的內容,人為劃分為多個表。(所謂的本來,是指按照關系型數據庫的第三范式要求,是應該在同一個表的。)

分表技巧: 根據數據的活躍度進行分離,(因為不同活躍的數據,處理方式是不同的)

案例:

對于一個博客系統,文章標題,作者,分類,創建時間等,是變化頻率慢,查詢次數多,而且最好有很好的實時性的數據,我們把它叫做冷數據。

而博客的瀏覽量,回復數等,類似的統計信息,或者別的變化頻率比較高的數據,我們把它叫做活躍數據。

所以,在進行數據庫結構設計的時候,就應該考慮分表,首先是縱向分表的處理。

這樣縱向分表后:

(1)首先,存儲引擎的使用不同,冷數據使用MyIsam 可以有更好的查詢數據。活躍數據,可以使用Innodb ,可以有更好的更新速度。

(2)其次,對冷數據進行更多的從庫配置,因為更多的操作是查詢,這樣來加快查詢速度。對熱數據,可以相對有更多的主庫的橫向分表處理。

其實,對于一些特殊的活躍數據,也可以考慮使用memcache ,redis之類的緩存,等累計到一定量再去更新數據庫。或者mongodb 一類的nosql 數據庫,這里只是舉例,就先不說這個。

2.橫向分表

字面意思,就可以看出來,是把大的表結構,橫向切割為同樣結構的不同表,如,用戶信息表,user_1,user_2 等。

表結構是完全一樣,但是,根據某些特定的規則來劃分的表,如根據用戶ID來取模劃分。

分表技巧: 根據數據量的規模來劃分,保證單表的容量不會太大,從而來保證單表的查詢等處理能力。

案例:

同上面的例子,博客系統。當博客的量達到很大的時候,就應該采取橫向分割來降低每個單表的壓力,來提升性能。

例如博客的冷數據表,假如分為100個表,當同時有100萬個用戶在瀏覽時,如果是單表的話,會進行100萬次請求。

而現在分表后,就可能是每個表進行1萬個數據的請求(因為,不可能絕對的平均,只是假設),這樣壓力就降低了很多。

注意:數據庫的復制能解決訪問問題,并不能解決大規模的并發寫入問題,要解決這個問題就要考慮MySQL數據切分了。

數據切分

顧名思義,就是數據分散,將一臺主機上的數據分攤到多臺,減輕單臺主機的負載壓力,有兩種切分方式:

一種是分庫,即按照業務模塊分多個庫,每個庫中的表不一樣。

還有一種就是分表,按照一定的業務規則或者邏輯將數據拆分到不同的主機上,每個主機上的表是一樣的,這個有點類似于Oracle的表分區。

分區

分庫又叫垂直分區,這種方式實現起來比較簡單,重要的是對業務要細化,分庫時候要想清楚各個模塊業務之間的交互情況,避免將來寫程序時出現過多的跨庫讀寫操作。

分表又叫水平分區,這種方式實現起來就比垂直分區復雜些,但是它能解決垂直分區所不能解決的問題。

即單張表的訪問及寫入很頻繁,這時候就可以根據一定的業務規則(PS:如互聯網BBS論壇的會員等級概念,根據會員等級來分表)來分表,這樣就能減輕單表壓力,并且還能解決各個模塊的之間的頻繁交互問題。

分庫的優點是: 實現簡單,庫與庫之間界限分明,便于維護,缺點是不利于頻繁跨庫操作,不能解決單表數據量大的問題。

分表的優點是: 能解決分庫的不足點,但是缺點卻恰恰是分庫的優點,分表實現起來比較復雜,特別是分表規則的劃分,程序的編寫,以及后期的數據庫拆分移植維護。

實際應用

實際應用中,一般互聯網企業的路線都是先分庫再分表,兩者結合使用,取長補短,這樣發揮了MySQL擴展的最大優勢,但是缺點是架構很大,很復雜,應用程序的編寫也比較復雜。

以上是MySQL的數據切分的一些概念,數據切完了,現在要做的是怎么樣在整合起來以便于外界訪問。

因為程序訪問的入口永遠只有一個,現在比較常用的解決方案是通過中間代理層來統一管控所有數據源。

本文轉載自微信公眾號「冰河技術」,可以通過以下二維碼關注。轉載本文請聯系冰河技術公眾號。

 

責任編輯:武曉燕 來源: 冰河技術
相關推薦

2020-12-30 05:36:59

分庫分表存儲

2019-07-31 09:27:23

數據庫MySQLSQL

2020-07-30 17:59:34

分庫分表SQL數據庫

2018-05-29 08:39:26

DBA數據庫案例

2022-07-11 08:16:47

NewSQL關系數據庫系統

2019-11-12 09:54:20

分庫分表數據

2022-12-05 07:51:24

數據庫分庫分表讀寫分離

2018-05-15 14:00:28

數據庫MySQL分庫分表

2021-08-31 20:21:11

VitessMySQL分庫

2023-08-11 08:59:49

分庫分表數據數據庫

2020-11-18 09:39:02

MySQL數據庫SQL

2020-07-28 09:04:09

NewSQL分庫分表

2021-01-26 05:37:08

分庫分表內存

2025-04-01 08:45:00

2024-07-26 00:16:11

2019-12-26 15:16:35

分庫分表選型流程

2017-07-19 15:19:19

數據庫DB分庫實施策略

2017-07-17 14:45:43

數據庫DB分庫切分策略

2019-01-16 14:00:54

數據庫分庫分表

2022-06-30 07:34:46

分庫分表外賣訂單系統
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 国产精品福利一区二区三区 | 欧美性一区二区三区 | 高清人人天天夜夜曰狠狠狠狠 | 91精品国产乱码久久久久久久久 | 国产色| 日本三级播放 | jav成人av免费播放 | 国产7777| 欧州一区二区三区 | 一区免费 | 欧洲一区二区三区 | av片网| 91精品国产一区二区三区蜜臀 | 一二三区在线 | 99精品一区二区三区 | 欧美国产日韩精品 | 伊人影院99 | 黄色一级大片在线观看 | 国产精品一区二区久久 | 成人免费在线观看 | 天堂在线中文 | 欧美aⅴ片 | 国产探花在线精品一区二区 | 免费同性女女aaa免费网站 | 欧产日产国产精品视频 | 夜夜爽99久久国产综合精品女不卡 | 亚洲一区国产 | 日本成人片在线观看 | 成人av观看 | 国产视频第一页 | h视频免费观看 | 国产精久久久 | 午夜影院视频在线观看 | 国产精品亚洲精品 | 日本中文字幕在线视频 | 亚洲福利av | 美女国内精品自产拍在线播放 | 黄久久久 | 久久精品色欧美aⅴ一区二区 | 日韩α片| 久久久久久久久久久久久9999 |