成人免费xxxxx在线视频软件_久久精品久久久_亚洲国产精品久久久_天天色天天色_亚洲人成一区_欧美一级欧美三级在线观看

扎心一問:分庫分表就能無限擴容嗎

數據庫
像我這樣的菜鳥,總會有各種疑問,剛開始是對 JDK API 的疑問,對 NIO 的疑問,對 JVM 的疑問,當工作幾年后,對服務的可用性,可擴展性也有了新的疑問,什么疑問呢?其實是老生常談的話題:服務的擴容問題。

前言

像我這樣的菜鳥,總會有各種疑問,剛開始是對 JDK API 的疑問,對 NIO 的疑問,對 JVM 的疑問,當工作幾年后,對服務的可用性,可擴展性也有了新的疑問,什么疑問呢?其實是老生常談的話題:服務的擴容問題。

正常情況下的服務演化之路

讓我們從最初開始。

1、單體應用 每個創業公司基本都是從類似 SSM 和 SSH 這種架構起來的,沒什么好講的,基本每個程序員都經歷過。

2、RPC 應用 當業務越來越大,我們需要對服務進行水平擴容,擴容很簡單,只要保證服務是無狀態的就可以了,如下圖:

 

 

當業務又越來越大,我們的服務關系錯綜復雜,同時,有很多服務訪問都是不需要連接 DB 的,只需要連接緩存即可,那么就可以做成分離的,減少 DB 寶貴的連接。如下圖:

 

 

我相信大部分公司都是在這個階段。Dubbo 就是為了解決這個問題而生的。

分庫分表

如果你的公司產品很受歡迎,業務繼續高速發展,數據越來越多,SQL 操作越來越慢,那么數據庫就會成為瓶頸,那么你肯定會想到分庫分表,不論通過 ID hash 或者 range 的方式都可以。如下圖:

 

 

這下應該沒問題了吧。任憑你用戶再多,并發再高,我只要***擴容數據庫,***擴容應用,就可以了。

這也是本文的標題,分庫分表就能解決***擴容嗎?

實際上,像上面的架構,并不能解決。

其實,這個問題和 RPC 的問題有點類似:數據庫連接過多!!!

通常,我們的 RPC 應用由于是使用中間件進行訪問數據庫,應用實際上是不知道到底要訪問哪個數據庫的,訪問數據庫的規則由中間件決定,例如 sharding JDBC。這就導致,這個應用必須和所有的數據庫連接,就像我們上面的架構圖一樣,一個 RPC 應用需要和 3 個 mysql 連接,如果是 30 個 RPC 應用,每個 RPC 的數據庫連接池大小是8 ,每個 mysql 需要維護 240 個連接,我們知道,mysql 默認連接數是 100,***連接數是 16384,也就是說,假設每個應用的連接池大小是 8 ,超過 2048 個應用就無法再繼續連接了,也就無法繼續擴容了。注意,由于每個物理庫有很多邏輯庫,再加上微服務運動如火如荼, 2048 并沒有看起來那么大。

也許你說,我可以通過前面加一個 proxy 來解決連接數的問題,實際上,代理的性能也會成為問題,為什么?代理的連接數也是不能超過 16384 的,如果并發超過 16384,變成 163840,那么 proxy 也解決不了問題。

怎么辦?讓我們再看看上面的架構圖:

 

 

我們發現,問題是出在“每個 RPC 應用都要連所有的庫”,導致擴容應用的同時,每個數據庫連接數就要增加。就算增加數據庫,也不能解決連接數的問題。

那怎么辦呢?

單元化

單元化,聽起來高大上,通常在一些 XXX 大會上,分享“關于兩地三中心”,“三地五中心”,“異地多活”等等牛逼的名詞的時候,單元化也會一起出現。

這里我們不討論那么牛逼的,就只說“數據庫連接數過多” 的問題。

實際上,思路很簡單:我們不讓應用連接所有的數據庫就可以了。

假設我們根據 range 分成了 10 個庫,現在有 10 個應用,我們讓每個應用只連一個庫,當應用增多變成 20個,數據庫的連接不夠用了,我們就將 10 個庫分成 20 個庫,這樣,無論你應用擴容到多少個,都可以解決數據庫連接數過多的問題。

注意:做這件事的前提是:你必須保證,訪問你這個應用的 request 請求的數據庫一定是在這個應用的。

換個說法,當用戶從 DNS 那里進來的時候,就知道自己要去那個應用了,所以,規則在 DNS 之前就定好了,雖然這有點夸張,但肯定在進應用之前就知道要去哪個庫了。

所以,這通常需要一個規則,例如通過用戶 ID hash,由配置中心廣播 hash 規則。這樣,所有的組件都能保持一致的規則,從而正確的訪問到數據庫。如下圖:

 

 

到這里,我們終于解決了***擴容的問題。

***

本文從單體應用開始,逐步講述了一個正常后臺的演進歷程,知道了分庫分表并不能解決“***擴容” 的問題,只有單元化才能解決這問題。而單元化則帶來更多的復雜性。但是好處不言而喻。

單元化帶來的更多的思路。

有了單元化,解決了***擴容的問題,但是我們還沒有考慮單點的問題,即服務的可用性。要知道,我們這里的數據庫都是單點的。

這就是另一個話題 —— 異地多活。限于篇幅,下次再聊。 

責任編輯:龐桂玉 來源: 數據庫開發
相關推薦

2019-10-10 09:35:01

分庫分表JDK

2021-02-28 07:43:28

請求提交方案

2020-10-21 18:42:39

數據庫數據庫查詢分頁查詢

2022-07-11 08:16:47

NewSQL關系數據庫系統

2021-03-01 10:10:39

數據遷移擴容

2020-07-30 17:59:34

分庫分表SQL數據庫

2019-11-12 09:54:20

分庫分表數據

2020-09-27 08:00:49

分庫分表

2025-06-05 01:11:00

2021-10-25 09:16:27

MySQL分庫分表

2022-06-22 07:32:53

Sharding分庫數據源

2024-08-13 17:09:00

架構分庫分表開發

2021-08-31 20:21:11

VitessMySQL分庫

2022-06-30 07:34:46

分庫分表外賣訂單系統

2023-08-11 08:59:49

分庫分表數據數據庫

2024-12-03 08:53:46

Go語言類型

2020-11-18 09:39:02

MySQL數據庫SQL

2014-10-13 10:41:48

安防布線

2022-01-21 07:56:39

MySQL索引數據

2022-07-03 19:01:19

磁盤IOMySQL
點贊
收藏

51CTO技術棧公眾號

主站蜘蛛池模板: 日韩三级在线 | 国产精品国产a级 | 91精品国产91久久久久久 | 岛国精品| 自拍偷拍小视频 | 伊人久久在线观看 | 在线伊人网 | 天堂一区二区三区 | 日韩最新网站 | 国内自拍偷拍一区 | h片在线观看免费 | 91干b| 亚洲视频免费在线观看 | 国产www在线| 欧美视频三区 | 人人射人人 | 黄色中文字幕 | 欧美电影在线观看网站 | 久久精点视频 | 欧美视频三级 | 久久久久国产一区二区三区四区 | 91文字幕巨乱亚洲香蕉 | 久久一视频 | 久久久久久一区 | 在线中文视频 | 在线成人免费视频 | 中文字幕一区二区三区在线观看 | 超碰美女在线 | 精品一区二区视频 | 欧美aa在线 | 成人一区二区三区在线观看 | 亚洲精品一区二三区不卡 | 日韩精品av一区二区三区 | 97精品国产97久久久久久免费 | 日韩视频一区二区在线 | 欧美成人二区 | 日韩小视频在线 | av性色全交蜜桃成熟时 | 国产日韩欧美一区二区 | 一区二区三区欧美大片 | 精品三级在线观看 |