校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃

主頁 > 知識庫 > MySql分表、分庫、分片和分區知識點介紹

MySql分表、分庫、分片和分區知識點介紹

熱門標簽:上海市三維地圖標注 云南大數據外呼系統 400電話到哪辦理優惠 南寧外呼系統招商 鄭州網絡外呼系統價錢 怎么更改高德地圖標注 電話機器人是電腦呼號嗎 機器人打電銷電話 博樂電銷機器人

一、前言

    數據庫的數據量達到一定程度之后,為避免帶來系統性能上的瓶頸。需要進行數據的處理,采用的手段是分區、分片、分庫、分表。

二、分片(類似分庫)

     分片是把數據庫橫向擴展(Scale Out)到多個物理節點上的一種有效的方式,其主要目的是為突破單節點數據庫服務器的 I/O 能力限制,解決數據庫擴展性問題。Shard這個詞的意思是“碎片”。如果將一個數據庫當作一塊大玻璃,將這塊玻璃打碎,那么每一小塊都稱為數據庫的碎片(DatabaseShard)。將整個數據庫打碎的過程就叫做分片,可以翻譯為分片。

     形式上,分片可以簡單定義為將大數據庫分布到多個物理節點上的一個分區方案。每一個分區包含數據庫的某一部分,稱為一個片,分區方式可以是任意的,并不局限于傳統的水平分區和垂直分區。一個分片可以包含多個表的內容甚至可以包含多個數據庫實例中的內容。每個分片被放置在一個數據庫服務器上。一個數據庫服務器可以處理一個或多個分片的數據。系統中需要有服務器進行查詢路由轉發,負責將查詢轉發到包含該查詢所訪問數據的分片或分片集合節點上去執行。

三、Scale Out/Scale Up 和 垂直切分/水平拆分

Mysql的擴展方案包括Scale Out和Scale Up兩種。

Scale Out(橫向擴展)是指Application可以在水平方向上擴展。一般對數據中心的應用而言,Scale out指的是當添加更多的機器時,應用仍然可以很好的利用這些機器的資源來提升自己的效率從而達到很好的擴展性。

Scale Up(縱向擴展)是指Application可以在垂直方向上擴展。一般對單臺機器而言,Scale Up值得是當某個計算節點(機器)添加更多的CPU Cores,存儲設備,使用更大的內存時,應用可以很充分的利用這些資源來提升自己的效率從而達到很好的擴展性。

MySql的Sharding策略包括垂直切分和水平切分兩種。

垂直(縱向)拆分:是指按功能模塊拆分,以解決表與表之間的io競爭。比如分為訂單庫、商品庫、用戶庫...這種方式多個數據庫之間的表結構不同。

水平(橫向)拆分:將同一個表的數據進行分塊保存到不同的數據庫中,來解決單表中數據量增長出現的壓力。這些數據庫中的表結構完全相同。

表結構設計垂直切分。常見的一些場景包括

a).大字段的垂直切分。單獨將大字段建在另外的表中,提高基礎表的訪問性能,原則上在性能關鍵的應用中應當避免數據庫的大字段

b). 按照使用用途垂直切分。例如企業物料屬性,可以按照基本屬性、銷售屬性、采購屬性、生產制造屬性、財務會計屬性等用途垂直切分

c). 按照訪問頻率垂直切分。例如電子商務、Web 2.0系統中,如果用戶屬性設置非常多,可以將基本、使用頻繁的屬性和不常用的屬性垂直切分開

表結構設計水平切分。常見的一些場景包括

a). 比如在線電子商務網站,訂單表數據量過大,按照年度、月度水平切分

b). Web 2.0網站注冊用戶、在線活躍用戶過多,按照用戶ID范圍等方式,將相關用戶以及該用戶緊密關聯的表做水平切分

c). 例如論壇的置頂帖子,因為涉及到分頁問題,每頁都需要顯示置頂貼,這種情況可以把置頂貼水平切分開來,避免取置頂帖子時從所有帖子的表中讀取

四、分表和分區

分表從表面意思說就是把一張表分成多個小表,分區則是把一張表的數據分成N多個區塊,這些區塊可以在同一個磁盤上,也可以在不同的磁盤上。

分表和分區的區別

1,實現方式上

mysql的分表是真正的分表,一張表分成很多表后,每一個小表都是完正的一張表,都對應三個文件(MyISAM引擎:一個.MYD數據文件,.MYI索引文件,.frm表結構文件)。

2,數據處理上

分表后數據都是存放在分表里,總表只是一個外殼,存取數據發生在一個一個的分表里面。分區則不存在分表的概念,分區只不過把存放數據的文件分成了許多小塊,分區后的表還是一張表,數據處理還是由自己來完成。

3,提高性能上

分表后,單表的并發能力提高了,磁盤I/O性能也提高了。分區突破了磁盤I/O瓶頸,想提高磁盤的讀寫能力,來增加mysql性能。

在這一點上,分區和分表的測重點不同,分表重點是存取數據時,如何提高mysql并發能力上;而分區呢,如何突破磁盤的讀寫能力,從而達到提高mysql性能的目的。

4,實現的難易度上

分表的方法有很多,用merge來分表,是最簡單的一種方式。這種方式和分區難易度差不多,并且對程序代碼來說可以做到透明的。如果是用其他分表方式就比分區麻煩了。分區實現是比較簡單的,建立分區表,跟建平常的表沒什么區別,并且對代碼端來說是透明的。

分區的適用場景

1. 一張表的查詢速度已經慢到影響使用的時候。

2.表中的數據是分段的

3.對數據的操作往往只涉及一部分數據,而不是所有的數據

CREATE TABLE sales (
    id INT AUTO_INCREMENT,
    amount DOUBLE NOT NULL,
    order_day DATETIME NOT NULL,
    PRIMARY KEY(id, order_day)
) ENGINE=Innodb
PARTITION BY RANGE(YEAR(order_day)) (
    PARTITION p_2010 VALUES LESS THAN (2010),
    PARTITION p_2011 VALUES LESS THAN (2011),
    PARTITION p_2012 VALUES LESS THAN (2012),
PARTITION p_catchall VALUES LESS THAN MAXVALUE);

分表的適用場景

1. 一張表的查詢速度已經慢到影響使用的時候。

2.當頻繁插入或者聯合查詢時,速度變慢。

分表的實現需要業務結合實現和遷移,較為復雜。

五、分表與分庫

分表能夠解決單表數據量過大帶來的查詢效率下降的問題,但是,卻無法給數據庫的并發處理能力帶來質的提升。面對高并發的讀寫訪問,當數據庫master服務器無法承載寫操作壓力時,不管如何擴展slave服務器,此時都沒有意義了。因此,我們必須換一種思路,對數據庫進行拆分,從而提高數據庫寫入能力,這就是所謂的分庫。

與分表策略相似,分庫可以采用通過一個關鍵字取模的方式,來對數據訪問進行路由,如下圖所示

六、分區與分片區別

到此這篇關于MySql分表、分庫、分片和分區知識點介紹的文章就介紹到這了,更多相關MySql分表、分庫、分片和分區內容請搜索腳本之家以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • 淺談訂單重構之 MySQL 分庫分表實戰篇
  • MySQL分庫分表與分區的入門指南
  • mysql死鎖和分庫分表問題詳解
  • MySQL 分表分庫怎么進行數據切分
  • MySql分表、分庫、分片和分區知識深入詳解
  • MySQL分庫分表總結講解
  • mysql分表分庫的應用場景和設計方式
  • mysql數據庫分表分庫的策略
  • MyBatis實現Mysql數據庫分庫分表操作和總結(推薦)
  • MYSQL數據庫數據拆分之分庫分表總結
  • Mysql數據庫分庫和分表方式(常用)
  • MYSQL性能優化分享(分庫分表)
  • MySQL分庫分表詳情

標簽:恩施 澳門 寧夏 益陽 白銀 杭州 定西 秦皇島

巨人網絡通訊聲明:本文標題《MySql分表、分庫、分片和分區知識點介紹》,本文關鍵詞  MySql,分表,分庫,分片,和,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《MySql分表、分庫、分片和分區知識點介紹》相關的同類信息!
  • 本頁收集關于MySql分表、分庫、分片和分區知識點介紹的相關信息資訊供網民參考!
  • 推薦文章
    主站蜘蛛池模板: 阿巴嘎旗| 偏关县| 甘洛县| 石渠县| 齐齐哈尔市| 平度市| 米易县| 黎城县| 永丰县| 吉林市| 东宁县| 搜索| 舒城县| 阜阳市| 沛县| 永年县| 荆门市| 清远市| 恩平市| 乐东| 南阳市| 福海县| 辰溪县| 岚皋县| 东乡县| 柳河县| 治县。| 金秀| 乳山市| 灌南县| 九台市| 额济纳旗| 茶陵县| 平果县| 疏勒县| 兰考县| 武冈市| 沛县| 藁城市| 台江县| 阳谷县|