mysql分區(qū)表怎么弄 mysql怎么建分區(qū)表

MySQL-分區(qū)表

對底層表的封裝,意味著索引也是按照分區(qū)的子表定義的,而沒有全局索引。(所以即使有唯一性索引,在不同子表中可能會有重復(fù)數(shù)據(jù))

創(chuàng)新互聯(lián)建站專業(yè)為企業(yè)提供班戈網(wǎng)站建設(shè)、班戈做網(wǎng)站、班戈網(wǎng)站設(shè)計、班戈網(wǎng)站制作等企業(yè)網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計與制作、班戈企業(yè)網(wǎng)站模板建站服務(wù),十多年班戈做網(wǎng)站經(jīng)驗,不只是建網(wǎng)站,更提供有價值的思路和整體網(wǎng)絡(luò)服務(wù)。

單表數(shù)據(jù)量超大時索引失效

將單表分區(qū)成數(shù)個區(qū)域,通過分區(qū)函數(shù),可以快速地定位到數(shù)據(jù)的區(qū)域。而且相比于索引,分區(qū)不需要額外的數(shù)據(jù)結(jié)構(gòu)記錄每個分區(qū)的數(shù)據(jù),代價更低。只需要一個簡單的表達(dá)式就可以指向正確的分區(qū)

可以只是用簡單的分區(qū)方式存放表,不要任何索引,只要將查詢定位到需要的大致數(shù)據(jù)位置,通過where條件,將需要的數(shù)據(jù)限制在少數(shù)分區(qū)中,則效率是很高的。WARNNING:查詢需要掃描的分區(qū)個數(shù)限制在一個很小的數(shù)量。

如果數(shù)據(jù)有明顯的“熱點”,可以將熱點數(shù)據(jù)單獨放在一個分區(qū),讓這個分區(qū)的數(shù)據(jù)能夠有機會都緩存在內(nèi)存中。

如果分區(qū)表達(dá)式的值可以是NULL:第一個分區(qū)會使一個特殊分區(qū)。以partition by range year(order_date)為例,所有在order_date列為NULL或者非法值的數(shù)據(jù)都會被放到第一個分區(qū)。那么所有的查詢在定位分區(qū)后都會增加掃描第一個分區(qū)。而且如果第一個分區(qū)很大的時候,查詢的成本會被這個“拖油瓶”分區(qū)無情的增加。

創(chuàng)建一個無用的第一分區(qū)可以解決這個問題,partition p_nulls values less than (0);

對于分區(qū)列和索引列不匹配的查詢,雖然查詢能夠使用索引,但是無法通過分區(qū)定位到目標(biāo)數(shù)據(jù)的分區(qū)(也就是數(shù)據(jù)分布相對更加分散),需要遍歷每個分區(qū)內(nèi)的索引,除非查詢中的條件同時也包含分區(qū)條件。所以期望分區(qū)條件范圍被熱門查詢索引所包含。

對于 范圍分區(qū) 技術(shù),需要適當(dāng)限制分區(qū)的數(shù)量,否則對于大量數(shù)據(jù)批量導(dǎo)入的場景,選擇分區(qū)的成本過高。對于大多數(shù)系統(tǒng),100個左右的分區(qū)是沒有問題的。

MySQL按月自動創(chuàng)建分區(qū)表(千萬級大表優(yōu)化)

對用戶來說,分區(qū)表是一個獨立的邏輯表,但是底層由多個物理子表組成,實現(xiàn)分區(qū)的代碼實際上是通過對一組底層表的對象封裝,但對SQL層來說是一個完全封裝底層的黑盒子。

MySQL實現(xiàn)分區(qū)的方式也意味著索引也是按照分區(qū)的子表定義, 沒有全局索引 。

分區(qū)的意思是指將同一表中不同行的記錄分配到不同的物理文件中 ,幾個分區(qū)就有幾個.idb文件。MySQL數(shù)據(jù)庫的分區(qū)是局部分區(qū)索引,一個分區(qū)中既存了數(shù)據(jù),又放了索引。也就是說,每個區(qū)的聚集索引和非聚集索引都放在各自區(qū)的(不同的物理文件)。

1、可以讓單表 存儲更多的數(shù)據(jù) 。

2、 分區(qū)表的數(shù)據(jù)更容易維護 ,可以通過刪除與那些數(shù)據(jù)有關(guān)的分區(qū),更容易刪除數(shù)據(jù),也可以增加新的分區(qū)來支持新插入的數(shù)據(jù)。另外,還可以對一個獨立分區(qū)進(jìn)行優(yōu)化、檢查、修復(fù)等操作。

3、部分查詢能夠從查詢條件確定只落在少數(shù)分區(qū)上, 查詢速度會很快 。

4、通過跨多個磁盤來分散數(shù)據(jù)查詢,來 獲得更大的查詢吞吐量 。

要使定時事件起作用,MySQL的常量GLOBAL event_scheduler必須為on或者是1。

1、查看scheduler的當(dāng)前狀態(tài):

2、修改scheduler狀態(tài)為打開(0:off , 1:on):

3、臨時打開定時器(四種方法):

4、永久生效的方法,修改配置文件my.cnf

5、臨時開啟某個事件

6、臨時關(guān)閉某個事件

十、MySQL表分區(qū)

??表分區(qū)是將?個表的數(shù)據(jù)按照?定的規(guī)則?平劃分為不同的邏輯塊,并分別進(jìn)?物理存儲,這個規(guī)則就叫做分區(qū)函數(shù),可以有不同的分區(qū)規(guī)則。5.7可以通過show plugins語句查看當(dāng)前MySQL是否?持表分區(qū)功能。

??但當(dāng)表中含有主鍵或唯?鍵時,則每個被?作 分區(qū)函數(shù)的字段必須是表中唯?鍵和主鍵的全部或?部分 ,否則就?法創(chuàng)建分區(qū)表。?如下?的表由于唯?鍵和主鍵沒有相同的字段,所以?法創(chuàng)建表分區(qū)

上述例?中刪除唯?鍵,確保主鍵中的字段包含分區(qū)函數(shù)中的所有字段,創(chuàng)建成功

或者將主鍵擴展為包含ref字段

表分區(qū)的主要優(yōu)勢在于:

??可以允許在?個表?存儲更多的數(shù)據(jù),突破磁盤限制或者?件系統(tǒng)限制

??對于從表?將過期或歷史的數(shù)據(jù)移除在表分區(qū)很容易實現(xiàn),只要將對應(yīng)的分區(qū)移除即可

??對某些查詢和修改語句來說,可以 ?動 將數(shù)據(jù)范圍縮?到?個或?個表分區(qū)上,優(yōu)化語句執(zhí)?效率。?且可以通過 顯示指定表分區(qū) 來執(zhí)?語句,?如 SELECT * FROM t PARTITION (p0,p1) WHERE c 5

表分區(qū)類型分為:

范圍表分區(qū),按照?定的范圍值來確定每個分區(qū)包含的數(shù)據(jù),分區(qū)函數(shù)使?的字段必須只能是 整數(shù)類型,分區(qū)的定義范圍必須是連續(xù)的,且不能有重疊部分,通過使?VALUES LESS THAN來定義分區(qū)范圍,表分區(qū)的范圍定義是從?到?定義的

?如:

??Store_id6的數(shù)據(jù)被放在p0分區(qū)?,6=store_id10之間的數(shù)據(jù)被放在p1分區(qū)?,以此類推,當(dāng)新插?的數(shù)據(jù)為(72, ‘Mitchell’, ‘Wilson’, ‘1998-06-25’, NULL, 13) 時,則新數(shù)據(jù)被插?到p2分區(qū)?,但當(dāng)插?的數(shù)據(jù)的store_id為21時,由于沒有分區(qū)去容納此數(shù)據(jù),所以會報錯,我們需要修改?下表的定義

報錯:

修改表的定義:

?? MAXVALUE關(guān)鍵詞的作?是表示可能的最?值,所以任何store_id=16的數(shù)據(jù)都會被寫?到p3分區(qū)?。分區(qū)函數(shù)中也可以使?表達(dá)式 ,?如:

?? 對timestamp字段類型可以使?的表達(dá)式?前僅有unix_timestamp ,其他的表達(dá)式都不允許

列表表分區(qū),按照?個?個確定的值來確定每個分區(qū)包含的數(shù)據(jù),通過PARTITION BY LIST(expr)分區(qū)函數(shù)表達(dá)式必須返回整數(shù),取值范圍通過VALUES IN (value_list)定義

對List表分區(qū)來說,沒有MAXVALUE特殊值,所有的可能取值都需要再VALUES IN中包含,如果有未定義的取值則會報錯

同樣,當(dāng)有主鍵或者唯?鍵存在的情況下,分區(qū)函數(shù)字段需要包含在主鍵或唯?鍵中

對range和list表分區(qū)來說,分區(qū)函數(shù)可以包含多個字段,分區(qū)多字段函數(shù)(column partition) 所涉及的字段類型可以包括:

范圍多字段分區(qū)函數(shù)與普通的范圍分區(qū)函數(shù)的區(qū)別在于:

a) 字段類型多樣化

b) 范圍多字段分區(qū)函數(shù) 不?持表達(dá)式,只能?字段名

c) 范圍多字段分區(qū)函數(shù)?持?個或多個字段

再?如創(chuàng)建如下的表分區(qū):

對多列對?來說:

當(dāng)然只要保證取值范圍是增?的,表分區(qū)就能創(chuàng)建成功,?如:

但如果 取值范圍不是增?的,就會返回錯誤 :

對其他數(shù)據(jù)類型的?持:

list列表多字段表分區(qū),例如:你有一個在12個城市客戶的業(yè)務(wù), 為了銷售和市場的目的, 你的組織每3個城市劃分為一個區(qū)域針對LIST COLUMNS分區(qū), 你可以基于城市的名稱創(chuàng)建一個客戶數(shù)據(jù)表并聲明4個分區(qū)當(dāng)你的客戶在對應(yīng)的這個區(qū)域:

使用日期分區(qū)

但是這種情況在日期增長到非常大的時候是很復(fù)雜的, 所以這種還是使用RANGE 分區(qū)方式比較好

??按照?個?定義的函數(shù)返回值來確定每個分區(qū)包含的數(shù)據(jù),這個 ?定義函數(shù)也可以僅僅是?個字段名字

??通過PARTITION BY HASH (expr)?句來表達(dá)哈希表分區(qū),其中的 expr表達(dá)式必須返回?個整數(shù),基于分區(qū)個數(shù)的取模(%)運算。根據(jù)余數(shù)插?到指定的分區(qū)

??對哈希表分區(qū)來說只需要定義分區(qū)的個數(shù),其他的事情由內(nèi)部完成

如果沒有寫明PARTITIONS字段,則默認(rèn)為1,表達(dá)式可以是整數(shù)類型字段,也可以是?個函數(shù),?如

?如: CREATE TABLE t1 (col1 INT, col2 CHAR(5), col3 DATE) PARTITION BY HASH( YEAR(col3) ) PARTITIONS 4;

如果插??條數(shù)據(jù)對應(yīng)的col3為‘2005-09-15’時,則插?數(shù)據(jù)的分區(qū)計算?法為:

??與哈希表分區(qū)類似,只不過哈希表分區(qū)依賴于?定義的函數(shù),?key表分區(qū)的哈希算法是依賴MySQL本身, CREATE TABLE ... PARTITION BY KEY () 創(chuàng)建key表分區(qū), 括號??可以包含0個或者多個字段,所引?的字段必須是主鍵或者主鍵的?部分 ,如果括號??沒有字段,則代表使?主鍵

如果表中沒有主鍵但有唯?鍵,則使?唯?鍵,但 唯?鍵字段必須定義為not null ,否則報錯

所引?的字段未必必須是整數(shù)類型,其他的類型也可以使?,?如:

?表分區(qū),是在表分區(qū)的基礎(chǔ)上再創(chuàng)建表分區(qū)的概念, 每個表分區(qū)下的?表分區(qū)個數(shù)必須?致 ,?如:

ts表擁有三個范圍分區(qū),同時每個分區(qū)都各?有兩個?分區(qū),所以總共有6個分區(qū)

?表分區(qū)必須是范圍/列表分區(qū)+哈希/key?表分區(qū)的組合

?表分區(qū)也可以顯示的指定?表分區(qū)的名字,?如:

不同的表分區(qū)對NULL值的處理?式不同

對范圍表分區(qū)來說,如果插?的是NULL值,則將數(shù)據(jù)放到最?的分區(qū)表?

對list表分區(qū)來說,?持NULL值的唯?情況就是某個分區(qū)的允許值中包含NULL

對哈希表分區(qū)和Key表分區(qū)來說,NULL值會被當(dāng)成0值對待

通過alter table命令可以執(zhí)?增加,刪除,重新定義,合并或者拆分表分區(qū)的管理動作

對范圍表分區(qū)和列表表分區(qū)來說,刪除?個表分區(qū)命令如下:

刪除表分區(qū)的動作不光會把分區(qū)刪掉,也會把表分區(qū)?原來的數(shù)據(jù)給刪除掉

在原分區(qū)上增加?個表分區(qū)可以通過alter table … add partition語句來完成

但對范圍表分區(qū)來說,增加的表分區(qū)必須在尾部增加,在頭部或者在中間增加都會失敗:

為解決這個問題,可以使? REORGANIZE 命令:

對列表表分區(qū)來說,只要新增加的分區(qū)對應(yīng)的值在之前的表分區(qū)中沒有出現(xiàn)過,就可以通過alter table… add partition來增加

當(dāng)然, 也可以通過REORGANIZE命令將之前的多個分區(qū)合并成?個或?個分區(qū),但要保持分區(qū)值?致:

更復(fù)雜的?如將多個分區(qū)重組成多個分區(qū):

mysql 分區(qū)PARTITIONS之基本使用

當(dāng)數(shù)據(jù)表中的數(shù)據(jù)量很大時,分區(qū)帶來的效率提升才會顯現(xiàn)出來。

只有檢索字段為分區(qū)字段時,分區(qū)帶來的效率提升才會比較明顯。因此, 分區(qū)字段的選擇很重要 ,并且 業(yè)務(wù)邏輯要盡可能地根據(jù)分區(qū)字段做相應(yīng)調(diào)整 (盡量使用分區(qū)字段作為查詢條件)。

1、分區(qū)表對業(yè)務(wù)透明,只需要維護一個表的數(shù)據(jù)結(jié)構(gòu)。

2、DML操作加鎖僅影響操作的分區(qū),不會影響未訪問分區(qū)。

3、通過分區(qū)交換快速將數(shù)據(jù)換入和換出分區(qū)表。

4、通過TRUNCATE操作快速清理特定分區(qū)數(shù)據(jù)。

5、通過強制分區(qū)僅訪問特定分區(qū)數(shù)據(jù),減少操作影響。

6、通過大數(shù)據(jù)量分區(qū)能有效降低索引層數(shù),提高查詢性能。

1、創(chuàng)建表時指定分區(qū)

物理文件:

2、插入數(shù)據(jù)

3、查詢 information_schema.partitions 表得到該表的分區(qū)信息

4、查詢計劃分析

5、添加分區(qū)

若報錯:

6、修改/覆蓋/合并分區(qū)

報錯

所以需要添加pmax 分區(qū),一同修改

7、刪除分區(qū)

8、查詢具體分區(qū)的下數(shù)據(jù)

MySQL分區(qū)的限制

當(dāng)前標(biāo)題:mysql分區(qū)表怎么弄 mysql怎么建分區(qū)表
文章來源:http://muchs.cn/article18/doocodp.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供云服務(wù)器、移動網(wǎng)站建設(shè)品牌網(wǎng)站設(shè)計、定制開發(fā)軟件開發(fā)、網(wǎng)站改版

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

網(wǎng)站托管運營