如何使用DDL多路歸併排序功能縮短索引排序時間 - PolarDB

PolarDB新增DDL多路歸併排序功能。資料庫大表中建立索引的DDL操作通常非常耗時，您可以通過DDL多路歸併排序功能，縮短建立索引的DDL操作中索引排序的時間。

前提條件

PolarDB叢集版本需滿足如下條件之一：

PolarDB MySQL版8.0.2版本且修訂版本為8.0.2.2.5及以上。
PolarDB MySQL版8.0.1版本且修訂版本為8.0.1.1.28及以上。
PolarDB MySQL版5.7版本且修訂版本為5.7.1.0.23及以上

如何確認叢集版本，詳情請參見查詢版本號碼。

注意事項

當前不支援對全文索引和空間索引進行DDL多路歸併排序。
使用DDL多路歸併排序時，叢集記憶體使用量率會略微上升。假設開啟了N路歸併排序，排序過程中佔用的叢集記憶體大小為（N+1）*innodb_sort_buffer_size Byte。

使用方法

您可以通過如下innodb_polar_parallel_merge_ways參數設定歸併排序的路數：

參數	層級	說明
innodb_polar_parallel_merge_ways	Session	設定建立索引過程中歸併排序的路數。取值範圍：2~16。預設值為2，表示資料庫預設為二路歸併排序。當該參數值大於2時，表示開啟多路歸併排序。

效能測試

測試環境
- 一個規格為8核32 GB的PolarDB MySQL版8.0版本的叢集。
- 叢集儲存空間為50 TB。

測試表結構

通過如下語句建立一張名為table_1的表：

CREATE TABLE `table_1` (
`id` int(11) NOT NULL AUTO_INCREMENT,
`seller_id` bigint(20) DEFAULT NULL,
`seller_name` varchar(100) CHARACTER SET utf8 COLLATE utf8_bin DEFAULT NULL,
`gmt_create` varchar(30) DEFAULT NULL,
`update_time` varchar(30) DEFAULT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB;

測試表資料

通過如下語句產生測試資料：

delimiter ||
CREATE PROCEDURE populate_0(IN NUM INT)
BEGIN
DECLARE sid INT;
DECLARE suffix_name INT;
DECLARE i INT;
SET sid=1000;
SET suffix_name=10;
SET i=1;
START TRANSACTION;
WHILE i <= NUM
DO
INSERT INTO table_1(seller_id,seller_name,gmt_create,update_time) VALUES(sid,CONCAT('sellername',suffix_name),NOW(),NOW());
SET suffix_name=suffix_name+1;
SET sid=sid+1;
SET i=i+1;
END WHILE;
COMMIT;
END ||
delimiter ;
CALL populate_0(100000000) ;

測試方法及結果
資料插入完成以後，分別設定8路歸併排序和2路歸併排序，通過執行SQLalter table table_1 add index name_index (seller_name);來測試DDL執行效率的提升比例：
歸併排序路數
耗時（秒）
8路歸併排序
353
2路歸併排序
485

聯絡我們

若您對DDL操作有任何疑問，請聯絡我們。

歸併排序路數	耗時（秒）
8路歸併排序	353
2路歸併排序	485