PolarDB:列ストアインデックスのクエリフィルタリングアルゴリズムの設定

テーブル作成時のプルーナーの構築

• プルーナー (ブルームフィルター) の構築

  説明

  PolarDB for MySQL 8.0、リビジョン 8.0.1.1.32 以降、または 8.0.2.2.13 以降を実行するクラスターは、PRUNER_BLOOM 属性をサポートしています。

  • サポートされているすべての列にブルームフィルターを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10),
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1 PRUNER_BLOOM=1"; /* コメント内の pruner_bloom 属性 */

  • 特定の列にブルームフィルターを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10) "PRUNER_BLOOM=1", /* コメント内の pruner_bloom 属性 */
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1";

• プルーナー (minmax インデックス) の構築

  長い文字列の列の場合、システムは文字列のプレフィックスを最小値と最大値と比較して、メモリ使用量を削減します。デフォルトのプレフィックス長は 20 文字で、最大は 255 です。`PRUNER_MINMAX` を使用して文字列の Min-Max インデックスを有効にし、`PREFIX_LEN` を使用してプレフィックス長を設定できます。

  説明

  • 文字数は、エンコーディングの長さではなく、文字数に基づいています。たとえば、「Alibaba Cloud PolarDB」の最初の 2 文字は「Al」、最初の 5 文字は「Aliba」です。

  • PolarDB for MySQL 8.0、リビジョン 8.0.1.1.32 以降、または 8.0.2.2.13 以降を実行するクラスターは、PRUNER_MINMAX および PREFIX_LEN 属性をサポートしています。

  • すべての文字列の列に Min-Max インデックスを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10),
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1 PRUNER_MINMAX=1 PREFIX_LEN=30"; /* 30 文字のプレフィックスを持つ pruner_minmax 属性 */

  • 特定の列に Min-Max インデックスを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10) "PRUNER_MINMAX=1 PREFIX_LEN=30", /* 30 文字のプレフィックスを持つ pruner_minmax */
        str_col2 varchar(10) "PRUNER_MINMAX=1 PREFIX_LEN=10" /* 10 文字のプレフィックスを持つ pruner_minmax */
      ) ENGINE InnoDB COMMENT "COLUMNAR=1";

• プレフィックスブルームフィルターの構築

  説明

  PolarDB for MySQL 8.0、リビジョン 8.0.1.1.42 以降、または 8.0.2.2.25 以降を実行するクラスターは、PRUNER_PREFIX_BLOOM 属性をサポートしています。

  • サポートされているすべての列にプレフィックスブルームフィルターを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10),
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1 PRUNER_PREFIX_BLOOM=1"; /* テーブルコメント内の PRUNER_PREFIX_BLOOM */

  • 特定の列にプレフィックスブルームフィルターを構築します。例：CREATE TABLE t1 ( id INT PRIMARY KEY, str_col1 char(10) "PRUNER_PREFIX_BLOOM=1", /* 列コメント内の PRUNER_PREFIX_BLOOM */ str_col2 varchar(10) ) ENGINE InnoDB COMMENT "COLUMNAR=1";

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10) "PRUNER_PREFIX_BLOOM=1", /* 列コメント内の PRUNER_PREFIX_BLOOM */
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1";

• トークンブルームフィルターの構築

  説明

  PRUNER_TOKEN_BLOOM 属性は、次のバージョンでサポートされています。

  • PolarDB for MySQL 8.0.1、リビジョン 8.0.1.1.39 以降。

  • PolarDB for MySQL 8.0.2、リビジョン 8.0.2.2.20 以降。

  • サポートされているすべての列にトークンブルームフィルターを構築できます。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10),
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1 PRUNER_TOKEN_BLOOM=1";

  • 特定の列にトークンブルームフィルターを構築できます。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10) "PRUNER_TOKEN_BLOOM=1",
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1";

• N-gram ブルームフィルターの構築

  説明

  • PRUNER_TOKEN_BLOOM プロパティは、次の条件を満たすクラスターバージョンでサポートされています。

    • PolarDB for MySQL 8.0.1、リビジョン 8.0.1.1.39 以降。

    • PolarDB for MySQL 8.0.2、リビジョン 8.0.2.2.20 以降。

  • PRUNER_NGRAM_BLOOM=N：N は 2 以上でなければならず、部分文字列の長さを設定します。N は LIKE "%string%" の文字列の長さ以下の値に設定することを推奨します。LIKE "%string%" の文字列が N より短い場合、N-gram ブルームフィルターは使用できません。

  • サポートされているすべての列に N-gram ブルームフィルターを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10),
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1 PRUNER_NGRAM_BLOOM=2";

  • 特定の列に N-gram ブルームフィルターを構築します。例：

    CREATE TABLE
      t1 (
        id INT PRIMARY KEY,
        str_col1 char(10) "PRUNER_NGRAM_BLOOM=3",
        str_col2 varchar(10)
      ) ENGINE InnoDB COMMENT "COLUMNAR=1";

既存のテーブルでのプルーナーの構築または削除

既存のテーブルにプルーナーを追加または削除するには、まず列ストアインデックスを削除してから再作成して、インデックスを再構築する必要があります。インデックスを再構築する前に、COMMENT のプルーナー属性を更新または削除します。次のセクションでは、PRUNER_MINMAX を例として使用します。

• プルーナーを構築する

  元のテーブル構造が次のようになっていると仮定します。

         Table: t1
  Create Table: CREATE TABLE `t1` (
    `id` int(11) NOT NULL,
    `str_col1` char(10) DEFAULT NULL,
    `str_col2` varchar(10) DEFAULT NULL,
    PRIMARY KEY (`id`),
    COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
  ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1'

  • テーブル t1 のすべての文字列の列に Min-Max プルーナーを構築します。

    1. テーブル t1 の列ストアインデックスを削除します。

       ALTER TABLE t1 COMMENT = "COLUMNAR=0";

    2. テーブル t1 のすべての文字列の列に対して Min-Max プルーナーを有効にします。

       ALTER TABLE t1 COMMENT = "COLUMNAR=1 PRUNER_MINMAX=1"; 

    3. (任意) 更新されたテーブル構造を表示します。

       SHOW CREATE TABLE t1 FULL \G

       結果：

       *************************** 1. row ***************************
              Table: t1
       Create Table: CREATE TABLE `t1` (
         `id` int(11) NOT NULL,
         `str_col1` char(10) DEFAULT NULL,
         `str_col2` varchar(10) DEFAULT NULL,
         PRIMARY KEY (`id`),
         COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
       ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1 PRUNER_MINMAX=1'

       t1 テーブルに PRUNER_MINMAX 属性が含まれるようになりました。

  • テーブル t1 の str_col1 列に Min-Max プルーナーを構築します。

    1. str_col1 列にプルーナーを追加します。

       ALTER TABLE t1 MODIFY COLUMN str_col1 char(10) COMMENT 'PRUNER_MINMAX=1';

    2. 次のコマンドを順に実行して、テーブル t1 の列ストアインデックスを再構築します。

       ALTER TABLE t1 COMMENT = "COLUMNAR=0";
       ALTER TABLE t1 COMMENT = "COLUMNAR=1";

    3. (任意) 更新されたテーブル構造を表示します。

       SHOW CREATE TABLE t1 FULL \G

       結果：

       *************************** 1. row ***************************
              Table: t1
       Create Table: CREATE TABLE `t1` (
         `id` int(11) NOT NULL,
         `str_col1` char(10) DEFAULT NULL COMMENT 'PRUNER_MINMAX=1',
         `str_col2` varchar(10) DEFAULT NULL,
         PRIMARY KEY (`id`),
         COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
       ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1'

       str_col1 列に PRUNER_MINMAX 属性が追加されました。

• プルーナーの削除

  • テーブルから PRUNER_MINMAX 属性を削除します。

    テーブル t1 が次の構造を持っていると仮定します。

    SHOW CREATE TABLE t1 full \G
    *************************** 1. row ***************************
           Table: t1
    Create Table: CREATE TABLE `t1` (
      `id` int(11) NOT NULL,
      `str_col1` char(10) DEFAULT NULL,
      `str_col2` varchar(10) DEFAULT NULL,
      PRIMARY KEY (`id`),
      COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1 PRUNER_MINMAX=1'

    テーブル t1 から PRUNER_MINMAX 属性を削除するには：

    1. 次のコマンドを実行して、テーブル t1 の列ストアインデックスを削除します。

       ALTER TABLE t1 COMMENT = "COLUMNAR=0";

    2. PRUNER_MINMAX を 0 に設定し、インデックスを再構築します。

       ALTER TABLE t1 COMMENT = "COLUMNAR=1 PRUNER_MINMAX=0";

    3. (任意) 更新されたテーブル構造を表示します。

       SHOW CREATE TABLE t1 FULL \G

       結果：

       *************************** 1. row ***************************
              Table: t1
       Create Table: CREATE TABLE `t1` (
         `id` int(11) NOT NULL,
         `str_col1` char(10) DEFAULT NULL,
         `str_col2` varchar(10) DEFAULT NULL,
         PRIMARY KEY (`id`),
         COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
       ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1'

       t1 テーブルには PRUNER_MINMAX 属性がなくなりました。

  • 列から PRUNER 属性を削除します。

    テーブル t1 の str_col1 列に PRUNER_MINMAX 属性があると仮定します。テーブル構造は次のとおりです。

           Table: t1
    Create Table: CREATE TABLE `t1` (
      `id` int(11) NOT NULL,
      `str_col1` char(10) DEFAULT NULL COMMENT 'PRUNER_MINMAX=1',
      `str_col2` varchar(10) DEFAULT NULL,
      PRIMARY KEY (`id`),
      COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
    ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1'

    str_col1 列から PRUNER_MINMAX 属性を削除するには：

    1. str_col1 列から PRUNER_MINMAX 属性を削除します。

       ALTER TABLE t1 MODIFY COLUMN str_col1 char(10) COMMENT 'PRUNER_MINMAX=0';

    2. 列ストアインデックスを再構築します。

       ALTER TABLE t1 COMMENT = "COLUMNAR=0";
       ALTER TABLE t1 COMMENT = "COLUMNAR=1";

    3. (任意) 更新されたテーブル構造を表示します。

       SHOW CREATE TABLE t1 FULL \G

       結果：

       *************************** 1. row ***************************
              Table: t1
       Create Table: CREATE TABLE `t1` (
         `id` int(11) NOT NULL,
         `str_col1` char(10) DEFAULT NULL,
         `str_col2` varchar(10) DEFAULT NULL,
         PRIMARY KEY (`id`),
         COLUMNAR INDEX (`id`,`str_col1`,`str_col2`)
       ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ci COMMENT='COLUMNAR=1'

       str_col1 列には PRUNER_MINMAX 属性がなくなりました。