DMS的安全規則中新接入了SQL審核最佳化建議,在SQLConsole或資料變更中,對提交的SQL語句進行規範審核並提出相關最佳化建議。可協助您在提交變更操作前審核、解決問題SQL,規避潛在問題SQL在變更到資料庫後產生異常。
前提條件
系統行為動作
DMS預定義了三種系統行為動作:
必須改進:若不改進該語句,系統會自動阻斷流程,並進行相應提示,系統初始化SQL審核規則中不包含必須改進。
說明SQL審核規則的檢測項請參見檢測項。
例如:將
表要有主鍵
的規則設定為必須改進,若開發人員在建立表時未設定主鍵,系統將會攔截SQL語句的執行,並要求開發人員針對該項規則進行修改,驗證通過後才允許系統執行。潛在問題:提醒該SQL存在問題,但不會阻斷流程。
建議改進:建議進行改進,且不阻斷流程。
不同管控模式下的功能支援情況
DMS提供三種不同的管控模式,更多資訊,請參見管控模式。
支援項 | 安全協同 | 穩定變更 | 自由操作 |
開啟或關閉規則 | 支援 | 支援 | 支援 |
配置行為動作 | 支援 | 不支援配置 | 不支援配置 |
更改規則參數 部分規則可填寫參數,例如表的索引數量、表的欄位數量。 | 支援 | 支援 | 不支援配置 |
配置備忘 配置規則的業務背景。 | 支援 | 不支援配置 | 不支援配置 |
操作步驟
安全規則中已產生預設的SQL審核規則,本樣本向您介紹如何進行自訂配置,將表要有主鍵
的規則設定為必須改進。
- 登入Data Management 5.0。
單擊控制台左上方的表徵圖,選擇
。說明若您使用的是非極簡模式的控制台,在頂部功能表列中,選擇
。單擊目標安全規則右側操作列下的編輯。
說明若您需要配置自由操作或穩定變更的配置項,請單擊對應管控模式右側的SQL審核優化建議。
在詳情頁左側的導覽列中,單擊SQL審核優化建議。
單擊
表要有主鍵
規則右側的編輯。說明您可以單擊標記(規則生效範圍,目前包含DDL語句、DML語句)、行為動作、狀態(開啟或關閉規則)右側的表徵圖,進行快速篩選。
在規則內容配置彈窗中,配置如下資訊。
參數名
說明
行為動作
將行為動作設定為必須改進。
說明系統初始化規則中不包含必須改進。
備忘
輸入此規則的備忘資訊,如業務背景資訊。
單擊確定。
在後續的資料開發、資料變更及SQL審核等功能中,SQL審核最佳化建議將根據配置的安全規則檢驗SQL語句。
若不符合
表要有主鍵
該項規則,系統會自動阻斷流程。
檢測項
SQL規範檢查支援的檢測項如下。
表結構定義
檢測項
適用的SQL語句
規則名稱與規則標識
庫屬性
CREATE DATABASE
限制建立庫的字元集:CREATE_DATABASE_LIMIT_CHARSET
表屬性
CREATE TABLE
ALTER TABLE
表要有主鍵:TABLE_MUST_HAVE_PRIMARY_KEY
表要有備忘:TABLE_MUST_HAVE_COMMENTS
表不能使用外鍵:TABLE_FORBID_USE_FOREIGN_KEY
限制表名大小寫:TABLE_NAME_LIMIT_CHAR_CASE
限制表格儲存體引擎:TABLE_LIMIT_STORE_ENGINE
限制表使用分區設定:TABLE_FORBID_USE_PARTITION
表需要包含某些列:TABLE_MUST_HAVE_SOME_COLUMN
限制表字元集:TABLE_MUST_USE_SOME_CHARSET
限制表校正規則:TABLE_MUST_USE_SOME_COLLATION
表名不能是關鍵字:TABLE_NAME_FORBID_KEYWORD
限制表索引的數量:TABLE_LIMIT_INDEX_COUNT
限制表欄位的數量:TABLE_LIMIT_COLUMN_COUNT
限制建表自增初始值:TABLE_LIMIT_INIT_AUTO_INCREMENT
限制主鍵列必須自增:LIMIT_PRIMARY_COLUMN_AUTO_INCREMENT
限制使用視圖:TABLE_FORBID_USE_VIEW
限制使用觸發器:TABLE_FORBID_USE_TRIGGER
限制使用事件:TABLE_FORBID_USE_EVENT
限制使用預存程序:TABLE_FORBID_USE_STORED_PROCEDURE
限制使用自訂函數:TABLE_FORBID_USE_CUSTOM_FUNCTION
修改表字元集建議用
ALTER TABLE CONVERT
文法:MODIFY_CHARSET_USE_ALTER_TABLE_CONVERT
列屬性
CREATE TABLE
ALTER TABLE
欄位名不能是關鍵字:COLUMN_NAME_FORBID_KEYWORD
限制欄位名大小寫:COLUMN_NAME_LIMIT_CHAR_CASE
不能設定列的字元集:COLUMN_FORBID_SET_CHARSET
限制列不能使用部分資料類型:COLUMN_FORBID_DATA_TYPES
列要有注釋:COLUMN_MUST_HAVE_COMMENTS
限制
char
類型欄位長度:COLUMN_LIMIT_CHAR_LENGTH限制
varchar
類型欄位長度:COLUMN_LIMIT_VARCHAR_LENGTH限制列都不可空(
NOT NULL
):COLUMN_MUST_SET_NOT_NULL限制自增列名字為
ID
:COLUMN_AUTO_INCREMENT_NAME_ID限制自增列為無符號:COLUMN_AUTO_INCREMENT_UNSIGNED
不能使用
float
或double
類型(建議用decimal
替換):COLUMN_FORBID_FLOAT_DOUBLE_TYPE每個列都要有預設值:EACH_COLUMN_NEED_DEFAULT_VALUE
不能設定列的校正集:COLUMN_FORBID_SET_COLLATE
限制修改表重新命名列:ALTER_TABLE_FORBID_RENAME_COLUMN
限制修改表刪除列:ALTER_TABLE_FORBID_DROP_COLUMN
修改表禁止更改資料類型:ALTER_TABLE_FORBID_MODIFY_DATA_TYPE
修改表新增欄位要求可空:ALTER_TABLE_ADD_COLUMN_NULLABLE
修改表新增非空欄位時要明確指定預設值:ALTER_ADD_NOT_NULL_COLUMN_NEED_DEFAULT
修改表將可空欄位改為非空時要明確指定預設值:COLUMN_NULLABLE_TO_NOT_NEED_DEFAULT
不能使用
enum
類型(建議用tinyint
或char
代替):COLUMN_FORBID_USE_ENUM_TYPE欄位禁用
ZEROFILL
屬性:COLUMN_DATA_TYPE_FORBID_ZEROFILL
索引屬性
CREATE TABLE
ALTER TABLE
索引需要設定名字:INDEX_MUST_HAVE_CLEARLY_NAME
限制
Unique
索引名格式:UNIQUE_INDEX_NAME_PATTERN限制普通索引名格式:COMMON_INDEX_NAME_PATTERN
限制單個索引包含列的個數:INDEX_LIMIT_CONTAINS_COLUMNS
限制主鍵包含列的個數:PRIMARY_LIMIT_CONTAINS_COLUMNS
限制主鍵列類型:PRIMARY_LIMIT_COLUMN_DATA_TYPE
限制修改表刪除主鍵:ALTER_TABLE_FORBID_DROP_PRIMARY
修改表禁止刪除索引:ALTER_TABLE_FORBID_DROP_INDEX
資料查詢
檢測項
適用的SQL語句
規則名稱與規則標識
SELECT
SELECT
INSERT SELECT
子查詢(嵌套在
UPDATE
或DELETE
中)
SELECT
語句建議指定WHERE
條件:SELECT_SUGGEST_ASSIGN_WHERESELECT
語句不建議使用ORDER BY RAND()
:SELECT_FORBID_USE_ORDER_BY_RANDSELECT
語句不建議對常量進行GROUP BY
:SELECT_FORBID_GROUP_BY_CONSTSELECT
語句不建議對常量進行ORDER BY
:SELECT_FORBID_ORDER_BY_CONSTSELECT
語句不建議對不同的表GROUP BY
或ORDER BY
:SELECT_FORBID_GROUP_ORDER_BY_DISTINCT_TABLESELECT
語句不建議ORDER BY
多個欄位使用不同方向排序:SELECT_FORBID_ORDER_BY_MULTI_COLUMN_RANKSELECT
語句不建議GROUP BY
或ORDER BY
運算式或函數:SELECT_FORBID_GROUP_ORDER_BY_EXPR_OR_FUNCTIONSELECT
語句不建議使用union
:SELECT_FORBID_USE_UNIONSELECT
語句限制多表關聯的數量:SELECT_LIMIT_TABLE_JOIN_COUNTSELECT
語句限制LIMIT
的offset
大小:SELECT_CONFINE_LIMIT_MAX_OFFSETSELECT
語句不建議使用HAVING
子句:SELECT_FORBID_USE_HAVING
WHERE
條件包含
WHERE
條件子句的SELECT
、UPDATE
、DELETE
、INSERT SELECT
語句。WHERE
條件中不建議索引欄位包含數學運算或函數運算:WHERE_FORBID_INDEX_COLUMN_HAS_MATHWHERE
條件中不建議使用前萬用字元尋找:WHERE_FORBID_BEFORE_WILDCARD_SEARCHWHERE
條件中檢測沒有萬用字元的LIKE
語句:WHERE_CHECK_LIKE_HAS_NOT_WILDCARDWHERE
條件中不建議使用反向查詢(not in
/not like
):WHERE_FORBID_USE_REVERSE_SEARCHWHERE
條件中限制IN
子句包含元素個數:WHERE_LIMIT_IN_ITEM_MAX_COUNTWHERE
條件中檢測欄位是否存在隱式類型轉換:WHERE_CHECK_COLUMN_IMPLICIT_TYPE_CONVERSIONWHERE
條件中檢測是否通過OR
操作符串連過濾條件:WHERE_CHECK_OR_LINK_CONDITION
資料變更
檢測項
適用的SQL語句
規則名稱與規則標識
插入資料
INSERT SELECT
INSERT [IGNORE]
REPLACE
插入語句建議指定
INSERT
欄位列表:ASSIGN_INSERT_COLUMN_NAME_LIST插入語句中
INSERT
欄位名不能重複:INSERT_COLUMN_NAME_FORBID_DUPLICATE插入語句不能為
NOT NULL
列插入NULL
值:NOT_NULL_COLUMN_FORBID_INSERT_NULL插入語句中
INSERT
欄位列表要和值列表匹配:INSERT_COLUMN_MUST_MATCH_VALUES插入語句限制一條
INSERT VALUES
的總行數:LIMIT_INSERT_VALUES_TOTAL_ROWS插入語句檢測
INSERT
的表或欄位是否存在:INSERT_CHECK_TABLE_COLUMN_EXISTS插入語句不建議使用
SYSDATA()
函數:INSERT_FORBID_USE_SYSDATE_FUNCTION
修改、刪除資料
UPDATE
DELETE
UPDATE
或DELETE
語句限制多表關聯的數量:UPDELETE_LIMIT_TABLE_JOIN_COUNTUPDATE
或DELETE
語句建議指定WHERE
條件:UPDELETE_ASSIGN_WHERE_CONDITIONUPDATE
或DELETE
語句檢測WHERE
條件是否包含子查詢:UPDELETE_CHECK_WHERE_EXIST_SUB_QUERYUPDATE
或DELETE
語句限制LIMIT
資料量大小:UPDELETE_CHECK_LIMIT_AFFECTED_ROWSUPDATE
或DELETE
語句檢測多表關聯文法是否完整(如join
遺漏on
子句):UPDELETE_CHECK_TABLE_JOIN_LOSS_ONUPDATE
或DELETE
語句不能有ORDER BY
子句:UPDELETE_FORBID_ORDER_BYUPDATE
語句檢測SET
多個列之間的分隔字元(and
非法):UPDATE_CHECK_SET_ITEM_DELIMITERUPDATE
多表時檢測SET
的列是否指定表首碼:UPDATE_MULTI_TABLE_CHECK_SET_COLUMN_PREFIXUPDATE
語句檢測涉及表或欄位是否存在:UPDATE_CHECK_TABLE_COLUMN_EXISTUPDATE
語句檢測是否更新了主鍵:UPDATE_CHECK_PRIMARY_KEY_CHANGEUPDATE
語句檢測是否更新了唯一鍵:UPDATE_CHECK_UNIQUE_KEY_CHANGEUPDATE
語句建議同時更新表上的“修改時間”列:UPDATE_ALSO_TO_UPDATE_MODIFY_TIME_COLUMNUPDATE
語句不建議更新表上的“建立時間”列:UPDATE_FORBID_MODIFY_CREATE_TIME_COLUMN
SQL最佳化建議支援的檢測項如下。
類別
檢測點
無
最佳化主鍵為
int
類型的表:OPTIMIZE_PRIMARY_IS_INT_TABLE預警自增主鍵剩餘可用空間風險:SNIFFING_AUTO_PRIMARY_REMAIN_SPACE
預警唯一索引
(uk)null
值風險:SNIFFING_UNIQUE_EXIST_NULL_RISKDDL鎖表或變更失敗預警與最佳化:ALTER_LOCK_FAIL_SNIFFING_OPTIMIZE
SQL注入風險檢測:CHECK_SQL_INJECTION_RISK
強制索引
(force index)
風險檢測:CHECK_SQL_ASSIGN_FORCE_INDEX執行計畫索引檢查:SQL_EXPLAIN_INDEX_CHECK
DMS索引分析與推薦:DMS_INDEX_ANALYZE_AND_SUGGEST