為了確保在Realtime Compute開發控制台中更加高效且靈活地管理和操作Paimon表(合并小檔案、資料排序等特定任務等),您需要提前配置相關工具包。本文為您介紹如何在Realtime Compute開發控制台中完成這一配置過程,助力您更輕鬆管理Paimon表資料。
使用限制
僅Realtime Compute引擎VVR 8.0.5及以上版本支援Paimon表。
操作步驟
單擊連結下載Paimon資料管理環境所需JAR包。
在Realtime Compute開發控制台,在檔案管理頁面單擊上傳資源,上傳步驟1中下載的兩個JAR包。
在
頁面單擊 ,填寫相關配置項。配置項說明如下:
配置項
說明
本文樣本
部署模式
流模式或批模式,您需要根據具體功能進行選擇。
批模式
部署名稱
填寫對應的JAR作業名稱。
test
引擎版本
選擇Realtime Compute引擎VVR 8.0.5及以上版本。
vvr-8.0.5-flink-1.17
JAR URI
上傳paimon-flink-action JAR包。
選擇步驟2上傳的paimon-flink-action。
Entry Point Class
程式的入口類。
不填寫。
Entry Point Main Arguments
傳入參數,在主方法裡面調用該參數。
根據具體功能填寫,詳見相關功能文檔。例如實現資料排序功能,詳情請參見消費作業最佳化。
附加依賴檔案
指定要附加的依賴檔案的路徑或檔案名稱。
選擇步驟2上傳的paimon-ali-vvr。
單擊部署,部署作業。
在作業啟動。
頁面,單擊啟動,啟動步驟詳情請參見
相關文檔
作業啟動後,如果您需要配置Flink作業運行參數,詳情請參見配置作業部署資訊。
作業運行參數中部分參數也支援動態更新,減少作業啟停帶來的業務斷流時間,詳情請參見動態擴縮容與參數動態更新。
不同情境下Paimon主鍵表和Append Scalable表的常用最佳化,詳情請請見Paimon效能最佳化。