全部產品
Search
文件中心

MaxCompute:2024年

更新時間:Mar 26, 2025

本文為您介紹MaxCompute 2024年產品公告,基於此您可以瞭解MaxCompute中增加了哪些新功能、文法新特性和許可權變更等資訊,以提升專案開發效率。

2024年12月23日-分散式運算架構MaxFrame服務新增海外Region支援

尊敬的MaxCompute使用者:

MaxCompute分散式運算架構MaxFrame服務將於北京時間2024年12月23日(周一)新增對新加坡、日本(東京)、印尼(雅加達)地區的支援。

MaxFrame是由阿里雲自研的分散式運算架構,支援Python編程介面,並直接使用MaxCompute的計算資源和資料介面。MaxFrame不僅相容Pandas和Xgboost介面,還自動實現分散式處理,使得Python開發人員可以更加高效、便捷地在MaxCompute上完成大規模資料處理和ML/AI資料預先處理以及模型開發等工作。MaxFrame使用詳情請參見MaxFrame

您有任何相關問題或需要協助,可以通過填寫DingTalk群申請表單加入MaxCompute開發人員社區群(DingTalk群號:11782920)、您的專屬釘群或者MaxFrame官方使用者支援群(DingTalk群號:37130012987)等方式聯絡我們。

感謝您的配合!

2024年11月28日-MaxCompute服務等級協議SLA更新通知

尊敬的MaxCompute使用者:

阿里雲將對雲原生MaxCompute服務等級協議(SLA)進行更新。具體變更內容如下:

  • 補充服務不可用定義條款(1.1~1.10章節)。

  • 補充例外條款(1.11章節的(k)、(l)、(m)小節)。

SLA詳情請參見MaxCompute服務等級協議

新的服務等級協議(SLA)將於北京時間2025年01月01日(周三)正式生效,如您有任何疑問,可通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您對阿里雲的支援和關注!

2024年11月14日-MaxCompute Logview安全升級

尊敬的MaxCompute使用者:

MaxCompute計劃於北京時間2024年12月02日(周一)14:00起逐步對中國香港、華東 2 金融雲、華北 2 金融雲(邀測)、華北 2 阿里政務雲1、華南 1 金融雲、日本(東京)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、德國(法蘭克福)、英國(倫敦)、美國(矽谷)、美國(維吉尼亞)、阿聯酋(杜拜)、沙特(利雅得)地區的Logview進行全面安全升級。安全升級後,使用公用調度資源群組的DataWorks資料開發、資料分析提交的作業產生的Logview連結將跳轉至MaxCompute管理主控台,並且需要使用者同時滿足以下條件,方可訪問作業歸屬專案的Logview:

  • 具備阿里雲帳號:使用者需持有有效阿里雲帳號,並已完成實名認證。

  • 使用者為作業歸屬MaxCompute專案的成員(可由專案系統管理員將其添加至專案中)。

因此,您需要特別注意,當DataWorks工作空間配置的MaxCompute資料來源訪問身份與使用者身份不一致時,可能會由於使用者本身未加入作業所歸屬的MaxCompute專案而導致無法訪問自身提交的作業Logview。例如:DataWorks工作空間為標準模式,使用者在開發環境提交作業至生產環境,若使用者本身未加入生產環境的MaxCompute專案,則無法訪問自己提交但歸屬於生產環境專案的作業Logview。

為避免上述情形,請您確保以下兩點:

  • 所有需要訪問Logview的團隊成員均登入阿里雲帳號並完成實名認證。

  • 及時將團隊成員添加為相應的MaxCompute專案成員,並通過授權操作,授予使用者指定對象的指定許可權。

    說明

    更多使用者管理、授權操作,詳情請參見使用者規劃與管理MaxCompute許可權

同時,升級後的Logview將預設不再展示作業運行結果。

在升級過程中或升級後,遇到任何Logview訪問、許可權配置等問題或需要支援人員協助,歡迎您通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年11月13日-MaxCompute作業智能診斷功能發布

尊敬的MaxCompute使用者:

MaxCompute作業智能診斷功能將於北京時間2024年11月13日(周三)起在各個地區陸續發布。該功能會基於作業的詳細執行資訊,對SQL作業進行智能診斷:

  • 針對運行失敗的作業:根據錯誤資訊匹配報錯原因類別,並提供相應的錯誤描述及解決方案。

  • 針對運行“慢”作業:根據作業運行過程中的資源消耗情況和執行詳情,診斷作業存在的異常項(如資源不足、資料扭曲、資料膨脹、模式回退),同時提供造成此異常的原因及解決方案。

該功能將協助您及時發現作業報錯或作業運行時間長度不符合預期等問題,並進行自主分析與解決。更多功能介紹和使用說明,請參見作業智能診斷

使用過程中,您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年10月30日-MaxComputeData Transmission Service升級和跨Region流量治理說明

MaxCompute將於北京時間2024年11月18日(周一)起,對Data Transmission Service進行陸續升級並實施跨Region流量治理,詳情如下:

  • 資料通道讀寫效能和流量控制

    • 流式資料通道(Streaming Tunnel)的單並發(Slot)寫入限速閾值從1 MB/s提升到10 MB/s,單Slot寫入請求數限制從每秒10個提升到每秒100個。批量資料通道(Batch Tunnel)的單並發(Slot)寫入限速閾值控制到10 MB/s。

    • 流式資料通道的並發(Slot)佔用數計算方式最佳化,由建立StreamUploadSession時指定Slot數變更為一個RecordPack寫入時佔用一個Slot,寫入完成即釋放,與批量資料通道的計算方式一致。詳情請參考Data Transmission Service概述

  • 跨Region流量治理

    禁止通過非MaxCompute專案所在地區(Region)的Endpoint串連該專案,需配置您專案所在地區的Endpoint或Tunnel Endpoint。Endpoint地址詳情,請參見Endpoint

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年10月28日-MaxCompute動態分區轉靜態分區最佳化對UPDATE/DELETE/MERGE INTO行為變更的影響說明

尊敬的MaxCompute使用者:

MaxCompute已於北京時間2024年10月24日(周四)起,預設對所有DML操作開啟動態分區轉靜態分區最佳化功能,以提升查詢效能。該最佳化對於UPDATE/DELETE/MERGE INTO操作有行為變更影響,即當您對不存在的分區執行UPDATE/DELETE/MERGE INTO操作時,會出現類似如下報錯資訊:

  • ODPS-0110061: Failed to run ddltask - Operation DELETE expect target partition exist, but object not found.

  • ODPS-0422141: Partition not found - Partition 'projectName.tableName(pt=xxx)' does not exist.

若遇到該情況,您可在Session層級設定SET odps.optimizer.cbo.rule.filter.black=re;參數關閉該最佳化,之後即可正常執行UPDATE/DELETE/MERGE INTO操作。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年10月22日-MaxCompute Go SDK正式發布

尊敬的MaxCompute使用者:

MaxCompute已於北京時間2024年10月22日(周二)正式發布Go SDK。Go SDK是MaxCompute提供的一套Go程式設計語言介面,您可以通過該介面使用Go代碼來操作和管理MaxCompute服務,例如訪問和管理專案、操作資料表和資料轉送等。更多資訊請參見Go SDK概述

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年10月15日-MaxCompute阿里雲傳統網路串連方式下線以及Endpoint地址更新

尊敬的MaxCompute使用者:

MaxCompute阿里雲傳統網路串連方式將於北京時間2024年11月30日(周六)下線,由阿里雲產品互連網絡串連方式替代,請您及時確認並切換為阿里雲VPC網路連接方式或阿里雲產品互連網絡串連方式,避免因網路連接中斷對您的業務造成影響。同時,金融雲、政務雲以及其他國際地區的阿里雲VPC網路連接方式或阿里雲產品互連網絡串連方式的Endpoint地址存在更新,請及時關注並更新相關配置。Endpoint詳情,請參見Endpoint

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年10月14日-MaxCompute同地區下支援購買多份訂用帳戶計算資源

尊敬的MaxCompute使用者:

MaxCompute將於北京時間2024年10月14日(周一)起,陸續支援同帳號在同地區下購買多份訂用帳戶計算資源,即同一個雲帳號在同地區下支援購買多個一級Quota,且多個一級Quota之間資源相互獨立。

此功能開放後,可以最佳化以下業務情形:

  • 同一個帳號內,不同業務訂用帳戶計算資源需要強隔離。

  • 同一個帳號內,不同業務賬務需要拆分。原來使用MaxCompute的訂用帳戶計算資源,無法通過二級Quota分賬,開放該功能後可通過購買多個一級Quota直接按訂單分賬。

關於MaxCompute Quota更多資訊,請參見計算資源-Quota管理

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年09月27日-MaxCompute儲存成本最佳化功能發布

尊敬的MaxCompute使用者:

MaxCompute儲存成本最佳化功能將於北京時間2024年09月27日(周五)起在中國公用雲地區陸續發布,該功能依據固定最佳化策略(近30天無訪問的標準儲存推薦轉為低頻儲存;近180天無訪問的標準儲存推薦轉為長期儲存),結合表/分區的最近訪問時間,判斷是否可以您的表/分區的階層式存放區屬性由標準變更為低頻或長期,並推算可能節省的儲存成本(目錄價),輔助您進行階層式存放區策略配置。

更多功能介紹和使用說明,請參見階層式存放區配置最佳化

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年09月26日-MaxCompute分散式運算架構MaxFrame服務正式商業化

尊敬的MaxCompute使用者:

MaxFrame是由阿里雲自研的分散式運算架構,支援Python編程介面,並直接使用MaxCompute的計算資源和資料介面,MaxFrame不僅相容Pandas、Xgboost介面,還自動實現分散式處理,使得Python開發人員可以更加高效、便捷地在MaxCompute上完成大規模資料處理及ML/AI資料預先處理等工作。關於MaxFrame詳情請參見:

說明

MaxCompute MaxFrame將逐步替換PyODPS DataFrame及Mars介面,同時在運算元相容性和分布式效能方面有明顯提升,推薦新使用者和新作業可直接基於MaxFrame進行Python開發,使用PyODPS DataFrame和Mars的歷史作業建議逐步遷移至MaxFrame執行以擷取更好的開發體驗和服務支援。

MaxCompute分散式運算架構MaxFrame服務於北京時間2024年09月27日(周五)在華北2(北京)、華東1(杭州)、華東2(上海)、華南1(深圳)、西南1(成都)、華北6(烏蘭察布)和中國(香港)地區正式對外商業化。商業化後MaxFrame按照作業計算資源使用量進行計費,支援隨用隨付和訂用帳戶的付費方式。關於計費詳情,請參見計算費用(訂用帳戶)

您有任何相關問題或需要協助,可以通過填寫DingTalk群申請表單加入MaxCompute開發人員社區群(DingTalk群號:11782920)、您的專屬釘群或者MaxFrame官方使用者支援群(DingTalk群號:37130012987)等方式聯絡我們。

感謝您的配合!

2024年09月20日-MaxCompute控制台功能增加RAM許可權管控

尊敬的MaxCompute使用者:

為確保安全性,MaxCompute將於2024年10月08日(周二)對控制台部分功能增加RAM許可權管控,阿里雲帳號(主帳號)預設擁有控制台所有功能的訪問或操作許可權,RAM使用者需要添加對應功能的許可權點方可訪問,本次增加許可權管控的功能及對應的RAM許可權點如下:

模組

功能

許可權點Action

工作區>Notebook

Notebook

  • odps:CreateNotebookTemplate

  • odps:ListNotebookTemplates

  • odps:GetNotebookTemplate

  • odps:UpdateNotebookTemplate

  • odps:DeleteNotebookTemplate

  • odps:CreateNotebookStorage

  • odps:ListNotebookStorage

  • odps:CreateNotebookInstance

  • odps:ListNotebookInstances

  • odps:GetNotebookInstance

  • odps:StartNotebookInstance

  • odps:StopNotebookInstance

  • odps:UpdateNotebookInstance

  • odps:DeleteNotebookInstance

租戶管理>外部資料源

外部資料源

  • odps:ListTenantObjectBindings

  • odps:UpdateTenantObjectBindings

資料轉送>遷移服務(MMA)

遷移服務(MMA)

  • odps:ListMmsDataSources

  • odps:GetMmsDataSource

  • odps:CreateMmsDataSource

  • odps:UpdateMmsDataSource

  • odps:DeleteMmsDataSource

  • odps:CreateMmsFetchMetadataJob

  • odps:ListMmsJobs

  • odps:GetMmsJob

  • odps:CreateMmsJob

  • odps:DeleteMmsJob

  • odps:StartMmsJob

  • odps:StopMmsJob

  • odps:RetryMmsJob

  • odps:ListMmsTasks

  • odps:GetMmsTask

  • odps:ListMmsTaskLogs

  • odps:GetMmsAsyncTask

  • odps:UpdateMmsAsyncTask

  • odps:DeleteMmsAsyncTask

  • odps:ListMmsDbs

  • odps:GetMmsDb

  • odps:ListMmsTables

  • odps:GetMmsTable

  • odps:ListMmsPartitions

  • odps:GetMmsPartition

  • odps:ListMmsAgents

  • odps:CreateMmsAuthFile

具體的許可權點說明請參見RAM許可權

為了避免到期控制台功能無法使用,請務必於2024年10月08日(周二)前對需要訪問相關功能模組的RAM使用者添加對應RAM許可權。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年09月19日-MaxCompute開放雲棲新功能邀測

尊敬的MaxCompute使用者:

2024年雲棲大會,MaxCompute多項重磅產品新功能邀測發布,新特性包括支援OpenLake的湖倉一體2.0、Object Table支援SQL或MaxFrame處理非結構化資料、Delta Table增量表格式、基於增量物化視圖的增量計算、MCQA2.0 SQL引擎查詢加速等。其相關特性將在中國區公用雲的華東1(杭州)、華東2(上海)、華北2(北京)及華南1(深圳)地區上線並開放試用,如您有興趣深入瞭解,請在新功能邀測申請表單中填寫註冊資訊。

註冊完成後,您可通過以下兩種方式開始體驗新功能:

  • 在MaxCompute控制台建立專案時,選擇項目類型雲棲新功能邀測專案

  • 在DataWorks資料開發(Data Studio)(新版)公測版本中綁定MaxCompute計算資源時,新增內部專案時選擇項目類型雲棲新功能邀測專案

重要
  • 邀測功能僅在標註為雲棲邀測版的建立專案中提供試用,由於功能還在迭代完善中,邀測期間無法保證邀測版專案和功能達到支援生產的能力,因此請您避免雲端式棲邀測版專案和功能執行重要資料和業務。

  • 邀測結束後,雲棲新功能邀測專案將自動轉為普通生產專案,專案中的資料和配置資訊不會丟失。MaxCompute會根據邀測結果,完善和迭代邀測功能,但不保證所有邀測功能自動合入普通專案。

2024年09月05日-MaxCompute控制台配額(Quota)管理互動介面最佳化

尊敬的MaxCompute使用者:

MaxCompute將於2024年09月11日(周三)所有地區陸續發布控制台Quota管理的訂用帳戶計算Quota配置互動介面最佳化版本。該版本主要針對“無需使用分時伸縮”和“需要使用分時伸縮”兩個使用情境進行最佳化,若您無需使用Quota的分時伸縮功能,可通過新介面的基礎配置頁簽完成訂用帳戶計算Quota的管理配置;若您需要使用分時伸縮能力,則可在完成基礎配置後,再進入伸縮配置頁簽進行相關設定。

屆時您通過MaxCompute控制台的配額(Quota)管理頁面進行訂用帳戶計算Quota配置時,會有如下變化:

  • Quota模版更名為基礎配置,能力如下:

    • 通過編輯基礎配置,可新增二級Quota,並可對二級Quota中的基礎參數(包括是否獨佔單作業CU上限開啟優先順序非預留CU調度策略)進行編輯。同時還可以編輯預留CU量[minCU,maxCU]彈性預留CU,但只作用於當前生效的Quota資源配置方案(原Quota計劃),若您使用了分時伸縮能力,建議前往伸縮配置頁簽對預留CU量[minCU,maxCU]彈性預留CU進行設定。

    • 基礎配置頁簽的Quota列表中,可以刪除二級Quota,與原Quota模板中的刪除邏輯一致。

  • Quota計劃時間計劃合入伸縮配置,並只保留預留CU量[minCU,maxCU]彈性預留CU的組態管理。能力如下:

    • 新增配置方案:即原來的添加計劃,僅支援Quota的預留CU量[minCU,maxCU]彈性預留CU參數的配置。

    • 資源配置方案列表:原Quota計劃列表,新增支援展開每個方案的詳情以便更好地查看對比各方案的配置內容。

    • 分時管理:即原來的時間計劃,能力保持不變。

    • 分時伸縮預覽:新增功能,支援選擇某個二級Quota以查看各個時段的CU分配趨勢圖。

    • 伸縮配置全域視圖:新增功能,支援全域視圖以表格方式展示所有配置方案明細,可方便查看所有Quota的Min/Max CU量和彈性預留CU在各個分時時段的設定。

詳細使用方式後續可直接查看計算資源-Quota管理,使用過程中您有任何相關問題或需要協助,可以通過您的專屬釘群、MaxFrame官方使用者支援群(DingTalk群號:37130012987)或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年08月29日-MaxCompute控制台功能增加RAM許可權管控

尊敬的MaxCompute使用者:

為確保安全性,MaxCompute將於2024年09月10日(周二)對控制台部分功能增加RAM許可權管控,阿里雲帳號(主帳號)預設擁有控制台所有功能的訪問或操作許可權,RAM使用者需要添加對應功能的許可權點方可訪問,本次增加許可權管控的功能及對應的RAM許可權點如下:

模組

功能

許可權點Action

工作區>專案管理

外部網路設定

odps:ListOutboundInternetAddress

工作區>專案管理

角色許可權

odps:UpdateUsersToRole

工作區>配額(Quota)管理

Quota規則

  • odps:ListQuotaRoutingRules

  • odps:CreateQuotaRoutingRule

工作區>資源觀測

儲存資源

  • odps:GetStorageSizeSummary

  • odps:GetStorageAmountSummary

  • odps:GetStorageSummaryCompared

  • odps:ListStorageProjectsInfo

  • odps:ListStorageTablesInfo

  • odps:ListStoragePartitionsInfo

作業效能觀測

odps:ListTopJobInfo

Data Transmission Service

  • odps:GetTableAccessInfoTopK

  • odps:GetTableIpAccessInfoTopK

  • odps:GetTableAccessInfo

  • odps:ListTableSlotDetail

  • odps:GetTunnelThroughputSummary

工作區>作業營運

作業營運

odps:ListJobSnapshotInfos

工作區>物化視圖

物化視圖

  • odps:ListGlobalConfig

  • odps:GetGlobalConfig

  • odps:CloseGlobalConfig

  • odps:UpdateGlobalConfig

  • odps:AddMvRecommendationSupportProject

  • odps:ListMvRecommendationSupportProjects

  • odps:CheckMvRecommendationSupportProjects

  • odps:RemoveMvRecommendationSupportProject

  • odps:CreateMaterializedView

  • odps:GetMaterializedViewStatus

  • odps:ListMaterializedViews

  • odps:GetMaterializedView

  • odps:UpdateMaterializedView

  • odps:DeleteMaterializedView

  • odps:ListProjectMvRecommendations

  • odps:GetProjectMvRecommendation

  • odps:ListMvRecommendations

  • odps:ListMvRecommendationsByProject

  • odps:GetMvRecommendation

  • odps:GetMvRecommendationByProject

  • odps:ListMvRecommendationJobInfo

  • odps:ListMaterializedViewJobInfo

租戶管理>網路連接

網路連接

  • odps:ListNetworkLinks

  • odps:CreateNetworkLink

  • odps:GetNetworkLink

  • odps:RemoveNetworkLink

租戶管理>鏡像管理

自訂鏡像

  • odps:ListImages

  • odps:AddImage

  • odps:GetImage

  • odps:RemoveImage

具體的許可權點說明請參見RAM許可權

為了避免到期控制台功能無法使用,請務必於2024年09月10日(周二)前對需要訪問相關功能模組的RAM使用者添加對應RAM許可權,例如您希望某RAM使用者有Quota對象系統管理權限策略,則需要配置如下RAM權限原則:

{
  "Version": "1",
  "Statement": [
    {
      "Effect": "Allow",
      "Action": [
        "odps:UpdateQuota",
        "odps:UpdateQuotaPlan",
        "odps:UpdateSubQuotas",
        "odps:UpdateQuotaSchedule",
        "odps:CreateQuotaPlan",
        "odps:DeleteQuotaPlan",
        "odps:CreateQuotaSchedule",
        "odps:ListQuotaRoutingRules",
        "odps:CreateQuotaRoutingRule",
        "odps:GetQuotaRoutingRule",
        "odps:RemoveQuotaRoutingRule",
        "odps:UpdateQuotaRoutingRule"         
      ],
      "Resource": "*"
    }
  ]
}

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年08月19日-MaxCompute資源觀測功能更新

尊敬的MaxCompute使用者:

MaxCompute資源觀測新增儲存資源和作業效能觀測部分指標。

  • 儲存資源

    方便您查看儲存資源水位變化及儲存分布詳情。您可以查看所選地區下總儲存用量以及各種儲存類型佔比情況,並根據專案和需要觀測的時間區間去觀測各類儲存的變化趨勢,以及詳細的表或分區儲存資訊。以此判斷是否存在儲存異常激增的情況,及時對儲存用量Top的專案或表/分區進行最佳化。

  • 作業效能觀測新增指標

    • 提供在所選過濾範圍內消耗CPU時/記憶體時最多的前10個作業,共計/平均消耗CPU時/記憶體時最多的前10個Signature、ExtNodeId;

    • 提供在所選過濾範圍內總運行時間長度最長的前10個作業,共計/平均總運行時間長度最長的前10個Signature、ExtNodeld;

    • 支援查看一段時間內的作業掃描量趨勢;

    • 支援查看一段時間內的單位CU時處理的作業掃描量趨勢。

    您可以通過上述指標快速定位資源用量較多、耗時較長的作業,並及時治理。通過對比單位CU時處理的作業掃描量,判斷是否存在效能異常時段,結合作業營運功能定位引發原因,並及時治理。

更多功能介紹和使用說明,請參見資源觀測

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年07月31日-PyTorch演算法服務下線

尊敬的MaxCompute使用者:

因整體系統升級,人工智慧平台PAI將於2024年08月30日正式下線所有叢集中的老版本PyTorch演算法組件,若您有通過PAI命令pai -name pytorch100/pytorch131/pytorch151提交至MaxCompute的PyTorch作業,請注意及時遷移,建議使用PAI-DLC提交PyTorch任務,詳情請參見建立訓練任務。自2024年08月31日起,老版本PyTorch演算法組件的存量任務將不受SLA保障。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年07月18日-部分OpenAPI下線

尊敬的MaxCompute使用者:

MaxCompute將於北京時間2024年07月31日(周三)對MaxCompute中的部分OpenAPI進行下線操作。具體如下:

  • 下線OpenAPI清單及功能替代OpenAPI

    下線OpenAPI版本及名稱

    功能替代OpenAPI版本:名稱

    版本

    OpenAPI名稱

    2019-06-12

    CreateProject

    2022-01-04:CreateProject

    DeleteProject

    暫不提供

    GetProject

    2022-01-04:GetProject

    OpenMaxComputeService

    暫不提供

    2022-01-04

    GetQuota

    2022-01-04:QueryQuota

  • 下線原因

    • MaxCompute 2019-06-12版本提供的OpenAPI,由於已經更換功能提供方式,且經系統長期檢測未發現外部客戶調用,該版本OpenAPI將不再提供服務。

    • 為了提供更加完整的Quota相關資訊,MaxCompute將會對MaxCompute 2022-01-04版本中的GetQuota介面返回內容進行改造,且經系統長期檢測未發現外部客戶調用,此OpenAPI將不再提供服務。

  • 下線影響

    下線後,代碼中涉及到的OpenAPI調用將全部返回InvalidApi.NotFoundInvalidAction.NotFound錯誤碼。

  • 替代方案或執行建議

    如有代碼中依賴這部分OpenAPI SDK(特定Request、Response或相關代碼),在後續升級SDK版本過程中可能會發生依賴無法找到的情況,請進行方法替換或刪除相關功能。如果在代碼中直接依賴此部分OpenAPI,也請進行替換或刪除相關功能。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年07月04日-作業營運提供作業開始已耗用時間、等待時間長度及運行時間長度參數

尊敬的MaxCompute使用者:

MaxCompute在作業營運列表、作業分析概覽頁提供作業開始已耗用時間、等待時間長度及運行時間長度參數,參數說明如下:

  • 開始已耗用時間:作業拿到第一份計算資源的時間。對於已耗用時間過短或不消耗計算資源(如DDL語句)的作業,以作業提交時間替代。

  • 等待時間長度:作業從提交時間到開始已耗用時間的時間長度。

  • 運行時間長度:作業從開始已耗用時間到結束已耗用時間的時間長度。

以上參數在作業營運列表預設隱藏,您可單擊自訂欄表選項設定顯示。 通過以上參數,您可以快速定位作業是否因等待資源耗時過長而導致整體運行較慢,進而結合作業分析判斷具體由於資源供給不足或是存在多作業搶佔資源導致,後續您可以依據具體業務情況最佳化作業執行情況、進行作業優先順序調整或計算資源管理。

更多功能介紹和使用說明,請參見作業營運

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年07月03日-MaxFrame功能發布

尊敬的MaxCompute使用者:

分散式運算架構MaxFrame功能已於北京時間2024年07月03日(周三)華東2(上海)華北2(北京)華北6(烏蘭察布)、華南1(深圳)西南1(成都)地區正式發布,其他地區也將陸續發布。

MaxFrame是由阿里雲自研的分散式運算架構,支援Python編程介面,並能直接利用MaxCompute的計算資源和資料介面,使得Python開發人員可以更加高效、便捷地進行大規模資料處理和AI模型開發。MaxFrame不僅完全相容Pandas介面,且自動實現分散式處理,您能夠以更熟悉、高效的方式利用MaxCompute海量計算資源及資料完成資料處理、可視化探索、科學計算及ML/AI開發工作。

MaxFrame功能介紹和使用說明請參見MaxFrame

您有任何相關問題或需要協助,可以通過您的專屬釘群、MaxFrame官方使用者支援群(DingTalk群號:37130012987)或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年07月01日-計算成本最佳化功能在中國香港、新加坡等4個地區發布

尊敬的MaxCompute使用者:

MaxCompute計算成本最佳化功能在中國香港、新加坡、印尼(雅加達)、德國(法蘭克福)地區發布。 該功能可基於您的實際作業請求量和資源配置期望,對訂用帳戶一級Quota類型的計算資源產生更優的資源配置方案,也支援查看當前使用隨用隨付計算資源的專案調整為使用訂用帳戶計算資源的資源配置推薦方案及效果推演,協助您進一步最佳化計算成本和提高資源利用效率。 此次發布後,共有以下十個地區提供該功能: 華東1(杭州)、華東2(上海)、華北2(北京)、華北3(張家口)、華南1(深圳)、西南1(成都)、中國香港、新加坡、印尼(雅加達)、德國(法蘭克福)。

更多功能介紹和使用說明,請參見計算資源配置最佳化

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年05月17日-MaxCompute Logview安全升級

尊敬的MaxCompute使用者:

MaxCompute計劃於北京時間2024年06月03日(周一)14:00起逐步對西南1(成都)、華北3(張家口)、華南1(深圳)、華北2(北京)、華東2(上海)、華東1(杭州)、華北6(烏蘭察布)地區的Logview進行全面安全升級。安全升級後,使用公用調度資源群組的DataWorks資料開發、資料分析提交的作業產生的Logview連結將跳轉至MaxCompute管理主控台,並且需要使用者同時滿足以下條件,方可訪問作業歸屬專案的Logview:

  • 具備阿里雲帳號:使用者需持有有效阿里雲帳號,並已完成實名認證。

  • 使用者為作業歸屬MaxCompute專案的成員(可由專案系統管理員將其添加至專案中)。

因此,您需要特別注意,當DataWorks工作空間配置的MaxCompute引擎訪問身份與使用者身份不一致時,可能會由於使用者本身未加入作業所歸屬的MaxCompute專案而導致無法訪問自身提交的作業Logview。例如:DataWorks工作空間為標準模式,使用者在開發環境提交作業至生產環境,若使用者本身未加入生產環境的MaxCompute專案,則無法訪問自己提交但歸屬於生產環境專案的作業Logview。

為避免上述情形,請您確保以下兩點:

  • 所有需要訪問Logview的團隊成員均登入阿里雲帳號並完成實名認證。

  • 及時將團隊成員添加為相應的MaxCompute專案成員,並通過授權操作,授予使用者指定對象的指定許可權。

    說明

    更多使用者管理、授權操作,詳情請參見使用者規劃與管理MaxCompute許可權

在升級過程中或升級後,遇到任何Logview訪問、許可權配置等問題或需要支援人員協助,歡迎您通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。 感謝您的配合!

2024年05月13日-MaxCompute ETCD認證升級

尊敬的MaxCompute使用者:

MaxCompute計劃在北京時間2024年05月20日(周一)10:00~16:00升級新加坡地區叢集的ETCD認證進行升級,預計升級過程不會影響您的作業運行,但在極小機率下,若影響了作業並導致執行失敗,請嘗試重新執行。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年05月08日-MaxCompute作業效能觀測功能發布

尊敬的MaxCompute使用者:

MaxCompute作業效能觀測功能將於北京時間2024年05月08日(周三)20:00發布,功能包括支援查看一段時間內的作業數、CU用量以及作業運行時間長度的變化趨勢。

說明

上述指標均支援按時間範圍、專案、Quota進行過濾,按作業類型、運行狀態、專案、Quota進行分組統計。

您可以通過指標確認是否存在作業數量或資源用量異常激增等問題,並及時進行治理。通過對比不同時間的作業運行時間長度,判斷是否存在異常慢作業拉低了整體作業效能。

更多功能介紹和使用說明,請參見作業效能觀測

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年04月30日-MaxCompute儲存服務升級

尊敬的MaxCompute使用者:

MaxCompute將於北京時間2024年05月15日(周三)10:00~16:00對中國香港地區的叢集進行儲存升級(低風險變更)。預計升級過程不會影響您的作業運行,但在極小機率下,若影響了作業並導致執行失敗,請嘗試重新執行。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年04月23日-海外地區MaxCompute專案生命週期變更

尊敬的MaxCompute使用者:

北京時間2024年04月25日(周四)起,在中國香港、日本(東京)、新加坡、馬來西亞(吉隆坡)、印尼(雅加達)、德國(法蘭克福)、英國(倫敦)、美國(矽谷)、美國(維吉尼亞)、阿聯酉(杜拜)或沙特(利雅得)地區新開通隨用隨付標準服務,對應地區所有專案的生命週期都將與隨用隨付標準服務的生命週期保持一致,所有專案的儲存、下載等隨用隨付賬單歸屬的產品明細為MaxCompute(隨用隨付),同時對應的用量明細選擇的計量規格變為MaxCompute(隨用隨付)。對應地區若購買了訂用帳戶資源,僅預付款資源的生命週期與訂用帳戶執行個體的生命週期保持一致。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年04月07日-MaxCompute訂用帳戶產品新折扣生效

尊敬的MaxCompute使用者:

MaxCompute訂用帳戶商品的預付款資源新折扣於2024年4月7日10點(UTC+8)生效,包括標準計算資源、Data Transmission Service等訂用帳戶資源規格。新折扣如下:

一次交易購買時間長度為1年可享8.5折優惠;2年可享7折優惠;3年可享5折優惠。

2024年03月14日-MaxCompute支援將Action Trail事件遷移入倉

尊敬的MaxCompute使用者:

MaxCompute支援通過Action Trail建立跟蹤,將操作事件遷移入倉。

當您需要分析更長時間(超過最近90天)的操作事件時,可以通過Action Trail建立跟蹤,將操作事件投遞至MaxCompute,方便進行查詢和分析。

更多功能介紹和使用說明,請參見Action Trail事件數目據遷移至MaxCompute

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年02月29日-DataWorks獨享資源群組PyODPS節點升級

尊敬的MaxCompute使用者:

DataWorks將於北京時間2024年04月08日(周一)2024年05月30日(周四)期間,逐步升級各個地區的獨享資源群組,以增強PyODPS支援。本次升級的主要內容及各地區具體升級日期請見下表,升級後,節點的PyODPS包版本將保持不變。

升級內容

地區

升級日期

  • 增加DataWorks PyODPS節點的load_resource_package支援。

  • 增加多進程支援。

  • 增加出錯自動提示功能。

西南1(成都)、華北3(張家口)

2024年04月08日~2024年04月11日

華南1(深圳)

2024年04月15日~2024年04月18日

華北2(北京)

2024年04月22日~2024年04月25日

華東2(上海)

2024年05月06日~2024年05月09日

華東1(杭州)

2024年05月13日~2024年05月16日

中國香港、海外地區

2024年05月20日~2024年05月23日

華東1(金融雲)、華東2(金融雲)

2024年05月27日~2024年05月30日

在服務升級期間可能會影響當前正在啟動並執行PyODPS作業,若您遇到獨享資源群組PyODPS作業失敗問題,或其他任何相關問題需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年02月28日-MaxCompute單機宕機演練

尊敬的MaxCompute使用者:

MaxCompute將於北京時間2024年02月28日(周三)15:00~16:00,在中國華北3(張家口)、西南1(成都)地區進行接入服務可靠性演練,預計不會對使用者作業運行產生影響。在極小機率下,若影響了使用者的作業並導致執行失敗,請重新嘗試執行作業。

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!

2024年01月25日-MaxCompute計算成本最佳化功能發布

尊敬的MaxCompute使用者:

MaxCompute計算資源最佳化功能於北京時間2024年01月25日(周四)升級為計算成本最佳化功能。

計算成本最佳化功能在原計算資源最佳化功能(對訂用帳戶一級Quota類型的計算資源產生更優的資源配置方案)的基礎上增加支援查看使用隨用隨付計算資源調整為使用訂用帳戶計算資源的資源配置推薦方案及效果推演,協助您進一步最佳化計算成本和提高資源利用效率。更多功能介紹和使用說明請參見計算資源配置最佳化

您有任何相關問題或需要協助,可以通過您的專屬釘群或MaxCompute開發人員社區群(DingTalk群號:11782920)聯絡我們。

感謝您的配合!