您可以先购买MaxCompute资源配额,然后从PAI进行模型开发,再提交至MaxCompute进行大规模分布式训练。本文为您介绍用于PAI的模型训练的MaxCompute资源的要求和配置要点。
MaxCompute资源
MaxCompute是适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化运维投入,使您可以经济并高效地分析处理海量数据。有关MaxCompute资源的详细介绍,请参见MaxCompute资源概述。
MaxCompute资源类型与对比选择
在PAI产品中支持使用的MaxCompute资源为CPU资源,和在MaxCompute产品中使用一样,支持以下两种付费方式:
按量付费标准版(推荐使用)
包年包月标准计算资源
各类型的主要区别如下。
MaxCompute的所有计费项包含计算资源费用、存储资源费用、上传/下载资源费用三部分。在PAI的训练任务使用场景下通常不涉及上传/下载资源。
使用按量付费后,在计算资源费用中,算法任务的账单出现在PAI产品下,其他任务(例如:SQL类任务)的账单出现在MaxCompute产品下。
对比项 | 按量计费标准版(推荐使用) | 包年包月标准计算资源 |
计算资源 (用于任务训练计算) | 资源池为共享型,计算作业按需抢占资源,不可指定用量也无使用限制。 | 包含预留计算资源(独享资源)和非预留计算资源(非必选资源)。 |
存储资源 (用于存储训练结果表) | 资源池为共享型,按需存储,无使用限制。 | 资源池为共享型,按需存储,无使用限制。 |
计费规则-计算资源 | ||
计费规则-存储资源 | 无 | |
适用场景 | 作业量不稳定,且需要灵活存储空间的项目。 | 已上线、可平稳运行的项目。 |
操作账号和权限要求
开通购买MaxCompute资源
您可前往,MaxCompute通用购买页面根据需要开通购买对应的MaxCompute资源。
使用与管理MaxCompute资源
已开通购买的MaxCompute资源可关联到某个工作空间中,便于工作空间内的任务使用。您也可以在MaxCompute的资源管理页面中将资源进一步规划管理。
绑定工作空间
管理MaxCompute资源
登录PAI控制台,在 页面查看当前地域可用的MaxCompute资源概况。
您可以查看当前MaxCompute资源的计算资源CU的配额情况,以及资源类型是预付费(包年包月类型)还是后付费(按量付费类型)。
您可以选择使用按量付费Quota,也可以选择包年包月Quota,包年包月Quota支持通过控制CU量来控制预算,而按量付费Quota不可自行控制CU量。单击资源管理进入MaxCompute页面,您可以对预付费(包年包月类型)的资源进行进一步的配额规划设置,操作详情请参见计算资源-Quota管理。