全部产品
Search
文档中心

大数据开发治理平台 DataWorks:独享资源组模式

更新时间:Dec 06, 2024

DataWorks为您提供独享资源组模式,支持购买独享的机器资源组,来分配给工作空间中运行的任务。本文为您介绍如何购买、新增、查看、操作和使用独享资源组。

背景信息

独享资源组模式下,机器的物理资源(网络、磁盘、CPU和内存等)完全独享。独享资源组模式的作用如下:

  • 支持隔离不同用户间的资源使用。

  • 支持隔离不同工作空间任务的资源使用。

  • 支持扩容、缩容功能,可以满足资源独享、灵活配置等需求。

说明

公共资源组租户共享,每天0点~9点是DataWorks所有租户的任务高峰期,如果工作空间下该时间段执行的任务数较多,建议您使用独享资源组。独享资源组的使用详情可参考文档:新增和使用独享调度资源组新增和使用独享数据集成资源组新增和使用独享数据服务资源组

拥有AliyunBSSOrderAccess权限的RAM用户可以购买资源,并对资源执行相关操作。

购买独享资源组

DataWorks独享资源组采用包年包月的方式购买,您可以通过产品详情页创建独享资源组两个入口进行购买:

  • 产品详情页入口

  • 新增独享资源组入口

    1. 登录DataWorks控制台,切换至目标地域后,单击左侧导航栏的资源组,进入资源组列表页面。

    2. 单击创建旧版调度资源组创建旧版集成资源组,进入购买页面。

进入购买页面后,请根据实际需要,选择相应的地域和可用区、独享资源类型资源数量计费周期,单击立即购买

说明

独享资源组不支持跨地域使用。例如,华东2(上海)地域的独享资源组,只能给华东2(上海)地域的工作空间使用。

查看独享资源组

完成独享资源组的创建后,您可以在独享资源组列表中查看到期时间资源数资源使用率等基本信息:

  • 到期时间:到期时间与独享资源组购买订单中选定的时间相关联,即独享资源组的有效期:

    • 您可以在到期前进行续费。如果到期后未续费,状态会变为过期,独享资源组不能被新任务使用。

    • 您可以在7天内激活已过期的独享资源组。如果超过7天仍未激活,独享资源组会被释放。

  • 数量:表示购买的资源个数。

  • 使用率:资源的使用情况(负载),用百分比表示。

操作独享资源组

完成独享资源组的创建后,您可以在独享资源列表中进行扩容缩容续费网络设置修改归属工作空间等操作:

  • 扩容

    如果独享资源组使用率过高,不能满足实际需求,请单击相应资源后的扩容,增加资源数量。

  • 缩容

    当资源出现闲置不使用的情况,请单击相应资源后的缩容,调小资源数量。

  • 续费

    单击相应资源后的续费,即可延长该独享资源组的到期时间。

  • 网络设置

    独享资源组部署在DataWorks托管的专有网络(VPC)中,如果需要与您自己的专有网络连通,需要进行专有网络绑定操作。

    1. 单击相应资源后的网络设置,即可进入专有网络绑定页面。

      绑定前,请首先进行RAM授权,让DataWorks拥有访问您的云资源的权限。

    2. 授权完成后,单击新增绑定

    3. 新增专有网络绑定对话框中,配置各项参数。

      image

      重要

      独享资源组需要绑定数据库所在的vpc,或者与数据库网络连通的vpc。

      如果做过网络打通,即存在数据库和DataWorks不在同一个region、数据库和DataWorks不在同一个阿里云账号、数据库在本地IDC环境下等需要网络打通的情况,请为独享绑定数据库已经打通的VPC,请参见新增和使用独享数据集成资源组,再在绑定专有网络处添加自定义路由。详情请参见通用参考:添加路由

    绑定成功后,如果信息发生变化,请单击相应资源后的解除绑定,并重新进行绑定。

  • 修改归属工作空间

    独享资源组需要绑定归属的工作空间,才可以被任务真正使用。一个独享资源组可以分配给多个工作空间使用。

  • 变更规格

    如果独享资源组规格不能满足您的需求,请单击相应资源后的变更规格,在弹出的资源组变更对话框中更改资源组规格。资源组规格详情请参见性能指标性能指标变更规格

    说明

    变更资源组规格,会置换资源组的机器资源,支付完成后,如果该资源组有正在运行的任务实例,停止任务界面下会显示任务列表,单击任务实例右侧操作列的去停止先停止任务,或者等待任务运行结束后执行变配,否则无法完成资源组的规格变更。

使用独享资源组

独享资源组绑定至工作空间后,您可以在工作空间中,分配任务至特定的独享资源组上使用。

独享资源组包括独享调度资源组独享数据集成资源组

  • 独享调度资源组

    1. 进入数据开发页面。

      登录DataWorks控制台,切换至目标地域后,单击左侧导航栏的数据开发与治理 > 数据开发,在下拉框中选择对应工作空间后单击进入数据开发

    2. 数据开发页面,双击打开相应节点的编辑页面。

    3. 单击右侧的调度配置

    4. 资源属性区域的调度资源组下拉列表中,选择相应的资源组image

  • 独享数据集成资源组

    独享数据集成资源组创建成功后,您需要在配置数据集成任务时修改任务运行资源。

    1. 资源组 > 独享资源组页面,单击相应资源后的绑定工作空间,绑定独享数据集成资源组归属的工作空间。

    2. 在数据集成任务的编辑页面,通过调度运行及界面测试,选择运行时执行数据集成离线同步任务的资源组:

      1. 单击左上角的全部图标,选择全部产品 > 数据开发与运维 > DataStudio(数据开发),并切换至修改的归属工作空间。

      2. 数据开发面板,双击打开相应节点的编辑页面。

      3. 单击上一步,进入网络与资源配置页面,在我的资源组模块选择已创建并与工作空间绑定的资源组。

        image

      4. 在节点的编辑页面,单击工具栏中的保存图标。