全部产品
Search
文档中心

云原生大数据计算服务 MaxCompute:同城容灾

更新时间:Nov 20, 2024

MaxCompute同城容灾用于应对运营商网络故障、IDC停电、机房设施故障、集群故障等场景。通过开启多AZ存储容灾和多AZ计算高可用,可有效降低业务停机时间,满足业务保障需求和行业合规要求。

功能介绍

重要

若需要使用此功能,请单击申请开通,在新功能试用申请页面申请开通存储容灾。新功能试用申请详情,请参见新功能试用申请

MaxCompute同城容灾支持将数据存储服务和计算服务的可用性从单一可用区(Availability Zone)扩展到同城三个可用区,并利用同城三个可用区之间的物理隔离特性与低延迟的网络连接,提供了跨数据中心的数据实时同步和故障隔离能力,确保业务系统不会因单一数据中心故障而中断服务,从而增强客户业务的抗风险能力。

MaxCompute同城容灾包含多AZ存储容灾和多AZ计算高可用,详情介绍如下:

  • 多AZ存储容灾:是以项目(Project)为单位开启,支持将存量数据从单一可用区本地存储转换为三个可用区冗余存储,增量数据直接同步写入到三个可用区。当遇到AZ级故障时,存储容灾可以保障数据读取和写入服务不中断,数据不丢,满足数据恢复点目标RPO=0的需求。

  • 多AZ计算高可用:将多AZ高可用计算资源与开启数据存储容灾的项目绑定,实现数据存储和计算的整体同城容灾能力。您可以在多个AZ中预留充足的多AZ高可用计算资源,当遇到AZ级故障时,计算资源会自动从故障AZ切换到可正常提供服务的AZ。

image

灾难恢复指引

实现同城容灾功能后当发生AZ级故障时,将会进行以下恢复操作:

  1. 您会收到阿里云MaxCompute关于故障情况的通知。

  2. 服务端会立即在可正常提供服务的AZ调配计算资源,系统自检项目中表、分区、权限等数据的完整性和可用性。

  3. 客户端已提交的作业会出现运行失败的情况,需要您重新提交作业,访问MaxCompute的配置无需修改,如Endpoint、认证信息、project_name、quota_name等。

  4. 作业恢复运行后,您需继续关注上层业务运行情况,确保业务已经整体恢复正常。

应用场景

  • 金融行业

    保障银行的金融服务可以不间断的分析和处理业务交易数据,并避免因数据中心的故障而导致服务中断。

  • 关键基础设施

    保障电力、水务以及交通等数据分析系统,确保因数据中心故障而导致的社会民生依赖的关键信息服务不发生中断。

客户价值

  • 数据冗余备份。

  • 降低业务停机时间。

  • 满足行业合规要求。

  • 提供更好的上层业务客户体验。

使用限制

  • 仅华南1(深圳)、华东 2 金融云、中国香港地域支持同城容灾。

  • 仅项目中元数据、用户权限、Package授权、普通表以及Delta Table支持存储容灾,资源(Resource)暂不支持存储容灾。

计费说明

image

使用说明

您需要开启多AZ存储容灾和多AZ计算高可用能力,才能实现存储和计算的整体同城容灾能力。

开启多AZ存储容灾

  1. 登录MaxCompute控制台,在左上角选择地域。

  2. 在左侧导航栏,选择灾备管理 > 同城容灾

  3. 同城容灾页面,单击新增同城容灾

  4. 在弹出的对话框中,选择需要进行存储容灾的MaxCompute项目并勾选复选框。

  5. 单击确定

    创建完成后,该项目数据将开始进行存储容灾准备,即将单可用区(AZ)数据迁移至三可用区(3AZ)存储。数据准备过程预计需要两天,完成后项目将具备存储容灾能力。

    说明
    • 在存储容灾准备的过程中,作业运行不受影响,业务保持无感知状态。

    • 在存储容灾准备的过程中,历史表分区数据正在进行流式写入时,存储容灾数据准备任务将等待至写入提交后才启动。建议客户定期(每天、每周)切换至新分区进行数据写入,以确保所有表和分区完成存储容灾转换。

    • 开启存储容灾前产生的本地备份数据、TimeTravel数据留在原可用区中本地存储;开启存储容灾后产生的本地备份数据、TimeTravel数据会分布在三个可用区中冗余存储。

开启多AZ计算高可用

开启多AZ计算高可用能力,需要购买多AZ高可用计算资源并将目标项目的默认计算Quota配置为多AZ高可用计算资源。

  1. 登录MaxCompute控制台,在左上角选择地域。

  2. 在左侧导航栏,选择工作区 > 配额(Quota)管理

  3. Quota管理页面,单击新购Quota

  4. 在资源购买页面,配置购买参数,其中关键参数介绍如下。

    参数名称

    说明

    规格类型

    选择多AZ高可用计算资源

    多AZ高可用计算资源单元

    选择您要购买的CU数。

    说明

    目前是50 CU起售,增量购买需要是1的整数倍。

  5. 单击立即购买,根据界面提示勾选服务协议并支付费用,完成购买。

    购买成功后,您可以在Quota管理页面,查看已创建的多AZ高可用计算资源

  6. 将目标项目的默认计算Quota配置为多AZ高可用计算资源。

    1. 选择工作区 > 项目管理

    2. 单击目标项目操作列中的管理

    3. 参数配置页签,单击基础信息后的编辑

    4. 默认计算Quota配置为多AZ高可用计算资源,然后单击提交

其他操作

取消容灾

如果需要取消容灾,您可以在同城容灾页面,单击目标项目操作列中的取消容灾,按照提示输入项目名称再单击确定

重要
  • 取消容灾后项目数据重新分布到单可用区本地存储。

  • 取消容灾属于高危操作,取消容灾后项目将立刻失去容灾能力,请谨慎评估。