场景描述 自建数据湖与云数仓的融合解决方案,将 MaxCompute与自建的Hive集群做数据打 通,通过存储共享,元数据镜像等方式,解 决传统模式下的存储冗余,计算资源弹性能 力弱的痛点。可大幅度增强系统的资源弹 性,解决业务高峰期计算资源不足的问题。 方案优势 1.业务无侵入性:现有业务无需改造。 2.性能优化:MaxCompute在SQL上做 了大量优化与能力沉淀,可提高SQL 运行性能,降低计算成本。 3.灵活管理:元数据实时同步,无需额外 管理数据同步任务。 4.资源弹性:利用MaxCompute计算池 弹性进行海量数据计算。 解决问题 1.增强业务高峰期的资源弹性。 2.优化自建数据湖的数据治理能力。 3.减少跨平台数据处理的存储冗余。 产品列表 专有网络VPC 云服务器ECS 访问控制RAM 运维编排OOS MaxCompute(原ODPS) 云企业网CEN
V1.4 版本日期 2022-04-02 文档状态 外部发布 制作人 厉博 审阅人 七凌 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2020-09-22 启浪 明中,七凌 创建 用 EMR模拟自建 Hadoop,V1.1 2020-12-18 毕役 使用 CADT 创建阿里云资 源 V1.2 2021-02-19 毕役 修改第三章节 V1.3 2021-06-28 毕役 删掉 set设置 V1.4 2022-04-...