本篇最佳实践先创建EMR集群作为数据湖对象,Hive元数据存储在DLF,外表数据存储在OSS。然后使用阿里云数据仓库MaxCompute以创建外部项目的方式与存储在DLF的元数据库映射打通,实现元数据统一。最后通过一个毒蘑菇的训练和预测demo,演示云数仓MaxCompute如何对于存储在EMR数据湖的数据进行加工处理以达到业务预期。
业务架构基于湖仓一体架构使用MaxCompute对OSS湖数据分析预测 最佳实践概述 方案架构 方案优势 兼顾数据湖的灵活性和云数据仓库的成长性 MaxCompute与EMR集群通过PrivateAccess网络连通,低延迟高带宽。数据湖中的Hive元数据映射为MaxCompute的外部项目,元数据由DLF统一管理,无需人 工干预。基于DataWorks强大的数据开发/...