设计概述 介绍 对云用户而言，在上云、用云、管云过程中持续维持良好的云上架构变得极具挑战，而通过产品和技术构建阿里云和企业分支上云网络往往是企业上云的第一步。本文档主要目的在IPsec-VPN构建分支上云网络场景，给用户分享阿里云上...
通过IPSec-VPN网关连通专有网络VPC 模板ID MXQCLVXC1E3J9GOZ 地址：https://bpstudio.console.aliyun.com/bpStudio/topo?TemplateId=MXQCLVXC1E3J9GOZ 支持地域 杭州、北京、上海、深圳、广州、呼和浩特、乌兰察布、青岛、张家口 模板架构 ...
数据湖构建是一款全托管的统一元数据和数据存储及管理平台，旨在为客户提供元数据管理、权限管理和存储优化等功能。DLF与多个阿里云大数据计算引擎无缝对接，打破数据孤岛，帮助用户迅速实现云原生数据湖及OpenLake解决方案的构建与管理。...
阿里云数据资源平台是构建数据智能的全流程平台，提供数据汇聚、规范设计、指标与标签体系构建、数据质量管控、数据资产管理、数据资产服务与共享、智能分析等核心功能，支持行业知识内容沉淀，帮助金融、政府及企业客户快速构建智能数据中...
本文为您介绍数据湖构建的常见问题。如何申请数据湖构建产品的公测资格？数据湖构建如何收费？数据湖构建与OSS有什么区别？什么情况下我需要使用数据湖构建？如何申请数据湖构建产品的公测资格？请使用阿里云 主账号 进行公测资格申请（请...
阿里云数据湖构建（Data Lake Formation，简称 DLF）是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务，为客户提供了统一的元数据管理、统一的权限与安全管理以及一键式数据探索能力。DLF可以帮助用户快速完成云原生数据湖及...
阿里云数据湖构建（Data Lake Formation，简称DLF）是一款全托管的统一元数据和数据存储及管理平台，为客户提供元数据管理、存储管理、权限管理、存储分析和存储优化等功能。DLF与多个阿里云大数据计算引擎无缝对接，打破数据孤岛，帮助...
数据湖构建的数据表是实现实时离线一体化的核心。本文深度解析了内部表与外部表的本质区别、选型要点及其全生命周期管理，为构建高性能、易维护的现代数据湖奠定基础。
数据湖构建 DLF 服务等级协议（SLA）的详情，请参见 数据湖构建DLF服务等级协议。
阿里云数据湖构建（Data Lake Formation，简称DLF）是一款全托管的统一元数据和数据存储及管理平台，为客户提供元数据管理、权限管理和存储优化等功能。DLF与多个阿里云大数据计算引擎无缝对接，打破数据孤岛，帮助用户快速实现云原生数据...
此外，请按需开通对应地域的数据湖构建服务，即可顺利使用DLF功能。云资源访问授权 通常情况下，首次使用DLF时，您需要完成自动化授权操作，确保DLF能够正常访问相关云资源。登录 数据湖构建控制台。在 云资源访问授权 右侧，单击 授权。在...
DLF介绍 数据湖构建（Data Lake Formation，DLF）是一款全托管的统一元数据和数据存储及管理平台，提供企业级安全能力的同时保持开放和开源社区兼容，面向全模态数据存储及管理，集成湖存储格式 Apache Paimon、Apache Iceberg、Lance ...
本文为您介绍如何管理数据湖构建中的角色。重要 子账号需要具备admin（数据湖管理员）或 super_administrator（超级管理员）的权限，才可以进行角色相关操作。查看角色列表 登录 数据湖构建控制台。在左侧菜单栏，单击 数据权限 角色，可以...
自2021年1月起，数据湖构建（DLF）服务等级协议（SLA）生效。详细内容参考 数据湖构建服务等级协议。
元数据检索是指通过构建一个高效且全面的索引系统，实现对数据湖中数据目录、数据库、表结构等信息进行快速定位与查询的过程。本文为您介绍在数据湖构建中如何进行元数据检索。操作步骤 登录 数据湖构建控制台。在左侧菜单栏，单击 元数据 ...
本文为您介绍使用数据湖构建OpenAPI的基本信息及注意事项。说明 关于如何使用阿里云OpenAPI，请参见学习文档：使用OpenAPI。基本信息 版本说明 版本号 说明 2020-07-10 推荐 接入点说明 参见 服务接入点。用户身份 用户身份 支持情况 阿里...
本文为您介绍如何快速使用 数据-湖构建（Data Lake Formation，DLF）。前提条件 数据湖构建采用OSS作为统一数据湖位置，您需要注册一个OSS的Bucket或指定OSS路径作为数据湖位置。详情请参见 创建存储空间。控制台概览 数据湖构建控制台 ...
阿里云数据湖构建（DLF）免费公测已于 2025 年 8 月 5 日 正式开启，面向所有用户开放。如何参与公测 您可 登录 数据湖构建控制台 开通服务，开通后即可立即使用。公测限制 存储上限：每个 DLF Catalog 的存储容量上限为 200 GB。达到上限...
您在使用数据湖构建（Data Lake Formation，简称DLF）控制台和接口时，产品做了如下限制，请在使用时注意不要超过相应的限制值，以免出现异常。数据湖元数据 限制项 用户配额 单表QPS 500 单表分区数量 100万 数据湖入湖预处理作业 限制项 ...
您在使用数据湖构建（Data Lake Formation，简称DLF）控制台和接口时，产品做了如下限制，请在使用时注意不要超过相应的限制值，以免出现异常。元数据管理 限制项 用户配额 单表QPS 500 单表分区数量 100万 用户管理 限制项 用户配额 一个...
本文为您介绍如何管理数据湖构建中已添加的用户。查看用户列表 登录 数据湖构建控制台。在左侧菜单栏，单击 数据权限 用户，可以查看当前账号下的所有RAM用户信息。说明 用户管理功能仅适用于RAM用户或角色。系统会自动添加当前账号下的...
对接方式 为了满足不同引擎和用户在访问数据时的灵活性需求，DLF 提供了以下三种标准化的对接方式：Paimon REST：面向基于 Apache Paimon 构建的计算引擎，提供符合 Paimon 社区规范的 RESTful 元数据服务接口，支持表结构管理、快照查询等...
新增授权 打开 数据湖构建控制台，并以数据湖管理员身份或已有授权权限的用户身份登录。在左侧菜单栏，单击 数据权限 数据授权。单击 新增授权，打开新增授权页面。指定 授权主体。主体类型：可以选择RAM用户/角色或DLF角色。RAM用户/角色...
阿里云 DLF 即将开启商业化运营 阿里云数据湖构建（DLF）服务将于 2025 年 11 月下旬正式开启商业化运营。届时，DLF 将启动计费机制，并同步提供服务等级协议（SLA）保障。计费说明 商业化启动后，DLF 相关功能将按标准计费。详细费用信息...
本文主要介绍数据湖构建（DLF）的权限体系，重点阐述如何为RAM用户（子账号）授予适当权限，以确保其能够正确使用和访问DLF的各项功能。数据湖构建（DLF）的权限体系分为API权限与DLF数据权限两类。如果您要访问DLF的页面或数据，通常都...
本文为您介绍数据湖构建中数据库的基本操作。说明 如果已经在其他平台上（如EMR、Flink等）关联了Catalog，也可在这些平台上创建数据库和表，元数据将会直接写入DLF中。详情请参见 引擎对接。新建数据库 登录 数据湖构建控制台。在 数据...
介绍DLF的邀测说明。免费邀测时间说明 DLF免费邀测已于2025年04月17日开启。邀测阶段面向所有用户开放，您可以填写 问卷 申请试用。申请通过后，即可使用。免费邀测限制 邀测期间，有以下限制：DLF Catalog的...什么是数据湖构建 快速使用DLF
本文为您介绍数据湖构建中Lance数据表的基本操作。新建数据表 登录 数据湖构建控制台。在 数据目录 列表页面，单击Catalog名称，进入Catalog详情页。在 数据库 列表中，单击数据库名称，进入表列表页。在 表列表 中，单击 新建数据表。配置...
本文为您介绍数据湖构建中Object数据表的基本操作。新建数据表 登录 数据湖构建控制台。在 数据目录 列表页面，单击Catalog名称，进入Catalog详情页。在 数据库 列表中，单击数据库名称，进入表列表页。在 表列表 中，单击 新建数据表。...
MaxCompute+DLF湖仓一体方案打破数据湖与数据仓库割裂的体系，架构上将数据湖的灵活性、生态丰富与数据仓库的企业级能力进行融合，构建数据湖和数据仓库融合的数据管理平台。本文介绍湖仓一体的具体方案。背景信息 大数据计算服务...
创建数据集 登录 数据湖构建控制台。单击左侧导航栏 数据目录。点击 数据共享 我接收的，找到名为dlf_samples的数据共享，并 创建Catalog。单击 Catalogs 页签，可以看到创建后的Catalog。查询数据集 数据共享目录提供了多种规格的 TPC-DS ...
本文为您介绍在数据湖构建中如何快速配置权限。配置API权限 您可以使用以下三种方式获取API的授权。联系阿里云账号（主账号）或RAM管理员，为您添加AliyunDLFFullAccess，您即可具备所有DLF API的调用权限。联系阿里云账号（主账号）或RAM...
企业构建和应用数据湖一般需要经历数据入湖、数据湖存储与管理、数据湖探索与分析等几个过程。本文主要介绍基于阿里云数据湖构建（DLF）构建一站式的数据入湖与分析实战。背景信息 随着数据时代的不断发展，数据量爆发式增长，数据形式也变...
操作步骤 开启权限 登录 数据湖构建控制台。在左侧菜单栏，单击 数据权限 权限设置。当目标数据目录的权限控制处于关闭状态时，单击 是否开启权限控制 列的，在弹出的确认框中，单击 确定，完成权限开启。说明 权限开启后，访问元数据和...
查看资源概览 登录 数据湖构建控制台。在 Catalog 列表页面，单击目标Catalog名称，查看数据目录详细信息。单击 资源概览 页签，您可查看当前数据目录的指标监测，包括计费指标和限额指标监控。计费指标 指标数据由离线作业T+1产生，您可...
本文为您介绍数据湖构建中Iceberg数据表的基本操作。表类型介绍 特性 采用湖格式Iceberg表,遵循 Apache Iceberg 的开放API规范，推荐使用 Apache Iceberg Client 读写。数据管理 数据由DLF完全管理，包括元数据和实际数据文件。删除表时，...
获取数据湖构建指定地域的服务开通状态。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的...
用户管理 查看用户列表 登录 数据湖构建控制台。在左侧导航栏，单击 系统和安全。在 访问控制 页签中的 用户 页签，单击 同步，系统会自动添加当前账号下的所有RAM用户/角色，被统一管理为DLF用户。说明 如果某 RAM 用户或角色被删除，其在...
感谢您一直以来对阿里云数据湖构建（DLF）产品的支持与信任。为了能够更好地集中资源提升服务质量及用户体验，自2023年2月15日起，我们停止更新DLF产品的“数据入湖”功能。DLF产品的 其他功能正常使用，不会受到任何影响。停止更新详情 ...
元数据迁移提供可视化的元数据迁移能力，可以帮您快速地将Hive Metastore的元数据迁移到数据湖构建（DLF）中。使用限制 支持的Hive版本：2.3.x，3.1.x 版本。支持的数据库类型：MySQL。创建元数据迁移任务 登录 数据湖构建控制台。在左侧...