数据地图是在元数据基础上提供的企业数据目录管理模块,涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。版本限制 仅DataWorks标准版及以上版本支持代码搜索、...
数据服务 数据地图 DataWorks的数据地图是在元数据基础上提供的企业数据目录管理模块,涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。数据地图概述 前提条件...
数据建模 数据建模 随着业务的快速发展,企业数据呈几何倍增长,数据量庞大、复杂、各类数据间标准不一致,往往会出现数据难以管理的现象。DataWorks数据建模 服务,将无序、杂乱、繁琐、庞大且难以管理的数据,进行结构化、有序的管理。使...
如果 AnalyticDB for MySQL 2.0集群的Meta表存有导入数据到MaxCompute的记录,可以将MaxCompute数据导入到 企业版 的外部数据目录。执行以下命令创建部数据目录:CREATE EXTERNAL CATALOG catalog_name properties('connector.name'='mysql...
数据地图是阿里云DataWorks的核心数据治理功能。本文深度解析其核心功能、数据血缘、应用场景与治理实践,助您构建企业级数据资产目录,全面释放数据价值。
不支持 认证身份与鉴权说明 数据目录是否能够正常读取数据源下的数据信息,取决于数据源添加至数据目录的方式,具体规则如下:从工作空间绑定的数据源实例添加到数据目录时,该数据目录将使用 数据源配置的身份信息 从数据源读取数据至...
名称 类型 描述 示例值 object 数据目录详情。Description string 数据目录描述。init default catalog Name string 数据目录名称。hive Location string 数据目录存储路径。oss:/xxxx
名称 类型 描述 示例值 object 数据目录详情。Description string 数据目录描述。init default catalog Name string 数据目录名称。hive Location string 数据目录存储路径。oss:/xxxx
数据目录提供统一界面,方便管理和操作 云原生数据仓库 AnalyticDB MySQL 版(简称AnalyticDB MySQL)元数据。本文将为您介绍如何在数据目录中创建和管理表数据对象。进入 AnalyticDB MySQL 数据目录页面 进入 DataWorks工作空间列表页,在...
数据目录提供统一界面,方便管理和操作AI Catalog元数据。本文将为您介绍如何在数据目录中管理AI Catalog数据集和模型元数据。进入 AI Catalog 数据目录页面 进入 DataWorks工作空间列表页,在顶部切换至目标地域,找到已创建的工作空间,...
数据目录是数据湖构建(Data Lake Formation)或 Hive Metastore(HMS)的元数据最上层实体,可以包含若干个数据库。在EMR Serverless Spark中,您可以通过该功能来查看绑定的数据目录中的数据库和表,还可以添加已有的数据目录。该功能适用...
数据目录提供统一界面,方便管理和操作云原生数据仓库AnalyticDB PostgreSQL版(简称AnalyticDB PostgreSQL)实例元数据。本文将为您介绍如何在数据目录中创建和管理表数据对象。进入 AnalyticDB PostgreSQL 数据目录页面 进入 DataWorks...
数据目录提供统一界面,方便管理和操作Hive元数据。本文将为您介绍如何在数据目录中创建和管理表数据对象。进入 Hive 数据目录页面 进入 DataWorks工作空间列表页,在顶部切换至目标地域,找到已创建的工作空间,单击 操作 列的 快速进入 ...
数据目录是您在数据分析时统一的元数据工作台。它整合了MaxCompute、Hologres、DLF等多种数据源的元数据,让您无需离开DataWorks即可完成建表、视图管理等所有准备工作,从而专注核心分析。功能入口 登录 DataWorks数据分析,切换至目标...
数据目录提供统一界面,方便管理和操作DLF Catalog元数据。本文将为您介绍如何在数据目录中创建和管理数据库表元数据。进入 DLF Catalog 数据目录页面 进入 DataWorks工作空间列表页,在顶部切换至目标地域,找到已创建的工作空间,单击 ...
说明 单个工作空间不支持同时添加多个版本的DLF数据目录,如果您当前工作空间已经添加了DLF-Legacy数据目录,使用DLF数据目录时可以重新创建工作空间,或先移除DLF-Legacy数据目录再重新添加DLF数据目录,移除前请确保当前工作空间内没有线...
平台侧 功能分类 功能更新说明 相关文档 数据目录 支持同时添加多个 DLF(之前称为DLF 2.5)数据目录,以便进行联邦查询。在添加DLF数据目录之前,请确保移除所有DLF 1.0的数据目录。管理数据目录 Livy Gateway 默认适配DLF,通过Livy提交...
数据目录(Catalog)是数据湖构建(Data Lake Formation)的元数据最上层实体,它可以包含多个数据库。本文为您介绍数据目录(Catalog)的基本操作。适用场景 主要适用于元数据隔离的场景,比如多个E-MapReduce集群,每个集群绑定不同的...
配置项 描述 所属数据目录 选择所属数据目录。数据库名称 输入数据库名称。数据库描述 可选,输入数据库描述。选择路径 指定OSS路径,将元数据存储在对象存储服务中,以确保数据的安全性和可靠性,便于统一管理和维护。说明 仅支持标准存储...
在企业知识库的 目录 列表中,单击 编辑 图标或 新建目录 按钮。在 知识库目录管理 面板,您可以对目录执行新建、移动、编辑、删除操作。操作项 描述 新增 单击 添加一级目录 按钮,填写目录的名称。同一目录下的同级目录不支持重名。不...
数据目录提供统一界面,方便管理和操作StarRocks元数据。本文将为您介绍如何在数据目录中创建和管理表、视图等数据对象。进入 StarRocks 数据目录页面 进入 DataWorks工作空间列表页,在顶部切换至目标地域,找到已创建的工作空间,单击 ...
DropCatalog 删除数据湖数据目录 删除数据湖数据目录 ListCatalogs 获取数据目录列表 查看数据目录列表。GetCatalogToken 获取数据目录的临时访问凭证 获取数据湖Catalog的临时访问凭证。数据库 API 标题 API概述 GetDatabase 获取数据库...
名称 类型 描述 示例值 object 鉴权资源结构:数据目录。CatalogId string 数据目录 ID。1344371
数据目录提供统一界面,方便管理和操作Hologres元数据。本文将为您介绍如何在数据目录中创建和管理表、视图等数据对象。进入 Hologres 数据目录页面 进入 DataWorks工作空间列表页,在顶部切换至目标地域,找到已创建的工作空间,单击 操作...
在企业知识库的 目录 列表中,单击 编辑 图标或 新建目录 按钮。在 知识库目录管理 面板,您可以对目录执行新建、移动、编辑、删除操作。操作项 描述 新增 单击 添加一级目录 按钮,填写目录的名称。同一目录下的同级目录不支持重名。不...
产品系列 文档 DLF(推荐)数据目录 数据库 数据表 用户管理 角色管理 授权管理 DLF-Legacy 数据目录 数据库表及函数 数据表-数据概况 元数据抽取 元数据迁移 元数据导出 用户管理 角色管理 权限设置 存储概览 湖格式管理
单击 数据目录 页签,单击 新建数据目录。在输入框中输入以下内容,单击 确定。目录ID:必选,唯一标识,不可重名。描述:可选,输入描述信息。目录路径:可选,输入默认的存储路径,目前仅支持OSS路径。更多关于数据目录的操作,请参见 ...
企业数据云平台Cloudera Data Platform(简称阿里云CDP),是阿里云和Cloudera联合打造阿里云上的大数据平台。
说明 单个工作空间不支持同时添加多个版本的DLF数据目录,如果您当前工作空间已经添加了DLF-Legacy数据目录,使用DLF数据目录时可以重新创建工作空间,或先移除DLF-Legacy数据目录再重新添加DLF数据目录,移除前请确保当前工作空间内没有线...
您可以通过新建数据目录,对数据进行分类管理。本文介绍如何新建数据目录。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。在左侧导航栏,单击 图标,...
本文为您介绍如何查看数据目录、数据库和数据表的存储概览。存储大小说明 分区列表中显示的存储大小:仅统计最新快照中该分区引用的有效数据文件。这些是当前可查询、未被清理的活跃文件。存储概览中显示的存储大小:未过期的历史快照数据 ...
名称 类型 描述 示例值 object 数据目录。owner string Owner。acs:ram:[accountId]:root createdAt integer 创建时间。1744970111419 updatedBy string 最近修改人。acs:ram:[accountId]:root createdBy string 创建人。acs:ram:...
名称 类型 描述 示例值 object 数据目录信息。CatalogId string 数据目录 ID。1344371 Description string 描述。测试 LocationUri string 目录路径。oss:/dlf-test-oss-location/Owner string 负责人:Principal 格式。acs:ram:[accountId...
元数据检索是指通过构建一个高效且全面的索引系统,实现对数据湖中数据目录、数据库、表结构等信息进行快速定位与查询的过程。本文为您介绍在数据湖构建中如何进行元数据检索。操作步骤 登录 数据湖构建控制台。在左侧菜单栏,单击 元数据 ...
如果因为磁盘空间或者磁盘性能等问题,希望更改ZooKeeper的数据目录,您可以按照以下步骤逐个节点修改并迁移数据目录,实现不停止ZooKeeper服务的平滑迁移。说明 例如,将数据目录从/mnt/disk1/zookeeper/data 更改为/mnt/disk2/zookeeper/...
DLF数据目录 从下拉列表中选择已创建的DLF数据目录。如需创建 DLF 数据目录,您可前往 DLF 控制台 创建。数据类型 选择Paimon或Iceberg。Paimon:高性能数据湖场景 Iceberg:大规模数据分析场景 用户信息 系统自动显示当前用户和关联的RAM...
提供数据目录、用户和角色、权限等能力。提供数据目录内的数据库和数据表的查询与管理。提供存储概览查询,支持统计分析、元数据及存储信息的查询,为数据治理与优化提供方向指引。元数据API:Paimon REST API,仅支持VPC内访问,禁止公网...
在 Catalog 列表页面,单击目标Catalog名称,查看数据目录详细信息。单击 资源概览 页签,您可查看当前数据目录的指标监测,包括计费指标和限额指标监控。计费指标 指标数据由离线作业T+1产生,您可查看当前数据目录下计费项对应的资源用量...
已有可绑定的DLF数据目录:单击 添加数据目录,在搜索框中选择目标DLF 2.5数据目录名称,然后单击 确定 绑定。绑定完成后,单击 下一步,可继续 绑定计算资源。绑定计算资源 在 绑定计算资源 步骤页,您可为OpenLake工作空间绑定所需的计算...
获取数据目录详情。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/catalogs/{catalog} ...