元数据编辑器 单击 元数据编辑器，设置需要绑定的变量后，单击 保存。复制数据定义 在资源管理窗口，在选中资源上右键单击 复制，可以复制当前数据定义。删除数据定义 在资源管理窗口，在选中资源上右键单击 删除，可以删除当前数据定义。
抽取策略 快速抽取：抽取元数据时只扫描每个文件的部分数据，抽取作业消耗时间较短，抽取结果准确性低于全量抽取，您可以在元数据编辑中调整元数据信息。全量抽取：抽取元数据时扫描全量数据文件，在数据规模比较大时，作业消耗时间长，...
手动执行 调度执行 抽取策略 必填 快速抽取：抽取元数据时只扫描每个文件的部分数据，抽取作业消耗时间较短，抽取结果准确性低于全量抽取，可以在元数据编辑中调整元数据信息。全量抽取：抽取元数据时扫描全量数据文件，在数据规模比较大时...
查询数据地图支持的元数据采集器类型列表，其中包含元数据采集器类型，及给定类型支持的子类型和子类型之间的层级关系信息。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去...
名称 类型 描述 示例值 object 元数据采集器类型 Type string 类型标识，当前支持的元数据采集器类型，取值有 maxcompute dlf hms（使用 HMS 管理元数据的 EMR 集群或 CDH_HIVE 集群）holo mysql oracle postgresql sqlserver analyticdb_...
在HoloWeb开发页单击 SQL编辑器，确认实例名和数据库名称后，执行如下命令。更多详情请参见 创建新计算组实例。登录 Hologres管理控制台，在左上角选择地域。在左侧导航栏选择 实例列表。在 实例列表 页面，单击目标实例名称。在实例详情...
数据标准-提交上线数据标准 数据标准-下线数据标准 数据标准-删除数据标准 数据标准-编辑关联标准 数据标准-编辑关联文档 数据标准-批量导入数据标准（同时拥有标准模板-批量导入标准的权数据标准-限）数据标准-批量导出数据标准（同时拥有...
编辑数据标准 数据标准-克隆数据标准 数据标准-提交上线数据标准 数据标准-下线数据标准 数据标准-删除数据标准 数据标准-编辑关联标准 数据标准-编辑关联文档 数据标准-批量导入数据标准（同时拥有标准模板-批量导入标准的权数据标准-限）...
本文为您介绍如何新建元数据、编辑元数据、检测元数据、转交负责人及删除元数据。管理元数据 在Dataphin首页，在顶部菜单栏选择 治理 资源治理。在左侧导航栏选择 治理项管理 治理项管理，在 治理项管理 页面，单击 元数据管理 按钮。在 ...
本文为您介绍如何新建元数据、编辑元数据、检测元数据、转交负责人及删除元数据。管理元数据 在Dataphin首页，在顶部菜单栏选择 治理 资源治理。在左侧导航栏选择 治理项管理 治理项管理，在 治理项管理 页面，单击 元数据管理 按钮。在 ...
元数据采集 MaxCompute元数据&DLF元数据：系统默认内置MaxCompute元数据采集器和DLF元数据采集器，数据地图将自动获取元数据。其他类型元数据：通过自定义元数据采集功能将不同数据源中的元数据导入数据地图进行统一管理。目前数据地图支持...
DataWorks数据地图是在元数据基础上提供的企业数据目录管理模块，元数据详情查看、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用Hologres数据。本文为您介绍如何在数据地图中配置Hologres元数据采集器及相关...
名称 类型 描述 示例值 object 元数据的数据目录。Id string 数据目录实体 ID，当前支持 dlf 与 starrocks 类型，可参考 元数据实体相关概念说明。对于 dlf 类型，格式为 dlf-catalog:catalog_id 对于 starrocks 类型，格式为 starrocks-...
元数据采集完成后，您可以在数据总览页面查看当前地域下，配置了数据采集器的Hologres数据库统计信息和表信息，详情请参见 数据总览。如果需要查找表，可参见 通用数据查询与管理。查看血缘详情。查找到目标表后，您可以单击目标表名称进入...
id，数据库名 database_name，表名 table_name，字段名 column_name 为例，各层级的实体ID如下：层级 ID 采集器元数据实例 dlf 数据目录 dlf-catalog:catalog_id 数据库 dlf-database:catalog_id:database_name 数据表 dlf-table:catalog_...
数据开发 数据开发-创建节点并编辑代码 自动采集 数据开发（旧版）数据开发（旧版）-创建节点并编辑代码 数据分析 数据分析-新建SQL查询并编辑代码 数据服务 数据服务-新建API数据推送服务 API资产 数据地图支持查看数据服务API的元数据，...
背景信息 创建 旧版数据开发：EMR计算资源 后，平台将自动在 数据地图 新建EMR元数据采集器来采集该集群元数据，若您创建EMR计算资源后仍无法在此界面选择到EMR库，请前往数据地图找到该集群的元数据采集器重新采集，详情请参见 采集E-...
父层级实体类型参考 ListCrawlerTypes 接口 若父层级实体为数据目录，ParentMetaEntityId 格式参考 Catalog 对象 如果父层级实体为元数据采集器，ParentMetaEntityId 格式为${CrawlerType}:${实例 ID 或转义后的 URL} 几种常用类型的 ...
当Hologres数据库中的元数据管理器（Storage Master）和FE节点保存的表元数据不一致时，会导致DDL操作报错或影响费用等。Hologres提供了表Meta诊断功能，以检测当前实例中表元数据的一致性，并每周更新一次诊断结果，您可以根据对应元数据...
引用智能提示 当您在定义ROS模板的资源（Resources）、输出（Outputs）、映射（Mappings）、条件（Conditions）和元数据（Metadata）信息时，ROS模板编辑器可以使用 Ref 函数对参数、资源ID或伪参数进行提示。参数信息的映射预览 当您完成...
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
跳转方式如下：SQL编辑器：如果SQL在HoloWeb的SQL编辑器中运行，则执行时间大于1 s、且含有Query ID的SQL可以直接跳转至Query洞察。历史慢 Query：在Query列表中，单击目标SQL 操作 列的 图标可以跳转至Query洞察。在Query洞察页面，您可以...
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
在 数据开发 页面的SQL编辑器中，选择目标Catalog。直接在SQL编辑器中 USE catalogName;直接在SQL编辑器中 SELECT*FROM catalogName.db.tbl;自定义Catalog Paimon、Iceberg等 通过编辑会话，在 Spark配置 中添加相应类型的参数。需自行配置...
本文介绍如何在 云消息队列 Kafka 版 控制台创建元数据导入任务，将元数据迁移至 云消息队列 Kafka 版 已有实例。前提条件 下载JDK 8 购买并部署云消息队列 Kafka 版实例：购买并部署VPC实例 购买并部署公网/VPC实例 说明 购买实例的规格可...
五、实施迁移过程 1、使用阿里云 RabbitMQ 控制台迁移工具进行元数据迁移 1.1 导出开源 RabbitMQ 元数据 在浏览器中打开开源 RabbitMQ 控制台。开源 RabbitMQ 控制台地址：http://{RabbitMQ IP地址}:1567；在登录页面的 Username 文本框...
测试表 TableType string 表类型，取值与元数据采集器类型相关。TABLE PartitionKeys array 分区键列表，非分区表时为空。string 分区键。ds ParentMetaEntityId string 父层级元数据实体 ID，可参考 元数据实体相关概念说明。对于支持 ...
数据地图 API 标题 API概述 元数据采集器类型 元数据采集器类型 ListCrawlerTypes 获取数据地图元数据采集器类型列表 查询数据地图支持的元数据采集器类型列表，其中包含元数据采集器类型，及给定类型支持的子类型和子类型之间的层级关系...
数据地图针对External Catalog的元数据采集目前为间接关联形式，如果您在StarRocks类型数据库中已使用External Catalog能力，并期望在数据地图中通过StarRocks数据源类型作为来源，查看其External Catalog下的表及元数据详情，可通过本文...
本文介绍如何在 云消息队列 Kafka 版 控制台创建迁移任务，将自建Kafka集群的元数据迁移至 云消息队列 Kafka 版 实例。迁移流程 注意事项 Serverless实例暂不支持元数据导入任务。当自建Kafka集群不支持公网访问时，建议采用元数据导入的...
在浏览器中输入以下地址获取IdP元数据文件。IdP元数据文件的获取地址为：https:// AD server /FederationMetadata/2007-06/FederationMetadata.xml。其中 AD Server 为AD FS的域名或者IP地址。下载元数据文件到本地。在 无影云电脑 控制台...
采集任务 通过采集适配器连接到指定的数据源，将源数据库中的对象元数据信息采集至Dataphin，通过内置解析器进行解析后存储并进行统一呈现。采集实例 是采集任务根据定时调度时间或手动运行任务生成的实例任务。元数据管理 业务系统元数据 ...
采集任务 通过采集适配器连接到指定的数据源，将源数据库中的对象元数据信息采集至Dataphin，通过内置解析器进行解析后存储并进行统一呈现。采集实例 是采集任务根据定时调度时间或手动运行任务生成的实例任务。元数据管理 业务系统元数据 ...
采集任务 通过采集适配器连接到指定的数据源，将源数据库中的对象元数据信息采集至Dataphin，通过内置解析器进行解析后存储并进行统一呈现。采集实例 是采集任务根据定时调度时间或手动运行任务生成的实例任务。元数据管理 业务系统元数据 ...
问题描述 问题一：重复创建元数据转换预热任务。问题二：重复创建加速器预热任务。问题原因 问题一：您在发起PutDataLakeStorageTransferJob请求时，job已经存在。问题二：您在发起PutDataLakeCachePrefetchJob请求时，job已经存在。问题...
注意事项 开启元数据变更后，可在 治理 元数据 元数据清单 的对象详情中查看每个对象的历史版本，也可以在手动上架的表资产编辑页面为单个对象配置是否展示元数据变更记录。若将元数据变更记录从 开启状态 变更为 关闭状态，系统将关闭...
注意事项 开启元数据变更后，可在 治理 元数据 元数据清单 的对象详情中查看每个对象的历史版本，也可以在手动上架的表资产编辑页面为单个对象配置是否展示元数据变更记录。保留较多的历史版本可能会对文件存储系统产生资源压力，影响其他...
迁移元数据上云是指将开源RabbitMQ集群的元数据导出，并将其导入到阿里云 云消息队列 RabbitMQ 版 实例。云消息队列 RabbitMQ 版 会根据成功导入的元数据在目标 云消息队列 RabbitMQ 版 实例中创建对应的Vhost、Queue、Exchange、Binding，...
使用编辑器进行SQL分析 新版SQL分析提供了强大的编辑器，支持编写SQL脚本处理和查询MaxCompute中的数据，支持常见的SQL操作，例如SELECT、INSERT、UPDATE、DELETE等，支持特定的MaxCompute语法和函数，更多请参见 SQL概述。编辑器页面功能...
采集任务通过采集适配器连接到指定的数据源，将源数据库中的对象元数据信息采集至Dataphin，通过内置解析器进行解析后存储并进行统一呈现。本文为您介绍如何创建及管理元数据采集任务。前提条件 需先在 管理中心 数据源管理 应用系统 创建...