系统提供数据处理能力，包括倾斜数据处理、地形数据处理、三维模型处理、影像优化处理。本文以新建倾斜数据处理任务为例，介绍如何新建数据处理任务。前提条件 已添加空间元数据，具体操作，请参见 添加数据。已添加OSS类型云计算资源。...
数据资源平台提供了完善的权限管控机制，支持以租户或工作组为管控粒度，通过对用户授予...数据读取 拥有工作组内云计算资源的元数据信息和数据信息的访问权限 数据变更 拥有工作组内云计算资源的元数据信息和数据信息的访问权限以及数据变更
DataWorks数据地图是在元数据基础上提供的企业数据目录管理模块，元数据详情查看、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用Hologres数据。本文为您介绍如何在数据地图中配置Hologres元数据采集器及相关...
本文仅对元数据信息和质量规则展开说明，其他内容不在此详述。元数据详情 应用元数据详情由 应用基础信息、研发设置、成员 三部分组成。具体说明如下：基础信息 应用名：不可修改。中文名：不可修改。编译技术栈：决定构建方式。架构域：...
const upload=document.getElementById('upload')const update=document.getElementById('update')const check=document.getElementById('check')/指定待上传的文件内容。const file=new Blob(['examplecontent'])/指定上传至Bucket中的...
工作流模板与算子的对应关系 IMM提供的TemplateId及其对应的算子如下表所示，其中 支持 表示在建立元数据索引时会执行该算子操作，不支持 表示在建立元数据索引时不会执行该算子操作。TemplateId 算子 OSSMeta（OSS 元信息）MIME（文件类型...
随着项目的不断演进，人员的权限也会更新迭代，您需要及时审视人员权限合理性，提升项目数据安全。本文为您介绍权限查询要点，并提供调整建议供参考。背景信息 在项目创建初期，为了提升业务处理效率，通常在用户和权限管理上相对宽松。...
本文介绍将自建Kafka集群迁移到 云消息队列 Kafka 版 实例的优势、原理、方案架构、迁移工具和操作流程。迁移优势 将自建Kafka集群迁移到 云消息队列 Kafka 版 实例的优势，请参见 产品优势。迁移原理 对于消息队列来说，如果要实现集群...
重要 对DDL或DML语句运行将会直接影响线上元数据或数据，请谨慎操作。编写的内容每分钟进行一次自动保存，您也可以选择手动将临时查询持久化保存在左侧文件夹下。操作步骤 登录 实时计算控制台。在 Flink全托管 页签，单击目标工作空间 ...
DataWorks为您提供DLF可视化权限申请、权限审批及权限审计等功能，帮助您实现数据湖全托管的统一权限管理，本文为您详细介绍如何进行DLF数据访问权限管控。前提条件 已将DLF设置为计算引擎元数据服务。例如，EMR已将DLF设置为元数据服务，...
本文将详细阐述如何将您已有的旧版数据湖集群（Hadoop），高效地迁移至数据湖集群（DataLake），以下分别简称“旧集群”和“新集群”。迁移过程将充分考虑旧集群的版本、元数据类型以及存储方式，并针对这些因素，提供适应新集群的迁移策略...
说明 如果要通过多值模型映射关系读取时间线元数据的属性列（_attributes）或者元数据最近更新时间列（_meta_update_time），您需要将这两列添加到多值模型映射关系中，系统会自动填充这两个元数据列的内容。字段名称 类型 描述_m_name ...
["192.168.0.0/16"]WorkFlow object ACK One 工作流元数据 ArgoWorkflow object ACK One 工作流元数据 Enabled boolean 是否启用工作流配置。取值 true：启用 false：禁用 true ServerEnabled string 是否启用 Argo Server UI。取值 true：...
上传基于SAML 2.0的身份提供商IdP（Identity Provider）的元数据。接口说明 该接口仅支持 AD 工作区和便捷工作区，不支持 RAM 目录。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer...
前言 安全断言标记语言（英语：Security Assertion Markup Language，简称 SAML）是一个基于XML的开源标准数据格式，它在系统之间交换身份验证和授权数据，尤其是在身份提供者和服务提供者之间交换。IoT支持基于 SAML 2.0 的 SSO（Single ...
DMS分类分级扫描能够对数据库中的敏感数据进行检测，并自动为符合识别规则的字段打上相应的分类分级标签，还可以保护高敏感等级的字段，并将敏感字段直观地展示在识别结果中。本文介绍DMS敏感数据保护分类分级扫描功能的原理。原理介绍 DMS...
获取基于SAML 2.0的服务提供商SP（Service Provider）的元数据。接口说明 该接口仅支持 AD 工作区和便捷工作区，不支持 RAM 目录。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer...
导出统一元数据库的内容（只导出数据，不用导表结构）。为保证数据的一致性，在Hive服务页面停止Hive的MetaStore服务，保证导出期间不会有新的元数据变化，详情请参见 停止Hive的MetaStore服务。在Hive服务页面，单击 配置 页签。在配置...
而此时已经生成了代码，如果再返回去修改模型、重新生成脚手架，会打断研发人员的工作流程，降低工作效率。因此，平台要提供元数据和代码双向同步的能力，研发人员可以在开发过程中使用特定的注解新增、修改或删除模型元数据，开发完成后再...
更新数据集 UpdateSet-更新媒体集的显示名称 GetDataset-查询数据集信息 GetSet-获取媒体集信息 ListDatasets-列出数据集 ListSets-获取媒体集列表 DeleteDataset-删除数据集 DeleteSet-删除媒体集 元数据索引 IndexFileMeta-文件元信息...
DLF产品（数据湖构建）提供数据发现和数据探索的功能，本文介绍如何通过DLF完成对淘宝用户行为样例的分析。操作流程 服务开通：开通阿里云账号及DLF和OSS相关服务。样例数据集下载和导入：下载样例数据（csv文件），并上传至OSS。DLF数据...
FE FE负责管理元数据、管理客户端连接、查询规划和调度等工作，并在每个节点的内存中保存一份完整的元数据副本，以确保服务的一致性。角色 元数据读写 Leader选举 说明 Leader 读写 自动选举 Leader FE在对元数据进行读写操作后，通过BDB ...
元数据索引 元数据索引 IndexFileMeta 文件元信息建立索引 对输入的文件进行数据处理如标签识别、人脸检测、地点检测等，将提取的文件元信息建立索引，支持用户在一个数据集内多样化的数据检索。BatchIndexFileMeta 批量文件元信息建立索引...
量化评估：健康分 健康分是依据数据资产在数据生产、数据流通及数据管理中的用户行为、数据特性、任务性质等元数据，使用数据处理及机器学习等技术，对各类型数据进行综合处理和评估，通过个人、工作空间维度客观呈现数据资产状态的综合...
窗口函数概述 支持的内置函数 自定义函数 元数据（Catalog）数据处理最关键的方面之一是管理元数据，实时计算Flink版的元数据提供了元数据信息，例如数据库、表、字段、分区以及数据库或其他外部系统中存储的信息。管理元数据 角色（Role）...
通过导入数据元，您可以实现快速批量创建数据元。本文介绍如何通过Excel批量导入数据元数据。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您...
将数据变更事件通知给所有 SessionServer，事件内容是：id：版本号信息：<version>SessionServer 接收到变更事件通知后，对比 SessionServer 内存中存储的 dataInfoId 的 version，发现比 DataServer 发过来的小，所以主动向 DataServer ...
修复元数据侧展示数据不同步。[0.2.0-alpha+2]Added 平台侧修复：添加元数据。元数据侧展示。Fixed 引用到错误类型时的提示。提示优化。跳过 get set 方法。[0.2.0-alpha+1]Added 平台侧修复：添加字段。删除字段。添加方法。删除方法。...
通过导入数据元，您可以实现快速批量创建数据元。本文介绍如何通过Excel批量导入数据元数据。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。说明 若您已...
选择 从文件导入有关信赖方的数据，然后单击 浏览，导入从 步骤一：在云SSO获取服务提供商元数据 获取的元数据文档，最后单击 下一步。输入自定义的信赖方显示名称，然后单击 下一步。本示例中使用名称CloudSSODemo。根据您的需要，选择...
元数据及作业历史数据保存在Information Schema空间下，如果需要对历史数据进行快照备份或获得超过14天的作业历史，您可以定期将Information Schema的数据备份到指定项目。获取Information Schema服务 自2024年03月01日开始，MaxCompute...
运营主要面向租户资产管理员，为用户提供数据资产编目、数据资产上线、数据资产下线等能力。通过获取资产元数据信息，并同步到数据资产目录完成数据资产注册。数据资产管理涉及三种用户角色，包括资产使用方、租户资产管理员、工作组管理员...
在工作组中注册存储计算资源后，系统自动执行元数据信息扫描，并完成数据资产运营，为后续资产运营管理持续提供动态更新的资产对象。同时自动完成已上线API资产注册。支持对MaxCompute、DataHub、Hive、RDS MySQL、PostgreSQL、AnalyticDB ...
在工作组中注册存储计算资源后，系统自动执行元数据信息扫描，并完成数据资产运营，为后续资产运营管理持续提供动态更新的资产对象。同时自动完成已上线API资产注册。支持对MaxCompute、DataHub、Hive、RDS MySQL、PostgreSQL、AnalyticDB ...
避免出现意外的增量数据 按正确顺序迁移元数据和数据 在导入前更新元数据，例如为新组织创建/更新用户名/电子邮件，为某些中国相关数据导入新的自定义对象/字段 确定保持数据关系（父项/子项关系）的方法 处理各类特殊数据，如加密数据、...
说明 如果元数据文件超过大小限制，您可以尝试删除和中的所有内容。步骤二：在AD FS中将阿里云配置为可信SAML SP 在AD FS中，SAML SP被称作 信赖方。在 服务器管理器 的 工具 菜单中选择 AD FS管理。在 AD FS 管理工具中 添加信赖方信任。...
新功能发布 数字工厂 1)IoT Studio开发的应用集成到数字工厂 工业集成工作台 行业平台 1）行业门户 爆款产品 2）行业平台运营管理后台 商品管理：商品列表、新增及上下架 商品在行业内容管理上的推荐 数字工厂 1）数据订阅接口优化 组织、...
元数据 选中 表数据 或 公共数据集 中的对象（表、资源或自定义函数），展示相应的元数据详情，包括但不限于对象的基础信息、列信息、生成DDL、数据预览等。注意需要对应对象的相关 数据权限。结果 执行脚本的结果，详细如下：运行列表：...
当内置的连接器无法满足需求时，您可以使用自定义连接器。本文为您介绍如何上传、使用和更新自定义连接器。注意事项 您需要根据社区定义的...Flink提供了元数据管理，您可以通过创建Catalog来管理和访问相关的元数据，详情请参见 管理元数据。
Metadata（可选）模板编写者可以使用Metadata来存放与模板相关的元数据信息，内容可以为JSON格式。Parameters（可选）定义创建资源栈时，模板用户可以定制化的参数。通常，模板的编辑者会把ECS的规格设计成一个参数。参数支持默认值。使用...