支持 全局、数据架构、研发、标签架构、标签、数据标准、数据质量、数据安全 对象类型。全局：包括统计周期、全局变量、公共日历、离线调度模板、数据板块、计算源、项目、数据源、对象属性、识别特征。数据架构：包括主题域、业务对象、...
步骤四：监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。步骤五：管理数据 用户画像分析任务流程完成后，在Spark内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过...
数据质量监控 数据质量提供对调度任务产出的表数据的质量监控能力，您可以通过配置表的质量监控规则实现对表数据的监控。学习如何基于DataWorks为任务产出的表，配置数据质量的监控规则，以保证快速感知源端数据的变更过程中产生的脏数据，...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在Spark内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过数据地图查看表血缘...
步骤四：监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。步骤五：管理数据 用户画像分析任务流程完成后，在EMR内将创建对应数据表。生成的数据表可在 数据地图模块 进行查看，可通过...
创建数据质量监控。接口说明 需要购买 DataWorks 基础版及以上版本才能使用 调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在EMR内将创建对应数据表。生成的数据表可在 数据地图模块 进行查看，可通过数据地图查看表血缘...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在EMR内将创建对应数据表。您可通过数据地图查看数据表之间的血缘关系。消费数据 用户画像分析...
更新数据质量监控。接口说明 需要购买 DataWorks 基础版及以上版本才能使用 调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
实例所占用的磁盘容量除集合数据外，还有实例正常运行所需要的空间，如系统数据库、数据库回滚日志、重做日志、索引等。请确保云数据库MongoDB实例具有足够的磁盘容量来存储数据，否则可能导致实例被锁定。若因磁盘容量不足导致实例被锁定...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在EMR内将创建对应数据表。您可通过数据地图查看数据表之间的血缘关系。消费数据 用户画像分析...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在StarRocks内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过数据地图查看表...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在StarRocks内将创建对应数据表。您可通过数据地图查看数据表之间的血缘关系。消费数据 用户画像...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在MaxCompute内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过血缘查看生成表...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在MaxCompute内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过血缘查看生成表...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在MaxCompute内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过血缘查看生成表...
监控数据质量 为数据加工生成的表配置数据质量监控，提前识别脏数据并进行拦截，避免脏数据影响扩大。管理数据 用户画像分析任务流程完成后，在MaxCompute内将创建对应数据表。生成的数据表可在数据地图模块进行查看，可通过血缘查看生成表...
新建并启用物理表质量检查计划 数据建模中建立的质量规则需要通过创建质量检查计划并运行后才能实现质量的管控。具体操作，请参见 新建并启用物理表质量检查计划。查看物理表质量检查任务 通过查看质量检查任务详情，了解模型的质量检查...
创建数据质量监控运行实例。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前...
查询指定项目下的数据质量校验任务列表。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
数据资源平台提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
设计人员：根据已定稿的产品需求文档所述需求，进行数据探查，了解数据形态（数据质量、数据分布），同时根据探查结果实现表设计、Mapping设计、调度设计等细分设计工作。开发人员：根据设计人员产出的稿件，制定计划并实现代码，同时进行...
获取数据质量监控详情。接口说明 需要购买 DataWorks 基础版及以上版本才能使用 调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API...
新建数据字典并物理化 通过新建并维护数据模型中使用的数据字典，制定并管理平台遵循的统一数据标准，为数据元、指标、维度引用数据字典提供数据基础，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。具体操作，请参见 新建...
常见问题 初始化时没有选择外接数据库，初始化后想配置外接数据库 处理方法：进入数据决策系统，单击 管理系统 系统管理，在 常规 页签，单击 待配置。输入实际数据库相应的信息，配置外接数据库。配置完成后，单击 启用新数据库。配置外接...
支持数据质量检验和控制 可以设置数据质量规则和异常报警策略，及时发现和处理数据质量问题。支持实时监控任务运行状态和查看日志 用户可以实时了解任务的执行情况，并设置异常告警，保证任务的稳定运行。支持多种数据库产品组合 支持多种...
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
数据资源平台中的数据标准、数据模型、数据加工场景、数据服务API、云计算资源配置等资产，经过验证最终可沉淀为一个特定的解决方案。支持通过不同的创建方式，灵活的选择解决方案中包含的内容。依托数据资源平台中管理的大量元数据，确保...
如果数据同步任务执行完成后，对于数据同步质量（数据条数、数据内容）有相关疑问，在写入端可以尝试从下列常见情况对照排查：原因 问题描述 解决方案 写入模式 配置不当 Writer插件会使用选择的写入模式将源头数据在目标端执行重放，如果...
报告模板管理页面支持动态配置报告模板，数据质量根据您配置的报告模板定时生成并发送报告。前提条件 您需要购买DataWorks企业版及以上版本，才可以使用报告模板管理功能。新增报告模板 登录 DataWorks控制台，切换至目标地域后，单击左侧...
数据字典帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量，创建并维护逻辑表中使用的数据字典，方便数据元引用数据字典来规范数据元的值域范围，保证关联了字段标准的表及字段可以自动设置数据质量规则，规范数据质量，本章节...
当指定某一个 来源系统 时，将为您展示元数据的名称、采集数据源和数据源编码、元数据类型、最新版本、采集任务、更新频率信息，您可以单击列表标题后的 查看详情 或来源系统后的 查看详情，查看该来源系统的配置信息，包括来源系统名称、...
当指定某一个 来源系统 时，将为您展示元数据的名称、采集数据源和数据源编码、元数据类型、最新版本、采集任务、更新频率信息，您可以单击列表标题后的 查看详情 或来源系统后的 查看详情，查看该来源系统的配置信息，包括来源系统名称、...
教程涉及模块：数据集成、数据开发、运维中心、数据质量、数据地图、数据服务、数据分析。各模块场景教程 数据开发与调度 相关教程 说明 教程使用的计算引擎 涉及模块 ETL工作流快速体验 DataWorks推出ETL工作流模板案例集，旨在帮助您快速...
任务开发上线之后，数据正在稳定生产中，您需要对对应的业务表通过可视化查看、自动的数据质量监控、敏感数据管理等多种不同方式进行治理，而以下这些模块就可以很好的帮助您对数据进行治理。可视化元数据管理 数据地图可以可视化的查看表...
单击左侧导航栏的 质量规则，在 Dataphin数据表/全域数据表 页面，单击目标对象的名称，进入 质量规则详情 页面。在质量规则详情页面单击右上角的 导出质量规则 按钮，支持选择 导出全部质量规则 和 按搜索及筛选条件导出。导出全部质量...
数据质量费用：若为周期性任务配置质量监控并成功触发实例，将产生 数据质量实例费用。智能基线费用：若为周期性任务配置智能基线，开启状态的智能基线将产生 智能基线实例费用。报警短信和电话费用：若为同步任务配置监控报警并成功触发...
Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据查询到流出数据湖）推出了一系列功能特性，协助您搭配第三方上下游工具，搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/...
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/...