支持范围和多级分区质量监控+按项目和个人管理数据质量 数据质量最佳实践（5）：利用质量分和排行榜提升企业数据质量（仅独立部署模式支持）数据安全 数据安全最佳实践（1）：数据研发链路上的数据安全保护 数据安全最佳实践（2）：数据...
标准版 小型企业、生产业务保障部门、业务部门试点 构建企业数据质量监控体系 支撑生产环境核心业务数据流转 企业数据协作和管理工作 核心增强面向企业的数据管理能力，可进行血缘分析、标签管理等，通过智能基线预警，支持业务连续性和...
标准版 小型企业、生产业务保障部门、业务部门试点 构建企业数据质量监控体系 支撑生产环境核心业务数据流转 企业数据协作和管理工作 核心增强面向企业的数据管理能力，可进行血缘分析、标签管理等，通过智能基线预警，支持业务连续性和...
2024-12-04 所有地域 所有用户 TiDB数据源 数据质量 数据质量新增格式匹配类质量校验模板，可以自定义正则表达式，定义期望的数据内容格式。内置邮箱、电话号码、手机号码、身份证号等常见内容有效性校验模板。2024-12-02 所有地域 所有...
数据建模 数据建模 随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks数据建模 服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化、有序的管理。使...
数据稳定性优化治理实施指南 稳定性治理是任何数据团队进行治理工作时最关注的基础核心，该部分工作不但关系着数据团队对于日常研发工作的产出质量判定，也和实际客户业务的可用性承诺紧密相关。步骤一：明确数据治理方向，规划数据治理...
数据质量的管理流程包括业务数据资产定级、加工卡点、风险点监控和及时性监控，您可以构建属于自己的数据质量保障体系。数据质量管理的流程图如下。数据质量管理的流程说明如下：分析业务场景，对数据流转链路上的整个依赖关系，进行资产...
企业数据云平台Cloudera Data Platform（简称阿里云CDP），是阿里云和Cloudera联合打造阿里云上的大数据平台。
数据库备份（Database Backup，简称DBS）是为数据库提供连续数据保护、低成本的备份服务。它可以为多种环境的数据提供强有力的保护，包括企业数据中心、其他云厂商、混合云及公共云。
当调度任务触发数据质量监控中的规则校验时，您可以使用去噪管理功能，对当前工作空间内数据质量规则校验异常的数据进行处理，使其不触发报警，并且不阻塞任务的正常运行（即任务不会因为数据质量校验不通过而失败退出）。前提条件 已创建...
DataWorks的数据质量监控节点可通过配置数据质量监控规则，监控相关数据源表的数据质量（例如，是否存在脏数据）。同时，支持您自定义调度策略，周期性执行监控任务进行数据校验。本文为您介绍如何使用数据质量监控节点进行任务监控。背景...
Cloudera CDP企业数据云平台是一款统一的企业级数据管理与分析平台。本文系统阐述了其核心概念、产品优势、应用场景与计费模式，助您快速构建安全、高效的企业数据基石。
数据质量为您提供全链路的数据质量方案，包括数据探查、对比、质量监控、SQL扫描和智能报警等功能，数据质量根据任务实例触发的数据质量规则实例数量进行计费，本文为您介绍数据质量的计费详情。费用产生原则 数据质量仅支持按量付费，不...
DataWorks的数据质量监控节点可通过配置数据质量监控规则，监控相关数据源表的数据质量（例如，是否存在脏数据）。同时，支持您自定义调度策略，周期性执行监控任务进行数据校验。本文为您介绍如何使用数据质量监控节点进行任务监控。背景...
数据质量大盘为您展示当前工作空间下，需要重点关注的数据质量总览指标、实例运行后触发的质量规则校验状态的趋势及分布情况、TOP质量问题表及质量问题责任人、质量规则覆盖保障情况等，帮助质量负责人快速了解工作空间数据质量整体情况，...
X-数据质量针对数据质量规则校验异常结果和在使用资产过程中反馈的问题，基于大模型进行问题分析，形成关键证据链，并给出整改意见。本文为您介绍如何使用X-数据质量。前提条件 需购买数据质量功能和X-数据质量功能才能使用X-数据质量。...
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。5分钟快速了解 前提条件 已购买资产质量增值服务，详情请参见 开通Dataphin。背景...
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。5分钟快速了解 前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块...
名称 类型 描述 示例值 object 质量监控任务 Id long 数据质量校验任务 ID 10001 Name string 数据质量校验任务名称，数字、英文字母、汉字、半角全角标点符号组合，最长 255 个字符 质量校验任务 Description string 数据质量校验任务描述...
根据ID查询指定的数据质量规则模板详情。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
质量评估通过用户自定义质量检查计划，根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务，通过数据质量监控报告展现系统整体数据质量概览及多维度细分数据的质量情况。质量评估通过完整性、准确性、一致性、唯一性、时效性、...
质量评估即根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务，包括运行质量检查计划和场景画布两种途径；通过数据质量监控报告，查看系统整体数据质量概览及多维度细分数据的质量情况。质量评估通过完整性、准确性、一致性、...
数据质量校验任务的快照 Id long 数据质量校验任务 ID 10001 Name string 数据质量校验任务名称，数字、英文字母、汉字、半角全角标点符号组合，最长 255 个字符 质量校验任务 TenantId long DataWorks 租户 ID 195820716552192 ProjectId ...
本文将以 ods_user_info_d_starrocks 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
更新数据质量监控。接口说明 需要购买 DataWorks 基础版及以上版本才能使用 调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
本文将以 ods_user_info_d_starrocks 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_emr 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。您可以参考...
创建数据质量监控。接口说明 需要购买 DataWorks 基础版及以上版本才能使用 调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
您可使用数据管理DMS的数据质量功能来自定义表或列维度的数据质量规则，并结合任务编排的稽核任务自动检查数据质量，保证数据的一致性、唯一性、充分性等，从而提升二次数据分析与开发的质量。前提条件 目标实例的管控模式为安全协同。更多...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
本文将以 ods_user_info_d_spark 表为例，演示如何通过数据质量模块的强/弱规则配置（表行数非0强校验和业务主键唯一性弱校验），在每日调度任务中实时拦截源数据缺失或主键重复异常，从而保障用户信息同步作业的下游计算可靠性。...
数据质量风险监控主要针对数据的准确性、一致性和完整性。本教程使用DataWorks数据质量（DQC）功能，完成数仓各层次的数据质量监控。前提条件 首先您需要完成教程 搭建互联网在线运营分析平台，并保证您的DataWorks工作空间创建区域为华东2...
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...
创建数据质量监控运行实例。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前...
查询指定项目下的数据质量校验任务列表。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...
触发指定数据质量监控任务的执行，并返回运行实例ID。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码...
查询指定项目下的数据质量扫描运行记录。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 ...