数据质量

_相关内容

查询源流或转码流实时质量数据

使用说明 返回时间粒度为5秒一个点位,单次查询不能超过3个小时的范围,可以查询30天内的数据。QPS限制 本接口的单用户QPS限制为50次/秒。超过限制,API调用会被限流,这可能会影响您的业务,请合理调用。更多信息,请参见 QPS限制。调试 ...

创建数据质量规则

质量规则配置 在Dataphin首页,单击顶部菜单栏的 治理-数据质量。按照以下操作指引,进入 质量规则详情 页面,配置质量规则。依次单击 质量规则-Dataphin数据表-对象的名称。在 质量规则配置 页面,单击 新建质量规则。在 新建质量规则 ...

创建数据质量规则

校验配置 规则校验 数据质量规则校验后,结果会和异常校验的配置进行对比,符合条件则校验结果为不通过;同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定,支持多种条件的and/or条件,实际配置中建议小于3条。详情请参见 ...

创建全域数据质量规则

质量规则配置 在Dataphin首页,在顶部菜单栏选择 治理 数据质量。单击左侧导航栏的 质量规则,在 全域数据表 页面,单击目标对象的名称,进入 质量规则详情 页面,配置质量规则。在 质量规则详情 页面,单击 新建质量规则。在 新建质量规则...

创建全域数据质量规则

质量规则配置 在Dataphin首页,单击顶部菜单栏的 治理-数据质量。按照以下操作指引,进入 质量规则详情 页面,配置质量规则。依次单击 质量规则-全域数据表-对象的名称。在 质量规则详情 页面,单击 新建质量规则。在 新建质量规则 对话框...

ListQualityResultsByRule-校验数据质量

1 ProjectName string 是 需要进行数据质量校验的引擎或者数据源名称。autotest ProjectId long 是 DataWorks 项目空间 ID。12345 返回参数 名称 类型 描述 示例值 object 校验结果 HttpStatusCode integer HTTP 状态码。200 ErrorMessage ...

创建数据质量规则

质量规则配置 在Dataphin首页,在顶部菜单栏选择 治理 数据质量。单击左侧导航栏的 质量规则,在 数据源 页面,单击目标对象的名称,进入 质量规则详情 页面,配置质量规则。在 质量规则详情 页面,单击 新建质量规则。在 新建质量规则 ...

Dataphin数据质量任务频率怎么保证一天一次并且在...

问题描述 用户配置数据质量校验规则时,需要任务一天一次并且在定点执行。解决方案 例如需要在8点执行,每天一次,可以按照如下配置方式。适用于 Dataphin 质量校验规则

Dataphin中质量监控数据表没有日志信息

问题描述 本文主要介绍Dataphin中质量监控数据表没有日志信息。问题原因 客户反馈在质量监控数据表没有日志信息。解决方案 数据表的质量校验规则触发的前提条件是Dataphin有任务更新表或分区数据。适用于 Dataphin

网络质量分析器数据分析最佳实践

本文以网络质量分析器数据查询分析、仪表盘、告警为例,帮助您快速上手网络质量分析器操作。前提条件 创建端应用并设置网络探测规则。具体操作,请参见 新建接入端应用 和 设置网络探测规则。背景信息 阿里云日志服务网络质量分析器是一款...

Dataphin质量模块的数据表规则,试跑已经成功了,但是...

问题描述 Dataphin质量模块的数据表规则,试跑已经成功了,但是质量报告里面还是未运行。问题原因 质量规则试跑是不会体现在质量报告的,只有通过调度任务触发的质量检查才会在报告中体现。解决方案 使用质量规则的表配置调度任务,管道...

获取质量统计的分布数据

本接口用于获取质量统计的分布数据。接口说明 使用说明 本接口用于获取质量统计的分布数据。使用该接口时,限制如下:支持查询最近 365 天(不包含查询当天)任意范围的数据。如果查询范围小于 24 小时,则按小时统计查询的数据;如果查询...

DescribeQualityOverallData-获取质量统计的概览数据

本接口用于获取质量统计的概览数据。接口说明 使用说明 本接口用于获取质量统计的概览数据。使用该接口时,限制如下:支持查询最近 365 天(不包含查询当天)任意范围的数据。如果查询范围小于 24 小时,则按小时统计查询的数据;如果查询...

获取质量统计的地域分布数据

本接口用于获取质量统计的地域分布数据。接口说明 使用说明 本接口用于获取质量统计的地域分布数据。使用该接口时,限制如下:支持查询最近 365 天(不包含查询当天)任意范围的数据。如果查询范围小于 24 小时,则按小时统计查询的数据;...

Dataphin中全域数据表联合主键的质量规则设置方法

概述 Dataphin中全域数据表联合主键的质量规则设置方法。需要联合主键的两个字段都不为空。详细信息 全域数据表可以针对数据源中的数据表设置质量规则。创建质量规则,模板来源选择“自定义SQL”,模板规则选择“自定义统计指标校验”,...

Dataphin数据表已创建质量规则并设定告警方式为钉钉...

问题描述 Dataphin数据表已创建质量规则并设定告警方式为钉钉机器人,触发了告警条件钉钉群未接收到告警信息。问题原因 钉钉群内加入的机器人没有设置相应的告警关键词,导致发送失败。解决方案 为钉钉群内的告警通知机器人设置相应的告警...

Dataphin质量规则模板规则配置多值数据维度配置怎么...

问题描述 质量规则模板规则配置多值数据维度配置怎么理解?解决方案 多值是一批限定条件,会按照每个值的枚举,最终取笛卡尔积来变成多个指标值的比较,如下图所示。例如这个,会产出(id=1,name=a),(id=1,name=b),(id=3,name=a),(id=3,name...

管理问题数据

数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据,帮助您快速排查、定位问题,提升数据质量。本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过...

功能简介

质量评估即根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务,包括运行质量检查计划和场景画布两种途径;通过数据质量监控报告,查看系统整体数据质量概览及多维度细分数据的质量情况。质量评估通过完整性、准确性、一致性、...

操作流程

当算法运行时,画布中引用的数据质量规则也会自动运行,以检查算法输出数据是否符合要求。具体操作,请参见 引用物理表质量规则。订阅物理表的质量预警 对物理表最新的质量规则运行结果进行预警订阅,您可以便捷地获取到物理表质量的异常等...

查看质量评估报告

背景信息 质量评估报告以周期性数据质量检测结果为基础,从模型总数、已配置质量规则模型、模型物理化表总数、质量监测模型数、质量监测物理表数维度给出系统综合质量得分;从数仓层级维度和质量不同时间段进行评分对比。重要 当天执行成功...

功能简介

质量评估即根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务,包括运行质量检查计划和场景画布两种途径;通过数据质量监控报告,查看系统整体数据质量概览及多维度细分数据的质量情况。质量评估通过完整性、准确性、一致性、...

质量评估

质量评估通过用户自定义质量检查计划,根据用户设置的数据质量规则执行面向不同计算资源的质量检查任务,通过数据质量监控报告展现系统整体数据质量概览及多维度细分数据的质量情况。质量评估通过完整性、准确性、一致性、唯一性、时效性、...

资产质量概述

资产质量基于Dataphin平台,为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对...

查看质量评估报告

背景信息 质量评估报告以周期性数据质量检测结果为基础,从模型总数、已配置质量规则模型、模型物理化表总数、质量监测模型数、质量监测物理表数维度给出系统综合质量得分;从数仓层级维度和质量不同时间段进行评分对比。重要 当天执行成功...

资产质量概述

资产质量基于Dataphin平台,为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务,详情请参见 开通Dataphin。背景信息 面对各行...

引用物理表质量规则

当算法运行时,画布中引用的数据质量规则也会自动运行,以检查算法输出数据是否符合要求,可在物理表监控明细查看运行结果。本文介绍如何引用逻辑表质量规则。前提条件 已搭建算法流程,具体操作,请参见 新建开发环境场景并部署运行。算法...

新增逻辑表质量规则

弱规则:常规规则,如实际结果不满足规则,则该单项数据质量为一般。(可选)配置 高级选项。说明 高级选项 仅用OpenAPI向上层应用提供更精细化的结果数据,不影响数据开发质量节点及质量评估计划执行。目前仅MaxCompute、Hive、AnalyticDB...

质量大盘

在Dataphin首页,在顶部菜单栏选择 治理 数据质量。在左侧导航栏选择 概览 质量大盘,进入 质量大盘 页面。编号 说明 ① 展示质量规则校验的所有 规则校验资产数。展示 数据表异常数、指标-异常规则、数据源异常数 和 实时元表异常数,同时...

数据源管理

操作步骤 在Dataphin首页,在顶部菜单栏选择 治理 数据质量。在左侧导航栏选择 系统管理 数据源管理,在 数据管理 页面,单击目标数据源 操作 列下的 设置限速,进入 设置限速 对话框。在 设置限速 对话框,设置 限速时段。可以单击 添加...

网络质量分析

数据筛选条件 网络质量分析器应用会根据您设置的条件,展示对应的网络质量数据。例如趋势分析图表的筛选条件如下图所示。趋势分析 网络质量分析器应用会根据您设置的条件,展示指定条件下数据延迟、丢包率、探测次数的变化趋势。延迟:统计...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用