数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
数据校验是数据传输服务DTS（Data Transmission Service）提供的用于监控源库与目标库数据差异的功能，支持在不停服的情况下对源库和目标库进行校验，帮助您及时发现数据和结构不一致的问题。优势 全量校验、增量校验和结构校验均支持在...
对应接口 ValidateApplication 功能说明 通过此API 对 CADT应用进行校验，需要通过GetApplication获取校验结果。校验功能会对应用中每个资源进行必要的部署前配置合法性检查。部分产品会有产品相关的特殊校验，例如：ECS：库存校验，可以...
OSS支持ETag、MD5、crc64三种校验方式。校验方式 使用场景 使用说明 ETag 用于判断资源是否发生了变化。ETag(entity tag)在每个Object生成的时候被创建，用于标识一个Object的内容。对于Put Object请求创建的Object，ETag值是其内容的MD5值...
根据校验规则校验数据源的质量，并查询校验结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
校验条件（表达式）该字段用于校验客户端调用M2M授权服务器token端点时的入参，确保只有符合校验条件的特定参数才能获取IDaaS颁发的Access Token，在PKCS#7联邦凭证场景下主要校验签名字段，信任条件长度不得超过10240字符。描述 描述字段...
功能说明 邮箱地址有效性校验 接口示例 说明 目前仅 新加坡 地域的实例可调用此服务。GetValidationQuota（获取电子邮件校验额度）用于获取额度。ValidateEmail（校验电子邮件地址）是单条地址校验。批量地址处理顺序：SendValidateFile ...
fullCheckModel Integer 全量数据校验任务的模式：1：按抽样比例进行校验。2：按行进行校验。fullCheckFixData Boolean 是否补齐数据，取值为 true 或 false，默认值为 false。说明 当取值为 true 时，若目标库有跟原库不一致的数据，则会...
数据质量的运行记录模块展示质量监控任务运行时的规则校验结果。质量监控任务运行后，您可以在运行记录页面查看详情。进入任务查询 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理 数据质量，在下拉框中选择对应工作...
权限校验：分类分级：若跨租户发布设置中功能权限校验配置为 校验操作人权限，则在导入时校验每个对象在当前目标环境的操作权限；若跨租户发布设置中功能权限校验配置为 忽略权限校验，则跳过权限校验。说明 发布过程中，校验的是根据导入...
权限校验：分类分级：若跨租户发布设置中功能权限校验配置为 校验操作人权限，则在导入时校验每个对象在当前目标环境的操作权限；若跨租户发布设置中功能权限校验配置为 忽略权限校验，则跳过权限校验。说明 发布过程中，校验的是根据导入...
在数据校验时，需要探查到源端和目标端的数据进行比较，考虑到数据的敏感性，CMH的数据校验需要客户提供一台服务器（建议是阿里云ECS），确保该服务器与源端和目标端数据源是联通的，之后在改服务器上安装一个数据校验的agent，用于进行...
涉及的功能模块 运行前校验 提交前校验 发布前校验 流程管控能力引导介绍 数据治理中心 DataWorks的数据治理中心为您内置了多个检查项，您可以根据业务需要选择开启对应的检查项，开启后，后续在涉及到对应操作时即会触发DataWorks的内置...
校准操作系统仅支持校准为类似CentOS_64、CentOS_32、CentOS_arm64的形式，不支持校准到具体的小版本信息（例如CentOS 7.9、Ubuntu 22.04）。且不支持改回原状，请确认后再修改。操作步骤 访问 ECS控制台-实例。在页面左侧顶部，选择目标...
调用ListQualityResultsByEntity，根据分区表达式查询历史校验结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透...
Dataphin支持创建校验指标的质量规则，提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象 添加及管理监控对象。权限说明 超级管理员、质量...
Dataphin支持创建校验指标的质量规则，提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员、具有 质量...
高级配置：签名校验、ETag 缓存、超时时间。header 设置：网关支持为所有请求添加或者删除 header。限流配置：对 API 调用进行限流配置。缓存配置：缓存 API 的响应，减轻业务系统压力。参数设置：请求参数设置、响应设置等，此项配置为 ...
稳定性：包含 表稳定性校验、表波动性校验、字段稳定性校验 和 字段波动性校验。自定义SQL：包含自定义SQL规则模板创建的信息。指标 支持的规则模板为 唯一性、稳定性。唯一性：包含 字段分组个数校验 和 字段重复值个数校验。稳定性：包含...
稳定性：包含 表稳定性校验、表波动性校验、字段稳定性校验 和 字段波动性校验。自定义SQL：包含自定义SQL规则模板创建的信息。指标 支持的规则模板为 唯一性、稳定性。唯一性：包含 字段分组个数校验 和 字段重复值个数校验。稳定性：包含...
跨租户发布设置用于配置跨租户发布包文件的基础设置及发布流程校验设置。本文为您介绍如何配置跨租户发布设置。前提条件 在您开始跨租户发布前，您需要在环境中，使用 超级管理员或系统管理员 设置跨租户发布使用人。具体操作，请参见 添加...
您可以通过对已创建的质量校验函数进行物理化操作，将质量校验函数存储至对应的云计算资源中，供数据元、指标、维度使用。本文介绍如何物理化质量校验函数。前提条件 已存在质量校验函数，具体操作，请参见 新建质量校验函数。操作步骤 ...
创建质量校验函数，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验，本章节介绍如何创建质量校验函数。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已在工作...
内置模板分为表级和字段级的模板规则，选择模板后，以待校验的 表 为对象，定义该表数据质量校验规则的校验方式。通过数据质量规则定义对该表数据的具体校验方式，从而确定表数据是否符合预期。批量添加需要规则校验的表或字段 选择待批量...
跨租户发布设置用于配置跨租户发布包文件的基础设置及发布流程校验设置。本文为您介绍如何配置跨租户发布设置。前提条件 在您开始跨租户发布前，您需要在环境中，使用 超级管理员或系统管理员 设置跨租户发布使用人。具体操作，请参见 添加...
Owner申请校验 实例申请权限校验 库权限申请校验 表权限申请校验 可编程对象校验 敏感字段申请校验 行权限申请校验 模板库（可选）安全规则模板库中提供了大量规则模板，选择了 检测点 以后，您可以从 模板库 中按需加载规则模板。...
语音识别检测，可以直观的看到指定语音模型语音转文字的识别准确率，通过人工校验得到正确的文本标注结果，用来训练您的自定义模型；通过型对比可以看到每次优化后的准确率提升情况，从而让您十分高效的提升语音转文字的识别准确率。提升...
涉及的功能模块 运行前校验 发布到开发环境前校验 发布到生产环境前校验 流程管控能力引导介绍 数据治理中心 DataWorks的数据治理中心为您内置了多个检查项，您可以根据业务需要选择开启对应的检查项，开启后，后续在涉及到对应操作时即会...
资产质量包括 质量概览、质量监控 和 质量治理：质量概览 为您展示质量规则校验的表数、校验结果为异常的表数等信息，帮助您从整体质量规则校验结果的视角出发，快速识别并处理异常的校验结果。质量监控 为您提供质量规则列表、配置质量...
以质量监控中需要校验的 表 为对象，定义该表数据质量校验规则的校验方式。通过数据质量规则定义对该表数据的具体校验方式，从而确定该表数据是否符合预期。数据质量监控规则包括基于模板创建的系统模板规则，以及可自定义SQL逻辑的自定义...
平滑扩容是一种在线水平扩容方式，通过把原有的分库平滑迁移到新添加的RDS/PolarDB MySQL实例上，增加RDS/PolarDB MySQL实例的数量来提升总体数据存储容量，从而降低单个RDS/PolarDB MySQL的处理压力。扩容示意图下：PolarDB-X 1.0 扩容...
资产质量包括 质量概览、质量监控 和 质量治理：质量概览 为您展示质量规则校验的表数、校验结果为异常的表数等信息，帮助您从整体质量规则校验结果的视角出发，快速识别并处理异常的校验结果。质量监控 为您提供质量规则列表、配置质量...
表 1.blade.Config 参数 是否必选 类型 描述 默认值 disable_fp16_accuracy_check 否 BOOL 是否在fp16优化中开启准确性校验，取值如下：False：关闭准确性校验 True：开启准确性校验 False disable_fp16_perf_check 否 BOOL 是否在fp16优化...
Dataphin支持创建校验数据表的质量规则，提升数据表质量监控的便捷性。本文为您介绍如何配置Dataphin表的质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象 添加及管理监控对象。权限说明 超级...
Dataphin支持创建校验数据表的质量规则，提升数据表质量监控的便捷性。本文为您介绍如何配置Dataphin表的质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员...
本文介绍如何查看质量校验函数的函数名称、函数标识和云计算资源等信息。前提条件 已创建质量校验函数，具体操作，请参见 新建质量校验函数。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
VerifyMobile-本机号码校验认证 本机号码校验认证 调用本接口进行本机号码校验认证，认证完成后返回认证结果。H5网页端 API名称 描述 说明 GetAuthToken-获取 H5 认证授权 Token 获取H5认证授权 Token。（H5能力专用）获取授权Token用于H5...
本文为您介绍 全球数据库网络（Global Database Network，简称GDN）主从实例数据校验的方法。前提条件 已开通GDN服务并添加从实例，详情请参见 开通GDN服务。注意事项 本操作只支持在 从实例 中执行。数据校验会占用一部分存储资源，建议在...
校验主要分为如下两个部分：轮廓校验：轮廓校验会对DynamoDB表以及MongoDB集合中数目的一致性进行校验，如果数目不一致则直接退出，终止后续的校验，并在屏幕上打印错误信息，便于您定位错误原因。精确校验：轮廓校验通过后会进入精确校验...