通过质量规则管理页面，统一管理并设置各个逻辑表质量规则，方便用户查看以及设置所有逻辑表的质量规则。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑...
通过质量规则管理页面，统一管理并设置各个逻辑表质量规则，方便用户查看以及设置所有逻辑表的质量规则。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑...
通过设置逻辑表质量规则并运行质量检测计划后，您可以查看逻辑表质量检查结果，方便用户掌握当前逻辑表的质量状况，您可以通过可视化方式与自定义SQL方式制定表级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...
通过设置逻辑表质量规则并运行质量检测计划后，您可以查看逻辑表质量检查结果，方便用户掌握当前逻辑表的质量状况，您可以通过可视化方式与自定义SQL方式制定表级与字段级质量规则。本文以可视化方式为例介绍如何设置逻辑表表规则和字段...
质量监控规则：质量规则本身的执行取决于规则的调度配置，规则对应的监控结果将跟随在映射关系页面配置的全局统一落标评估任务的执行而更新；如果您希望查看规则的最新执行状态，也可以直接访问质量页面进行查询，落标评估配置请参见 落标...
质量监控规则：质量规则本身的执行取决于规则的调度配置，规则对应的监控结果将跟随在映射关系页面配置的全局统一落标评估任务的执行而更新；如果您希望查看规则的最新执行状态，也可以直接访问质量页面进行查询，落标评估配置请参见 落标...
表数据质量监控：支持对同步后的数据进行数据质量监控，目前仅部分数据库类型支持配置数据质量监控规则。详情请参见：数据质量概述。开发和生产隔离：同一个名称的数据源存在开发环境和生产环境两套配置，配置数据同步任务时会使用开发环境...
数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务，详情请参见 开通Dataphin。背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性及...
数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块。背景信息 面对各行各业日趋强烈的大数据建设、管理及应用的诉求，Dataphin应用场景的多样性...
从OSS恢复一个新的HBase集群，也是创建集群时在 软件配置 的 高级设置 区域，开启 软件自定义配置 参数，配置参数如下。[{"ServiceName":"HBASE","FileName":"hbase-site","ConfigKey":"hbase.rootdir","ConfigValue":"oss:/${bucket}.${...
超过限制时，系统会尽可能提供服务，但不保证服务质量。写入次数 写入次数最大为500次/s。非硬性限制。超过限制时，系统会尽可能提供服务，但不保证服务质量。读取流量 读取流量最大为20 MB/s。非硬性限制。超过限制时，系统会尽可能提供...
说明 当 重跑属性 配置为可重跑时，应尽量保证任务的幂等性，避免多次重跑出现数据质量问题。自动重跑次数 周期任务调度执行失败情况下，默认自动重跑的次数。重跑次数最少配置为1（即任务出错后自动重跑1次），最多配置为10（即任务出错后...
提供全链路的资产质量方案，包括质量大盘、配置质量规则、查看校验记录、质量监控、智能报警、查看质量报告等功能。如果您选择了 资产安全，下方展示 数据识别 和 数据脱敏 增值功能。更多信息请参见 资产安全概述。数据安全支持定义数据的...
提供全链路的资产质量方案，包括质量大盘、配置质量规则、查看校验记录、质量监控、智能报警、查看质量报告等功能。如果您选择了 资产安全，下方展示 数据识别 和 数据脱敏 增值功能。更多信息请参见 资产安全概述。数据安全支持定义数据的...
为高效完成各个服务器中的软件安装，本示例中将使用宝塔面板安装并配置各个软件。如果您熟悉服务器相关操作，也可以自行完成软件安装与配置。如果您的域名需要备案，则需确保轻量应用服务器购买时长大于或等于三个月。高可用架构集群中，...
支持灵活强大的分支管理策略 通过密钥、权限管理保证代码数据安全 研发环境 提供高性能的容器集群管理方案 低成本查看和追踪操作历史 流程中心 按业务需求灵活配置研发流程规则 配置质量标准并进行卡点管控 管理员配置 支持跨云租户的环境...
背景信息 软件供应链包括三个阶段：软件研发阶段、软件交付阶段、软件使用阶段，不同阶段的攻击面如下：阶段 攻击面 软件研发阶段 IDE开发工具污染攻击 三方库漏洞和后门攻击 直接源码污染攻击 软件交付阶段 软件存储替换和篡改攻击 传输...
当伸缩组类型为ECS时，您可以参考本文为伸缩组创建伸缩配置，用来指定弹性扩张时ECS实例使用的模板。当触发弹性扩张活动后，弹性伸缩会以该伸缩配置为模板自动创建ECS实例，以此来简化创建和管理实例的过程，并提高了扩容的成功率。前提...
它是一个为分布式应用提供一致性服务的软件，提供的功能包括配置维护、域名服务、分布式同步、组服务等。在 Hadoop 集群等场景下，ZooKeeper 同时充当应用配置管理的角色。但是由于它是 CP（Consistency，Partition Tolerance）类应用，...
创建集群时，您需要配置集群的硬件配置、软件配置、基础配置等信息。本文介绍如何在E-HPC控制台使用向导创建集群。前提条件 已创建服务关联角色。首次登录E-HPC控制台，系统会提示您创建E-HPC服务关联角色。已创建专有网络VPC和交换机。...
采用数据元的数据标准管理 根据业务需要，创建数据标准以约束建模规范，根据字段标准设置可以快速创建字段级质量规则，保证字段命名、字段值域遵循统一的标准规范，提升数据质量。流程图 流程说明 操作 说明 新建模型目录 通过新建模型目录...
采用数据元的数据标准管理 根据业务需要，创建数据标准以约束建模规范，根据字段标准设置可以快速创建字段级质量规则，保证字段命名、字段值域遵循统一的标准规范，提升数据质量。流程图 流程说明 操作 说明 新建模型目录 通过新建模型目录...
QoS即服务质量，在网络中可以通过保证传输的带宽、降低传送的时延、降低数据的丢包率以及时延抖动等措施来提高服务质量。用户同时拥有多家门店，门店的业务包括ERP、订单和OA办公等多种业务系统，各种业务系统之间争夺带宽，导致关键业务的...
数据质量规则配置 在DataWorks上使用CDH引擎时，可使用DataWorks的数据质量服务进行数据查、对比、质量监控、SQL扫描和智能报警等功能，数据质量服务的详细操作可参见 数据质量概述。数据地图配置 在DataWorks上使用CDH引擎时，可使用...
（可选）软件自定义配置 如果您导出了旧平台集群中的服务配置，或计划在创建集群流程中预置配置，则可以在新平台集群创建流程中开启软件自定义配置，并将编辑好的配置粘贴输入框中，详细使用方法请参见 配置自定义软件。硬件配置 在 查看...
数据建模中建立的质量规则需要通过创建质量检查计划并运行后才能实现质量的管控，本文介绍如何新建并启用物理表质量检查计划。前提条件 已新建模型，且模型已经物理化，具体操作，请参见 物理化逻辑表。模型中已新建质量规则且规则已开启，...
数据建模中建立的质量规则需要通过创建质量检查计划并运行后才能实现质量的管控，本文介绍如何新建并启用物理表质量检查计划。前提条件 已新建模型，且模型已经物理化，具体操作，请参见 物理化逻辑表。模型中已新建质量规则且规则已开启，...
专有网络VPC是您专有的云上私有网络。阿里云提供了针对不同场景接入VPC私网的产品和服务，如高速通道、VPN网关、云企业网和智能接入网关等。方案概览 下表介绍了各个场景的私网接...安装和部署SSL-VPN软件 具体操作，请参见 配置SSL-VPN软件。
通过单条管道创建集成任务 配置OSS输入组件 配置Salesforce输入组件 配置FTP输入组件 配置Microsoft SQL Server输入组件 通过整库迁移配置集成任务 配置OSS输出组件 实时研发 实时任务研发体验流程优化：Flink SQL任务支持通过数据源编码的...
目前仅支持填写系统字段内容，包括：三、场景示例 1、利用流转规则进行缺陷管理 为了保证测试质量，测试负责人期望测试用例不能由开发人员关闭，只能由相关的测试人员验证后关闭，那么只需要将执行操作权限设置为「测试工程师」。...
配置监听 配置监听，是指配置管理组件允许软件系统通过使用SDK等方式向配置管理系统注册监听器（Listener），从而监听并消费该配置的变更。配置项 配置项是指一个具体的可配置的参数与其值域，通常是param-key=param-value的形式存在。例如...
支持数据质量检验和控制 可以设置数据质量规则和异常报警策略，及时发现和处理数据质量问题。支持实时监控任务运行状态和查看日志 用户可以实时了解任务的执行情况，并设置异常告警，保证任务的稳定运行。支持多种数据库产品组合 支持多种...
质量规则模板常用于抽象质量规则配置中逻辑一致或相似的逻辑，可以提升后续配置质量监控规则的效率。Dataphin内置支持20+质量规则模板，并支持通过自定义SQL的方式灵活拓展，以满足企业的质量监控诉求。本文为您介绍如何新建质量规则模板。...
代码质量管控 新工程新代码，在快速迭代同时，还需要保证代码质量。控制面几乎全部由 Go 语言开发，不像标准开发语言 Java 一样有非常丰富的组件支持，因而在度量时没有丰富的质量指标。借助蚂蚁集团效能团队的 Ant Code 服务，蚂蚁团队...
质量规则模板常用于抽象质量规则配置中逻辑一致或相似的逻辑，可以提升后续配置质量监控规则的效率。Dataphin内置支持20+质量规则模板，并支持通过自定义SQL的方式灵活拓展，以满足企业的质量监控诉求。本文为您介绍如何新建质量规则模板。...
在页面顶部的常用操作栏中单击 配置变更>软件/新应用配置。如果需要修改技术栈版本，从版本下拉框中选择目标版本，然后单击 保存，完成配置。更多关于技术栈的内容，参见 技术栈管理 相关文档。技术栈配置生命周期 如果是在线下环境进行...
您可使用数据管理DMS的数据质量功能来自定义表或列维度的数据质量规则，并结合任务编排的稽核任务自动检查数据质量，保证数据的一致性、唯一性、充分性等，从而提升二次数据分析与开发的质量。前提条件 目标实例的管控模式为安全协同。更多...
您可以使用Kafka Producer SDK、Beats系列软件、Collectd、Fluentd、Logstash、Telegraf、Vector等采集工具采集日志，并通过Kafka协议上传到日志服务。本文介绍通过采集工具采集到日志后，利用Kafka协议上传日志到日志服务的操作步骤。相关...
配置推送 配置管理中，常需要配置管理系统将配置的变更分发到相关的系统，从分发到配置生效的过程称为配置推送。推送轨迹 从配置变更，配置推送到配置生效过程的整个轨迹称为推送轨迹。通过查看某个配置的推送轨迹，我们可以获知一个配置...
回滚配置 配置自定义软件 支持在集群创建时使用软件自定义配置功能，修改现有配置或添加新的配置项。配置自定义软件 导出和导入服务配置 支持以XML或JSON格式导出服务配置，便于备份、迁移和恢复EMR服务的配置。导出的JSON格式的服务配置...