您可在DataWorks中注册CDH及CDP集群，基于业务需求进行相关任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和治理操作。使用限制 仅支持使用Serverless资源组（推荐）或旧版独享调度资源组运行CDH或CDP集群任务。说明...
以下简称CDH）和CDP（Cloudera Data Platform，以下简称CDP）集群对接的能力，您可在DataWorks中注册CDH及CDP集群，进行任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和治理操作。背景信息 CDH是Cloudera的开源平台...
该功能依托预设的治理规则库和语义分析引擎，能够主动识别代码中的语法错误、数据规范问题以及潜在缺陷，从而实现代码质量的闭环管理。注意事项 启用或关闭数据开发节点检查治理插件、相关治理项以及LSP设置仅对当前账号生效。治理项问题...
数据管理DMS数仓开发通过项目空间、业务场景和任务流三级目录讲行项目管理，同时支持数仓分层管理，有利于清晰地管理某一情景下的数据仓库管理需求，充分满足各类复杂的数仓开发和管理需求。项目空间是数仓开发、管理和运维的基本单位。...
自动备份：2024年04月26日00:00之后新创建的软件密钥管理实例，启用软件密钥管理实例后，KMS会自动创建一个备份，用于备份该软件密钥管理实例的数据。更多信息，请参见【公告】KMS软件密钥管理实例支持免费自动备份功能。说明 建议您优先...
问题列表 启用KMS实例时为何一直显示连接中 启用KMS硬件密钥管理实例时提示“连接失败”启用KMS软件密钥管理实例时出现报错提示 启用KMS硬件密钥管理实例时出现报错提示 如何配置KMS硬件密钥管理实例关联的密码机集群 应用程序是否可以跨...
若您要使用DataWorks进行Flink任务的开发、管理，需先将您的实时计算Flink集群绑定为DataWorks的全托管Flink计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据开发操作。前提条件 已 开通实时计算Flink版集群。说明 建议购买...
若您要使用DataWorks进行OpenSearch任务的开发、管理，需先将您的OpenSearch实例绑定为DataWorks的OpenSearch计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据同步和开发操作。前提条件 已 购买OpenSearch向量检索版实例。...
集成与开发（DTS）数仓开发 数仓开发以数据库为主要计算引擎，融合数据库生态中多种工具和服务（如DTS、DLA等），让用户可以轻松拥有数据仓库进行开发和管理。任务编排 任务编排主要用于编排各类任务并进行调度执行，通过创建一个或多个...
若您要使用DataWorks进行AnalyticDB for Spark任务的开发、管理，需先将您的云原生数据仓库AnalyticDB for MySQL集群绑定为DataWorks的AnalyticDB for Spark计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据开发操作。前提...
支持您通过本地文件管理的方式管理云上节点和资源，并在此完成周期性调度任务的协调开发。本文为您介绍如何使用项目目录。背景信息 除了项目目录外，Data Studio还提供了个人目录和手动目录，以满足不同的开发需求，帮助您在各种业务场景下...
若您要使用DataWorks进行EMR Serverless StarRocks任务的开发、管理，需先将您的EMR Serverless StarRocks实例绑定为DataWorks的Serverless StarRocks计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据开发操作。前提条件 已 ...
Terraform是一种开源工具，用于安全高效地预览、配置和管理云基础架构和资源。本文介绍Terraform的基本概念和针对 密钥管理服务 KMS（Key Management Service）的应用场景。什么是Terraform Terraform是IT基础架构自动化编排工具，可以用...
软件密钥管理实例：软件密钥管理实例为您提供密钥服务、凭据管理服务，将密钥和凭据安全地存储在您独享的KMS实例中，具备高度的可扩展性和安全性。硬件密钥管理实例：硬件密钥管理实例通过连接您在阿里云加密服务中的密码机（HSM）集群提供...
若您要使用DataWorks进行云原生数据仓库AnalyticDB PostgreSQL版实例（以下简称 AnalyticDB for PostgreSQL）任务的开发、管理，需先将您的AnalyticDB for PostgreSQL实例绑定为DataWorks的AnalyticDB for PostgreSQL计算资源。创建完成后...
若您要使用DataWorks进行Hologres任务的开发、管理，需先将您的Hologres实例创建为DataWorks的Hologres计算资源。创建完成后，可在DataWorks的各功能模块使用该计算资源连接Hologres实例，进行相应的数据同步、数据开发、数据分析等操作。...
若您要使用DataWorks进行ClickHouse集群任务的开发、管理，需先将您的ClickHouse集群创建为DataWorks的ClickHouse计算资源。创建完成后，可在DataWorks的各功能模块使用该计算资源连接ClickHouse集群，进行相应的数据同步、数据开发等操作...
若您要使用DataWorks进行Lindorm任务的开发、管理，需先将您的Lindorm实例绑定为DataWorks的Lindorm计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据同步和开发等操作。背景信息 Lindorm 是基于云原生架构的分布式计算服务，...
若您要使用DataWorks进行AnalyticDB for MySQL3.0任务的开发、管理，需先将您的AnalyticDB for MySQL3.0集群绑定为DataWorks的AnalyticDB for MySQL(V3.0)计算资源。创建完成后，可在DataWorks的各功能模块使用该计算资源连接AnalyticDB ...
DataWorks管理控制台提供一个集中管理的可视化页面，方便用户管理工作空间列表、资源组列表、大模型服务列表、镜像列表以及已购资源与服务。同时，管理控制台还提供功能模块的快速入口，用户能够快速进入所需功能。管理控制台丰富多样的...
若生产场景中引用逻辑表的质量规则发生变更，则可以通过开发环境场景重新部署运行后上线更新生产场景规则或者通过质量规则管理页面，一键更新生产场景中的规则，具体操作，请参见 更新生产场景质量规则。后续步骤 待场景运行后，可查看场景...
若您要使用DataWorks进行EMR Serverless Spark任务的开发、管理，需先将您的EMR Serverless Spark工作空间绑定为DataWorks的Serverless Spark计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据开发操作。前提条件 已 创建EMR ...
若您要使用DataWorks进行MaxCompute任务的开发、管理，需先将您的MaxCompute项目绑定为DataWorks的MaxCompute计算资源。绑定完成后，可在DataWorks的各功能模块使用该计算资源连接MaxCompute项目，进行相应的数据同步、数据开发、数据分析...
若您要使用DataWorks进行E-MapReduce（简称EMR）任务的开发、管理，需先将您的E-MapReduce集群绑定为DataWorks的EMR计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据同步和开发等操作。前提条件 DataWorks已 创建工作空间，...
仅对应工作空间的“开发”、“运维”或“管理员”角色具备配置数据质量规则的权限。数据服务 各工作空间之间的数据服务是 部分隔离 的。各工作空间会共享服务分组的定义，但是注册或发布的服务API仅在当前工作空间可见。数据保护伞 各工作...
请在加密服务控制台的 实例列表 页面，单击密码机实例的 规格 列，下载密码机实例管理工具，解压后即得到密码机软件包。在软件包中找到开发手册、SDK、示例程序等，您可以参考开发手册，...如果您需要开发接入方面的技术支持，请 联系我们。
您可以使用图片质量评分功能检测图片的综合质量分数，通常用于封面图、低质量图片过滤等场景。重要 此文档已不再维护，建议您使用新版智能媒体管理。关于智能媒体管理新版与旧版的对比，请参见 新旧版本使用指引。关于新版智能媒体管理图片...
支持多开发组统一管理审核 管理后台支持对不同来源的小程序进行统一审核，基于统一小程序质量与隐私政策进行审核，保证宿主应用 App 提供统一质量的小程序体验。稳定、持续优化的小程序容器 SDK 提供稳定高效的小程序容器 SDK，支撑宿主 ...
了解创建数据源并绑定至数据开发的相关内容，详情请参见 数据源管理、开发前准备：绑定计算资源或集群。使用限制 仅支持阿里云主账号执行工作空间模式升级操作。暂不支持将开启新版数据开发的工作空间从简单模式升级为标准模式。升级策略 ...
支持执行的操作限制：在数据开发（DataStudio）创建的数据质量监控规则，仅支持在数据开发运行，并执行修改、发布等管理操作。该规则也可在数据质量模块中查看，但不能触发调度运行，不允许执行相关管理操作。若修改数据质量监控节点中配置...
开发环境发布 开发环境用于开发阶段的调试，发布之后可在应用环境信息中查看开发环境应用的地址。生产环境发布 生产环境用于实际的业务场景，服务终端用户，发布之后可在应用环境信息中查看生产环境应用的地址。Copilot 应用访问 Copilot ...
本文描述移动开发平台 mPaaS支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制...
支持执行的操作限制：在Data Studio创建的数据质量监控规则，仅支持在数据开发运行，并执行修改、发布等管理操作。该规则也可在数据质量模块中查看，但不能触发调度运行，不允许执行相关管理操作。若修改数据质量监控节点中配置的监控规则...
本文为您介绍如何管理数据质量监控过程中从数据表中发现的非预期数据。背景信息 问题数据表 数据质量支持在部分规则校验不通过的情况下，系统自动创建 问题数据表 存储质量规则校验过程中发现的问题数据。问题数据表名生成规则：{监控数据...
软件开发完成日期距公司成立日期不足半年，且程序量较大，需要提供前期开发说明，可以以1个月一万行为标准。注意事项 软件的开发完成日期必须在企业成立日期之后，如距离企业成立日期较近，不符合一个合理的开发周期，需要提供前期开发说明...
目前仅支持对数据开发（Data Studio）、数据质量、数据分析、运维中心模块设置全局 Spark 参数。前提条件 已注册EMR集群至DataWorks，详情请参见 新版数据开发：绑定EMR计算资源。设置全局Spark参数 进入全局Spark参数配置页面。进入管理...
离线集成页面概述 离线集成页面主要由离线管道任务目录、工具栏、开发画布、配置及管理、控制台组成。您可以在离线集成页面对离线管道任务进行创建、管理以及配置操作。区块 说明 ① 离线集成目录 创建的离线管道任务将在任务目录中进行...
离线集成页面概述 离线集成页面主要由离线管道任务目录、工具栏、开发画布、配置及管理、控制台组成。您可以在离线集成页面对离线管道任务进行创建、管理以及配置操作。区块 说明 ① 离线集成目录 创建的离线管道任务将在任务目录中进行...
管理自定义函数 作业调试 使用作业调试功能模拟作业运行、检查输出结果，验证SELECT或INSERT业务逻辑的正确性，提升开发效率，降低数据质量风险。作业调试 数据连接 连接器 实时计算Flink版内置了丰富的连接器用于多种上下游的数据读写与...
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧...