为解决软件开发商和云分销商在云上部署软件、运维、交易结算等场景存在的困难，计算巢提供了软件分销模式助力软件分销商转型为云服务商。本文介绍计算巢软件分销模式的详细信息。背景信息 软件开发商为实现软件销售的最大化商业利益，除了...
2020 年 10 月《网络安全标准实践指南—移动互联网应用程序（App）使用软件开发工具包（SDK）安全指引》全国信息安全标准化技术委员会 2020 年 11 月《中华人民共和国数据安全法》全国人民代表大会常务委员会 2021 年 9 月《关于开展信息...
其中：现场开发类表：可选择显示总数据表、未完成的数据表、已暂停开发的数据表或质量较差的数据表。同步专网和产品部署类表：可选择显示总数据表或质量较差的数据表；同时显示产出异常（任务停止和运行失败）的数据表数，您可通过设置...
表开发、表管理、公共表 新版数据开发中，新增 数据目录 管理，数据目录-新建表，支持表单可视化建表，支持代码建表，支持AI建表。资源、函数开发 新版数据开发中，新增 资源管理 模块，统一管理资源和函数。临时查询 新版数据开发新增 ...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
如果需要跨项目操作开发表或生产表，子账号需要在 安全中心 发起申请，待审批通过后，便可在数据开发界面对表进行相关操作。权限申请流程 数据访问控制功能支持您进行 权限申请、权限审批、权限审计 的操作，还支持您查看 权限申请记录、...
DataWorks的DataStudio（数据开发）支持将本地的CSV文件或自定义文本文件数据直接上传至MaxCompute表中，本文为您介绍相关操作。前提条件 已创建用于接收本地数据的MaxCompute开发表。建表操作请参见 创建并使用MaxCompute表。使用限制 ...
表数量趋势：查看所选工作空间在指定时间段内的开发表、生产表或所有表的数量变化趋势。表存储分布：查看所选工作空间在指定日期内表的存储情况。表存储趋势：查看所选工作空间在指定时间段内的开发表、生产表或所有表的存储变化趋势。表...
在DataWorks开放平台，成功注册、上线并启用扩展程序后，在该扩展程序所生效的工作空间中，使用页面部分功能（即触发扩展点事件）时，DataWorks...表变更事件的消息实体格式，详情请参见：表变更事件（提交表至开发环境、发布表至生产环境）。
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。不同开发方式的使用方法、...
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、基于Catalog开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。...
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
节点代码定义：MaxCompute语法 创建并使用MaxCompute表 开发ODPS SQL任务 引用SQL组件 开发ODPS Spark任务 开发PyODPS 2任务 开发PyODPS 3任务 开发ODPS Script任务 开发ODPS MR任务 创建并使用MaxCompute资源 创建并使用自定义函数 您可...
在 将本地数据导入开发表 对话框，输入需要导入数据的测试表jieba_test并选中，单击 下一步。上传您下载至本地的jieba_test.csv文件，配置上传信息并预览数据，单击 下一步。选中 按名称匹配，单击 导入数据。创建PyODPS 3节点。右键单击...
数据质量大盘为您展示当前工作空间下，需要重点关注的数据质量总览指标、实例运行后触发的质量规则校验状态的趋势及分布情况、TOP质量问题表及质量问题责任人、质量规则覆盖保障情况等，帮助质量负责人快速了解工作空间数据质量整体情况，...
通过使用物联网应用开发（IoT Studio）平台的Web可视化开发和业务逻辑开发工具，开发一个茶园的环境监控大屏。应用用户可在监控大屏中，查看在指定时间内，设备上报的温度值折线图。设计思路 先在业务逻辑开发工作台，创建三个服务，分别是...
为适应云原生技术演进、满足日益复杂的数据处理场景需求，并应对现有架构在可扩展性、维护性及用户体验方面的挑战，DataWorks数据开发（Data Studio）正在进行一次全面的架构升级。本次升级旨在构建一个面向未来的、高性能、高可用的数据...
软件开发完成日期距公司成立日期不足半年，且程序量较大，需要提供前期开发说明，可以以1个月一万行为标准。注意事项 软件的开发完成日期必须在企业成立日期之后，如距离企业成立日期较近，不符合一个合理的开发周期，需要提供前期开发说明...
标准模式下，支持开发环境和生产环境隔离，开发环境和生产环境的数据库表命名有所区别，如果需要在开发环境访问生产环境的数据库表，请根据以下命名规范严格区分数据库表名，避免误操作生产环境。环境类型 标准模式 示例 开发环境 项目名_...
本文为您介绍DataWorks数据开发（DataStudio）界面的整体布局，以及进行开发操作的主界面（业务流程和节点）中各组件、按钮的功能作用，方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧...
本文为您介绍数据开发的相关问题。资源 如何在pyodps调用第三方包？如何在节点内使用资源？如何下载上传到DataWorks的资源？超过30M的资源如何上传？通过odpscmd上传的资源如何在DataWorks上使用？在DataWorks如何上传自己本地编写的jar并...
DataWorks为您提供了表和字段的权限申请、审批流程，审批负责人具有对应的审批权限。当审批负责人的云账号出现异常时，您需要及时对这些异常的审批负责人账号进行治理，减少审批流阻塞、规范审批流程。本文为您介绍如何在数据地图中查看及...
本文为您介绍如何创建EMR（E-MapReduce）表。背景信息 创建 旧版数据开发：EMR计算资源 后，平台将自动在 数据地图 新建EMR元数据采集器来采集该集群元数据，若您创建EMR计算资源后仍无法在此界面选择到EMR库，请前往数据地图找到该集群的...
DataWorks支持查看MaxCompute、AnalyticDB for PostgreSQL、Hologres和EMR公共表（同一租户下的生产表），您可以在公共表页面选择引擎类型和引擎名进行查看。前提条件 如果您需要查看MaxCompute、AnalyticDB for PostgreSQL、Hologres或EMR...
DataWorks的表管理模块，可按照表所属主题、表所在引擎维度展示表，并通过引擎类型、表所在环境、表名称等信息进行过滤，快速查找目标表并编辑表信息。同时，也可新建表并导入表数据。本文为您介绍表管理的相关功能。前提条件 已定义表主题...
2024-12-19 所有地域 使用新版数据开发（Data Studio）的用户 ADB Spark节点 Hologres动态表使用 DataWorks数据目录融合了Hologres动态表引擎的功能，提供了一套可视化工具用于动态表管理、调度依赖以及任务维护等操作。2024-12-13 所有...
前提条件 已完成以下操作：创建项目和产品 开发虚拟设备 使用云数据库创建数据表 说明 开发设备有不同的方法，用户可根据实际场景需要，选择相应的设备开发方法。本案例以开发虚拟设备为例。操作步骤 在开发工具模块，单击 业务逻辑。在 ...
DataWorks迁移助手支持通过工作空间摸底功能，查看当前工作空间下现有的开发成果（表、周期任务、数据质量、资源、手动任务、数据源、数据服务、函数、临时查询、组件）以及是否存在跨工作空间的任务依赖。操作步骤 登录 DataWorks管理控制...
代码示例 开发环境（数据开发、开发环境运维中心）执行代码 生产环境（生产环境运维中心）执行代码 访问开发项目中的开发表：select col1 from projectname_dev.tablename;使用任务执行者个人云账号访问开发表。RAM用户（子账号）执行相关...
DataWorks的费用主要由三部分构成：一是购买功能权限的版本软件费；二是运行任务的资源组费用；三是数据质量、智能监控等服务的超额费用。此外，底层MaxCompute等引擎的计算与存储成本，将产生独立的账单。计费概览 一、软件费用 重要 购买...
本方案面向希望提升开发效率的DataWorks用户，通过SSH安全连接，将本地Visual Studio Code编辑器与云端个人开发环境打通，让开发者在享受本地工具体验的同时，无缝利用云端计算与数据能力，实现编码、调试效率的提升。流程概览 环境准备：...
DataWorks 计费体系为适应不同业务场景而设计得非常灵活，因此包含软件版本、资源组、其他服务及底层引擎等多个组成部分。本文旨在帮您做出明智的购买决策，根据自身业务阶段选择最优配置以实现成本效益最大化，并提供针对个人开发者、成长...
提交到开发环境 提交表至DataWorks的开发环境，即在开发环境对应的Hologres数据库创建当前表。提交后您可在DataWorks数据开发相应业务流程（即创建表时所选的路径）的Hologres目录，查看该表结构。从生产环境加载 用于从生产环境加载生产表...
若您当前使用的是简单模式工作空间，但希望将开发与生产环境隔离，可将简单模式工作空间升级为标准模式工作空间。本文为您介绍如何升级工作空间模式。操作须知 升级工作空间模式前，您需先了解以下内容：了解简单模式与标准模式工作空间的...
说明 仅Hologres V0.9及以上版本支持单表级别的Binlog功能。Binlog的更多介绍，详情请参见 订阅Hologres Binlog。配置业务信息。说明 表的业务信息，仅是基于业务需求方便管理表使用，不涉及底层逻辑的实现。参数 描述 主题 表所属的一级...
任务执行环境 实时场景 数据开发执行任务（开发环境执行任务）场景一：select col1 from tablename 用个人账号访问开发环境下该表。即用个人账号访问：projectname_dev.tablename。场景二：select col1 from projectname.tablename 用个人...
开发ODPS MR任务 创建表、资源与函数 除上述通用的MaxCompute任务开发能力外，DataWorks还为您提供表、资源、函数的能力支持，便于您高效开展MaxCompute任务开发工作。MaxCompute表能力：支持在DataWorks上通过界面化的操作，快捷创建表、...
DataWorks全新推出了实时数据开发治理功能，通过集成数据治理插件和LSP（Language Server Protocol）技术，在代码保存时可触发智能检测，并提供针对性的修复建议。开发者可以选择一键确认修复，快速解决问题。该功能依托预设的治理规则库和...
需在 管理中心 补全开发环境配置后，方可在数据开发和单表离线同步中使用。 后续步骤 数据源配置完成，并且经过 连通性测试 后，您可以：进入数据集成，配置同步任务：数据集成侧同步任务。进入数据开发（Data Studio），配置单表同步...
本文以EMR Hive单表离线同步写入MaxCompute场景为例，为您介绍OSS离线同步在数据源配置、网络连通、同步任务配置方面的最佳实践。背景信息 Hive是基于Hadoop的一个数据仓库工具，用来进行数据的提取、转化、加载，可以存储、查询和分析存储...