登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。新建业务流程，详情请参见 创建周期业务流程。在本地Java环境编辑程序并生成JAR包后，再新建JAR资源...
Available DevEnvironmentEnabled boolean 否 是否启用开发环境：true 工作空间启用开发环境，支持开发与生产环境隔离 false 仅使用生产环境 该参数用于查询符合“启用/未启用开发环境”条件的工作空间详情。true DevRoleDisabled boolean ...
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程，选择 新建节点 ClickHouse ClickHouse SQL。在 新建节点 对话框中输入节点 ...
创建EMR资源 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标，单击 新建资源 EMR EMR JAR 或 新建资源 EMR EMR File。您也可以找到...
DataWorks包括简单模式和标准模式两种工作空间模式，本文为您详细介绍MaxCompute引擎在不同模式工作空间的权限管理特征、资源访问行为差异。前提条件 已了解 简单模式与标准模式的区别。已了解 MaxCompute数据权限控制。使用说明 类别 说明...
true：工作空间启用开发环境，支持开发与生产环境隔离 false：仅使用生产环境 true DevRoleDisabled boolean 否 是否禁用开发角色：false，开启开发角色（默认）true，禁用开发角色 注意：禁用开发角色（即禁用工作流程和代码编辑功能）后...
权限点 项目所有者 空间管理员 数据分析师 开发 运维 部署 访客 安全管理员 模型设计师 数据治理管理员 运行/停止工作流 保存工作流 查看工作流内容 提交节点代码 修改工作流 查看工作流列表 修改owner属性 打开节点代码 删除工作流 创建...
背景介绍 在个人开发环境开发测试时，若您想要使用不同的三方依赖，您不仅可以在个人开发环境安装完善当前环境中的三方依赖，还可以将当前环境制作为自定义镜像，为其他个人开发环境与工作空间提供依赖服务。通过个人开发环境创建的镜像...
三、创建工作空间 工作空间是DataWorks中进行任务开发、成员权限管理、协同开发的基本单元，DataWorks所有开发工作都将在工作空间内进行，您可参考以下内容为本案例创建DataWorks标准模式工作空间（开发、生产环境隔离）。进入工作空间列表...
true DevEnvironmentEnabled boolean 否 是否启用开发环境：true 工作空间启用开发环境，支持开发与生产环境隔离。false 仅使用生产环境。false AliyunResourceTags array object 否 标签列表。object 否 Key string 否 标签键。batch ...
进入数据开发 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。进入数据开发后，您可以创建业务流程及不同类型的节点进行相关开发操作，详情请参见 ...
调试工作流 若需要在数据开发调试触发式工作流，可以单击工作流画布上方工具栏的 运行图标，在弹窗中填写 触发器消息体，来模拟事件产生。发布触发式工作流 工作流调试完成后，单击工具栏中的 发布按钮唤起发布看板，单击 开始发布生产，...
true DevEnvironmentEnabled boolean 是否启用开发环境：true 工作空间启用开发环境，支持开发与生产环境隔离。false 仅使用生产环境。true DevRoleDisabled boolean 是否禁用开发角色：false，开启开发角色 true，禁用开发角色 false ...
不支持创建周期性调度任务 该目录下的文件仅个人可见 个人代码开发与调试 手动目录 工作空间级 支持创建手动任务（节点/工作流）不支持创建周期性调度任务 创建需要手动触发运行的临时性任务或一次性任务 进入项目目录 进入 DataWorks工作...
进入数据开发 进入 DataWorks工作空间列表页，在顶部切换至目标地域，找到已创建的工作空间，单击 操作 列的 快速进入 Data Studio，进入Data Studio。在Data Studio页面左侧导航栏单击 按钮，进入 数据开发 页面。在Notebook节点使用 以下...
DataWorks管理控制台提供一个集中管理的可视化页面，方便用户管理工作空间列表、资源组列表、大模型服务列表、镜像列表以及已购资源与服务。同时，管理控制台还提供功能模块的快速入口，用户能够快速进入所需功能。管理控制台丰富多样的...
说明 如果在 创建工作空间 时选择了隔离生产、开发环境，则此处需要分别为生产和开发环境选择Spark工作空间。如何创建Spark工作空间，请参见 创建Spark工作空间。默认引擎版本 在Data Studio中新建EMR Spark任务时，将会默认使用此处配置的...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射，来让被授予空间角色的RAM用户，拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限，但默认无生产权限，本文为您介绍预设角色权限基本情况、MaxCompute权限...
本示例以标准模式工作空间为例，且仅在开发环境调试，所以仅需在开发环境对应的MaxCompute项目下创建 bank_data 表，若您使用的是简单模式工作空间，则只需在生产环境对应的MaxCompute项目下创建 bank_data 表即可。单击表目录右侧的 按钮...
在开发/生产环境中，将会通过 空间管理员职责 访问身份检查OSS对象，请确认OSS Bucket权限设置。步骤一：开发OSS对象检查节点 进入已创建OSS对象检查节点后，即可按照界面提示进行配置。配置检查对象及检测策略。OSS对象：输入OSS对象路径...
2019 年 1 月《App 违法违规收集使用个人信息自评估指南》App 违法违规收集使用个人信息专项治理工作组 2019 年 3 月《关于开展 App 侵害用户权益专项整治工作的通知》工业和信息化部 2019 年 11 月《App 违法违规收集使用个人信息行为认定...
开发或生产环境用户访问跨工作空间的开发或生产环境表、资源或函数。默认不在工作空间下的子账号无法在数据开发界面跨项目访问开发表或生产表。如果需要跨项目操作开发表或生产表，子账号需要在 安全中心 发起申请，待审批通过后，便可在...
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。单击打开已有数据开发节点或 新建节点，进入节点编辑页面。在节点编辑页面，单击进入 调度配置 调度...
标准模式工作空间：开发、生产环境隔离，在发布到生产环境前，单击 发起冒烟测试，冒烟测试将在开发环境执行。进入冒烟测试界面后，选择冒烟测试的业务日期。说明 冒烟测试选择业务时间为今天或者昨天时，冒烟测试任务将等待定时时间到达后...
若您要使用DataWorks进行EMR Serverless Spark任务的开发、管理，需先将您的EMR Serverless Spark工作空间绑定为DataWorks的Serverless Spark计算资源。绑定完成后，可在DataWorks中使用该计算资源进行数据开发操作。前提条件 已 创建EMR ...
简单模式的工作空间无开发环境，详情请参见 简单模式和标准模式的工作空间。PROD Bizdate string 是 业务日期。2020-05-26 00:00:00 Name string 是 工作流的名称。xm_create_test NodeId long 是 节点的 ID。您可以调用 ListNodes 接口...
数据资产治理（原数据治理中心）可根据预先配置的治理计划，自动发现平台使用过程中数据存储、任务计算、代码开发、数据质量及安全等维度存在的问题，并通过健康分量化评估，从全局、工作空间、个人等多个视角，以治理报告及排行榜呈现治理...
数仓的最基本职责是定义和发现在企业决策中使用的信息，随着企业战略方向的改变与业务方对行业判断的变化，需求会不断变化。该特性决定了数据仓库需求的多样性和迭代性。作为承接业务方数据需求的数据产品经理，在需求阶段需要规范首次需求...
权限说明 您需具备DataWorks工作空间的 开发 权限，才可创建并使用组件。授权详情请参见 空间级模块权限管控。组件类型 组件分为项目组件及公共组件，组件开发者（即创建组件的用户）在创建组件时可自行定义。项目组件管理：组件发布后，...
DataWorks迁移助手支持通过工作空间摸底功能，查看当前工作空间下现有的开发成果（表、周期任务、数据质量、资源、手动任务、数据源、数据服务、函数、临时查询、组件）以及是否存在跨工作空间的任务依赖。操作步骤 登录 DataWorks管理控制...
DataWorks的运行历史面板展示您最近三天在数据开发界面的任务执行记录。使用限制 仅展示 当前账号 的运行记录。仅展示 最近三天 的运行记录。仅展示数据开发模块的运行记录。如需查看调度任务每日运行情况，请前往 运维中心 的 周期实例，...
Data Studio新版数据开发支持个人开发环境与Git仓库集成，便于代码版本管理和团队协作。本文将介绍如何在个人开发环境中对远程Git仓库代码进行拉取、新增、修改并上传提交等操作。背景信息 Data Studio支持个人开发环境与远程Git仓库集成，...
您可以通过DataWorks的工作空间模块快速创建适用于OpenLake解决方案的工作空间。OpenLake工作空间介绍 产品介绍：在DataWorks创建工作空间时，工作空间模板选择了OpenLake即为OpenLake工作空间。OpenLake工作空间是一个适用于开放可控数据...
说明 如果在 创建工作空间 时选择了隔离生产、开发环境，则此处需要分别为生产和开发环境选择Flink工作空间。Flink项目空间 选择您开通实时计算Flink版集群时系统默认生成的Flink项目空间。您也可在下拉菜单中单击 新建 Flink项目空间，...
Data Studio个人开发环境是账号级云端开发实例，集成OSS/NAS存储、Git代码管理及Python/Notebook生态，支持本地脚本执行、在线调试与任务提交，通过灵活的自定义镜像和外部服务扩展能力，为数据处理、模型训练及协作开发提供高效、可定制的...
10000 ProjectIdentifier string 否 DataWorks 工作空间的唯一标识符，即数据开发页面顶部切换工作空间处的英文标识。该参数与 projectid 参数二者必须设置其一，以确定本次 API 调用操作的 DataWorks 项目。dw_project BusinessName ...
当前版本的工作空间与升级至新版后的工作空间之间，无法在新版和旧版数据开发之间进行跨工作空间任务发布。升级期间，新版Data Studio及旧版DataStudio在当前工作空间均将无法新增或修改已有内容（包含界面操作及通过OpenAPI操作）。升级...
步骤二：开发PAI Designer节点任务 简单示例 开发任务：编写Designer工作流 编辑PAI Designer节点任务时，如选择加载已有工作流，则需提前在PAI中创建Designer工作流，通过名称搜索，载入已经创建好的工作流。在PAI Designer节点编辑页面，...
本方案面向希望提升开发效率的DataWorks用户，通过SSH安全连接，将本地Visual Studio Code编辑器与云端个人开发环境打通，让开发者在享受本地工具体验的同时，无缝利用云端计算与数据能力，实现编码、调试效率的提升。流程概览 环境准备：...
当您所需要管理多个DataWorks工作空间且需要复用一套数仓规划时，面对跨多个工作空间的复杂数据体系，可以通过设计空间来共享一套数据建模工具，针对整个数据体系进行统一的数仓规划、维度建模及指标定义等工作。本文为您介绍DataWorks建模...