登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击某个业务流程,选择 新建节点 CDH CDH Spark。在 新建节点 对话窗中,配置节点的引擎实例、...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧导航栏单击 表管理。新建、查找及编辑目标表 新建表及导入表数据 在表管理页面,您可单击 及 ...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程,选择 新建节点 算法 PAI DLC。在 新建节点 对话框输入节点 名称,单击 确认...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。查找目标节点并进入节点编辑页面。在 数据开发 或 手动业务流程 功能模块的目录树,或通过 临时查询...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧业务流程目录下,双击目标业务流程,进入该业务流程的编辑面板。新建节点组。生成节点组。您...
true DevEnvironmentEnabled boolean 否 是否启用开发环境:true 工作空间启用开发环境,支持开发与生产环境隔离。false 仅使用生产环境。false AliyunResourceTags array object 否 标签列表。object 否 Key string 否 标签键。batch ...
进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入数据开发后,您可根据下文流程创建所需任务。开发流程 数据开发任务的通用开发...
环境准备 一、资源准备 类别 描述 相关文档 版本选择 DataWorks基础版服务可满足EMR基本的数据上云、数据开发与调度生产、简单的数据治理工作,若需获取更专业的数据治理、数据安全解决方案,可选择相应的 标准版、专业版、企业版 服务。...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程,选择 新建节点 SSH。在 新建节点 对话框输入节点 名称,单击 确认。节点创建...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入资源组编排页面。在数据开发页面,鼠标悬停至目标业务流程,单击业务流程后的 图标,进入该业务...
开发环境数据源仅用于节点的开发与调试,而生产环境数据源则专用于已发布节点的周期性调度,两者严格分离,可有效防止测试操作影响生产数据。功能介绍 数据源使用 DataWorks的数据源在工作空间的 管理中心 数据源 中进行统一管理和维护。...
本案例指导您完成购房群体分析,帮助您掌握DataWorks的数据开发与数据分析流程。案例介绍 本案例基于用户买房数据,分析不同群体的购房情况。通过DataWorks进行数据开发和数据分析。将本地数据通过DataWorks上传至MaxCompute的 bank_data ...
DataWorks支持将需要发布的对象(节点、函数、资源、组件等)批量添加至发布包,统一...发布成功后,在页面左上角单击 图标,选择 全部产品 数据开发与运维 运维中心,进入生产环境,然后在 周期任务运维 周期任务 中查看已发布的周期任务。
开发与发布或构建环境对比:在 开发记录 页签中,定位到手动任务的某个版本。单击 操作 栏中的 对比 按钮,在详情页中选择与 发布记录 或 构建记录 中的某个版本进行对比。还原 版本:仅支持将 开发记录 中的手动任务还原到指定的历史版本...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 数据建模 维度建模。在 维度建模 页面单击 图标,进入 模型列表...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 运维中心,在下拉框中选择对应工作空间后单击 进入运维中心。单击左侧导航栏中的 调度设置,单击页面中的 工作空间参数,单击右侧的 新建工作空间参数 按钮,在 ...
创建EMR资源 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建资源 EMR EMR JAR 或 新建资源 EMR EMR File。您也可以找到...
背景信息 DataWorks的数据开发(DataStudio)面向各引擎(MaxCompute、Hologres、EMR、CDH等)提供可视化开发界面,包括智能代码开发、数据清洗加工、规范化任务开发与发布等,保证数据开发的高效与稳定。更多数据开发模块的使用,详情请...
开启强制代码评审并配置评审信息 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入安全设置与其他界面。在DataStudio页面单击左下角的 图标,...
ContainerOS基于Alibaba Cloud Linux并基于云场景做了大量的优化,复用Alibaba Cloud Linux多年的软件包与镜像构建交付经验,同时在镜像发布前,执行OS基础测试、ACK集成测试来保障镜像的可用性与安全性。计费说明 ContainerOS是免费镜像。...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。发布任务。检查通过的文件变更操作可在 任务发布 创建发布包 界面将操作发布至生产环境,有以下两种...
进入个人设置 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在DataStudio界面左侧导航栏底部单击 图标,进入 设置 个人设置 页面。在该页面,您可...
进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。说明 数据开发仅支持在PC端Chrome浏览器69以上版本使用。模块介绍 能力概览 数据开发...
各模块场景教程 数据开发与调度 相关教程 说明 教程使用的计算引擎 涉及模块 ETL工作流快速体验 DataWorks推出ETL工作流模板案例集,旨在帮助您快速了解产品的最佳实践。您可以一键将案例导入至指定工作空间,快速还原案例,体验产品能力。...
进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。说明 数据开发仅支持在PC端Chrome浏览器69以上版本使用。模块介绍 能力概览 数据开发...
开发与发布或构建环境对比:在 开发记录 页签中,定位到资源或函数的某个版本。单击 操作 栏中的 对比 按钮,在详情页中选择与 发布记录 或 构建记录 中的某个版本进行对比。下载 版本:仅支持下载已发布 资源 文件 开发记录 中的文件版本...
2020 年 10 月《网络安全标准实践指南—移动互联网应用程序(App)使用软件开发工具包(SDK)安全指引》全国信息安全标准化技术委员会 2020 年 11 月《中华人民共和国数据安全法》全国人民代表大会常务委员会 2021 年 9 月《关于开展信息...
功能点 说明 相关文档 任务开发与发布权限控制 通过赋予用户不同角色权限,控制是否可以实现相应功能。具体如下:控制某用户不允许发布任务,可仅赋予该用户开发角色权限。控制某用户不允许进入数据分析,则请勿为该用户赋予数据分析师角色...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建EMR Kyuubi节点。右键单击目标业务流程,选择 新建节点 EMR EMR Kyuubi。说明 您也可以鼠标悬停...
完成Shell节点脚本开发与测试后,需对Shell节点进行 调度配置,以实现Shell节点的周期运行。完成任务调度配置后,需对节点进行 保存 后,才可进行下一步操作。节点发布与运维 完成调度配置后,即可对已完成的Shell节点提交发布至生产环境,...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面,鼠标悬停至 图标,单击 新建节点 通用 参数节点。您也可以打开相应的业务流程,...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建EMR Presto节点。右键单击目标业务流程,选择 新建节点 EMR EMR Presto。说明 您也可以鼠标悬停...
Data Studio新版数据开发支持将个人开发环境制作成镜像,以供数据开发与其他个人开发环境使用。本文将介绍如何在个人开发环境制作个人开发实例镜像。背景介绍 在个人开发环境开发测试时,若您想要使用不同的三方依赖,您不仅可以在个人开发...
进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。进入数据开发后,您可以创建业务流程及不同类型的节点进行相关开发操作,详情请参见 ...
3.本协议终止时,甲方有权选择要求乙方归还或删除与软件及与软件有关的任何文件,并向甲方书面确认乙方已经完成上述行为。第十一条 其他 1.本协议适用中华人民共和国法律。因本协议产生的或与本协议有关的任何纠纷或争议,双方应首先通过...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建EMR Impala节点。右键单击目标业务流程,选择 新建节点 EMR EMR Impala。说明 您也可以鼠标悬停...
多引擎开发:DataWorks Notebook拥有SQL Cell功能,支持多种大数据引擎的SQL开发与分析。交互式分析:交互式SQL查询:通过Python编写Widgets组件,通过在组件中直观选择或设置参数的取值,后续可以进一步在SQL中引用相同参数及取值,从而...
进入安全设置与其他 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在DataStudio界面左侧导航栏底部单击 图标,进入 设置 页面。在 设置 页面,...
登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建EMR Hive节点。右键单击目标业务流程,选择 新建节点 EMR EMR Hive。说明 您也可以鼠标悬停至 ...
软件开发完成日期距公司成立日期不足半年,且程序量较大,需要提供前期开发说明,可以以1个月一万行为标准。注意事项 软件的开发完成日期必须在企业成立日期之后,如距离企业成立日期较近,不符合一个合理的开发周期,需要提供前期开发说明...