在为企业级大数据平台创建项目时,建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目,对于ADS层的数据,按照应用的粒度建立项目。项目分配 在本教程中,建议参考下图建立您的MaxCompute项目,图中的每一个方块代表一个项目。...
需要在 DataWorks 项目空间中具有如下至少一种角色:租户所有者、空间管理员、部署、开发、项目所有者、运维 调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例...
已开发创建项目目录,详情请参见 项目目录。已创建Hologres SQL节点,详情请参见 创建周期任务。操作步骤 在Hologres SQL节点编辑页面,执行如下开发操作。开发SQL代码 在SQL编辑区域开发任务代码,您可在代码中使用${变量名} 的方式定义...
已开发创建项目目录,详情请参见 项目目录。已准备所需使用的组件,详情请参见 组件管理。已创建SQL组件节点,详情请参见 创建任务节点。操作步骤 在创建SQL组件节点编辑页面,执行如下开发操作。组件引用设置 进入节点右侧的 组件设置,在...
已开发创建项目目录,详情请参见 项目目录。已创建ADB for MySQL节点,详情请参见 创建周期任务。使用限制 ADB for SQL不支持单独使用SET语句,必须和具体的SQL语句一起执行。背景信息 AnalyticDB for MySQL是阿里云的一种分析型数据库,...
已开发创建项目目录,详情请参见 项目目录。已创建ADB for PostgreSQL节点,详情请参见 创建周期任务。背景信息 ADB for PostgreSQL节点用于接入阿里云产品分析型数据库PostgreSQL版,详情请参见 分析型数据库PostgreSQL版。操作步骤 在ADB...
删除对象是否进入回收站具体策略如下:进入回收站 不进入回收站 在Data Studio如下位置中删除的对象会进入回收站:数据开发:项目目录 中删除的 节点 和 工作流。手动:手动工作流、手动任务 中删除的 工作流 和 节点。组件:项目组件管理 ...
已开发创建项目目录,详情请参见 项目目录。已创建PAI Designer节点,详情请参见 创建任务节点。步骤一:PAI Designer节点开发 在PAI Designer节点编辑页面,执行如下开发操作。开发节点任务 编辑PAI Designer节点任务时,如选择加载已有...
PAI Flow提供端到端机器学习流程开发能力,可实现与人工智能平台 PAI 的 可视化建模 Desiger 相同的工作流功能,并能周期性调度工作流。使用限制 产品限制:PAI Flow仅支持 DataWorks工作空间(新版)。PAI Flow目前仅支持 源/目标 与 RAG...
备注 系统从数据开发跨项目克隆默认迁移生成的发布环境,源端项目:${源工作空间显示名}(${源工作空间名称})到目标端项目:${目标工作空间显示名}(${目标工作空间名称})。默认迁移克隆包逻辑 DataWorks会将 跨项目克隆 的历史 克隆包列表 中...
已开发创建项目目录,详情请参见 项目目录。已创建PAI DLC节点,详情请参见 创建任务节点。操作步骤 在PAI DLC节点编辑页面,执行如下开发操作。开发任务代码 您可根据业务需求选择以下方式编写DLC任务:基于已有DLC任务编写任务代码 通过...
细分特点 简单模式 标准模式 权限概述 在简单模式空间下,DataWorks的“开发”角色因为与所绑定MaxCompute项目的“Role_Project_Dev”Role进行了映射,因此:DataWorks开发角色天然能够读取MaxCompute项目内的所有数据。由于简单模式工作...
本文为您介绍新版数据开发的基本开发流程。前提条件 已创建DataWorks工作空间并开通新版数据开发。本指南适用于新版数据开发,如需使用,请确保您的工作空间已开通新版数据开发。开通方式如下:创建工作空间 时,选择 使用新版数据开发...
已开发创建项目目录,详情请参见 项目目录。上传并发布使用的资源,详情请参见 资源管理。创建MaxCompute MR节点,详情请参见 创建任务节点。说明 您需要上传并发布使用的资源后,再创建MaxCompute MR节点。背景信息 MapReduce是一个分布式...
已开发创建项目目录,详情请参见 项目目录。已创建ADB Spark节点,详情请参见 创建调度工作流的节点。步骤一:开发ADB Spark节点 在ADB Spark节点里面,您可根据 语言 类型的不同,使用示例代码准备的示例Jar包 spark-examples_2.12-3.2.0....
已开发创建项目目录,详情请参见 项目目录。已创建MaxCompute Spark节点,详情请参见 创建任务节点。使用限制 当MaxCompute Spark节点选择Spark3.x版本时,若提交节点报错,请购买使用Serverless资源组,详情请参见 新增和使用Serverless...
为适应云原生技术演进、满足日益复杂的数据处理场景需求,并应对现有架构在可扩展性、维护性及用户体验方面的挑战,DataWorks数据开发(Data Studio)正在进行一次全面的架构升级。本次升级旨在构建一个面向未来的、高性能、高可用的数据...
物联网应用开发(IoT Studio)的Web可视化开发功能依赖于项目,开发Web应用前需要先创建项目,并接入所需产品和设备。创建项目 登录 物联网应用开发控制台,在页面左上角选择对应实例后,在左侧导航栏单击 项目管理。在 项目管理 页面,...
生活物联网平台支持您对项目进行管理,包括授权项目给其他成员、修改项目名称以及删除项目。前提条件 已登录生活物联网平台,详见 登录生活物联网平台。已创建项目,详见 创建项目。项目授权 当您的项目需要其他成员共同管理时,您可以以...
开发背景 描述该项目采用的技术背景。产品目标 描述产品所需达到的预期目标,基于此可以评估当前架构设计是否能够支持该目标的实现。项目整体分析 功能性需求测试分析 术语表 下表将为您介绍产品需求文档中的术语并给出定义,避免由于对...
若您要使用DataWorks进行MaxCompute任务的开发、管理,需先将您的MaxCompute项目绑定为DataWorks的MaxCompute计算资源。绑定完成后,可在DataWorks的各功能模块使用该计算资源连接MaxCompute项目,进行相应的数据同步、数据开发、数据分析...
二、新建MaxCompute项目 DataWorks标准工作空间下,需绑定开发和生产两个MaxCompute项目,作为DataWorks开发环境下的计算资源以及生产环境下的计算资源。进入 MaxCompute工作台,单击左侧菜单进入 管理配置 项目管理 页面。单击 新建项目 ...
二、新建MaxCompute项目 DataWorks标准工作空间下,需绑定开发和生产两个MaxCompute项目,作为DataWorks开发环境下的计算资源以及生产环境下的计算资源。进入 MaxCompute工作台,单击左侧菜单进入 管理配置 项目管理 页面。单击 新建项目,...
敏捷研发历史 敏捷软件开发的实践最早出现在上世纪 90 年代。当时,一批轻量的软件工程方法和框架相继诞生,它们共同的特点是,相对传统软件工程,都遵循演进和迭代的模型,过程更加轻量灵活。其中 Scrum 和极限编程(ExtremeProgramming)...
当您需要为新的数据项目启动开发工作时,面临着如何隔离代码、资源和团队成员,以避免项目混乱和安全风险的挑战。DataWorks 工作空间正是为此设计的解决方案。它通过提供一个独立的、项目制的容器,让您能够结构化地管理开发任务、计算资源...
物联网应用开发(IoT Studio)提供管理项目中设备服务,包括查看设备列表、添加设备、编辑设备基本信息、关联或解除关联物联网平台中已创建设备、删除设备等。前提条件 当前项目下已创建产品或已关联物联网平台的产品。具体操作,请参见 ...
开发一个小程序通常包括以下步骤:下载 IDE 创建小程序 下载配置文件 登录小程序 IDE 选择关联小程序 编辑代码 上传小程序 发布小程序 下载 IDE 下载小程序开发者工具(IDE):Windows(64-bit)macOS(x64,适用大多数机型)macOS(arm64...
软件开发完成日期距公司成立日期不足半年,且程序量较大,需要提供前期开发说明,可以以1个月一万行为标准。注意事项 软件的开发完成日期必须在企业成立日期之后,如距离企业成立日期较近,不符合一个合理的开发周期,需要提供前期开发说明...
变更与部署 项目开发阶段的所有配置变更将被暂存于 函数计算,仅当项目开发完毕,开发者选择项目级别或者服务级别部署时,对应的变更才会真正在云产品资源层面生效。开发和部署分离将最大程度避免意外故障。计费说明 通过Function AI部署...
创建E-MapReduce集群后,您可以在数据开发中创建项目,并在项目中进行作业的编辑和工作流的调度。新建项目之后,您可以对项目进行管理,为项目关联集群资源、添加项目成员以及设置全局变量。前提条件 已创建集群,详情请参见 创建集群。...
计算资源已绑定至数据开发 复制一份生产环境的数据源至开发环境,并且开发环境数据源的MaxCompute项目名称自动添加_dev 后缀。若生产环境数据源的项目名称原本已包含_dev,则对应的开发环境数据源的项目名称将继续添加_dev 后缀。示例:...
云卓越中心CCoE运营+ISV运营模型 在构建云卓越中心的过程中,组织可以基于自身的优势和特点,如果组织需要进行特定领域或特定行业的软件开发,可以考虑选择ISV来提供这样的服务。ISV通常能够与公司的其他产品形成互补,提供更好的解决方案...
由于开发和生产项目Owner都是同一个账号,请谨防通过发布任务到生产项目时,将生产项目表读写到开发项目再通过开发项目获取生产数据。业务场景二:创建仅实现查询、下载业务数据的项目 场景需求 业务单一,成员角色基本一致,后续业务不会...
随着项目演进中,人员权限会更新,您需要及时审视人员权限合理性,提升项目数据安全。本文为您介绍权限查询要点及调整建议。背景信息 在项目创建初期,为了提升业务处理效率,通常在用户和权限管理上相对宽松。但是当项目进入稳定发展的...
物联网应用开发(IoT Studio)的项目详情页面提供了查看产品列表及其详情、创建产品、编辑产品基本信息和删除产品等功能。背景信息 在同一个物联网平台账号下:同一项目中的产品和设备仅可应用于相同项目下的Web可视化开发和业务逻辑开发。...
说明 DataWorks的工作空间分为 简单模式 和 标准模式:简单模式:指一个DataWorks工作空间对应一个引擎项目,无法设置开发和生产环境,只能进行简单的数据开发,无法对数据开发流程以及表权限进行严格控制。标准模式:指一个DataWorks工作...
分析师(仅单环境项目或开发项目可配置)拥有项目文件(含规范建模对象)查看权限、项目即席查询文件增删改权限、项目内任务节点查看权限。数据操作权限中拥有本项目所有物理表的查询权限和本项目建表权限,跨项目权限以租户安全权限策略为...
分析师(仅单环境项目或开发项目可配置)拥有项目文件(含规范建模对象)查看权限、项目即席查询文件增删改权限、项目内任务节点查看权限。数据操作权限中拥有本项目所有物理表的查询权限和本项目建表权限,跨项目权限以租户安全权限策略为...
物联网应用开发(IoT Studio)业务逻辑开发依赖于项目,开发业务服务前需要先创建项目,并接入所需产品和设备。创建项目 登录 物联网应用开发控制台,在页面左上角选择对应实例后,在左侧导航栏单击 项目管理。在 项目管理 页面,创建普通...
说明 在标准模式工作空间中,DataWorks处理开发环境的项目时,会默认在MaxCompute的项目角色中添加成员。这样,成员将具备所有数据的读取权限。详情请参见 MaxCompute引擎在不同模式工作空间访问资源与权限说明。在标准工作空间模式中,...