标准工作空间下,冒烟测试在 隔离的开发环境 中执行,即使任务包含数据写入,也不会影响您的线上生产数据。进入数据开发 进入数据开发。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中...
本文介绍了针对不同的开发进度和场景,建议使用的接入方式。三种接入方式 根据 iOS 开发工程的进展和使用场景,接入移动开发平台 mPaaS 的方式主要有以下三种:当前无工程,从头开始创建一个全新的工程:基于 mPaaS 框架接入。当前已有工程...
前提条件 如要添加自定义前端组件,确保已完成相应组件的开发。操作步骤 登录 mPaaS 控制台后,从左侧导航栏进入 智能搭建 组件管理 页面。单击 创建组件,在组件创建面板上,完成组件信息配置。配置项 说明 组件名称 自定义组件名称,在...
其中:DataWorks用于管理大数据作业的开发、运维、调度。2个EMR集群分别用于开发和生产环境。OSS用于存储实际数据。DLF用于存储管理元数据。DLF的环境隔离 在DLF中创建两个 数据目录(catalog),一个用于存储开发环境下的元数据(dev ...
您可以根据业务需求,选择 全量导出、增量导出 或 自选导出 等方式导出DataWorks中的开发成果。使用限制 仅支持 旧版数据开发 任务导入导出。旧版数据开发 中的数据质量节点、组合节点和数据推送节点暂不支持。当前各个版本的DataWorks均...
开发小程序 在 成员管理 中为小程序添加开发组成员,单击 首页 的 开发配置,配置小程序。下载 IDE 进行代码开发、调试及代码上传。发布小程序 在 首页 单击 我的小程序,进入 我的小程序 页面。单击 小程序列表 操作列的 查看。在 智能...
您可以根据业务需求,选择 全量导出、增量导出 或 自选导出 等方式导出DataWorks中的开发成果。使用限制 仅支持 旧版数据开发 任务导入导出。旧版数据开发 中的数据质量节点、组合节点和数据推送节点暂不支持。当前各个版本的DataWorks均...
Kylin 是 mPaaS H5 容器的无线前端解决方案,具有高效的运行时、一致的开发体验、丰富的研发支撑、完善的 UI 组件等诸多优点,解决移动 Hybrid 开发中遇到的前端打包、浏览器兼容性、Mock 接口等问题。Kylin 仅提供基于 Vue 2.0 的视图层...
升级策略 工作空间模式升级后,平台会基于原简单模式工作空间的生产环境数据源,新增对应的开发环境数据源,实现数据源环境隔离。MaxCompute数据源:平台通过判断计算资源是否被绑定至数据开发(DataStudio),提供相应升级策略。计算资源...
前提条件 您已完成相关数据源和提交接口的开发。操作步骤 登录 mPaaS 控制台后,从左侧导航栏进入 智能搭建 接口管理 页面。单击 创建接口,在接口创建面板上,完成接口配置。配置信息 说明 接口名称 接口的名称 接口类型 支持两种类型的...
268 EMR_KYUUBI ADB ADB for PostgreSQL 可进行AnalyticDB for PostgreSQL任务的开发和周期性调度。1000090-ADB for MySQL 可进行AnalyticDB for MySQL任务的开发和周期性调度。1000126-ADB Spark 可进行AnalyticDB Spark任务的开发和周期...
DataWorks数据开发(DataStudio)模块用于定义周期调度任务的开发及调度属性,与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您...
步骤 描述 相关文档 步骤一:新建业务流程 DataWorks数据开发基于业务流程组织与开发代码,您需先新建业务流程,才可进行后续的开发工作。创建业务流程 步骤二:新建数据表 DataWorks支持使用可视化方式创建表,并以目录结构在界面展示。...
DataWorks数据开发(DataStudio)模块用于定义周期调度任务的开发及调度属性,与运维中心配合使用,面向各引擎(MaxCompute、Hologres、EMR等)提供可视化开发主界面,支持智能代码开发、多引擎混编工作流、规范化任务发布等能力,帮助您...
两种模式的开发行为及数据安全不同,建议您在实际开发时,选择标准模式工作空间。详情请参见 工作空间模式区别、工作空间模式升级。工作空间核心操作 核心操作 操作说明 相关文档 生命周期管理 创建工作空间 根据不同的业务场景规划和创建...
钉钉小程序:钉钉小程序是一种全新的开发模式,并支持iOS、安卓等多端部署。其他集成方式:移动应用集成到微信公众号的具体操作,请参见 自定义菜单。移动应用集成到微信小程序的具体操作,请参见 小程序开发指南。使用说明 支付宝小程序和...
通过这些功能,Data Studio为您提供了一个高效、灵活且强大的开发环境,使您能够更便捷地进行数据处理、分析和模型训练等工作,从而提高开发效率和代码质量。产品计费 个人开发环境实例创建时需要指定资源组和CU,根据运行时长收取资源组...
您可以参考本文完成组件接口的开发和使用。整个过程主要分为三步:获取业务组件数据结构。业务组件的数据结构和该组件的 mock.json 文件除去可选参数字段外,其余字段均保持一致。编写接口。表单提交接口 修改组件后,会调用该接口保存组件...
背景信息 DataWorks的工作空间分为 标准模式和简单模式,不同模式工作空间下任务的开发流程存在一定差异,两种模式的数据开发流程示意如下。标准模式工作空间开发流程 简单模式工作空间开发流程 如上图所示,在通用流程的关键节点,例如,...
您将需要 配置开发环境(本教程中 Windows 下的开发环境为例进行说明)。网络浏览器(建议您使用 Chrome 浏览器)。一部安卓手机(系统版本为安卓 4.3 或更新版本)及配套的数据线。您也可以选择使用模拟器进行调试,本教程以模拟器为例。
DataWorks通过 工作空间 解决方案 业务流程 三级结构,全新定义开发流程,提升开发体验:工作空间:权限组织的基本单位,用来控制您的开发、运维等权限。工作空间内成员的所有代码均可以协同开发管理。解决方案:您可以自定义组合业务流程...
数据开发 面板中的资源只有 上传为ODPS资源,并 提交 或 发布 后,才会出现在 MaxCompute资源 面板的开发环境或生产环境中。通过MaxCompute客户端、MaxCompute Studio等非DataWorks渠道上传的资源文件,不会在 数据开发 面板显示,但会出现...
若您要使用DataWorks进行Hologres任务的开发、管理,需先将您的Hologres实例创建为DataWorks的Hologres计算资源。创建完成后,可在DataWorks的各功能模块使用该计算资源连接Hologres实例,进行相应的数据同步、数据开发、数据分析等操作。...
开发者可通过网页版 VSCode、JupyterLab 或 SSH 终端 直接进行编码与调试,无需在本地配置复杂的开发环境。一键构建与部署:当开发者在 DevPod 中完成模型开发和本地测试后,可通过平台提供的工具一键触发镜像的构建、推送至镜像仓库,并...
作为工作空间的管理者,在使用数据开发(DataStudio)时,您可以针对用户的开发行为实施有效的管控措施,进行开发流程、数据安全、审计等相关操作,本文将帮助您快速掌握DataStudio的相关功能,实现对数据开发过程的有效管控。背景信息 ...
已完成扩展程序的开发部署操作,详情请参见 开发部署扩展程序:函数计算方式。背景信息 启动扩展程序。您可以在 管理中心 页面查看 扩展程序,并控制是否需要在当前工作空间启用该扩展程序校验。数据开发支持的扩展点事件。DataWorks的数据...
为方便满足不同安全管控要求的用户生产数据,DataWorks为您提供简单模式和标准模式两种工作空间模式。...建议:建议您将简单模式工作空间升级为标准模式工作空间,以便获得更好的开发流程管控。详情请参见 工作空间模式升级。
权限类别 描述 MaxCompute开发项目权限 DataWorks通过空间级预设角色与开发环境MaxCompute引擎Role的映射关系,让被授予空间角色的RAM用户(子账号)拥有该角色映射的开发引擎权限,默认拥有开发环境对应的引擎项目权限,但无生产环境对应...
在 将本地数据导入开发表 对话框中,输入存放数据的开发表,确认表信息无误后单击 下一步。若选择的表为分区表,您可设置数据导入到该表的哪个分区,完成后可单击 检测 按钮,测试分区是否存在。当填写的分区不存在时,继续操作将会新建该...
本文介绍操作权限控制的相关问题。如何控制工作空间下各用户可操作哪些功能权限?...关于预设角色拥有的对应功能权限列表请参考文档:附录:预设角色权限列表(空间级)。关于自定义DataWorks角色您可以参考文档:空间级模块权限管控。...
开始使用 DataWorks为您提供了多个功能模块,您可在数据开发(DataStudio)中进行调度任务的开发,并在开发完成后进入生产运维中心进行调度任务的监控运维。同时,提供了任务开发与发布的流程管控,助力您规范开发操作,保障开发过程的安全...
配置完成后单击 发布,系统会将模型发布至对应的 开发 或 生产 环境,并物化至所选引擎。支持在 发布 对话框查看当前发布进度及相关日志 支持重复执行发布操作将模型发布至不同的环境中。可选:发布完成后,您可单击表详情页顶部菜单栏的 ...
DataWorks通过空间预设角色或空间自定义角色与开发环境引擎Role映射,来让被授予空间角色的RAM用户,拥有该空间角色映射的开发引擎Role所拥有的MaxCompute引擎权限,但默认无生产权限,本文为您介绍预设角色权限基本情况、MaxCompute权限...
您需先通过创建SSH数据源远程访问您的SSH服务器,才可在SSH节点中进行SSH任务的开发和周期性调度。创建数据源,请参见 创建SSH数据源。说明 SSH节点仅支持使用JDBC连接串方式创建的SSH数据源。同时,为避免任务运行失败,请确保数据源与...
DataWorks的Lindorm Spark SQL节点可进行Lindorm Spark SQL任务的开发和周期性调度。本文为您介绍使用Lindorm Spark SQL节点进行任务开发的主要流程。背景信息 Lindorm 是基于云原生架构的分布式计算服务,支持社区版计算模型、兼容Spark...
如果运行在Serverless资源组上的任务需要特定的开发环境(例如第三方库依赖),您可以创建一个集成必要开发包与依赖的自定义镜像,然后在运行任务时,指定Serverless资源组作为执行资源,并指定该镜像作为运行环境。更多信息,请参见 自...
细分特点 简单模式 标准模式 权限概述 在简单模式空间下,DataWorks的“开发”角色因为与所绑定MaxCompute项目的“Role_Project_Dev”Role进行了映射,因此:DataWorks开发角色天然能够读取MaxCompute项目内的所有数据。由于简单模式工作...
背景信息 除了项目目录外,Data Studio还提供了个人目录和手动目录,以满足不同的开发需求,帮助您在各种业务场景下高效进行数据开发和管理。以下是对这三种类型目录的对比,您可以根据具体需求选择合适的目录进行开发。目录类型 权限范围 ...
数据开发:用于周期调度任务的开发,支持基于各类引擎创建不同节点进行数据开发,该模块开发的任务可发布到生产环境进行运维。说明 您需要在数据开发中绑定相应类型的计算资源后,才可以基于该引擎进行数据开发。手动业务流程:用于手动...
例如,执行离线同步任务时,开发环境自动访问预配置的开发环境数据库,而生产调度则访问生产库。说明 简单模式工作空间仅拥有一个环境,无法做到开发与生产隔离。关于工作空间模式的介绍,详情请参见 工作空间模式区别。若简单模式升级为...