运行全部单元格:编辑完成Notebook后,单击上方 按钮,测试运行该Notebook节点下的所有单元格。运行单个单元格:编辑完成Notebook内部的单元格后,单击单元格左侧 按钮,测试运行。SQL单元格 单元格内支持撰写多种类型的SQL脚本,在运行SQL...
本文以EMR Hive单表离线同步写入MaxCompute场景为例,为您介绍OSS离线同步在数据源配置、网络连通、同步任务配置方面的最佳实践。背景信息 Hive是基于Hadoop的一个数据仓库工具,用来进行数据的提取、转化、加载,可以存储、查询和分析存储...
计算引擎生产开发环境隔离 说明 标准模式工作空间下支持将计算引擎生产、开发环境进行区分隔离,避免生产环境中的数据从开发环境泄露。DataWorks工作空间数据源 此安全检测项为您扫描当前地域下哪些工作空间创建的数据源实例存在开发、生产...
当发布流程执行到 从开发环境下线 时,数据开发目录树会保留节点,但节点ID会被移除,并且生成 从开发下线 的版本记录。当发布流程执行到 从生产环境下线 时,节点删除操作将发布至生产环境,同步下线生产环境中的任务,您可在生产环境下线...
DevPod 是函数计算 FC 提供的云端开发环境。它集成了 VS Code、Jupyter Notebook 与终端等常用开发工具,支持通过预置或自定义的容器镜像快速创建开发环境。用户可以在 DevPod 中完成 AI 模型的开发、训练、调试,并将其部署为在线服务。...
节点介绍 在do-while节点中,您可根据业务需要重新编排循环节点内部业务流程,将需要循环执行的业务逻辑放入循环节点内部,并通过循环节点内部的End节点来定义循环条件,即确认不满足何种条件的情况下退出循环。循环节点可单独使用,也可...
本文介绍物联网应用开发(IoT Studio)功能和文档的动态。2024年01月 Web可视化开发和移动可视化开发 功能名称 功能描述 发布时间 相关文档 组件交互 动作执行模式默认 同时执行,新增 按顺序执行。2024-01-29 交互配置 2023年12月 项目...
魔笔低代码开发平台提供了方便的文件上传与下载功能,用户通过魔笔平台上传的文件可以在应用设计器内使用,实现文件的灵活管理和应用。本文将详细介绍文件上传与下载的用法,以及文件如何在魔笔平台中被管理和使用。文件上传 上传步骤 点击...
配置示例 配置路径 您需要进入数据开发节点的编辑页面,单击右侧导航栏的 调度配置,在 调度配置 时间属性 区域配置节点的调度周期。场景示例 配置详情 目标任务配置在每周一、周五两天定时运行,则在周一、周五生成的实例会正常调度执行,...
当您需要为新的数据项目启动开发工作时,面临着如何隔离代码、资源和团队成员,以避免项目混乱和安全风险的挑战。DataWorks 工作空间正是为此设计的解决方案。它通过提供一个独立的、项目制的容器,让您能够结构化地管理开发任务、计算资源...
背景信息 工作流(Workflow)是一种数据处理流程自动化管理工具,它通过可视化拖拽方式整合多种类型的子任务节点,便捷地建立任务依赖关系,加速数据处理流程的搭建,有效提升任务开发效率。周期工作流支持设置的调度依赖关系 周期工作流...
开发或发布环境对比:在 开发记录 页签中,勾选两个版本,单击上方的 选择对比 按钮,即可对比不同版本的触发式工作流代码信息和调度配置信息。开发与发布或构建环境对比:在 开发记录 页签中,定位到触发式工作流的某个版本。单击 操作 栏...
调度详情 调度系统会自动为任务生成实例并运行,如下图所示。重要 使用 补数据 功能对月调度任务执行补数据操作时,请注意补数据选择的为 业务日期,业务日期=定时调度日期-1。例如:每月一号的任务在执行补数据操作时应选择业务时间为上个...
代码空间(CodeSpace)提供预置常用开发工具链的云端代码执行与开发环境,用于执行代码编译、运行脚本、API测试、CI/CD等开发相关任务。适用场景 云端开发环境:作为即开即用的远程开发环境,无需配置本地环境。自动化构建与测试:在CI/CD...
下线任务即将该任务从开发环境删除,并将删除操作发布至生产调度系统,下线后任务将无法再调度。本文以标准模式工作空间为例,为您介绍周期调度任务的下线流程、恢复流程、任务下线后对于已生成实例及正在运行实例平台侧的处理方案。使用...
为适应云原生技术演进、满足日益复杂的数据处理场景需求,并应对现有架构在可扩展性、维护性及用户体验方面的挑战,DataWorks数据开发(Data Studio)正在进行一次全面的架构升级。本次升级旨在构建一个面向未来的、高性能、高可用的数据...
调度时区 任务调度时区默认为服务器时区,如果您使用海外地域并需将任务调度时区设置为东八时区,请 提交工单 联系技术支持人员处理。说明 修改调度时区前,请务必提前参考:创建工作空间,了解修改调度时区后的影响。定时调度时间 默认...
在数据开发过程中,可以创建SQL组件节点,利用这些预定义组件快速搭建数据处理流程,从而显著提升开发效率。1010 COMPONENT_SQL MaxCompute Script 可以将多条SQL语句整合成一个脚本进行整体编译和执行,这非常适合处理复杂的查询场景,如...
DataWorks支持在创建个人开发环境的自定义镜像时,同步生成MaxCompute的自定义镜像,方便您在DataWorks节点(如PyODPS 3节点、Notebook节点)中使用MaxCompute自定义镜像。本文将为您介绍在DataWorks构建并使用MaxCompute自定义镜像。背景...
新增和使用Serverless资源组 二、开发环境准备 您需先在DataWorks工作空间注册 CDP或CDH 集群,才可在数据开发(DataStudio)进行数据开发工作,并以工作空间为单位管理空间成员,以便进行协同开发。类别 描述 相关文档 数据同步环境准备 ...
旧版数据开发使用镜像 进入数据开发:登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。配置镜像:在数据开发功能中找到待测试自定义镜像的任务节点,...
通过这些功能,您可以对认证文件、DDL消息处理策略、任务模板、公共报警规则等进行集中化、标准化的管理,从而提升开发效率和项目的规范性。配置入口 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据集成 数据集成,在下拉...
客户介绍 总部位于江苏省宿迁市的民丰农村商业银行,这家前身为当地农村信用社的农商行,总资产 400 多亿元,依靠一支规模仅有 12 人的开发团队,通过使用云平台上的数字技术,单月投资仅仅 1 万元左右,就快速实现了业务数字化、线上化...
整体过程分为五步:注册 API 分组 创建 API 配置 API 服务 测试 API 服务 生成客户端 SDK 准备 登录控制台,在 产品与服务 中选择 移动开发平台 mPaaS 进入移动开发平台主页。切换至正确的工作空间后,单击需要接入 API 服务的 App 名称。...
统一组件库架构 AntUI 的整体架构类似于积木搭建,由下至上构建出 AntUI 统一控件体系:由下而上的构架层级及其描述如下表所示:构架层级 描述 基础层(Foundation)视觉规范单元化的体现,构建 AntUI 体系的基础,主要包含原子资源、原子...
物联网应用开发(IoT Studio)中的Web可视化开发工具可帮助您开发一个基于网页的控制界面,无需编写代码,十分的方便快捷。本文介绍通过开发Web应用,实现检测边缘计算机状态和控制设备电源指示灯开关的功能。前提条件 已完成项目开发和...
DataWorks新版数据开发中的Flink SQL Streaming节点支持使用标准SQL语句定义实时任务处理逻辑。Flink SQL Streaming具有易用性、丰富的SQL支持、强大的状态管理及容错能力,兼容事件时间和处理时间,并可灵活扩展。该节点易于与Kafka、HDFS...
DataWorks数据集成支持复杂网络环境下的数据同步,您可在数据开发(DataStudio)界面直接 创建离线同步节点,用于离线(批量)数据周期性同步;实时同步任务运维,用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
本文介绍荣耀推送的接入流程,主要包括以下三个步骤。...其他问题 推送支持哪些机型和系统版本 当前荣耀的厂商推送渠道支持 Magic OS 8.0 及以上版本系统的荣耀手机,Magic OS 8.0 版本以下(不含 8.0)的版本继续使用华为的厂商推送渠道。
DataWorks的强制代码评审是工作空间维度开启,开启后,开发人员提交的节点代码必须通过评审人员的审核才可发布。同时,您可指定代码评审的基线范围(即对哪类基线任务进行评审),把控高优先级任务的代码质量,防止任务运行失败阻塞其他...
完成组件创建和相关信息编辑后,进行组件属性、服务和事件的开发。本文介绍如何开发组件。前提条件 已完成组件的创建。详细内容请参见 创建组件。开发个人组件 在 组件开发 页面,根据组件开发流程图,进行单个组件开发和使用。准备环境 ...
提供包名与签名 在 entry 中加入以下代码,获取对应输出,并在 工单系统 提交工单,联系蚂蚁工作人员提交 log 日志。let bundleInfo=bundleManager.getBundleInfoForSelfSync(bundleManager.BundleFlag.GET_BUNDLE_INFO_WITH_HAP_MODULE|...
本文将引导您在不同操作系统下完成环境搭建,另外 Windows 用户需先完成用户配置。在 Windows 操作系统中搭建前端开发环境 完成 Windows 用户配置。按照下图步骤安装 mingw 命令行环境,下载地址:git-scm。下载 并安装 NodeJS v8 版本。...
通用属性 动作 动作,默认行为需要自行指定上传地址,阿里云 OSS 模式下仅支持单文件,可选项:默认、上传至系统文件存储、上传至阿里云 OSS 系统路径 上传至系统文件存储时,选择上传的目标系统路径 上传方法 上传方法,可选项:POST、GET...
阿里云 OSS 模式下仅支持单文件,可选项:默认、上传至系统文件存储、上传至阿里云 OSS 系统路径 上传至系统文件存储时,选择上传的目标系统路径 上传方法 上传方法,可选项:POST、GET、PUT 上传地址 默认动作下,设置上传地址 OSS凭证...
您可在Web可视化编辑页面添加各种样式的组件以及交互动作,完成应用的多样化设计和功能需求开发。什么是组件 组件承载Web应用编辑器的核心功能,提供构成Web应用的基本要素。Web可视化编辑页面中包含以下组件:类型 描述 常用组件 集成常用...
提交文件至调度系统的开发环境,生成对应的任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
二、新建MaxCompute项目 DataWorks标准工作空间下,需绑定开发和生产两个MaxCompute项目,作为DataWorks开发环境下的计算资源以及生产环境下的计算资源。进入 MaxCompute工作台,单击左侧菜单进入 管理配置 项目管理 页面。单击 新建项目 ...
二、新建MaxCompute项目 DataWorks标准工作空间下,需绑定开发和生产两个MaxCompute项目,作为DataWorks开发环境下的计算资源以及生产环境下的计算资源。进入 MaxCompute工作台,单击左侧菜单进入 管理配置 项目管理 页面。单击 新建项目,...
使用DataWorks进行大数据开发时,支持对开发、测试、生产等环境进行隔离,当您联合使用了其他阿里云产品时,也可根据环境隔离诉求进行对应业务的环境设置与隔离,本文以DataWorks联合EMR、OSS等产品为例,为您介绍如何实现开发生产等多套...