本文权威汇总了DataWorks Notebook开发的核心问题,涵盖从节点创建、多语言开发、交互式运行到高级应用场景,助您扫清开发障碍,提升数据分析与AI建模效率。
重要 如果您使用的是 DataWorks 标准版或更高版本,还需要支付相应的 软件版本费用。DataWorks不会同时产生 任务调度费用 和 独享调度资源组费用。若使用了独享调度资源组,则不再计算任务调度费用。数据集成场景费用 进行 数据集成 与运维...
本文将从接入、启动和拓展三方面向您介绍如何使用开发小助手。接入开发小助手 前置条件 已使用组件化 Portal&Bundle 接入方式接入 mPaaS。接入步骤 您只需在 Portal 工程的 build.gradle 文件中加入如下代码,即可完成开发小助手的接入。...
开发小助手提供的功能可分为四大类:LOG 日志类、TOOL 工具类、UI 界面类和 OTHER 其他类。LOG 日志类 日志类包含 闪退、沙盒浏览 和 日志 三个功能。闪退 闪退功能支持快速查看闪退日志。沙盒浏览 沙盒浏览功能支持查看 App 的所有文件。...
空间级别-开发角色:可以做任务开发的工作,如DataStudio任务开发、数据服务开发、DQC配置等。空间级别-运维角色:负责配置资源与任务部署,如配置数据源、发布任务。空间级别-部署角色:仅负责发布任务。空间级别-模型设计师角色:仅能...
开发人员根据需求将代码发布上线后,还需要及时处理数据、程序、调度、监控告警等的异常事件,保障数据产出时效、程序高效运行和生产稳定性。背景信息 数据开发人员主要需要处理以下事项:程序异常处理、性能优化。调度异常处理。数据质量...
本文介绍了在医疗行业中使用了移动开发平台服务的客户案例。南京儿医在线 mPaaS x 南京儿医在线:媲美原生,小程序容器提升医疗应用研发效能。项目背景「南京儿医在线」是南京儿童医院开发的官方就医 App。在 App 发展初期,采用了「原生 ...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建CDH集群,并注册至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将CDH集群注册至...
本产品(大数据开发治理平台 DataWorks/2024-05-18)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
您可以通过MaxCompute资源面板,查看在MaxCompute计算引擎中存在的资源、资源的变更历史,并可以一键添加资源文件至数据开发面板的业务流程中。使用限制 仅支持MaxCompute客户端(odpscmd)上传的不超过 500 M的资源通过MaxCompute资源功能...
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。已创建CDH集群,并注册至DataWorks。创建CDH相关节点并开发CDH任务前,您需要先将CDH集群注册至...
DataWorks提供了全链路的数据开发治理能力,为您提供了统一的数据开发治理流程,同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...
本文介绍如何让聊天显示 DeepSeek 模型深度思考内容 使用百炼智能体应用集成资源 本例适用于使用“百炼智能体应用”来搭建业务逻辑的应用,若您直接从百炼平台以魔笔渠道发布应用或使用“企业知识问答”、“个人云助手模板”启动应用,可...
迁移助手可以帮您快速复制DataWorks上不同的版本、主账号、地域和工作空间中的开发成果。...隔离开发环境和生产环境 当开发环境和生产环境的网络完全隔离后,您可以通过迁移助手,导出开发环境中已完成开发的任务至生产环境。
DataWorks的AnalyticDB for MySQL节点可进行AnalyticDB for MySQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用AnalyticDB for MySQL节点进行任务开发的主要流程。前提条件 已购买AnalyticDB for MySQL,详情请参见...
mPaaS 提供了以下开发者工具以帮助开发者能够快速接入 mPaaS 并辅助进行开发工作。mPaaS Xcode Extension:是基于 XcodeKit 构建的官方插件,它可以在 Xcode 的 Editor 菜单中增加额外的命令。安装简单,不需要去除 Xcode 签名。通过全新的...
适用场景 该功能仅支持 标准模式且使用了新版数据开发 的工作空间,在同一工作空间下,将节点、函数、资源、组件等对象批量从开发环境发布至生产环境。说明 标准模式的旧版数据开发同空间批量发布流程请参见 发布任务。使用限制 权限限制 ...
介绍什么是魔笔低代码应用开发平台。什么是魔笔 魔笔是为阿里云 专业开发者 量身打造的 AI 原生化 的 低代码应用开发平台,集成了 通义千问大模型,让开发更智能、应用更智能。魔笔提供一站式的应用全生命周期管理,包括可视化开发、发布、...
本文为您介绍DataWorks数据开发(DataStudio)界面的整体布局,以及进行开发操作的主界面(业务流程和节点)中各组件、按钮的功能作用,方便您快速了解及使用数据开发模块。进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧...
移动可视化开发是物联网应用开发(IoT Studio)提供的开发工具。无需写代码,只需在编辑器中,拖拽组件到画布上,再配置组件显示样式、数据源和动作。目前支持生成HTML5应用,并绑定域名发布。适用于开发设备控制App、工业监测App等。功能...
为适应云原生技术演进、满足日益复杂的数据处理场景需求,并应对现有架构在可扩展性、维护性及用户体验方面的挑战,DataWorks数据开发(Data Studio)正在进行一次全面的架构升级。本次升级旨在构建一个面向未来的、高性能、高可用的数据...
创建Hologres数据源 开发前准备:绑定计算资源或集群 协同开发环境准备 为保障RAM用户以工作空间为单位进行协同开发,您需执行如下操作:需将进行协同开发的RAM用户添加为当前工作空间的成员,并授予其开发角色。将工作空间成员添加至...
您可以通过MaxCompute函数面板,查看在MaxCompute计算引擎中存在的函数、函数的变更历史,并可以一键添加函数至数据开发面板的业务流程中。查看函数 进入 数据开发 页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据...
使用 云原生应用开发平台 CAP 需要了解平台的核心组件和功能,本文介绍相关组件和功能的名词解释。概念名称 说明 模板 预置的应用定义,用于快速部署应用程序,便于开发者体验或二次开发。项目 项目就像一个应用程序栈或一组相关的组件,您...
物联网应用开发(IoT Studio)公测版产品有以下使用限制。使用说明 2022年06月16日以前开通的IoT Studio产品为公测版产品。2022年06月16日(包含当日)以后开通的IoT Studio产品规格和使用限制请参考 产品规格。公测版产品如果不满足业务...
DataWorks的StarRocks节点可进行StarRocks任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用StarRocks节点进行任务开发的主要流程。背景信息 StarRocks是新一代极速全场景MPP(Massively Parallel Processing)数据库,...
当您的团队需要在DataWorks中进行协同开发时,面临着项目隔离、权限分配和计算资源管理的挑战。工作空间正是解决这些问题的核心单元,它通过提供一个独立的环境,让您能够清晰地组织开发任务、分配成员角色并绑定所需的计算引擎,从而确保...
对聊天数据进行持久化保存 准备工作 创建 页面布局 数据库 创建表 chat_session session_id text content text role text create_at timestamptz 创建代码 系统内置数据库集成 addSession SQL语句 INSERT into chat_session(content,role,...
Presto(即PrestoDB)是一款灵活、可扩展的分布式SQL查询引擎,支持使用标准的SQL查询语言进行大数据的交互式分析查询,DataWorks为您提供EMR Presto节点,便于您在DataWorks上进行Presto任务的开发和周期性调度。本文为您介绍使用EMR ...
通过使用物联网应用开发(IoT Studio)平台的Web可视化开发和业务逻辑开发工具,开发一个茶园的环境监控大屏。应用用户可在监控大屏中,查看在指定时间内,设备上报的温度值折线图。设计思路 先在业务逻辑开发工作台,创建三个服务,分别是...
本文以使用MaxCompute数据源,在DataWorks上运行MaxCompute作业任务为例,为您介绍开发人员如何使用数据开发(DataStudio)创建一个周期调度任务,帮助您快速了解数据开发(DataStudio)模块的基本使用。前提条件 已完成开发前的环境准备,...
本文的视频中介绍了在 Android 和 iOS 小程序开发中的一些自定义的进阶操作,包括自定义双向通道、自定义启动加载页以及自定义导航栏。Android 小程序 Android 小程序自定义双向通道-tiny2native Android 小程序自定义双向通道-native2tiny...
根据所使用系统类型,准备运行Spark on MaxCompute任务的开发环境,详情请参见 搭建Linux开发环境、搭建Windows开发环境。开发Java/Scala代码。在ODPS Spark节点执行Java或Scala语言类型代码前,需先在本地或已有环境开发好Spark on ...
作为工作空间的管理者,在使用数据开发(DataStudio)时,您可以针对用户的开发行为实施有效的管控措施,进行开发流程、数据安全、审计等相关操作,本文将帮助您快速掌握DataStudio的相关功能,实现对数据开发过程的有效管控。背景信息 ...
通过本教程,您可以了解如何使用DataWorks和StarRocks产品组合进行大数据开发和分析,并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略,现需要从用户网站行为...
迁移助手可以帮您快速复制DataWorks上不同的版本、主账号、地域和工作空间中的开发成果。...隔离开发环境和生产环境 当开发环境和生产环境的网络完全隔离后,您可以通过迁移助手,将开发环境中已完成开发的任务导出至生产环境。
数据开发(DataStudio)基于业务流程对不同开发引擎进行具体开发操作,所以您创建节点前需要先新建业务流程,操作详情请参见 创建业务流程。使用限制 仅支持使用 Serverless资源组(推荐)或独享调度资源组运行该类型任务。步骤一:创建EMR...
DataWorks的ClickHouse SQL节点可进行ClickHouse SQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用ClickHouse SQL节点进行任务开发的主要流程。前提条件 已创建业务流程。数据开发(DataStudio)基于业务流程执行...
下线任务即将该任务从开发环境删除,并将删除操作发布至生产调度系统,下线后任务将无法再调度。本文以标准模式工作空间为例,为您介绍周期调度任务的下线流程、恢复流程、任务下线后对于已生成实例及正在运行实例平台侧的处理方案。使用...
DataWorks官方镜像为数据开发中的不同节点提供常用的运行环境,以满足不同任务的执行环境需求,您可在数据开发中直接使用官方镜像,也可以基于官方镜像创建自定义镜像后使用,本文将介绍官方镜像。镜像介绍 进行数据开发时,若未给节点配置...