数据开发是做什么的

_相关内容

功能特性

功能概述 DataWorks的数据开发的亮点功能如下:DataStudio支持 MaxCompute、E-MapReduce、CDH、Hologres、AnalyticDB、ClickHouse 等多种计算引擎,支持在统一的平台上进行各类引擎任务的开发、测试、发布和运维等操作。DataStudio支持智能...

DeleteNode-删除数据开发节点

调用此接口,可以删除指定的数据开发节点。接口说明 注意 当这个节点被发布后,无法删除,必须先下线再进行删除。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码...

MoveNode-移动数据开发节点路径

调用此接口,可以将指定的数据开发节点的路径移动到指定位置。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。...

规划工作空间

数据开发(DataStudio)各工作空间之间的数据开发工作是 完全隔离 的。工作空间之间的业务流程、任务节点独立开发,互不影响。在工作空间内部:仅“开发”、“管理员”角色的成员具备创建、编辑、删除任务节点的权限。仅“开发”、“运维”...

GetNode-获取数据开发节点详情

获取指定的数据开发节点详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 ...

RenameNode-重命名数据开发节点

调用此接口,可以重命名数据开发节点。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 ...

ListNodeDependencies-获取数据开发节点的依赖节点

分页获取指定数据开发节点的依赖节点。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 ...

UpdateNode-更新数据开发节点信息

调用此接口,可以更新数据开发节点信息。更新通过增量更新的方式进行,更新的信息通过FlowSpec进行描述。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。...

ETL工作流快速体验

OSS 数据集成 数据开发 基于GitHub Archive公开数据集,通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据,在DataStudio 数据开发 模块通过函数计算节点周期调度实现将处理后的数据发送至用户预设的邮箱中。...

计算引擎审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上角的 图标,选择 全部产品 更多 审批中心,进入审批中心页面。进入审批中心页面后,在左侧...

数据开发概述

进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。说明 数据开发仅支持在PC端Chrome浏览器69以上版本使用。模块介绍 能力概览 数据开发...

数据开发(DataStudio)(旧版)

进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。说明 数据开发仅支持在PC端Chrome浏览器69以上版本使用。模块介绍 能力概览 数据开发...

MoveWorkflowDefinition-移动数据开发工作流路径

调用此接口,可以将指定的数据开发工作流移动到数据开发目录的目标路径。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...

DeleteWorkflowDefinition-删除数据开发工作流

调用该接口,在数据开发中删除指定的工作流。接口说明 注意 当这个工作流被发布后,无法删除,必须先下线再进行删除。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK...

RenameWorkflowDefinition-重命名数据开发工作流

调用此接口,可以重命名数据开发工作流。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的...

MaxCompute函数管理

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。展开左侧导航栏中的 MaxCompute,单击 MaxCompute函数。MaxCompute函数默认按照创建时间倒序排列,...

数据下载

在DataWorks的数据开发(DataStudio)、数据分析、安全中心模块下载的CSV、XLSX格式文件数据将同步保存至数据下载功能。通过该功能,您可将所需历史下载文件重新下载至本地使用,也可追溯历史下载记录的操作详情。前提条件 已通过如下模块...

快速体验

使用DataWorks 数据开发 功能,将同步到MaxCompute中的数据进行清洗加工,并将结果数据写入MaxCompute表中。说明 RDS MySQL作为本次实验中存储原始数据的数据源。您无需自行准备RDS MySQL云产品及数据,本实验为您提供公共的实验环境与...

代码搜索

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在数据开发目录树区域,单击顶部菜单栏的 图标,进入 代码搜索 页面。配置搜索条件并查看搜索结果。...

配置PolarDB输入

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开业务流程,右键单击目标业务流程...

产品教程

DataWorks为您提供了多个实验教程,帮助您从前期的环境准备、数据采集,到后期的数据开发、结果展示,端到端了解DataWorks使用的全流程,更加熟悉产品的核心功能。综合示例:用户画像分析 本教程通过一个实战案例——网站用户画像分析,全...

DataWorks HoloStudio下线公告

为给您提供一致的开发体验,DataWorks HoloStudio 产品能力将整合至 DataWorks 数据开发(DataStudio)中,从 2024年2月29日 开始,HoloStudio将不再提供服务,届时您可使用DataStudio相关功能继续进行Hologres的数据开发。针对已存在于...

数据开发定制化展示

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。调整DataStudio左侧导航栏模块(即区域2展示的功能)。新用户可根据区域1的提示,在DataStudio界面...

同工作空间发布

操作步骤 说明 本文介绍 标准模式且使用了新版数据开发的工作空间 同空间批量任务发布流程,标准模式的旧版数据开发同空间批量发布流程请参见 发布任务。一、发起发布流程 在 数据开发(Data Studio)(新版)中找到需要发布的节点、函数等...

配置字符串替换

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开业务流程,右键单击目标业务流程...

配置AnalyticDB for MySQL输出

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开目标业务流程,右键单击 数据集成...

配置DataHub输入

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开业务流程,右键单击目标业务流程...

任务调试流程

调试运行单个任务 数据开发概述,在左侧导航栏的数据开发或手动业务流程模块,双击业务流程目录下的目标节点,进入该节点的编辑页面。调试运行任务。在节点编辑页面,使用节点工具栏中的运行或高级运行调试代码逻辑,也可通过快捷运行调试...

Shell类型节点运行Python脚本

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建MaxCompute Python资源。在数据开发页面右键单击目标业务流程,选择 新建资源,在 MaxCompute ...

表管理

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧导航栏单击 表管理。新建、查找及编辑目标表 新建表及导入表数据 在表管理页面,您可单击 及 ...

操作检查

DataWorks提供了全链路的数据开发治理能力,为您提供了统一的数据开发治理流程,支持您基于自己的业务需求,在关键的流程节点上进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景信息 DataWorks的工作空间分为...

创建数据脱敏场景

DataWorks提供 数据开发/数据地图展示脱敏、数据分析展示脱敏、MaxCompute引擎层脱敏、Hologres引擎层脱敏 等动态脱敏,及 数据集成静态脱敏 等静态脱敏均为一级脱敏场景,属于固定场景,不支持执行新增、编辑、删除等操作。同时,...

开发流程管控

DataWorks提供了全链路的数据开发治理能力,为您提供了统一的数据开发治理流程,同时也支持您在DataWorks的默认流程上基于自己的业务需求在关键的流程节点进行流程管控。本文为您介绍DataWorks在数据开发过程中支持的流程管控能力。背景...

旧版资源组升级

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧导航栏,单击 数据开发,找到目标业务流程,右键选择 批量操作。节点类型 选择为 离线同步 和...

PAI Flow节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在数据开发的项目目录模块单击,选择 新建节点 算法 PAI Flow,创建并进入 PAI Flow 流程编排页面,...

调试代码片段:快捷运行

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。查找目标节点并进入节点编辑页面。在 数据开发 或 手动业务流程 功能模块的目录树,或通过 临时查询...

功能简介

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发和运行调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化水平...

数据开发

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发、部署、调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化...

基于自建Hadoop集群进行任务开发

步骤三:使用自定义环境运行任务 镜像发布后,即可在数据开发中使用自定义镜像,根据是否使用新版数据开发(Data Studio),选择不同的使用方法,您可参考以下内容:登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与...

使用节点组

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧业务流程目录下,双击目标业务流程,进入该业务流程的编辑面板。新建节点组。生成节点组。您...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用