数据开发是做什么的

_相关内容

配置Hologres输出

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开业务流程,右键单击目标业务流程...

创建手动任务

您可以在DataWorks的数据开发(DataStudio)模块创建手动任务,并在生产环境的运维中心管理手动任务。本文为您介绍如何创建手动任务,并将手动任务发布到生产环境。使用说明 若任务不需要发布生产环境操作生产环境引擎,您可选择 新建临时...

调度设置

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在左侧导航栏底部单击 图标,进入 设置 页面。在 调度设置 页签设置调度任务相关功能的默认配置。...

创建并使用MaxCompute表

进入数据开发(DataStudio)登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建MaxCompute表 新建表入口 您可在DataWorks表管理目录中新建,也可在...

系统管理

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 数仓规划,进入 数仓分层。在左侧导航栏,单击 系统管理,...

配置LogHub(SLS)输入

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 图标,单击 新建节点 数据集成 实时同步。您也可以展开业务流程,右键单击目标业务流程...

使用内建函数

查看内建函数 在DataWorks控制台中查看函数列表的具体操作如下:登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左侧导航栏中的 函数列表,即可...

创建EMR函数

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建业务流程,详情请参见 创建周期业务流程。在本地Java环境编辑程序并生成JAR包后,再新建JAR资源...

迁移Oracle数据至MaxCompute最佳实践

通过DataWorks将数据从Oracle迁移至MaxCompute 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面创建目标表,用于接收从Oracle迁移...

数据服务审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上角的 图标,选择 全部产品 数据治理 审批中心,进入审批中心页面。进入审批中心页面后,在...

扩展程序审批策略

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上角的 图标,选择 全部产品 更多 审批中心。在左侧导航栏选择 审批策略管理 扩展程序。创建...

通用参考:切换资源组

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 运维中心,在下拉框中选择对应工作空间后单击 进入运维中心。修改离线同步任务的数据集成资源组。说明 实时同步任务暂不支持在运维中心修改数据集成资源组,请在...

创建并使用MaxCompute表

进入数据开发(DataStudio)登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。新建MaxCompute表 您可在DataWorks表管理目录中新建,也可在具体业务...

加工数据

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。在 数据开发 页面,展开目标业务流程。右键单击 MaxCompute,选择 新建表。在 新建表 对话框中,...

API概览

租户 API 标题 API概述 ListCalcEngines 查看数据开发中绑定的数据源列表 该接口用于查询指定DataWorks工作空间的数据开发中绑定的数据源列表。CreateDataSource 创建数据源 该接口用于创建DataWorks数据源。ListDataSources 查询数据源...

新用户指引

设置脱敏规则生效后,当用户通过DataWorks的数据开发、数据分析、数据地图访问敏感数据时,用户仅能看到脱敏后的数据。根据您选择的行业模板,DataWorks会默认启用一部分数据类型的脱敏规则,后续您可以在 敏感数据保护 数据脱敏 中修改...

进入智能数据建模

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。(可选)如果您尚未开通DataWorks智能数据建模,首次进入时请单击 立即开通。重要 DataWorks智能...

同步数据

进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。一、设计业务流程 设计业务流程 新建业务流程。数据开发需基于业务流程使用对应的开发...

操作流程

通过操作流程图及说明,您可以直观且全局了解数据开发的任务流程。本文从节点任务和场景任务两个使用场景来介绍数据开发的任务操作流程。节点模式操作流程 节点模式主要适用于计算节点相对独立,整个流程由单个节点组成的这类简单数据处理...

创建概念模型:维度

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 维度建模。在 维度建模 页面,鼠标悬停至 图标,单击 概念...

手动业务流程

您可以打开某个数据开发节点,进行具体的数据清洗工作,例如MaxCompute SQL节点,如果代码开发过程中需要用到资源或函数,DataWorks也支持您通过可视化的方式来创建资源节点和函数节点。数据开发的更多细节,请参见 节点开发,创建资源和...

同步数据

StarRocks ods_raw_log_d_starrocks col 原始日志 dt 分区字段 进入数据开发 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。一、设计业务流程 设计...

导入

进入导入页面 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 通用工具,进入导入页面。在该页面,您可...

创建和查看DataWorks导出任务

进入迁移助手 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 更多 迁移助手,进入迁移助手 首页。创建全量导出...

DataWorks Copilot

DataWorks将持续丰富和迭代DataWorks MCP Server中的工具集,致力于为用户提供更加智能和高效的数据开发治理产品体验。核心功能亮点 深度理解与自主规划:基于上下文感知与多轮对话,准确识别复杂意图,自主将任务分解为可执行的多步骤计划...

数据开发与管理

云数据库 SelectDB 版 数据开发与管理工具,是基于阿里云环境原生设计开发的可视化平台,用于支持您在阿里云上对 云数据库 SelectDB 版 实例 进行可视化开发与管理,可以替代Navicat等数据库客户端工具。本文介绍 云数据库 SelectDB 版 ...

阶段一:基础防护建设

这样,便可形成规范化的数据开发与生产流程。数据建模链路:先由数据团队主管定义好建模过程中可能使用到的数据标准,再由数据建模人员设计并提交模型,最后经由数据团队主管、运维或部署人员审核无误后发布至生产环境。数据开发与生产链路...

Data+AI概览

数据集成 离线集成 离线集成是一种低代码的数据开发工具,您可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的,进而对在线数据库、数据仓库的数据进行加工处理并同步至目的端。更多信息,请参见 离线集成...

建模空间

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据建模,在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面的顶部菜单栏,单击 数仓规划,默认进入 数仓分层 页面。在 数仓规划 页面的...

创建和查看DataWorks导入任务

进入迁移助手 登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。单击左上方的 图标,选择 全部产品 更多 迁移助手,进入迁移助手 首页。创建导入任务 ...

基础:购房群体简单分析

本案例指导您完成购房群体分析,帮助您掌握DataWorks的数据开发与数据分析流程。案例介绍 本案例基于用户买房数据,分析不同群体的购房情况。通过DataWorks进行数据开发和数据分析。将本地数据通过DataWorks上传至MaxCompute的 bank_data ...

工作空间模式升级

计算资源未绑定至数据开发 复制一份生产环境的数据源至开发环境,并将开发环境数据源的 默认访问身份 配置为 执行者。若简单模式工作空间数据源(即生产环境数据源)的 默认访问身份 为 任务责任人,则升级之后,生产环境数据源的 默认访问...

EMR数据开发停止更新公告

停止更新时间 2022年2月21日21点 影响 您在停更时间点前创建的数据开发项目不会受到影响,可正常使用EMR数据开发模块,包括运行作业和工作流调度。如果您后续需要更丰富的数据开发功能,推荐迁移至DataWorks构建工作流,EMR已经跟DataWorks...

我是安全管理员

离线集成 离线集成是一种低代码的数据开发工具,可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的。数据分析 数据分析提供典型的数据集、仪表盘和大屏模型,在仪表盘或大屏中提供丰富的可视化图表和组件来...

进阶:商品订单畅销类目分析

数据清洗:在DataWorks的数据开发模块中,对业务数据进行处理、分析和挖掘。数据展示:在DataWorks的数据分析模块中,将分析结果转化为图表,便于业务人员理解。周期性调度:为数据同步和数据清洗流程配置周期性调度,使其定时执行。本教程...

数据目录

数据目录是您在数据开发前统一的元数据工作台。它整合了MaxCompute、Hologres、DLF等多种数据源的元数据,让您无需离开DataWorks即可完成建表、视图管理等所有准备工作,从而专注核心开发。核心特性 统一管理:集中管理多种数据源的表、...

数据安全概述

密切结合生产开发场景:在开发生产过程中,资产安全与数据流转场景紧密结合,保障在Dataphin数据开发周期中的数据安全。相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定,用于对数据的敏感等级进行...

数据安全概述

密切结合生产开发场景:在开发生产过程中,资产安全与数据流转场景紧密结合,保障在Dataphin数据开发周期中的数据安全。相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定,用于对数据的敏感等级进行...

OceanBase节点

登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏 数据开发与运维 数据开发,在下拉框中选择对应工作空间后单击 进入数据开发。右键单击目标业务流程,选择 新建节点 数据库 OceanBase。在 新建节点 对话框输入节点 名称,单击 ...

我是DBA

离线集成 离线集成是一种低代码的数据开发工具,可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的。数据分析 数据分析提供典型的数据集、仪表盘和大屏模型,在仪表盘或大屏中提供丰富的可视化图表和组件来...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用