大数据公共工作组

_相关内容

公开与隐藏数据表资产

模型类目:指创建资产时,对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后,单击 所属类录 下拉列表选择模型对应目录,单击 查询,展示符合该条件的资产。说明 未选择 所属工作组,模型类目 不可选择。所属类目:指...

按线上API关联

说明 数据源是拉取当前工作组下所有的云计算资源产生,所以此处展示的数据应与工作组下的云计算资源数量、信息完全一致。全局配置 对应系统设置模块中添加的全局变量。说明 全局配置是拉取当前工作组下所有的全局变量产生,因此,展示的...

准备工作:获取CDH或CDP集群信息并配置网络连通

背景信息 CDH是Cloudera的开源平台发行版,提供开箱即用的集群管理、集群监控、集群诊断等功能,并支持使用多种组件,助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据公共数据平台,可帮助您收集实时数据,并将其构建...

规划工作空间

工作空间权限模型 DataWorks各主要模块针对工作空间的权限隔离设定有所不同:功能模块 权限模型 工作空间管理 不同的工作空间的是 完全隔离 的。不同的工作空间可以有不同的管理员、不同的内部成员,各工作空间拥有完全独立的成员角色设定...

01新建模型目录

前提条件 已新建工作组“信息中心”,具体操作,请参见 新建工作组。背景信息 STG:全称STAGE,结构与源数据保持一致的增量数据,主要用于汇聚业务系统源头数据。ODS:全称Operational Data Store,贴源层,主要负责采集业务系统并保存一定...

DataWorks On CDP/CDH使用说明

您需按需购买数据同步所需的资源(例如,包年包月的独享数据集成资源、按量付费的公共数据集成(调试)资源),支付相应的资源费用。说明 DataStudio界面使用运行、带参运行功能执行的任务,不会收取调度费用。没有实际执行成功的...

公共数据集成(调试)资源

本文为您介绍公共数据集成(调试)资源相关问题。公共数据集成(调试)资源怎么收费?公共数据集成(调试)资源支持哪些类型的任务?公共数据集成(调试)资源支持哪些网络类型?公共数据集成(调试)资源的性能限制 公共数据...

功能发布记录(2023年)

2023.4.18 所有地域 所有DataWorks用户 SQL查询 大数据公共数据集上线 基于数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等),通过DataWorks与MaxCompute快速完成TB级别数据分析。2023.4.11 所有地域 所有DataWorks用户 SQL...

配置表资产属性

模型类目:指创建资产时,对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后,单击 所属类录 下拉列表选择模型对应目录,单击 查询,展示符合该条件的资产。说明 未选择 所属工作组,模型类目 不可选择。所属类目:指...

配置表资产属性

模型类目:指创建资产时,对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后,单击 所属类录 下拉列表选择模型对应目录,单击 查询,展示符合该条件的资产。说明 未选择 所属工作组,模型类目 不可选择。所属类目:指...

配置数据表资产目录

模型类目:指创建资产时,对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后,单击 所属类录 下拉列表选择模型对应目录,单击 查询,展示符合该条件的资产。说明 未选择 所属工作组,模型类目 不可选择。所属类目:指...

配置数据表资产目录

模型类目:指创建资产时,对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后,单击 所属类录 下拉列表选择模型对应目录,单击 查询,展示符合该条件的资产。说明 未选择 所属工作组,模型类目 不可选择。所属类目:指...

采集数据

数据去向:数据去向选择 MaxCompute,数据源名称选择 odps_first。说明 工作空间绑定MaxCompute计算引擎时,平台将自动生成数据源,且默认为 odps_first 数据源,同步时 数据去向 选择该数据源即代表数据写入您当前空间默认绑定的...

采集数据

数据去向:数据去向选择 MaxCompute,然后选择对应数据源名称。2、配置同步任务 同步任务基本配置。数据来源 端指定要读取的文件 user_log.txt。数据去向 端指定OSS文件写入MaxCompute数据源中的ods_raw_log_d表。并指定表 分区信息。分区...

使用SQL模式创建数据服务API

简单身份认证:适用于工作组内、测试等场景下的API调用,工作组内调用时用API归属应用的AppCode调用。加密身份认证:通过加密算法计算一个签名并放在请求的Header中即可调用API,具备更高的安全性,适用于API共享后,应用开发场景下API的...

使用SQL模式创建数据服务API

简单身份认证:适用于工作组内、测试等场景下的API调用,工作组内调用时用API归属应用的AppCode调用。加密身份认证:通过加密算法计算一个签名并放在请求的Header中即可调用API,具备更高的安全性,适用于API共享后,应用开发场景下API的...

创建空间服务API

简单身份认证:适用于工作组内、测试等场景下的API调用,工作组内调用时用API归属应用的AppCode调用。加密身份认证:通过加密算法计算一个签名并放在请求的Header中即可调用API,具备更高的安全性,适用于API共享后,应用开发场景下API的...

公共数据服务资源计费说明:按量付费

数据服务为您提供将数据表生成API并进行管理和发布的能力,公共数据服务资源 会根据数据服务API的调用次数和执行时间进行计费。本文为您介绍数据服务的计费详情。计费项 公共数据服务资源 的费用由 调用次数 和 执行时间 的费用组成,...

受众与核心能力

产品定位 DataWorks致力于为数据开发者、数据分析师、数据资产管理者,打造一个具备开放自主开发与全栈数据研发能力的一站式、标准化、可视化、透明化的智能大数据全生命周期云研发平台。DataWorks赋予用户仅通过单一平台,即可实现数据...

使用向导模式创建数据服务API

前提条件 已创建工作组,具体操作,请参见 新建工作组。已创建云计算资源,具体操作,请参见 新建云计算资源。已创建应用,具体操作,请参见 新建应用。已通过查看云计算资源的物理表更新缓存表,具体操作,请参见 查看物理表。背景信息 ...

使用向导模式创建数据服务API

前提条件 已创建工作组,具体操作,请参见 新建工作组。已创建云计算资源,具体操作,请参见 新建云计算资源。已创建应用,具体操作,请参见 新建应用。已通过查看云计算资源的物理表更新缓存表,具体操作,请参见 查看物理表。背景信息 ...

使用DataWorks(离线与实时)

费用说明 使用DataWorks数据集成进行数据同步时,需使用DataWorks的数据集成资源与调度资源,您可根据需要选择使用公共资源或独享资源,同时在数据传输过程中如果使用了公网传输,可能会涉及公网流量费用。各项可能费用的详情请...

导出数据字典

通过导出数据字典功能,搭配导入功能,您可以快速实现工作组间的数据字典迁移。本文介绍如何导出数据字典。前提条件 已导入或新建完成数据字典。具体操作,请参见 新建数据字典 和 导入数据字典。操作步骤 登录 数据资源平台控制台。在页面...

导出数据字典

通过导出数据字典功能,搭配导入功能,您可以快速实现工作组间的数据字典迁移。本文介绍如何导出数据字典。前提条件 已导入或新建完成数据字典。具体操作,请参见 新建数据字典 和 导入数据字典。操作步骤 登录企业数据智能平台。在页面...

DataWorks On Hologres使用说明

各资源组根据使用场景,分为调度资源数据集成资源数据服务资源组,您可根据业务情况合理规划并分配资源。DataWorks资源组概述 二、开发环境准备 您需先将Hologres实例创建为DataWorks工作空间的数据源并绑定至数据开发(DataStudio...

网络连通与白名单配置

数据源所在网络环境 网络连通方案 网络连通配置操作指导 数据源具备访问公网的能力 独享数据服务资源组可以连通。登录 专有网络控制台,在左侧导航列单击 弹性公网IP,在目标地域下单击 创建弹性公网IP。说明 创建弹性公网IP的详细步骤请...

采集数据

参数 描述 数据来源 数据来源:MySQL 数据源名称:rds_workshop_log 我的资源组 选择右下角的 更多选项>公共资源组(调试资源)。数据去向 数据去向:OSS 数据源名称:选择前文创建的私有OSS数据源,此处示例为test。配置同步任务。参数 ...

导出数据

您可以通过导出数据元功能,搭配导入功能,快速实现工作组间的数据元数据迁移。本文介绍如何导出数据元。前提条件 已完成数据元导入或新建,具体操作,请参见 新建数据元 或者 导入数据元。操作步骤 登录 数据资源平台控制台。在页面左上角...

导出数据

您可以通过导出数据元功能,搭配导入功能,快速实现工作组间的数据元数据迁移。本文介绍如何导出数据元。前提条件 已完成数据元导入或新建,具体操作,请参见 新建数据元 或者 导入数据元。操作步骤 登录企业数据智能平台。在页面左上角,...

数据服务入门

本文示例新建名为 rds_workshop_log 的MySQL数据源,并测试该数据源与公共数据服务资源的连通性,参数配置如下图。步骤二:创建API分组 数据服务基于API网关对外提供服务。在API网关中,分组是API的管理单元,并与调用地址的域名相关联。...

导出数据建模基础信息

支持您通过导出数据建模基础信息功能,下载数据建模基础信息到本地进行查看并搭配导入功能,您可以快速实现工作组间的数据建模基础信息迁移。本文介绍如何导出数据建模基础信息。前提条件 已存在数据建模基础信息,具体操作,请参见 新建...

导出数据建模基础信息

支持您通过导出数据建模基础信息功能,下载数据建模基础信息到本地进行查看并搭配导入功能,您可以快速实现工作组间的数据建模基础信息迁移。本文介绍如何导出数据建模基础信息。前提条件 已存在数据建模基础信息,具体操作,请参见 新建...

DataWorks On MaxCompute使用说明

各资源组根据使用场景,分为调度资源数据集成资源数据服务资源组,您可根据业务情况合理规划并分配资源。DataWorks资源组概述 二、开发环境准备 您需先将MaxCompute项目创建为DataWorks工作空间的数据源并绑定至数据开发...

功能简介

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发和运行调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化水平...

功能简介

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发和运行调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化水平...

数据开发

数据开发为用户提供一站式计算节点开发能力,通过对数据加工流程的开发、部署、调试等环节的一体化管理,数据开发实现数据加工工作流编排、加工逻辑的复用,大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构,提高系统的工程化...

资源编排

DataWorks的资源编排功能,帮助您在数据开发阶段,批量修改指定业务流程下目标节点使用的调度资源。当您的工作空间中有多个调度资源时,可以根据实际业务需求,使用该功能快速为目标节点重新分配资源,促进资源的合理使用。本文为...

通过向导模式生成API

所选DataWorks服务资源和API网关实例的类型不同,允许设置的超时时间上限不同:API网关共享实例:公共服务资源不超过30000ms,独享数据服务资源不超过30000ms。API网关专享实例:公共服务资源不超过30000ms,独享数据服务资源不...

Github实时数据同步与分析

在 DataWorks资源列表 页面,单击目标独享数据集成资源 操作 列的 修改归属工作空间,将资源绑定至目标工作空间。创建实时同步任务。进入 DataWorks数据集成首页,单击 创建我的数据同步。在 新建同步任务 页面,根据下表配置任务...

数据上传

上传数据至MaxCompute引擎:支持使用公共资源及独享资源,且需确保数据上传任务使用的数据源与所选资源网络连通。所选独享资源需绑定至待接收数据的表所在的DataWorks工作空间。上传数据至EMR Hive、Hologres引擎:仅支持使用独享...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用