在进行数据迁移或集成操作时,即当您需要将其他数据库数据导入MaxCompute或将MaxCompute数据导出至其他数据库时,您需要参照数据类型映射表,设置表字段的数据类型映射关系。正确的数据类型映射关系可以确保数据在不同数据库中能够正确地...
本文为您介绍如何基于阿里巴巴OneData方法论最佳实践,使用Dataphin助力企业数据中台的建设与管理,快速构建标准、规范的数据仓库。数仓构建流程 下图为使用Dataphin构建数据仓库的基本流程。基本概念 在正式学习本教程之前,您需要了解...
加工数据 使用 数据开发概述 模块,将日志数据通过函数、正则等方式拆解为可分析字段,并与用户信息表加工汇总产出基本的用户画像数据。学习如下内容:如何基于DataWorks新建并配置数据流程节点。如何运行工作流。管理数据 通过 数据地图...
基于Dataphin建模理论和业务需求,明确并规范定义统计指标,以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础,构建总线矩阵,划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
基于Dataphin建模理论和业务需求,明确并规范定义统计指标,以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础,构建总线矩阵,划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
同时,OceanBase 还为报表平台量身定制了近似计算的功能,对于一些超大结果集的运算,OceanBase 会筛选出一些精度影响较大的数据,然后基于这些数据进行汇总计算,在超大的数据计算的情况下,能够快速的得出一个离正确结果相差不大的近似...
样例:快速汇总多个Excel表 样例场景 进一步熟悉可视化组件操作,完成多个Excel表格的汇总。假定一个文件目录下,存在众多格式一致的Excel表格,需要将这些表格中的具体内容,汇总到一份Excel中。具体步骤参考视频教程:样例说明 样例需要...
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。本文以DataWorks的部分核心功能为例,指导您使用DataWorks接入数据并进行业务处理、...
Workload(⼯作负载)是围绕湖仓⼀体化而展开的核心工作的编排调度(由DLA Lakehouse统⼀调度),包括如下功能特点:入湖建仓 为了将其他源头的数据,汇总到整个湖仓内构建⼀个统⼀的数据平台,例如有DB类型的⼊湖建仓,也有Kafka的入湖建...
电子表格可以将不同Sheet页的数据汇总为一个表格,且该表格中包含各业务汇总指标。使用限制 专业版自动享有电子表格模块。高级版需单独增购电子表格模块。功能概述 在满足企业客户可视化需求层面,Quick BI不仅提供了丰富的图表组件,也为...
在导出的文件中,指标汇总数据和各项指标的折线图数据将在不同的 Sheet 页中分开展示。指标概览 以卡片的形式展示指定时段内当前小程序在获客、激活、分享三个阶段的核心指标的历史统计数据,包括新增用户、活跃用户、打开次数、次均停留时...
业务分类 当 数仓分层 配置为 汇总数据层 时,用于与数据域、数据集市建立关联关系。数据域 当 数仓分层 配置为 汇总数据层 时,用于选择修饰词所属的数据域。关联维度 当 修饰词类型 选择 维度枚举修饰词 时,需配置修饰词关联的维度。...
概述 Quick BI导入Excel后,数据集和Excel中字段顺序不一致。问题描述 导入Excel后,数据集和Excel中字段顺序不一致。同时Quick BI会把文本类型的数值,默认在后边加了.0。解决方案 Quick BI 数据集里字段的顺序不保证和数据库的表(也包括...
数据架构-新建业务实体 数据架构-数据板块-主题域管理-新建主题域 数据架构-数据板块-主题域管理-新建下级主题域 数据架构-数据板块-主题域管理-新建业务实体 数据架构-数据板块-业务实体-新建业务实体 编辑 数据架构-编辑板块 数据架构-...
数据标准-新建数据标准 数据标准-编辑数据标准 数据标准-克隆数据标准 数据标准-提交上线数据标准 数据标准-下线数据标准 数据标准-删除数据标准 数据标准-编辑关联标准 数据标准-编辑关联文档 数据标准-批量导入数据标准(同时拥有标准...
相关API 相关API 说明 CreateUserUsageDataExportTask 创建用量明细数据导出任务,将详细用量生成Excel文件用于下载。DescribeUserUsageDataExportTask 查询用户最近三个月的用量导出任务信息。DeleteUserUsageDataExportTask 删除账号历史...
本文介绍如何通过Excel批量导入数据元数据。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。说明 若您已在 资产加工 页面,请跳过“单击 资产加工”的...
本文介绍如何通过Excel批量导入数据元数据。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。说明 若您已在 资产加工 页面,请跳过“单击 资产加工”的操作...
问题描述 为维度逻辑表、事实逻辑表、汇总逻辑表分别运行任务补数据后,发现维度逻辑表与事实逻辑表都可查出补数据内容,但汇总逻辑表中无内容,日志提示“Result row size=0”。问题原因 由于汇总逻辑表需要使用维度逻辑表和事实逻辑表中...
通过Excel导入指标数据,可实现批量创建指标。本文介绍如何导入指标。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。说明 若您已在 资产加工 页面,请...
通过Excel导入指标数据,可实现批量创建指标。本文介绍如何导入指标。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 图标,选择目标工作组,单击 资产加工。说明 若您已在 资产加工 页面,请跳...
汇总数据层DWS dws_业务大类英文缩写_数据域英文缩写_自定义_统计周期 e.g dws_ec_mbr_cnt_std 历史截至当日_存量会员数_cube统计表。汇总表_电商业务_会员域_xxx_历史截止当日。应用数据层ADS ads_业务大类英文缩写_主题域英文缩写_自定义...
创建完成维表后,您可以在维表中直接写入数据,也可以导入电子表格、本地CSV文件和Excel文件的数据至维表,为后续数据分析做准备。前提条件 已创建完成一个维表,详情请参见 创建维表。操作步骤 在 维表 页面,单击 全部维表 下相应的 文件...
DataV数据集支持多种数据源的接入,如数据库、excel表格文件等,通过对数据的结构化存储和元数据的汇集整理,提供高效实用的数据建模能力,可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
标准格式:待导入文件的格式,当选择该值时,表示导入的是Excel格式的数据包括逻辑表和规则数据。Visual Paradigm格式:待导入文件的格式,当选择该值时,需要通过Visual Paradigm工具建立逻辑表,将导出的VP格式文件进行导入。说明 文件...
通过数据模型导入功能,一次批量导入多张数据模型。前提条件 已完成数据模型目录规划。按照数据模型导入Excel模板完成模型录入。操作目的 通过数据模型导入功能,一次批量导入多张数据模型。导入模型如下:workspace-tables 说明 该Excel中...
标准格式:待导入文件的格式,当选择该值时,表示导入的是Excel格式的数据包括逻辑表和规则数据。Visual Paradigm格式:待导入文件的格式,当选择该值时,需要通过Visual Paradigm工具建立逻辑表,将导出的VP格式文件进行导入。说明 文件...
本文汇总了各类数据库的备份、恢复配置案例。备份 说明 DBS按照备份方式分为逻辑备份和物理备份,按照备份地域分为同地域备份和异地备份,异地备份更多信息,请参见 异地备份方案概览。逻辑备份 RDS MySQL或自建MySQL逻辑备份 RDS MySQL...
按日统计逻辑:按日汇总访问数据,当前显示(T-1)的数据。访问用户 汇总类型支持 按日汇总 和 选择月区间 汇总,支持筛选日期和操作人。用户访问趋势 查看每日/月的访问人数和浏览次数。用户访问排行 查看操作人、最近访问时间和访问次数...
本章节介绍对于需要导入Quick Audience中的订单汇总表的数据要求。说明 由于您存储原始数据的 计算源 类型为MaxCompute,Quick Audience使用的 分析源 类型为ADB3.0或Hologres,为了数据能在计算源和分析源之间正常流转,Quick Audience不...
通过Excel分析 不足一天 的数据存储费用:查看 数据分类 中的 Storage 存储计费项,会发现在 alian 项目下存储了 333507833900 字节数据,由于是8点上传的数据,所以从09:07开始计量存储费用,一共计量15小时。说明 天计量范围以当天的结束...
手动打标包括页面手动指定、excel上传、数据标准打标、数据建模打标等。敏感数据保护 在识别出敏感数据之后,Dataphin支持对敏感数据进行脱敏保护。主要包括以下场景:敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能,查看被...
手动打标包括页面手动指定、excel上传、数据标准打标、数据建模打标等。敏感数据保护 在识别出敏感数据之后,Dataphin支持对敏感数据进行脱敏保护。主要包括以下场景:敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能,查看被...
本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天...编写以下命令后,单击页面上方的 运行,验证 汇总逻辑表 数据。SELECT*FROM LD_dataphin_tutorial.dws_all WHERE ds IS NOT NULL;
您可将本地表通过Excel的方式导入至DataWorks数据建模中,或将数据建模中的表导出至本地数据仓库中。本文将为您介绍导入与导出表的操作方法。通过导入方式建模 将本地表以Excel的方式导入至数据建模中,导入方法如下。在 维度建模 页面,...
本文为您介绍如何通过即席查询来验证本教程开发的数据模型是否符合预期。即派生指标是否能够统计到 最近1天...编写以下命令后,单击页面上方的 运行,验证 汇总逻辑表 数据。SELECT*FROM LD_dataphin_tutorial.dws_all WHERE ds IS NOT NULL;
本文汇总了云数据库RDS MySQL的常见恢复问题。说明 更多数据恢复方案,请参见 数据恢复方案概览。如何使用binlog恢复数据?使用 全量恢复 并选择 还原方式 为 按时间点 恢复即可。误删除了一个或多个库,如何恢复?您可以通过库表恢复功能...
创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦(DM)数据源 创建TiDB数据源 创建Kafka数据源 离线集成 新增Apache Doris数据源的离线集成。整库迁移任务支持...
数据建模支持ER模型和维度模型两种数据建模方法,帮助用户完成数据模型、逻辑表的设计和管理。用户可对数据模型的层次结构进行管理,并对逻辑表字段进行设计。字段设计需要在数据标准的约束下,通过模型设计过程中引用标准数据元定义,设置...
下载数据:单击 可以下载运行结果为CSV或Excel格式的数据文件。说明 数据文件格式及是否需要下载审批由 管理中心->数据下载 决定。更多信息,请参见 数据下载配置。行列转化:单击 可以切换运行结果的行列展示方式。可视化分析:支持将运行...