划分流程 通常您需要阅读各源系统的设计文档、数据字典和数据模型设计文档，研究逆向导出的物理数据模型。然后，进行跨源的主题域合并，梳理出整个企业的主题域。主题域是指面向业务分析，将业务过程或维度进行抽象的集合。为保障整个体系...
数据分层 您可以结合业务场景、数据场景综合考虑设计数仓的数据分层，DataWorks为您默认创建业界通用的五层数仓分层：数据引入层 ODS（Operational Data Store）明细数据层 DWD（Data Warehouse Detail）汇总数据层 DWS（Data Warehouse ...
创建时序数据表 创建时序数据表之前，需要先根据业务场景构建数据模型，相关内容，请参见 数据模型 和 如何设计时序数据表。时序引擎会创建倒排索引，在查询数据时，tag用来快速匹配时间线。除此以外，可以使用PRIMARY KEY来标识分片键，...
分析需求 可行性分析：数据产品经理主导，邀请设计、数据安全与合规人员，对需求进行评估。需求合理性：评估该需求的合理性。数据可行性：评估当前已有数据能否支撑需求开发，如果缺少数据，则需要另行规划缺失数据的抽取方案。同时建议...
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
背景信息 数据管理DMS（Data Management）是一款支撑数据全生命周期的一站式数据管理平台，其提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，同时DMS内置的 数据灾备（DBS）还提供了低成本高可靠的...
DataWorks数据建模的设计与实现解耦，在设计过程中，您无需考虑各个大数据引擎的实现方式，建模引擎会根据FML语言定义的Schema去驱动底层各个数据引擎的执行和操作，仅在实际物化（即把设计的逻辑表转换为底层引擎的物理表）阶段，建模引擎...
基于上述拆解，您还需要进一步思考并设计明细数据层的事实模型（原子指标中成交金额的数据来源）、公共可引用的维度模型（统计粒度的来源，且需要与成交金额所属事实模型有关联关系）和汇总数据层模型（原子指标、业务限定、统计周期的拆解...
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库...
提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，同时DMS内置的 数据灾备（DBS）还提供了低成本、高可靠的备份恢复能力，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。前置概念 ...
将数据字典和质量校验函数以及逻辑表物理化到数据库，帮助您在数据标准的约束下构建数据模型，将数据标准贯彻到数据质量分析、保障及检查的全过程中，将散乱的多源异构数据加工成标准、干净的数据。前提条件 已根据快速入门教程完成加载样...
DMS提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。数据库网关与数据管理DMS搭配可为您提供高稳定性、低成本、统一的非阿里云数据库...
数据建设：数据建设支持离线代码研发、实时代码研发、智能建模研发、流批一体研发等多种研发方式，其中首创的智能建模研发模式通过设计即开发的数据模型设计+自动化代码开发提供高效的数据研发生产力。资产治理：资产管理通过数据标准、...
OceanBase 数据库企业版 V4.2.1 OceanBase 数据库企业版 V3.2.4 OceanBase 数据库企业版 V3.2.3 V4.2.1 版本数据库参考文档 模式 文档 简介 通用 数据库设计规范和约束 本文档为您介绍 OceanBase 数据库的对象命名、对象结构设计、字符集、...
MaxCompute还深度融合了阿里云如下产品：DataWorks 基于DataWorks实现一站式的数据同步、业务流程设计、数据开发、管理和运维功能。人工智能平台PAI 基于机器学习平台的算法组件实现对MaxCompute数据进行模型训练等操作。实时数仓Hologres ...
在数据模型设计之前，您需要首先完成技术架构的选型。本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中，DataWorks的数据集成负责完成数据的采集和基本的ETL。...
说明 关于简单模式与标准模式差异详情可参考文档：必读：简单模式和标准模式的区别 标准模式对使用流程的影响 如图，标准模式“生产、开发隔离”的模式将影响数据模型设计、数据处理逻辑代码发布等流程。实践操作流程 以下以一个具体的实践...
主键设计 主键的设计在Lindorm宽表中至关重要，数据分布、数据排序等都与主键有着密切的关系，因此一个好的主键是合理分配宽表资源、正确使用宽表的关键因素。主键设计的建议，请参见 如何设计宽表主键。主键的设计要点如下：主键应尽可能...
新建模型目录指完成数据仓库的层级规划设计，模型目录用于管控各目录下的模型，实现层级分离，本文介绍如何创建一级目录STG、ODS、DWD、DWS层，及二级目录。前提条件 已新建工作组“信息中心”，具体操作，请参见 新建工作组。背景信息 STG...
提供官方设计套件，内置丰富的主题、模板、数据面板、设计规范、地图和标题&素材等。具备AI识图生成大屏、智能主题配色、一键美化等智能化功能。具备强大的地理数据展示能力，包含二三维平面地图、3D地球、三维城市场景构建等功能。低代码...
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
数据管理是用来查看实例中的数据以及数据的组织形式，例如库表结构、数据大小、建表语句、表字段信息和数据预览的可视化工具。本文介绍如何使用 云数据库 SelectDB 版 的数据管理。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作，...
7*24异常检测、SQL诊断引擎、自动SQL限流、自动性能扩展、自动SQL优化 和 智能压测 六项核心能力构建了“基础服务自治平台”的数据库部分，通过 DAS服务接口 实现了线上故障修复自动化、数据库优化智能化、容量评估数据化的平台设计目标，...
数据模型架构规范、公共规范、ODS层设计规范、CDM公共维度层设计规范、CDM明细层设计规范、CDM汇总层设计规范、MaxCompute数据开发规范 2019-05-06 新增表设计指南。新指南 介绍表设计指南。表概述、表设计规范、表设计最佳实践、...
新增 数据集成概述 数据开发 数据建设支持离线代码研发、实时代码研发、智能建模研发、流批一体研发等多种研发方式，其中首创的智能建模研发模式通过设计即开发的数据模型设计+自动化代码开发提供高效的数据研发生产力。新增 数据开发概述 ...
数据集成概述 数据建设 数据建设支持离线代码研发、实时代码研发、智能建模研发、流批一体研发等多种研发方式，其中首创的智能建模研发模式通过设计即开发的数据模型设计+自动化代码开发提供高效的数据研发生产力。数据开发概述 分析平台 ...
看板创建成功后跳转到画布编辑器页面，可以看到一款满足展示地理信息相关数据且设计精良的模板。步骤二：配置组件样式 数据看板创建完成后，您可以通过以下方式修改组件样式。在左侧图层栏中，单击选中某一组件。在右侧的样式面板中，根据...
面向列的内存数据库设计允许您在单个系统中运行高级分析和高速事务。如果您使用的是SAP HANA，在对接Dataphin进行数据开发或将Dataphin的数据导出至SAP HANA场景中，您需要先完成SAP HANA数据源的创建。权限说明 仅支持拥有 新建数据源 ...
数据组织优化 2023-06-26 新增TimeTravel查询与Incremental查询 新说明 对于Transaction Table2.0类型的表，MaxCompute支持查询回溯到源表某个历史时间或者版本进行历史Snapshot查询（TimeTravel查询），也支持指定源表某个历史时间区间...
数据模型建立建议和原则 在进行操作Cassandra之前需要基于我们对Cassandra的使用进行业务建模，基于我们的应用具有什么特性延伸到如何组织Cassandra的数据（设计primary key）到最终数据在cassandra上的存取。No JOIN：Cassandra不支持JOIN...
面向列的内存数据库设计允许您在单个系统中运行高级分析和高速事务。如果您使用的是SAP HANA，在对接Dataphin进行数据开发或将Dataphin的数据导出至SAP HANA场景中，您需要先完成SAP HANA数据源的创建。更多SAP HANA信息，请参见 SAP HANA...
Lindorm 是面向物联网、互联网、车联网等设计和优化的云原生多模超融合数据库，数据传输目前仅支持 Lindorm 宽表引擎，详情请参见 引擎简介。OBKV 是云数据库 OceanBase 标准版支持的标准版（Key-Value）系列，是在 OceanBase 关系型数据库...
计算引擎访问宽表数据 宽表引擎 动态列 Lindorm宽表引擎支持动态列功能，用于在实际业务中动态写入数据并执行查询，减少了数据结构设计的复杂性。动态列 二级索引 Lindorm宽表引擎提供了Tabular模型下的二级索引功能。在非主键匹配的查询...
设置 仅选择 结构迁移 时，数据传输才支持分区设置，详情请参见 OBKV-HBase 数据模式设计。在 分区设置 对话框中，分区方式 目前仅支持 key 分区，您可以进行以下设置。分区键 默认为 K，且不支持修改。分区数 支持您自行输入，最小值为 1...
2024.2.21 所有地域 所有DataWorks用户 DataWorks On CDP/CDH使用说明 数据服务支持实例模式的StarRocks数据源 开通E-MapReduce Serverless StarRocks集群后，您可在DataWorks中通过实例模式新增StarRocks数据源，DataWorks数据服务支持...
调用此API可获取指定结构设计工单的项目信息以及工单的变更基准库的信息，包含结构设计工单的状态、工单创建者ID、基准库的名称和ID等。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...
设计资产在可视化应用搭建的场景下对于提升视觉效果十分重要，设计资产管理的功能可以帮助用户更好地管理自己的设计资产，实现资产的分类、复用和分享，并提升可视化应用设计的效率与效果。本文介绍设计资产的概念及使用功能。概念说明 ...
执行结构设计工单。接口说明 仅管控模式为安全协同的数据库实例可调用此 API。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无...
DataV在产品控制台的 我的资产 模块提供了 设计资产 功能，在管理面板中支持设计资产的查看、重命名和分组等功能操作，方便您更加高效地管理所有设计资产内容，本文为您详细介绍设计资产管理页面中的各个功能。在设计资产管理页面中，您...