如果您已经创建了表格存储实例并在命令行工具中配置了实例的接入信息，您可以根据业务所需的数据模型使用表格存储功能。数据模型 相关操作 宽表模型 创建数据表及表相关操作，请参见 数据表操作。使用索引加速数据查询，请参见 二级索引 和...
二级索引相当于把数据表的主键...使用二级索引读取数据 使用单行读取和范围读取的方式查询索引表中数据。如果所需属性列已包含在索引表中，可以直接从索引表读取，否则需要查找数据表以获取相关数据。删除二级索引 删除数据表上指定的索引表。
数据地图新建表搜不到 若数据地图表和表目前状态不一致，请使用数据地图手工同步功能手动同步该表最新状态。表管理数据地图表结构未更新 新建表在数据地图找不到 数据集成搜不到新建的表 当前表业务逻辑变更如何通知下游？您可以通过 数据...
功能 说明 数据表操作 数据表相关操作，例如创建表、使用表、列出表名称、删除表等。数据操作 宽表数据的基础读写操作，例如插入数据、读取数据、更新一行数据、删除一行数据、扫描数据、导入导出数据等。二级索引 二级索引相关操作，例如...
Null ods_raw_log_d 日 320170261 ods_log_info_d 原始数据脏数据清理 ods_raw_log_d ods_log_info_d320170259 日 320170262 dw_user_info_all_d 轻度汇总数据 ods_log_info_d dw_user_info_all_d 日 320170263 rpt_user_info_d 统计汇总...
连接条件 连接条件指定了两张数据表之间使用哪些字段进行连接，当数据表中某条数据（假定为a）的所有连接字段的值与另一张数据表某条数据（假定为b）的所有连接字段的值相同，则这a、b两条数据成功连接。多表连接算子支持指定多张数据表...
在周期任务页面，单击 明细及汇总表 页签，选择订单实时逻辑表操作列下的 更多-补数据-补当前任务及下游，为逻辑表任务进行补数据，详情请参见 对当前及下游任务补数据。可在补数据实例页面，查看运行结果。步骤五：验证数据 在Dataphin...
在周期任务页面，单击 明细及汇总表 页签，选择订单实时逻辑表操作列下的 更多-补数据-补当前任务及下游，为逻辑表任务进行补数据，详情请参见 对当前及下游任务补数据。可在补数据实例页面，查看运行结果。步骤五：验证数据 在Dataphin...
提升查询性能 方法 适用场景 描述 区别 使用预聚合提升查询性能 大量时间线实时聚合查询 预聚合通过使用Lindorm时序引擎提供的 数据的持续查询 功能，提前将需要查询的结果进行计算后转存到结果表，查询时指定查询结果表，即可快速查询结果...
DLF数据权限：主要控制DLF内部资源的访问和使用权限，包括数据库、数据表、数据列、函数、数据目录等，以及数据权限的操作权限。数据权限详细说明，请参见 数据权限。数据授权相关的操作，请参见 数据授权。湖管理 湖管理包括Location托管...
Tablestore外部表 Hologres外部表 MaxCompute外部表支持使用数据库JDBC驱动机制访问Hologres数据源数据。Hologres外部表 RDS外部表 可通过MaxCompute将数据加载至RDS的表中。RDS外部表 HBase外部表 MaxCompute支持通过创建HBase外部表来...
指标属于公共层的汇总数据层（DWS）或者应用层的应用数据层（ASD），所以在分层时不能选择其他层。什么情况下，可以将创建的指标与数据表中的数据进行关联。创建汇总表或应用表时，可导入指标，创建指标字段。原子指标为什么只能在公共层...
通过本教程，您可以了解如何使用DataWorks和StarRocks产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为...
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。V5.2.1版本之前开通域内质量功能...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站...
通过本教程，您可以了解如何使用DataWorks和Spark产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为中...
数据探查可以帮助您快速了解数据概况，提前评估数据可用性和潜在风险，您可对数据表进行全量探查、抽样探查。本文为您介绍如何新建数据探查任务。前提条件 需开通数据质量功能模块才可使用数据探查功能。V5.2.1版本之前开通域内质量功能...
从数据源中引入业务所需的数据集，以便在模型画布中编辑业务模型时使用数据集。本文介绍如何通过选择已有表新建数据集。前提条件 已创建云计算资源，并通过查看云计算资源的物理表更新缓存表。具体操作，请参见 新建计算资源。背景信息 ...
汇总表通常挂载于汇总数据层，用于将一个统计粒度（维度或维度组合）及该粒度下的多个派生指标汇总输出，为后续的业务查询，数据分发等提供基础。您也可以根据业务需求，选择将汇总表挂载至其他数据层。创建数据分层，详情请参见 定义数仓...
通过本教程，您可以了解如何使用DataWorks和EMR Serverless Spark产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从...
通过本教程，您可以了解如何使用DataWorks和EMR产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为中获取...
在数据同步到Dataphin前，对数据进行探查，可提前了解数据的分布、空值等信息，便于更加规范使用数据。本文为您介绍如何进行数据探查配置。前提条件 需购买数据质量才可使用数据探查功能。使用限制 部分数据源类型的表支持进行数据探查，...
缺联数据使用默认值代替：主表中的字段没有与维度逻辑表关联上，则使用默认值-110。编辑维度角色 角色英文名、角色名称 维度角色具有维度别名作用。多次引用同一维度时不可重名定义，起到角色扮演效果。您需要定义 角色英文名 和 角色名称...
缺联数据使用默认值代替：主表中的字段没有与维度逻辑表关联上，则使用默认值-110。编辑维度角色 角色英文名、角色名称 维度角色具有维度别名作用。多次引用同一维度时不可重名定义，起到角色扮演效果。您需要定义 角色英文名 和 角色名称...
RDS PostgreSQL支持库表恢复功能，您可将指定的库按备份集或时间点恢复至原实例或其他已有实例，无需恢复全部数据，可用于误操作后的快速订正，以及分析历史数据等场景。功能说明 功能项 说明 恢复范围 实例中指定的库。说明 恢复范围取决...
自动生成逻辑表的功能，可以大大简化逻辑表的配置步骤，一般情况下，我们都可以使用自动生成逻辑表来扫描源端数据源，简化大部分配置操作。如果自动扫描的结果不符合预期，只需要对自动扫描的结果做简单修正即可。复杂的物理库表规则可以...
说明 若接收数据的目标表不是通过DTS创建（同步类型 未选中 库表结构同步），则需确保该表与源库中待同步的表具备相同的主键或非空唯一约束，否则可能会导致目标数据库中出现重复数据。待同步的数据库名称中间不能包含短划线（-），例如dts...
使用本地二级索引时，表格存储以同步方式将数据表中被索引的列和主键列的数据自动同步到索引表中，当数据写入数据表后，即可从索引表中查询到数据。覆盖索引 支持索引表中带有属性列。在创建数据表时预先定义一些列（称为预定义列）后，您...
在数据同步到Dataphin前，对数据进行探查，可提前了解数据的分布、空值等信息，便于更加规范使用数据。本文为您介绍如何进行数据探查配置。前提条件 需购买数据质量才可使用数据探查功能。使用限制 部分数据源类型的表支持进行数据探查，...
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
数据管理是用来查看实例中的数据以及数据的组织形式，例如库表结构、数据大小、建表语句、表字段信息和数据预览的可视化工具。本文介绍如何使用 云数据库 SelectDB 版 的数据管理。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作，...
DataWorks的数据对比节点可实现对不同表之间的数据进行多种方式的对比，并可在工作流中使用。本文为您介绍使用数据对比节点进行任务开发的主要流程。节点介绍 数据对比节点不仅仅用于数据集成，还支持表与表之间的对比。同时，它还支持...
使用配置 用于数据预览 可用于资产清单和资产目录的数据预览，当数据表已有采样数据时，优先展示采样数据，也可手动触发查询最新数据；若不存在采样数据，则会自动触发数据预览查询。针对每个字段的采样数据，系统会独立存储和排序展示，但...
数据地图是在元数据基础上提供的企业数据目录管理模块，涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。版本限制 仅DataWorks标准版及以上版本支持代码搜索、...
数据地图-数据专辑：数据地图中汇集某一些主题表的 数据专辑，每个数据专辑即可添加成一个数据集。我的收藏：数据目录中我收藏的表。我的MaxCompute表：当前登录账号是表Owner的所有MaxCompute表。公共数据：DataWorks提供的 公开数据集，...
表结构变化 新增一列，记录工单号、归档时间等，不影响数据使用。用途 将多张表合并成大宽表，以提高查询性能。高并发在线查询与检索2C场景下的数据。例如账单、订单的历史数据。全量数据自适应压缩和智能冷热分离，降低存储成本。毫秒级...
数据服务支持对部分数据源表的查询提供加速能力，加速能力包含DataWorks数据服务提供的加速能力和MaxCompute本身支持的加速方案（MCQA）。通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用...
DataWorks的数据质量监控节点可通过配置数据质量监控规则，监控相关数据源表的数据质量（例如，是否存在脏数据）。同时，支持您自定义调度策略，周期性执行监控任务进行数据校验。本文为您介绍如何使用数据质量监控节点进行任务监控。背景...
MaxCompute数据迁移服务MMS（MaxCompute Migration Service）支持将多种数据源的数据迁移至MaxCompute。MMS通过与MaxCompute Spark引擎集成，简化了从自建数据源到MaxCompute的大规模数据迁移过程，降低了配置复杂度和运维成本。功能概述 ...