具有数据量大，查询计算较慢的特点。DWS：全称Data Warehouse Summary，汇总数据层，存储以事实表为基础，以维度为单位的统计度量。DIM：全称Dimension，公共维度层，是在存储层的基础上清洗脏数据、筛选有价值数据，并且对明细数据层的...
PolarDB MySQL版 重磅推出的列存索引（In-Memory Column Index，简称IMCI）面向OLAP场景大数据量复杂查询。通过列存索引，PolarDB MySQL版 实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套...
良好的表结构设计不仅能支持丰富的功能需求，还能大幅提升数据库系统的性能、可维护性和可扩展性等，因此数据库的表结构设计至关重要。本文为您介绍在 云数据库 SelectDB 版 中，设计表结构时需要重点关注的表属性，并帮助您快速掌握如何...
时空数据管理面临的挑战 Ganos 解决什么问题 Ganos 为数据库构建了面向新型时空多模多态数据的一体化表达、存储、查询、分析与渲染支撑能力，解决了以往时空大数据使用流程复杂、使用门槛高、应用效率低等问题，可广泛应用于城市管理、交通...
时空数据管理面临的挑战 Ganos 解决什么问题 Ganos 为数据库构建了面向新型时空多模多态数据的一体化表达、存储、查询、分析与渲染支撑能力，解决了以往时空大数据使用流程复杂、使用门槛高、应用效率低等问题，可广泛应用于城市管理、交通...
2025-10-14 所有地域 DataWorks企业版用户 管理开放数据 开放数据表结构详情 09月 功能名称 描述 开始发布时间 预计发布地域 使用客户 相关文档 DataWorks资源组支持部署使用大模型服务 DataWorks大模型服务为您提供高效部署、安全通信与...
ClickHouse每次写入都会生成一个data part，如果每次写入一条或者少量的数据，那会造成ClickHouse内部有大量的data part（会给merge和查询造成很大的负担）。为了防止出现大量的data part，ClickHouse内部做了很多限制，这就是too many ...
支持 支持 HTAP&复杂/分析查询 列存索引 面向OLAP场景大数据量复杂查询。通过列存索引，PolarDB for MySQL 版实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据库系统，即可满足业务的OLTP...
支持 支持 高性能 列存索引（IMCI）PolarDB MySQL版 重磅推出的列存索引面向OLAP场景大数据量复杂查询。通过列存索引，PolarDB MySQL版 实现了一体化的实时事务处理和实时数据分析的能力，成为一站式HTAP数据库产品解决方案。通过一套数据...
适用场景：适用于执行时间长、计算数据量大的查询。例如：清洗类查询（Extract-Transform-Load）。默认执行模式 版本 产品系列 默认执行模式 是否支持Batch模式 数仓版 预留模式 Interactive 否 弹性模式 是 切换执行模式 切换实例的执行...
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍深圳法...
本文介绍如何通过减少单次查询数据点来提升查询效率。时序查询优化的其中一个原则就是，查询命中的数据点越少，查询效率越高。因此来说查询条件尽量精确。如何减少扫过的数据点数 查询周期与写入的采集周期强相关，尽量减少毫秒级采集周期...
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
说明 尽量不要选择日期、时间和时间戳类型的字段作为分区键，写入时容易发生倾斜影响写入性能，且多数查询通常是限定了日期或者时间段，如：查询最近一天或者一个月的数据，可能会导致要查询的数据只存在于一个节点上，无法充分利用分布式...
国家统计数据集 national_data TPC性能数据 TPC-DS TPC-DS是一个面向决策支持的基准，它对决策支持系统的几个普遍适用的方面进行建模，包括查询和数据维护等，使大数据系统等新兴技术能够执行基准测试。TPC-DS 10GB性能测试集 TPC-DS 100GB...
实时数据通道 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。收益 系统解耦...
本文介绍查询用户OSS或专属存储的归档数据的操作步骤以及常见问题。前提条件 已完成 数据归档至用户OSS 或 数据归档至专属存储 的用户，包含老用户和新用户。说明 老用户：数据归档查询功能未上线（上线时间：2022年09月14日）前，使用过...
适用场景包含构建海量数据实时写入和复杂ETL计算的实时数据仓库、大数据量的复杂查询、历史数据分析、日志分析等业务场景。数仓版弹性模式 包括两种形态：单机版和集群版。单机版 单机版即单节点部署，不具备分布式能力，不提供高可用服务...
由于DBS产品能力调整，数据灾备（DBS）将于2024年05月起逐步下线备份数据查询页面的相关功能。下线背景 本次下线是基于云原生数据湖分析（Data Lake Analytics，DLA）服务自2024年01月01日开始按地域逐步停止服务支持所做出的调整。由于 ...
如果表数据量非常大，查询恢复状态中的表是否有其他影响？Fast Import特性主要用于快速校验和恢复数据。需要注意以下事项：查询恢复中的表，其对数据库集群的影响与在正常表上执行相同数据量的查询等效。不推荐对正在恢复的表执行连续的、...
背景信息 物化视图状态分为如下两种：物化视图有效 执行查询语句时，MaxCompute会从物化视图中直接查询数据，不会从源数据中查询数据。物化视图无效 执行查询语句时，MaxCompute无法从物化视图中直接查询数据，会从源数据中查询数据，无法...
您也可以通过 TSDB 产品控制台的数据查询功能进行数据分组、降采样、空间聚合的可视化数据查询展现。数据管理 数据时效设置 您可以通过控制台或者 API 设置数据的有效期。数据时效开启并设置完成后，系统对于定义的过期数据将立即标记失效...
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
EMR提供的组件包括开源和自研两大类，涵盖数据开发、计算引擎、数据服务、资源管理、数据存储、数据集成等领域，您可以按需选择和配置。说明 在创建集群时，如果没有您想使用的组件，或者想使用的开源组件仅对存量用户开放，您可以自行安装...
扫描数据量的大小在一定程度上能体现查询对存储层的压力，读取的数据量越大，消耗的磁盘IO资源也越大，在计算层的处理也会消耗更多资源，影响查询速度。总的Stage个数 查询生成的总的Stage个数。Stage的个数多少，在一定程度上能体现一条...
注意 如果不设置请求参数，则需要勾选 返回结果分页，进行分页查询，以避免单次查询返回数据量过大影响性能。API测试。单击页面工具栏最右侧的 测试，填写API请求参数（由于打开了分页查询开关，系统会自动添加两个分页参数），单击 开始...
如果查询需要处理的数据量较大，就可能会长时间占用大量的资源，导致整体查询效率降低，进而影响最终的查询效果。此外，如果 AnalyticDB MySQL版 中表存储的数据量较大，那么在执行索引过滤、明细数据读取等操作时也会出现相互争抢磁盘I/O...
ErrorCode 异常原因 处理办法 CLUSTER_OUT_OF_MEMORY(32001)集群当时内存消耗整体比较大，为了保持系统整体的稳定性，会选择断开一个内存使用特别大的查询连接，以免影响其他查询的正常运行。建议限制查询的并发量。具体操作，请参见 查询...
StarRocks自2.3版本起支持Catalog（数据目录）功能，实现在一套系统内同时维护内、外部数据，方便您轻松访问并查询存储在各类外部源的数据。本文为您介绍什么是Catalog，以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：...
DataWorks的数据同步节点支持将MaxCompute中的单表数据同步到Hologres，帮助您更高效地进行大数据分析和实时查询。本文将详细介绍配置流程，让您轻松迁移数据并充分利用Hologres的高性能查询能力。背景信息 在使用此功能将MaxCompute的内部...
安全性 OceanBase 数据库在调研了大量企业对于数据库软件的安全需求，并参考了各种安全标准之后，实现了企业需要的绝大部分安全功能，支持完备的权限与角色体系，支持 SSL、数据透明加密、审计、Label Security、IP 白名单等功能，并通过了...
数据倾斜会导致部分计算节点存储的数据过多，查询负载大，查询耗时变长。因此请不要选择bool类型、时间日期类型的列作为分布键。选择经常作为查询条件的列作为分布键，可以实现按分布键进行节点裁剪。您可以选择一个或多个列作为分布键，...
分析数据 分享数据 同步查询结果至电子表格，通过电子表格的数据分享功能，分享该表数据至指定用户。分享数据 下载数据 将查询结果以电子表格的形式下载至本地。默认展示1W条数据。下载数据 说明 租户管理员、租户安全管理员、以及被授权 ...
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog ...
2025-05-30 全部地域 数仓引擎 04月 功能名称 功能描述 发布时间 发布地域 相关文档 MaxCompute数据传输服务观测能力升级 通过优化指标数据采集和加工处理链路，提升数据的准确性，新增支持以项目维度查看资源用量能力，新增更多使用方式...
Apache Doris是一个高性能、实时的分析型数据库，能够较好的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息，详情请参见 Doris介绍。使用场景 数据源经过各种数据...
如果查询条件中包含 city_id 和 site_id，而 city_id 的取值只有几十，仅使用 city_id 作为分桶列可能导致某些桶的数据量过大，从而产生数据倾斜。此时可考虑将 city_id 和 site_id 联合作为分桶字段，但这样做的缺点是，如果查询条件中仅...
支持，您可以参考 按时间戳冷热分离的数据查询 和 按自定义时间列冷热分离的范围查询Scan，在查询时指定时间范围来实现冷数据的查询。需注意的是，容量型云存储和归档型云存储的读IOPS能力相对较低，因此查询可能会比较慢。
数据查询提供通过SQL查询预览数据资源，为开发人员和数据应用人员提供全面直观的数据呈现。本文介绍如何查询物理表数据。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角，...