什么是湖仓迁移中心？一站式湖仓迁移中心 LHM（LakeHouse Migration），是阿里云自研的数据平台一站式跨云、跨平台迁移工具。支持多引擎湖仓数据平台集群探查、元数据增量发现与同步、大规模数据湖文件迁移、表格数据同步、SQL转换、调度...
数仓版和湖仓版的区别是什么？数仓版集群的弹性模式和预留模式的区别是什么？弹性IO资源是什么，主要提供什么能力？为什么包年包月还会产生后付费的费用？AnalyticDB for MySQL集群支持停机吗？如何判断AnalyticDB for MySQL集群已停止计费...
什么是实时数仓Hologres Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析…… 语料数据向量化并导入Hologres：运行如下命令将语料数据转化为向量（Text...
本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析，支持标准 SQL（兼容 PostgreSQL 协议和语法...
本文主要介绍什么是竞价实例，竞价实例的应用场景以及使用方法。前提条件 集群的产品系列为 企业版、基础版或湖仓版。什么是 竞价实例 AnalyticDB for MySQL 资源池中会有一些闲置的Spark Executor资源，资源会以折扣的方式进行售卖，这些...
场景描述 本文首先介绍什么是实时数仓以及相关技术架构，接着介绍资讯聚合类业务的典型场景及其业务目标，并据此设计了相应的技术架构。然后介绍如何部署基础环境和搭建实时数仓，并介绍业务系统如何使用实时数仓。解决的问题 通过 云消息...
前置概念 阅读本文前，您可按需了解 什么是实时数仓Hologres。操作步骤 Hologres数据准备 以下示例使用MaxCompute提供的公开数据集TPC-H的ORDERS表。您无需进行任何额外准备，只需运行以下SQL语句，即可通过MaxCompute外部表将ORDERS表的...
使用 特征数据库FeatureDB/Hologres（什么是实时数仓Hologres）存储用户特征、i2i相关物品和向量库；使用PAI-EAS（EAS概述）提供可弹性扩缩容的打分服务。具体说明如下：云产品 说明 人工智能平台PAI 面向开发者和企业的机器学习/深度学习...
本文针对Hologres提供的专业语料示例如下：语料数据 title content 什么是 Hologres Hologres是阿里云自研一体化实时湖仓平台，通过统一数据平台实现湖仓存储一体、多模式计算一体、分析服务一体、Data+AI一体，无缝对接主流BI工具，支持...
更多信息，请参见 什么是云原生数仓AnalyticDB PostgreSQL版。选择实例规格 815元/月起 立即购买 价格计算器 云数据库 ClickHouse ClickHouse 为分布式实时分析型列式数据库服务，企业级特性支持，开箱即用，其支持SQL查询，完美支持大宽表...
实时数据通道 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT...大数据实时化 数仓是大数据的基础，实时化的数仓能够让BI、报表、推荐（用户标签产出）等多种业务收益，大数据系统总体向实时化迈进。
名词解释 名词 描述 逻辑数仓 逻辑数仓是架构在用户数据源基础上的一个虚拟数仓，由数据源、虚拟库和逻辑视图组成，并提供了虚拟库管理界面，以及视图的管理和查询界面。用户可在逻辑数仓中直接跨库查询数据，也可以创建和管理虚拟库并基于...
本文为您介绍什么是DataWorks，以及如何使用DataWorks的DataStudio进行Hologres数据开发。简介 DataWorks基于Hologres、MaxCompute等大数据计算引擎，为您提供专业高效、安全可靠的一站式大数据开发与治理平台。Hologres与DataWorks深度...
尊敬的Hologres用户：Hologres Serverless型实例将...更多关于Hologres Serverless型实例的信息，请参见 什么是Hologres Serverless型实例。免费邀测期间，Hologres Serverless型实例不保障服务等级协议（SLA），但服务不降级。感谢您的配合！
本文为您介绍什么是实时数据API，以及实时数据API的作用。实时数据业务流程。在实时数据业务场景中，最常见的链路是将实时采集的数据，通过实时计算初步清洗，实时写入数据至数据库，再对接BI工具实现数据的可视化分析。数据处理流程如下图...
尊敬的Hologres用户：Hologres Serverless型实例将于北京时间2025年11月24日完成邀测，开放新购，正式商业化收费，并保障服务等级协议（SLA）。...Hologres Serverless型实例更多信息请参见 什么是Hologres Serverless型实例。
什么是自定义权限策略 在基于RAM的访问控制体系中，自定义权限策略是指在系统权限策略之外，您可以自主创建、更新和删除的权限策略。自定义权限策略的版本更新需由您来维护。创建自定义权限策略后，需为RAM用户、用户组或RAM角色绑定权限...
OSS-HDFS详情请参见 什么是OSS-HDFS服务。对于存储在OSS-HDFS上的数据，Hologres通过DLF实现元数据管理，通过JindoSDK实现数据的直接访问以及回写，回写目前仅支持ORC、Parquet、CSV及SequenceFile格式的表。通过DLF读写OSS数据的方法请...
监控信息页面看到热数据使用量比总数据使用量还多，是什么原因？预留模式跨规格变配为弹性模式后，监控界面看到CPU平均使用率增大，是什么原因？监控信息页面看到有较长的查询响应耗时，但在诊断与优化页面未找到相同耗时的SQL，是什么原因...
详细说明，请参见 什么是云迁移中心。湖仓迁移中心 湖仓迁移中心（LakeHouse Migration，简称LHM）是阿里云自研的数据平台一站式跨云、跨平台迁移工具。支持多引擎湖仓数据平台集群探查、元数据增量发现与同步、大规模数据湖文件迁移、表格...
Dataphin元数据仓库（简称：元仓），是统一管理Dataphin内部业务元数据和相应计算引擎元数据的数据仓库，存在于Dataphin元仓租户中（OPS租户）的一个Dataphin项目空间中，由一系列的周期性数据集成节点、SQL脚本节点、Shell节点组成。...
元仓简介 Dataphin元数据仓库，简称元仓，是统一管理Dataphin内部业务元数据和相应计算引擎元数据的数据仓库，存在于Dataphin元仓租户中（OPS租户）的一个Dataphin项目空间，由一系列周期性的数据集成节点、SQL脚本节点、Shell节点组成。...
实时数仓Hologres是实时交互式分析产品，兼容PostgreSQL协议，与大数据生态无缝打通，支持对万亿级数据进行高并发和低延时地多维分析，帮助您轻松使用BI工具分析数据，探索业务。本文为您介绍Hologres管理控制台概览页面的相关功能。为满足...
本教程将 从前期的资源准备、数仓规划，到后期的运维补数据、查看运行结果，指导您如何使用Dataphin完成基本的离线数仓构建。以帮助您快速了解Dataphin离线数仓建设的基础流程。使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 ...
本教程将 从前期的资源准备、数仓规划，到后期的运维补数据、查看运行结果，指导您如何使用Dataphin完成基本的离线数仓构建。以帮助您快速了解Dataphin离线数仓建设的基础流程。使用Dataphin进行离线数仓建设的基本流程如下：主流程 描述 ...
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。5分钟快速了解 功能介绍 数仓规划包括逻辑...
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在您开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。5分钟快速了解 功能介绍 数仓规划包括逻辑...
产品系列 云原生数据仓库 AnalyticDB MySQL 版 产品系列经过五年的演进，先后推出了 数仓版预留模式、数仓版弹性模式、湖仓版、以及 企业版 和 基础版。产品系列演进图如下。最早的 数仓版预留模式 为存算一体架构，可以满足高性能查询的...
External Database不同于Internal Database，并不会在Hologres中实际创建一个DB、Schema或者表，仅仅是加载外部元数据（尤其是湖仓）到Hologres中，因此删除外部数据库仅会删除外部数据源跟Hologres的映射关系，不会实际删除外部数据。...
参数项 描述 数仓分层 选择已创建的数仓分层，仅支持选择公共层的 明细数据层。后续使用此明细表时，明细表中的数据即存储在数仓的这一层中。详情请参见 定义数仓分层。业务分类 已创建的业务分类，详情请参见 业务分类。业务过程 已创建...
数仓分层是结合对业务场景、实际数据、使用系统的综合分析，对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据，归类划分至不同的分层，便于您更好地组织、管理、维护数据。分层归属 DataWorks为您提供了 贴源层、公共层、...
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...
数仓规划是基于Dataphin建设数据中台的第一步，同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前，需要完成数据仓库的规划，包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...
产品形态分为 企业版 和 基础版，融合了 数仓版预留模式、数仓版弹性模式 和 湖仓版 的优点，预留资源采用存算一体架构，保证常规业务的查询性能，同时为了应对业务负载有周期性变化或突变的情况，可以弹性增加或减少计算资源。AnalyticDB ...
数据管理DMS数仓开发通过项目空间、业务场景和任务流三级目录讲行项目管理，同时支持数仓分层管理，有利于清晰地管理某一情景下的数据仓库管理需求，充分满足各类复杂的数仓开发和管理需求。项目空间是数仓开发、管理和运维的基本单位。...
查询镜像仓额外配置信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
对湖仓版集群进行升降配。接口说明 注意事项 扩缩容期间，会禁止 submit job 提交异步任务。如果业务依赖相关功能，请根据业务情况选择时段执行扩缩容。扩缩容操作会对数据进行重分布迁移，迁移时长与数据量成正比，扩缩容期间服务不中断。...
本文为您介绍如何通过实时计算Flink版、流式数据湖仓Paimon和分析型数据库StarRocks搭建流式湖仓。背景信息 随着社会数字化发展，企业对数据时效性的需求越来越强烈。传统的离线数仓搭建方法论比较明确，通过定时调度离线作业的方式，将上...
接入用户自建镜像仓。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 示例值 ...
企业版 为集群形态，是 湖仓版 和 数仓版 的融合升级版本，产品特性与 湖仓版 相同。它既支持弹性模式下的资源组隔离、资源灵活弹性、冷热数据分层存储等能力，也具备预留模式下的高吞吐实时写入和高并发在线查询能力。基础版 为单机形态，...