2023年11月 类别 名称 说明 相关文档 新增 自定义Spark镜像 当Spark默认镜像无法满足您的需求时，您可以基于默认镜像，将Spark作业需要的软件包和依赖项打包到镜像中，生成自定义镜像，并在Spark作业开发时，指定自定义镜像作为Spark作业的...
本文描述实时数仓 Hologres支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM...
本文为您介绍实时数仓Hologres如何连接FineReport并可视化分析数据。前提条件 开通Hologres实例，详情请参见 购买Hologres。进入 帆软官网，根据项目需求选择 解决方案 并下载客户端工具。本次示例采用 FineReport报表。背景信息 ...
云监控联合实时数仓Hologres推出CloudLens for Hologres，旨在集中管理Hologres实例以及采集Hologres的SQL审计日志。您可通过CloudLens for Hologres，对Hologres实例的SQL审计日志进行查询分析，并查看可视化报表。CloudLens for Hologres...
本文为您介绍在Hologres中数仓分层的最佳实践，方便快速构建业务，建设集高性能、敏捷化于一体的实时数仓。背景信息 Hologres与Flink、MaxCompute、DataWorks深度兼容，能够提供实时离线一体化联合解决方案。在该方案下有着非常丰富的应用...
Hologres实时数仓：阿里云自研一站式实时数仓产品，不仅支持海量数据多维分析（OLAP）、高并发低延迟的在线数据服务（Serving），还与达摩院自研高性能向量计算软件库Proxima深度整合，支持高性能、低延时、简单易用的向量计算能力。...
本文为您介绍Hologres基于Delta Lake实现湖仓一体的背景、架构、环境准备及使用说明等信息。背景信息 Delta Lake是DataBricks公司推出的一种数据湖方案。Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据...
本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎（Real-Time Data Warehouse），支持海量数据实时写入、实时更新、实时加工、实时分析，支持标准 SQL（兼容 PostgreSQL 协议和语法...
开发者社区：实时数仓Hologres Hologres有阿里云开发者社区官方团队号—— 实时数仓Hologres，团队会定期发布关于产品的最新咨询、学习路径、技术交流等，详情请关注：实时数仓Hologres。钉钉交流群 使用钉钉扫描如下二维码加入实时数仓...
实时数仓Hologres服务等级协议（SLA）的详情，请参见 实时数仓服务等级协议。
工作空间规划实践 工作空间规划可按照公司部门、公司业务或数仓层次进行规划，或综合三种维度进行混合规划：细分 按部门划分 按业务划分 按数仓层次划分 划分依据 工作空间的划分可以与公司的组织架构相一致。例如：生产部、营销部、人力...
StarRocks 软件栈自身服务的稳定性及服务保障。自定义环境与长期运行的离线作业 需要完全掌控集群资源和配置。EMR on ECS 提供全面的集群和组件服务管控能力，包括但不限于ECS故障补偿、弹性伸缩、智能诊断等。集成 Hadoop、Spark、Flink、...
通过云效解决企业代码托管和软件集成发布问题，整体发布节奏由原来一周发版1次提升为每日交付；发布时长由原来一次发布30分钟提升为2分钟；现在各个项目组完成代码评审后自动集成发布，目前有30条生产环境流水线，单次发布节省20分钟的情况...
Hologres兼容PostgreSQL生态，是新一代的 阿里云实时数仓产品，与大数据生态无缝连接，支持实时与离线数据，对接第三方BI工具，实现可视化分析业务。本文为您介绍基于Hologres核心功能的典型应用场景。Hologres的典型应用场景如下：搭建...
为您介绍DLF关于免运维、高一致、强扩展的企业级湖仓底座的优势。FileSystem Catalog：轻量起步，但难扛生产负载 FileSystem Catalog 通过目录结构（如 warehouse/dbName.db/tableName）组织表元数据，无需依赖外部服务，开箱即用，是默认 ...
Hologres基于创新的HSAP架构，可以将您原先数仓架构中的OLAP系统（Greenplum、Presto、Impala、ClickHouse）、KV数据库或Serving系统（HBase、Redis）统一在一个大数据计算引擎中，并提供快速的离线实时一体化分析能力。产品核心优势 简化...
本文为您介绍实时数仓Hologres的实例类型和适用场景。选型建议 以下是针对Hologres不同实例所适用的各类业务场景所提供的建议，您可以根据实际业务需求进行参考。实例类型 资源类型 核心诉求 适用业务场景 计算组型实例（推荐）独享计算...
Hologres专注实时数仓需求，从以下几个方面创新，提高数仓开发效率，降低应用门槛。专注实时场景 数据实时写入、实时更新，无需批处理，写入即可见。Hologres与Flink、Spark原生集成，支持高吞吐、低延时、有模型、高质量的实时数仓开发，...
实时数仓Hologres管理控制台的监控告警模块，为您提供了实例的CPU使用率、内存使用率和存储用量，SQL连接数，SQL语句执行的QPS和延迟情况，以及导入数据的RPS等指标监控，方便您查看并及时处理实例的异常。前提条件 已开通实时数仓Hologres...
业务背景 在实时数仓场景中，通常会涉及到复杂的业务处理，例如多表关联查询，大表聚合查询等，其数据一般都是大数据量（TB级甚至PB级），同时业务又有不同时效性的诉求，在数据加工上通常会有以下几个痛点：Lambda架构过于冗余：为了满足...
DataWorks数仓开发 第三方客户端 Navicat Navicat是一款连接多数据库的开发工具。支持可视化和SQL两种操作方式，更适用于业务上强依赖Navicat的场景。Navicat DataGrip DataGrip是一个多连接数据库开发工具，可让您在一个应用程序中连接多...
MAX_PT用于查询实时数仓Hologres表最大的分区表名称。命令语法 SELECT MAX_PT(' table_name ');参数说明如下表所示。参数 描述 table_name Hologres的表名称。使用示例 SELECT MAX_PT('holo_table');
使用建议 目前 云监控 已经支持按照Hologres实例类型（包括 实时数仓Hologres（从实例）、实时数仓Hologres（湖仓加速）、实时数仓Hologres（通用型）、实时数仓Hologres（计算组））展示对应实例的监控指标，不同的实例类型对应专属监控...
本文为您介绍DataV如何连接实时数仓Hologres。背景信息 DataV是数据可视化分析BI产品，支持使用拖拽的方式在图形化编辑界面配置样式和数据，搭建数据可视化应用，满足多种业务的展示需求。Hologres独立数据源与DataV深度合作，您可以将...
阿里云实时数仓Hologres与Flink、MaxCompute、DataWorks等深度融合，提供企业级离在线一体化全栈数仓解决方案。本文介绍如何购买实时数仓Hologres实例。操作步骤 进入 Hologres产品详情页。单击 立即购买。说明 如果提示RAM权限问题，请为...
阿里云实时数仓Hologres与Flink、MaxCompute、DataWorks等深度融合，提供企业级离在线一体化全栈数仓解决方案。本文介绍如何购买实时数仓Hologres实例。操作步骤 进入 Hologres产品详情页。单击 立即购买。说明 如果提示RAM权限问题，请为...
HoloWeb介绍 Hologres是为大数据设计的一站式实时数仓，支持数据实时写入、PB级数据高并发低延时的分析处理和超高QPS点查。与MaxCompute无缝打通，支持数据加速查询，兼容PostgreSQL生态，可以使用最熟悉的BI工具对海量数据进行自助的多维...
本文为您介绍Hologres共享集群（湖仓加速版）实例的计费情况。计费模式 Hologres共享集群（湖仓加速版）支持以Serverless方式加速查询存储于MaxCompute的仓内数据和OSS的湖数据，以及湖仓数据联邦分析。计费方式与原共享集群（MaxCompute ...
SQL开发 MaxCompute预集成多种服务，用户可使用标准 SQL 直接进行开发，简单易上手。多场景计算能力 AI计算框架 分布式计算框架 MaxFrame 支持Python编程接口、兼容Pandas接口且自动分布式计算，适用于大规模数据处理、科学计算、机器学习...
湖仓一体 External Dynamic Table的Base表可以是Hologres内表，也可以是MaxCompute等数据仓库的数据，数据加工后自动写湖，以数据湖作为统一存储，既能实现低成本的存储，高效率的加工，也能实现湖和仓数据的有机融合。
示例架构 搭建离线数仓时，Hologres可直接读取离线数仓MaxCompute中的数据，并对接BI分析工具将数据实时展示在大屏中，示例架构如图所示。其中：待处理数据：本实践使用GitHub公开事件作为示例数据，更多关于数据集的介绍请参见 业务与数据...
本文将为您介绍使用Flink、Paimon和Hologres搭建实时湖仓分析系统，并对GitHub公开事件行为数据进行实时分析。本系统利用Flink处理GitHub公开行为事件数据，并将数据以Paimon格式写入数据湖。系统同时使用Hologres SQL进行实时数据探查，并...
阿里云的湖仓一体架构，将OSS作为云上数据湖的统一存储，为您提供安全、低成本、高可靠、可扩展的数据湖方案。实时数据湖是在湖仓一体架构下，更加注重数据的实时属性或者流属性的一个数据湖发展方向。Hologres充分利用自身实时写入、实时...
实时数仓 Hologres 功能集 功能 功能描述 参考文档 计算 SQL开发 兼容PostgreSQL语法，支持完整的DDL、DML等能力，提供多种数据类型和函数，可标准的SQL开发，上手成本低。数据类型汇总 PostgreSQL兼容函数 扩展函数 DML（insert/select/...
点击 实时数仓Hologres 关注Hologres开发者社区，获取有关Hologres最新产品咨询、技术动态、视频教学、客户案例实践等内容。
本文为您介绍使用实时数仓Hologres服务的约束与限制。MaxCompute直接查询的约束限制 查询MaxCompute分区表时，扫描分区数的最大值为512。Hologres V3.0.20及以上版本已取消该限制。每个查询中最大的底层数据扫描量为200GB，与表以及字段的...
External Database不同于Internal Database，并不会在Hologres中实际创建一个DB、Schema或者表，仅仅是加载外部元数据（尤其是湖仓）到Hologres中，因此删除外部数据库仅会删除外部数据源跟Hologres的映射关系，不会实际删除外部数据。...
本文为您介绍实时数仓Hologres支持连接的BI分析工具。Hologres兼容PostgreSQL生态，提供JDBC/ODBC接口，支持对接第三方ETL和BI工具，包括Tableau及Quick BI等。您可以将Hologres查询的数据直接对接BI工具，进行多维分析和探索业务。...
企业版、基础版或湖仓版 通过联邦分析功能同步数据 DTS 数仓版、企业版、基础版或湖仓版 通过DTS导入数据 无感集成 数仓版、企业版、基础版或湖仓版 通过无感集成（Zero-ETL）同步数据 一键建仓 数仓版 通过一键建仓同步至数仓版 MongoDB ...
本文为您介绍如何使用实时数仓Hologres对接实时计算，快速搭建实时数仓分析大屏的最佳实践。前提条件 开通Hologres并连接开发工具，详情请参见 DataWorks快速入门 或 连接HoloWeb并执行查询。开通实时计算，详情请参见 开通实时计算Flink版...