Hologres是一站式实时数据仓库引擎,支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议),支持PB级数据多维分析(OLAP)与即席分析(Ad Hoc),支持高并发低延迟的在线数据...提供离在线一体化全栈数仓解决方案。
云数据库SelectDB版是新一代实时数据仓库SelectDB在阿里云上的全托管服务,您可以在阿里云上便捷地购买SelectDB数仓服务,满足海量数据分析需求。
本文为您介绍Hologres共享集群(湖仓加速版)的背景、适用场景及功能等信息。背景信息 Hologres共享集群(湖仓加速版)是原共享集群(MaxCompute BI加速)的升级版本,在支持MaxCompute数仓加速的基础上,进一步支持了OSS数据湖加速。它...
新用户试用教程推荐 试用教程推荐 示例场景 涉及产品 操作难度 数仓加速查询 了解搭建离线数仓的思路,学习离线数仓中Hologres的加速查询功能和大屏展示效果。Hologres MaxCompute(可选)DataV PAI+Hologres基于大模型搭建企业级知识库 ...
本文描述实时数仓 Hologres支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM...
云监控联合实时数仓Hologres推出CloudLens for Hologres,旨在集中管理Hologres实例以及采集Hologres的SQL审计日志。您可通过CloudLens for Hologres,对Hologres实例的SQL审计日志进行查询分析,并查看可视化报表。CloudLens for Hologres...
本文为您介绍在Hologres中数仓分层的最佳实践,方便快速构建业务,建设集高性能、敏捷化于一体的实时数仓。背景信息 Hologres与Flink、MaxCompute、DataWorks深度兼容,能够提供实时离线一体化联合解决方案。在该方案下有着非常丰富的应用...
本文为您介绍什么是实时数仓Hologres以及Hologres的功能。Hologres是阿里巴巴自主研发的一站式实时数仓引擎(Real-Time Data Warehouse),支持海量数据实时写入、实时更新、实时加工、实时分析,支持标准 SQL(兼容 PostgreSQL 协议和语法...
开发者社区:实时数仓Hologres Hologres有阿里云开发者社区官方团队号—— 实时数仓Hologres,团队会定期发布关于产品的最新咨询、学习路径、技术交流等,详情请关注:实时数仓Hologres。钉钉交流群 使用钉钉扫描如下二维码加入实时数仓...
实时数仓Hologres服务等级协议(SLA)的详情,请参见 实时数仓服务等级协议。
Hologres兼容PostgreSQL生态,是新一代的 阿里云实时数仓产品,与大数据生态无缝连接,支持实时与离线数据,对接第三方BI工具,实现可视化分析业务。本文为您介绍基于Hologres核心功能的典型应用场景。Hologres的典型应用场景如下:搭建...
Hologres基于创新的HSAP架构,可以将您原先数仓架构中的OLAP系统(Greenplum、Presto、Impala、ClickHouse)、KV数据库或Serving系统(HBase、Redis)统一在一个大数据计算引擎中,并提供快速的离线实时一体化分析能力。产品核心优势 简化...
本文为您介绍实时数仓Hologres的实例类型和适用场景。选型建议 以下是针对Hologres不同实例所适用的各类业务场景所提供的建议,您可以根据实际业务需求进行参考。实例类型 资源类型 核心诉求 适用业务场景 计算组型实例(推荐)独享计算...
Hologres专注实时数仓需求,从以下几个方面创新,提高数仓开发效率,降低应用门槛。专注实时场景 数据实时写入、实时更新,无需批处理,写入即可见。Hologres与Flink、Spark原生集成,支持高吞吐、低延时、有模型、高质量的实时数仓开发,...
实时数仓Hologres管理控制台的监控告警模块,为您提供了实例的CPU使用率、内存使用率和存储用量,SQL连接数,SQL语句执行的QPS和延迟情况,以及导入数据的RPS等指标监控,方便您查看并及时处理实例的异常。前提条件 已开通实时数仓Hologres...
业务背景 在实时数仓场景中,通常会涉及到复杂的业务处理,例如多表关联查询,大表聚合查询等,其数据一般都是大数据量(TB级甚至PB级),同时业务又有不同时效性的诉求,在数据加工上通常会有以下几个痛点:Lambda架构过于冗余:为了满足...
MAX_PT用于查询实时数仓Hologres表最大的分区表名称。命令语法 SELECT MAX_PT(' table_name ');参数说明如下表所示。参数 描述 table_name Hologres的表名称。使用示例 SELECT MAX_PT('holo_table');
使用建议 目前 云监控 已经支持按照Hologres实例类型(包括 实时数仓Hologres(从实例)、实时数仓Hologres(湖仓加速)、实时数仓Hologres(通用型)、实时数仓Hologres(计算组))展示对应实例的监控指标,不同的实例类型对应专属监控...
本文为您介绍DataV如何连接实时数仓Hologres。背景信息 DataV是数据可视化分析BI产品,支持使用拖拽的方式在图形化编辑界面配置样式和数据,搭建数据可视化应用,满足多种业务的展示需求。Hologres独立数据源与DataV深度合作,您可以将...
阿里云实时数仓Hologres与Flink、MaxCompute、DataWorks等深度融合,提供企业级离在线一体化全栈数仓解决方案。本文介绍如何购买实时数仓Hologres实例。操作步骤 进入 Hologres产品详情页。单击 立即购买。说明 如果提示RAM权限问题,请为...
阿里云实时数仓Hologres与Flink、MaxCompute、DataWorks等深度融合,提供企业级离在线一体化全栈数仓解决方案。本文介绍如何购买实时数仓Hologres实例。操作步骤 进入 Hologres产品详情页。单击 立即购买。说明 如果提示RAM权限问题,请为...
HoloWeb介绍 Hologres是为大数据设计的一站式实时数仓,支持数据实时写入、PB级数据高并发低延时的分析处理和超高QPS点查。与MaxCompute无缝打通,支持数据加速查询,兼容PostgreSQL生态,可以使用最熟悉的BI工具对海量数据进行自助的多维...
本文为您介绍Hologres共享集群(湖仓加速版)实例的计费情况。计费模式 Hologres共享集群(湖仓加速版)支持以Serverless方式加速查询存储于MaxCompute的仓内数据和OSS的湖数据,以及湖仓数据联邦分析。计费方式与原共享集群(MaxCompute ...
湖仓一体 External Dynamic Table的Base表可以是Hologres内表,也可以是MaxCompute等数据仓库的数据,数据加工后自动写湖,以数据湖作为统一存储,既能实现低成本的存储,高效率的加工,也能实现湖和仓数据的有机融合。
示例架构 搭建离线数仓时,Hologres可直接读取离线数仓MaxCompute中的数据,并对接BI分析工具将数据实时展示在大屏中,示例架构如图所示。其中:待处理数据:本实践使用GitHub公开事件作为示例数据,更多关于数据集的介绍请参见 业务与数据...
本文将为您介绍使用Flink、Paimon和Hologres搭建实时湖仓分析系统,并对GitHub公开事件行为数据进行实时分析。本系统利用Flink处理GitHub公开行为事件数据,并将数据以Paimon格式写入数据湖。系统同时使用Hologres SQL进行实时数据探查,并...
阿里云的湖仓一体架构,将OSS作为云上数据湖的统一存储,为您提供安全、低成本、高可靠、可扩展的数据湖方案。实时数据湖是在湖仓一体架构下,更加注重数据的实时属性或者流属性的一个数据湖发展方向。Hologres充分利用自身实时写入、实时...
实时数仓 Hologres 功能集 功能 功能描述 参考文档 计算 SQL开发 兼容PostgreSQL语法,支持完整的DDL、DML等能力,提供多种数据类型和函数,可标准的SQL开发,上手成本低。数据类型汇总 PostgreSQL兼容函数 扩展函数 DML(insert/select/...
点击 实时数仓Hologres 关注Hologres开发者社区,获取有关Hologres最新产品咨询、技术动态、视频教学、客户案例实践等内容。
本文为您介绍使用实时数仓Hologres服务的约束与限制。MaxCompute直接查询的约束限制 查询MaxCompute分区表时,扫描分区数的最大值为512。Hologres V3.0.20及以上版本已取消该限制。每个查询中最大的底层数据扫描量为200GB,与表以及字段的...
External Database不同于Internal Database,并不会在Hologres中实际创建一个DB、Schema或者表,仅仅是加载外部元数据(尤其是湖仓)到Hologres中,因此删除外部数据库仅会删除外部数据源跟Hologres的映射关系,不会实际删除外部数据。...
本文为您介绍实时数仓Hologres支持连接的BI分析工具。Hologres兼容PostgreSQL生态,提供JDBC/ODBC接口,支持对接第三方ETL和BI工具,包括Tableau及Quick BI等。您可以将Hologres查询的数据直接对接BI工具,进行多维分析和探索业务。...
企业版、基础版或湖仓版 通过联邦分析功能同步数据 DTS 数仓版、企业版、基础版或湖仓版 通过DTS导入数据 无感集成 数仓版、企业版、基础版或湖仓版 通过无感集成(Zero-ETL)同步数据 一键建仓 数仓版 通过一键建仓同步至数仓版 MongoDB ...
本文为您介绍如何使用实时数仓Hologres对接实时计算,快速搭建实时数仓分析大屏的最佳实践。前提条件 开通Hologres并连接开发工具,详情请参见 DataWorks快速入门 或 连接HoloWeb并执行查询。开通实时计算,详情请参见 开通实时计算Flink版...
本文为您介绍Hologres基于Delta Lake实现湖仓一体的背景、架构、环境准备及使用说明等信息。背景信息 Delta Lake是DataBricks公司推出的一种数据湖方案。Delta Lake以数据为中心,围绕数据流走向(数据从流入数据湖、数据组织管理和数据...
高额消费预警:针对Hologres(按量付费)、共享集群(湖仓加速版)商品,您可以通过阿里云的费用与成本进行设置,针对已经出账的账单金额进行监控及告警。如果当天的账单金额超出设定的阈值,系统会发送告警通知。说明 新版费用与成本控制...
使用Flink+Hologres搭建实时数仓可以充分利用Flink强大的实时处理能力和Hologres提供的Binlog、行列共存和资源强隔离等能力,实现高效、可扩展的实时数据处理和分析,帮助您更好地应对不断增长的数据量和实时业务需求。本文介绍如何通过...
Hologres是兼容PostgreSQL协议的实时数仓引擎。Hologres在V3.1版本前支持的分区表同样兼容PostgreSQL,每个分区子表均为物理表,下文简称物理分区表。Hologres V3.1版本起,支持 逻辑分区表。逻辑分区表不仅具备物理分区表的主要优势,包括...
BatchCreateDataLakePartitions 批量新建湖仓表分区 调用此API可批量新建湖仓表分区。UpdateDataLakeTable 更新湖仓表信息 调用此API可更新湖仓表信息。UpdateDataLakePartition 更新湖仓表分区信息 调用此API可更新湖仓表分区信息。...
本文为您介绍如何使用实时数仓Hologres连接SQL Workbench/J实现数据的可视化分析。前提条件 已安装SQL Workbench/J。开通Hologres实例,详情请参见 购买Hologres。背景信息 SQL Workbench/J是一款免费的、跨平台的SQL查询分析工具,您可以...