分布式海量数据存储

_相关内容

某新能源汽车造车新势力

客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本,提供了更高效的压缩率和同规格下的更大吞吐量,能稳定的支撑高并发、海量数据存储的业务需求。同时提供了成熟的冷热分离方案,大大降低了存储和运维成本,对于...

管理报警规则

您可以通过 PolarDB-X 1.0 控制台创建和管理阈值报警规则,帮助您及时了解 PolarDB-X 1.0 实例、数据库和存储节点的各项监控数据是否出现异常并快速进行处理。本文将以实例监控为例介绍如何管理报警规则。创建报警规则 登录 PolarDB分布式...

企业版和标准版功能对比

不支持 支持 一写多读集群 PolarDB 采用分布式集群架构,一个集群版集群包含一个主节点和最多15个只读节点(可以只包含一个主节点),多个数据库节点构成数据库引擎层。主节点处理读写请求,只读节点仅处理读请求。主节点和只读节点之间...

日志备份

登录 云原生分布式数据库控制台。在页面左上角选择目标实例所在地域。在 实例列表 页,单击 PolarDB-X 2.0 页签。找到目标实例,单击实例ID。在左侧导航栏中,单击 数据恢复>日志备份。页面展示了已经备份好的所有Binlog文件,在操作列单击...

简介

概述 阿里云自研Ganos时空引擎(以下简称Ganos)提供一系列的数据类型、函数和存储过程,用于在云原生关系型分布式数据库PolarDB中对空间/时空数据进行高效的存储、索引、查询和分析计算。本文档向您介绍在PolarDB中如何使用Ganos对时空...

简介

概述 阿里云自研Ganos时空引擎(以下简称Ganos)提供一系列的数据类型、函数和存储过程,用于在云原生关系型分布式数据库PolarDB中对空间/时空数据进行高效的存储、索引、查询和分析计算。本文档向您介绍在PolarDB中如何使用Ganos对时空...

NAS存储卷概述

并行计算场景加速数据读取 利用计算节点的内存构建分布式数据缓存池,缓存池可随计算规模自动扩缩容,实现对NAS存储卷中热数据的访问加速。在AI训练、生命计算等场景推荐开启。具体操作,请参见 开启CNFS NAS计算端分布式缓存。持久化应用...

数据源白名单配置

产品名称 操作说明 云原生大数据计算服务MaxCompute 设置白名单 实时数仓Hologres IP白名单 云数据库ClickHouse 设置白名单 消息队列Kafka版 配置白名单 云原生分布式数据库PolarDB-X 设置白名单 云原生分布式数据库PolarDB-X(2.0)设置白...

数据源白名单配置

产品名称 操作说明 云原生大数据计算服务MaxCompute 设置白名单 实时数仓Hologres IP白名单 云数据库ClickHouse 设置白名单 消息队列Kafka版 配置白名单 云原生分布式数据库PolarDB-X 设置白名单 云原生分布式数据库PolarDB-X(2.0)设置白...

OceanBase 4.x 简介

更多规格选择 OceanBase 数据库 4.x 版本提供更多规格选择,最小支持 4C16G 小规格单机部署,支持客户业务从小到大的全生命周期,在云上可以满足小微客户的诉求,降低分布式数据库的使用门槛。4.x 版本兼容 MySQL 8.0,支持更多的 SQL MODE...

概述

随着云原生技术在业界持续升温,越来越多的金融客户希望将能将云搭建在拥有云原生能力的平台之上,利用各类云原生的红利迅速实现技术转型,...可以配合 SOFAStack 各中间件产品、OceanBase 分布式数据库,形成单元化异地多活架构解决方案。

概述

全局一致性 PolarDB-X 是一款分布式数据库,数据存放在多个数据节点(DN)上,当分布式事务存在的情况下,恢复后的实例需要保证多个数据节点间的数据一致性。下图通过转账测试给出了全局一致性的示例:PolarDB-X 中存放了一张用户的账户...

服务等级协议

X服务等级协议 云原生分布式数据库PolarDB-X服务等级协议(金融云版)云原生数据库PolarDB服务等级协议 云数据库MySQL版/SQL Server版/PostgreSQL版/MariaDB版服务等级协议 云数据库MySQL版/SQL Server版/PostgreSQL版/MariaDB版...

名词解释

术语 说明 cassandra 云数据库Cassandra版是在线可靠的NoSQL分布式数据库服务,支持类SQL语法CQL,支持多地多活,提供了安全、容灾、监控、备份恢复等企业级能力。CQL CQL(Cassandra Query Language)是cassandra中提供的一种类SQL查询...

功能特性

表格存储 提供了宽表模型、时序模型和消息模型三种数据存储模型。本文介绍了不同模型支持的功能特性。宽表模型 宽表模型支持的功能特性请参见下表。功能特性 描述 相关文档 表操作 支持列出实例中的全部数据表、创建一张数据表、查询数据表...

算子

Aggregation AnalyticDB MySQL版 是一个分布式数据库,支持多节点并行完成聚合操作(更多关于聚合和分组聚合的信息,请参见 分组聚合查询优化)。Aggregation算子通过 sum()、count()、avg()等函数对数据进行聚合或分组聚合操作。...

基本概念

单个Shard是由三节点的副本集组成,保证单个分片的高可用性,用户可以根据自己的应用性能及存储要求,购买多个Shard来扩展读写性能及存储空间,实现一个分布式数据库系统。ConfigServer 配置服务器,存储所有数据库元信息(路由、分片)的...

如何设计宽表主键

Lindorm宽表引擎是一款分布式数据引擎,宽表引擎中的数据均按照主键进行分布。在执行查询时,如果表中存在多列主键,系统会从最左边的主键开始匹配。如果主键设置不当,则可能导致主键无法被有效利用,进而产生热点问题,影响查询性能。...

什么是数据传输服务DTS

数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务,支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,助您构建...

Map模型

基于MapJobProcessor,调用Map方法,即可实现大数据分布式跑批的能力。注意事项 SchedulerX不保证子任务一定执行一次,在特殊条件下会failover,可能会导致子任务重复执行,需要业务方自己实现幂等。SchedulerX使用的是Hessian序列化框架,...

外部表概述

背景信息 MaxCompute SQL作为分布式数据处理的主要入口,可实现EB级别离线数据的快速处理和存储。随着大数据业务的不断扩展,新的数据使用场景在不断产生,MaxCompute计算框架也在不断演化。MaxCompute原来主要面对内部特殊格式数据的强大...

迁移工具

将MySQL数据同步迁移到表格存储 将HBase数据同步到表格存储 将MaxCompute数据同步到表格存储 将表格存储数据同步到MaxCompute 将表格存储数据同步迁移到OSS 将表格存储数据表中数据同步到另一个数据表 将表格存储时序表中数据同步到另一个...

品牌升级

PolarDB-X 融合分布式SQL引擎与分布式自研存储X-DB,专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验。此次品牌升级,存量DRDS实例不受影响,可正常续费...

产品架构

搜索引擎 LindormSearch 是面向海量数据设计的分布式搜索引擎,兼容开源Solr标准接口,同时可无缝作为宽表、时序引擎的索引存储,加速检索查询。其整体架构与宽表引擎一致,基于数据自动分区+分区多副本+Lucene的结构设计,具备全文检索、...

表结构设计

尽量不要选择日期、时间和时间戳类型的字段作为分布键,写入时容易发生倾斜影响写入性能,且多数查询通常是限定了日期或者时间段,如:查询最近一天或者一个月的数据,可能会导致要查询的数据只存在于一个节点上,无法充分利用分布式数据库...

互联网服务:小打卡

客户价值 客户当前圈子打卡日记业务有10亿以上数据,每年有亿级增量,基于 PolarDB-X+RDS的分布式数据库解决方案提供了海量数据存储和数据存储扩展能力,解决了10亿级数据在单机数据库的存储瓶颈。小打卡上有几百万活跃用户,业务发展较快...

连接方式概述

OceanBase Connector/C 允许 C/C++ 程序以一种较为底层的方式访问 OceanBase 分布式数据库集群,以进行数据库连接、数据访问、错误处理和 Prepared Statement 处理等操作。OceanBase Connector/C 也称为 LibOBClient,用于应用程序作为独立...

AUTO模式数据库与DRDS模式数据库

AUTO模式数据库与DRDS模式数据库主要功能对比:功能项 AUTO模式数据库 DRDS模式数据库 透明分布式 默认主键分区 支持。若建表时不指定分区定义,将自动按主键进行分区。不支持。默认全局二级索引 支持。索引不指定分区列时,将自动索引列...

索引优化

但是在类似与 AnalyticDB PostgreSQL版 这样的分布式数据库中,应该谨慎的选择索引的使用。在大部分场景下,AnalyticDB PostgreSQL版 更适合快速的顺序扫描,或者结合稀疏索引来进行减少数据的I/O操作。AnalyticDB PostgreSQL版 会将数据...

CREATE TABLE

聚集索引的键值相同或相近的数据存储在相同或相近数据块。在范围查询或等值查询中,如果查询条件与聚集索引列一致,存储引擎可快速读取连续的数据块,这样可以减少磁盘的I/O,加快数据读取的速度。聚集索引示意图 适用场景:聚集索引既适用...

分布式事务问题

数据访问代理是否支持分布式事务 数据访问代理支持与分布式事务的集成使用。版本要求:数据访问代理 V2.9.5 或更高版本 分布式事务 V2.5.2 或更高版本 具体配置信息请参考 分布式事务>开发指南>依赖与配置项。在数据访问代理 V2.9.5 之前的...

存储资源

存储资源是指用于存储和管理数据的硬件和软件资源,包括节点的本地磁盘、分布式文件存储、数据库和缓存等。存储资源的主要作用是存储和管理系统的数据存储资源需要提供数据的持久性、可靠性和高效性,以满足系统的数据存储和访问需求。...

高可用版

数据库GDB支持高可用版和单节点版两个系列。高可用版采用一主一备的经典高可用架构(主备节点均为独立的图数据库节点),计算与存储分离,...基于超大规模的阿里云飞天分布式存储,保证数据多副本的可靠性。适用场景 企业级的生产图数据库。

中间件产品总览

提供高可用消息云服务 任务调度 提供分布式任务调度框架 提供自动化任务调度服务 分布式事务 金融级分布式事务中间件 支持跨数据库、跨服务以及混合分布式事务 数据访问代理 通过 MySQL 协议与 RDS\OceanBase 通信 通过触发 DDL 任务管理...

功能特性

分布式事务(Distributed Transaction-eXtended,简称 DTX)是蚂蚁集团自主研发的金融级分布式事务中间件,支持跨数据库、跨服务以及混合的方式处理分布式应用,具备多种接入模式和金融级配套功能,本文将主要介绍分布式事务的功能特性。...

引擎简介

Lindorm文件引擎是面向海量非结构化数据分布式文件存储服务,与多模引擎共享存储,LindormDFS支撑,充分利用了对象存储的低成本与高可靠、块存储的高性能等优势,并通过高低速分层存储、副本共享去重、智能冷热转存等技术,面向用户提供...

强一致分布式事务

另外,分布式数据库通常数据存储规模更大,对于备份恢复的一致性有更大的挑战。PolarDB-X 在存储节点(DN)的数据和变更日志中都保存分布式事务的中心授时(包含了时间戳信息),任意时间点的数据恢复(PITR,point-in-time recovery)都...

应用场景

如果交易服务使用数据访问代理来分库分表,虽然数据访问代理本身不支持分布式事务,但是分布式事务可以轻松和数据访问代理集成,使得数据访问代理具备分布式事务的处理能力,解决分库分表后的跨库分布式事务问题。跨服务的分布式事务 例如...

方案背景

表格存储作为阿里云提供的一款全托管、分布式NoSql型数据存储服务,具有【海量数据存储】、【热点数据自动分片】、【海量数据多维检索】等功能,天然地解决了数据大爆炸这一挑战;在应对数据横向、纵向扩展上能充分发挥其优势。多元索引...

如何选择文件引擎规格

Lindorm文件引擎(LindormDFS)是面向海量非结构化数据分布式文件存储服务,与多模引擎共享存储底座,提供数据库级的安全可靠性。LindormDFS与开源HDFS保持100%通信协议兼容,使用开源客户端可直接访问,无缝接入所有开源大数据生态与云...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用