Phoenix查询引擎支持使用SQL进行HBase标准版数据的查询,会将SQL查询转换为一个或多个HBase API,协同处理器与自定义过滤器的实现,并编排执行。使用Phoenix进行简单查询,其性能量级是毫秒。更多的信息请参见 官网。背景信息 Ali-Phoenix...
本文介绍通过云数据库HBase的集群管理系统来管理用户的ACL权限。权限层级 目前对HBase增强版集群的操作有三个权限层级,Global、Namespace和Table,这三者是兼容的关系。例如:如果给user1用户赋予了Global的读写权限,那么user1用户就拥有...
登录 云数据库HBase控制台。在 集群列表 页面,单击标准版集群实例名称,进入集群详情页面。在 集群详情 页面,单击 数据库连接,进入数据库连接页,复制该实例的ZK链接地址。配置ZK地址,连接集群。在客户本地的业务代码中通过如下配置,...
注意 HBase增强版已全新升级为云原生多模数据库Lindorm,Lindorm全文索引功能也大幅增强,新场景请参见 Lindorm SearchIndex。
重要 由于开源HBase API的一些限制,使用HBase API兼容的二级索引存在一系列限制和问题,因此该功能不再维护,不推荐新用户使用。欢迎大家通过Lindorm SQL使用二级索引,相关内容请参见 二级索引。二级索引简介 HBase原生提供了主键索引,...
登录 云数据库HBase控制台。在 集群列表 页面,单击集群名称,进入集群详情页。在实例信息页面在左侧导航栏选择 数据库连接,查看 VPC ID。购买LTS实例,如已经购买可以忽略,如未购买可以到 购买链接 页面购买BDS实例,BDS实例需要同HBase...
调用CreateCluster接口创建云数据库HBase实例。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是...
阿里云数据库HBase支持自由组合Master和Core节点规格,数量和盘的种类。您可以根据业务特征(如QPS、存储量、读写请求、相应延迟、稳定性等)自由搭配。选型主要包括以下几个方面:Master机器的规格。Core节点的规格和数量。盘的大小和种类...
吞吐量测试使用相同的线程数分别对社区版HBase和云数据库HBase增强版进行对比测试,对比其吞吐量。毛刺率测试使用相同的吞吐压力分别对社区版HBase和云数据库HBase增强版进行对比测试,对比其毛刺率。压缩率测试使用相同的数据写入社区版...
云数据库HBase的Rowkey设计在数据分区和数据查询中很重要,本节介绍设计Rowkey前需要考虑的一些问题以及设计示例。问题考虑 问题一:Rowkey是唯一的吗?相同的Rowkey在HBase中认为是同一条数据的多个版本,查询时默认返回最新版本的数据,...
注意事项 如果您想要通过公网访问,在执行文本操作前,需要将HBase社区版客户端更换为阿里云HBase客户端。具体操作,请参见 升级HBase Java SDK。如果应用部署在ECS实例,通过 专有网络 访问HBase增强版集群前,需要确保HBase增强版集群和...
准备工作 在压测客户端部署在ECS,您需要确保云原生多模数据库Lindorm实例和ECS实例满足以下条件,以保证网络的连通性。ECS实例信息的查看方法请参见 查看实例信息。所在地域相同,并建议所在可用区相同(以减少网络延时)。网络类型相同。...
前提条件 已创建云数据库HBase增强版实例。具体操作,请参见 购买集群。已将访问Lindorm Insight系统的本地设备公网IP地址添加至云数据库HBase的白名单中。如果本地为Linux系统,在本地设备上执行 curl ipinfo.io|grep ip 命令,获取其公网...
调用CreateServerlessCluster接口创建云数据库HBase Serverless实例。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...
云HBase Serverless版是基于阿里云HBase增强版构建的Serverless模式服务,其内核历经8年大规模考验,在吞吐、延迟、成本、稳定性、安全、易用性等方面相比社区版有质的突破,同时具备分区多副本、冷热分离、多租户等企业级能力。...
2.0:云数据库HBase标准版实例、云数据库HBase增强版实例和云数据库HBase单节点实例支持2.0版本。说明 请根据云数据库HBase实例的服务类型填写对应的版本号。CoreInstanceType String 否 hbase.sn1.large 实例的Core节点规格,更多取值请...
NoSQL数据库:例如MongoDB、HBase、Cassandra等非关系型数据库。高效云盘:I/O密集型应用。中小型关系数据库。本地HDD云盘:开发与测试业务。系统盘。本地SSD盘:数据不被经常访问或者低I/O负载的应用场景。需要低成本并且有随机读写I/O的...
标准版云HBase、增强版云HBase(集群版本,暂不支持单机版)。任务创建 进入BDS操作页面,选择左侧导航栏 导入Lindorm/HBase>SLS实时数据复制。单击 创建任务,源集群 选择对应的 loghub(SLS)和 目标数据源(HBase、Phoenix),选择HBase...
HBase增强版支持通过Java API访问进行访问,但目前在以下几方面的使用存在限制:不支持HBase的系统管理API:HBase增强版不支持集群管理相关操作的接口,如assign region、stopRegionServer等等,用户对集群的日常管理,可以通过控制台和...
本文介绍如何通过HBase Java API访问云数据库HBase增强版实例。前提条件 已安装Java SDK,具体操作请参见 升级HBase Java SDK。如果应用部署在ECS实例,您需要确保云数据库HBase增强版实例和ECS实例满足以下条件,以保证网络的连通性。ECS...
云HBase作为海量大数据存储天然适合数据量TB、PB级别的业务场景,同时提供主备容灾方案满足用户的高可用需求,再此基础上为了满足用户大数据量随机读低毛刺的要求新增追求稳定性的主备双活能力。使用场景 对随机读响应有高要求(P999小于50...
本文主要介绍全增量数据同步的使用场景,功能列表,迁移优势,使用限制以及创建数据同步任务等操作。使用场景 大版本升级:HBase1.x升级HBase2.x。跨地域迁移:例如从青岛机房迁移到北京机房。跨账号迁移:支持不同账号迁移数据。集群升配...
说明 支持安全组的HBase版本:HBase标准版、HBase增强版。配置安全组,需要ECS实例和HBase集群的网络类型相同(专有网络要求属于同一个VPC ID)。每个集群最多支持添加3个安全组。登录 HBase管理控制台。在顶部菜单栏,选择集群所在地域。...
增量数据同步基于HBase WAL实现异步数据同步,Bulkload的数据、不写WAL的数据将不会被同步。注意事项 迁移前请确认目标集群的HDFS容量,防止迁移过程中出现容量写满的情况。增量同步提交前,推荐修改一下源集群的日志保留时间,给增量同步...
系统兼容开源GeoMesa、GeoServer等生态,内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等,结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力,广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...
云HBase标准版在开源HBase的基础上,做了大量的改进、稳定性优化和运维能力增强,吸收了众多阿里内部成功经验,比社区HBase版本具有更好的稳定性和可运维能力,同时100%兼容开源社区HBase。目前云HBase标准版提供1.1版本和2.0版本供用户...
大量数据从HBase集群导入Serverless集群 由于Serverless实例的写入受到购买CU数的限制,如果大量的数据直接通过API写入Serverless实例可能会花费过多时间和消耗过多CU(根据购买CU量的多少,几十GB,几百GB,或者上TB的数据可以定义为大量...
传统方案数据生产者需要双写数据库和消息队列,但是这样一方面增加了应用的复杂度,同时要保证一致性,又会牺牲应用的可用性和效率,因为数据库和消息队列任务一个出问题都会影响应用系统。应用可以将消息队列的消息投递解耦,交由...
调用DescribeClusterConnection接口查询云数据库HBase实例的数据库连接信息列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否...
使用场景 云HBase Phoenix集群(Phoenix4.x,Phoenix 5.x)。自建HBase集群。EMR HBase集群。操作步骤 进入LTS页面,在左侧导航栏选择 数据源管理>添加数据源。在 添加数据源 页面设置相关参数。参数 说明 名称 自定义,支持字母与数字。...
适用版本 自建HBase1.x、2.x EMR HBase 标准版云HBase、增强版云HBase(单机版本、集群版本)云HBase Phoenix 任务创建 登录LTS操作页面,在左侧导航栏中选择 导入Lindorm/HBase>RDS实时数据复制。单击 创建通道,设置 RDS数据源 和 目标...
标准版云HBase、增强版云HBase(集群版本)。Mysql 自建Mysql。RDS for Mysql。任务创建 登录 HBase控制台。进入LTS操作页面,在左侧导航栏中选择 导入Lindorm/HBase>RDS全量数据导入。单击 创建迁移任务,设置 RDS数据源 和 目标数据源...
云数据库HBase增强版支持冷热分离功能,可以将冷热数据存储在不同的介质中,有效提升热数据的查询效率,同时降低数据存储成本。背景信息 在海量大数据场景下,一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低,同时这...
HBase增强版集群支持专有网络VPC连接和外网访问,本文介绍如何开通外网地址。背景信息 访问网络类型 说明 专有网络 集群创建完成后,默认提供专有网络地址。通过专有网络地址访问HBase集群,安全性更高。外网 外网地址需要手动开通。外网...
查询帖子推荐表,查询出所属的帖子ID后,再查询实际的帖子信息,这部分一般在Redis或者CDN之中有缓存,没有命中,可以查询到业务库HBase之中。基于位置的推荐人 可以基于存的客户位置的信息,推荐兴趣相投的人。基于地理信息,查询边上所有...
用户可以通过VPC网络和公网访问HBase 标准版集群,本文介绍如何开通外网地址。背景信息 访问网络类型 说明 专有网络 集群创建完成后,默认提供专有网络地址。通过专有网络地址访问HBase实例,安全性更高。外网 外网地址需要手动开通。外网...
调用CreateMultiZoneCluster接口创建云数据库HBase多可用区实例。目前仅支持HBaseue引擎的2.0版本。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。请求...
您可以使用社区版Flink或阿里云实时计算版Flink访问HBase增强版集群。本文介绍同时适用于阿里云实时计算版Flink和社区版Flink访问HBase增强版集群的方法。背景信息 您可以将HBase增强版中的表作为Flink中的维表或结果表,并通过Flink SQL...
HaActiveVersion String 否 HBase2x 主实例数据库版本。主实例为非标准实例(即IsActiveStandard为false)时,参数必填。HBase1x:hbase1.x版本。HBase2x:hbase2.x版本。HBaseUE:hbaseue版本。HaActiveUser String 否 root 主实例用户名...
支持目标数据源包括云数据库HBase增强版和标准版。任务创建 在LTS操作页面中,单击 导入Lindorm/HBase>RDS全增量同步。单击 创建任务。选择RDS数据源、DTS数据源以及目标数据源。说明 添加RDS数据源请参见 RDS数据源。添加DTS订阅通道请...