数据传输服务DTS(Data Transmission Service)支持数据迁移、数据订阅和数据实时同步功能,帮助您实现多种典型应用场景。不停机迁移数据库 传输方式:数据迁移 为了保证数据的一致性,传统的迁移过程需要您在迁移数据时停止向源数据库写入...
前提条件 PolarDB MySQL版 已开启Binlog,详情请参见 如何开启Binlog。源库中待同步的数据表必须具备主键。确保目标库具备充足的存储空间。已创建分布式关系型数据库服务 PolarDB-X,如未创建请参见 创建实例 和 创建数据库。说明 创建实例...
云数据传输 CDT(Cloud Data Transfer)是一种为云上流量提供统一计费和出账服务的开通型产品。通过 CDT,您可以实现流量资源的弹性使用和便捷管理,从而有效降低IT成本。支持对公网类产品的 公网流量累计阶梯计费,每月按地域汇总累计阶梯...
添加HDFS数据源用于实现 云原生多模数据库 Lindorm 宽表引擎能够读取HDFS的数据,如果您要将HDFS数据导入到 云原生多模数据库 Lindorm 宽表中,需要先添加HDFS数据源。本文介绍如何添加HDFS数据源。前提条件 已购买LTS数据同步服务,具体...
添加OSS数据源用于实现 云原生多模数据库 Lindorm 宽表引擎读取OSS的数据。如果您要将OSS数据导入到 云原生多模数据库 Lindorm 宽表中,需要先添加OSS数据源。本文介绍如何添加OSS数据源。前提条件 已购买LTS服务,具体操作请参见 购买并...
本文介绍通过 云原生多模数据库 Lindorm 控制台管理计算引擎作业,包括创建、查看和终止Spark作业。前提条件 已开通计算引擎。如何开通,请参见 开通与变配。已完成作业开发。如何开发,请参见 JAR作业开发实践 或 Python作业开发实践。已...
本文介绍 云原生多模数据库 Lindorm 与开源HBase的吞吐量对比、毛刺率对比和压缩率对比的测试结果。前提条件 基于以下环境配置,性能测试工具和测试方法分析本文的测试结果。环境配置的详情请参见 测试环境。性能测试工具的使用请参见 性能...
前提条件 已创建文件系统。具体操作,请参见 创建文件系统。使用新购ECS作为数据传输中转节点 上传下载文件数据需要占用ECS公网带宽,建议您新购一台ECS实例专门负责文件数据的上传与下载,避免占用业务带宽。新购ECS挂载NAS文件系统有以下...
前提条件 已购买源和目标 PolarDB MySQL版 集群,详情请参见 购买按量付费集群。支持的数据库版本,请参见 同步方案概览。源 PolarDB MySQL版 集群已开启Binlog,详情请参见 如何开启Binlog。注意事项 DTS在执行全量数据初始化时将占用源库...
云原生多模数据库 Lindorm 支持通过Lindorm计算引擎访问云数据库HBase增强版集群中的数据。前提条件 已开通Lindorm计算引擎。如何开通,请参见 开通与变配。已阅读并了解通过Lindorm计算引擎访问数据时的使用须知。详细内容,请参见 使用...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将自建的TiDB数据库全量迁移至RDS MySQL。前提条件 快速创建RDS MySQL实例。重要 由于该功能仅在部分地域支持,目标RDS MySQL实例所属的地域需为华东1(杭州)、华东2...
本文描述数据传输支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...
前提条件 您已创建数据迁移任务、数据同步作业或新版数据订阅通道。说明 旧版数据订阅通道不支持该操作。您可以在 数据订阅列表 页中查看目标订阅通道是否属于新版。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据...
前提条件 实例满足以下条件之一:实例处于 已停止 状态。按量付费实例处于 已过期 状态,您已经结清欠费账单但自动重开机失败。说明 您的阿里云账户余额(即现金余额)和代金券的总值不得小于100.00元人民币。按量付费实例处于 欠费回收中 ...
前提条件 自建MySQL数据库版本为5.1、5.5、5.6、5.7或8.0版本。已创建目标 PolarDB MySQL版 集群,详情请参见 购买按量付费集群。如果您的MySQL数据库部署在本地,那么您需要将DTS服务器的IP地址设置为该数据库远程连接的白名单,允许其...
前提条件 实例满足以下条件之一:实例处于 已停止 状态。按量付费实例处于 已过期 状态,您已经结清欠费账单但自动重开机失败。说明 您的阿里云账户余额(即现金余额)和代金券的总值不得小于100.00元人民币。按量付费实例处于 欠费回收中 ...
通过数据传输服务DTS(Data Transmission Service),您可以将 PolarDB MySQL版 同步至自建Kafka集群,扩展消息处理能力。前提条件 Kafka集群的版本为0.10.1.0~2.7.0版本。PolarDB MySQL版 已开启Binlog,详情请参见 如何开启Binlog。注意...
前提条件 数据迁移任务处于 迁移中、已暂停、迁移失败 状态。影响 结束数据迁移任务后,数据迁移任务将处于 已完成 状态,处于该状态下仅可执行释放操作。操作步骤 登录 数据传输控制台。说明 若数据传输控制台自动跳转至数据管理DMS控制台...
前提条件 实例满足以下条件之一:实例处于 已停止 状态。按量付费实例处于 已过期 状态,您已经结清欠费账单但自动重开机失败。说明 您的阿里云账户余额(即现金余额)和代金券的总值不得小于100.00元人民币。按量付费实例处于 欠费回收中 ...
本文描述云数据传输支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM)产品...
Lindorm Ganos时空服务扩展了 云原生多模数据库 Lindorm 原有的 主键索引 和 二级索引 能力来提高时空查询速度。时空查询是指查询条件中包含空间列(经纬度坐标或Geometry类型的列)或者空间和时间组合列(经纬度坐标或 Geometry类型的列+...
Type名称 过滤条件 您可以设置SQL过滤条件,过滤待同步的数据,只有满足过滤条件的数据才会被同步到目标实例,详情请参见 通过SQL条件过滤任务数据。是否分区 选择是否设置分区,如果您选择为 是,您还需要设置 分区列 和 分区数量。设置_...
完成新建标签操作后,您可以为 云原生多模数据库 Lindorm 实例绑定不同的标签对其进行分类和筛选,本文介绍为Lindorm实例绑定已有标签的方法。前提条件 Lindorm实例已完成新建标签,具体操作请参见 新建标签。使用限制 每个Lindorm实例最多...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB MySQL版 同步至RDS MySQL,实现增量数据的实时同步。前提条件 已购买 PolarDB MySQL版 集群,详情请参见 创建PolarDB MySQL集群。PolarDB MySQL版 集群已开启...
前提条件 数据迁移任务在升级配置前,须处于 迁移中、暂停中 或 迁移失败 状态。升级实例配置的操作,仅适用于数据迁移任务和数据同步作业。数据订阅通道无需升级实例配置。注意事项 实例只能升级配置,不能降级配置。升级生效期间增量数据...
本文为您介绍如何使用数据传输服务DTS(Data Transmission Service)的创建反向任务功能,实现数据库容灾场景下的数据回传。前提条件 已创建存储空间大于业务数据库已使用的灾备数据库,建议灾备数据比业务数据大10%。已在业务数据库和灾备...
为了提高客户应用端和Hologres的传输链路安全性,您可以启用SSL(Secure Sockets Layer)传输加密。SSL通过使用数字证书和加密算法(如TLS)在Hologres实例和客户端之间建立加密连接,以保护数据传输过程中的机密性和完整性。适用场景 SSL...
云原生多模数据库 Lindorm 提供SSL加密和透明数据加密,可有效降低数据在云端的潜在安全风险。同时支持数据备份与恢复,避免数据丢失。设置SSL加密 为了提高访问链路的安全性,您可以启用SSL(Secure Sockets Layer)加密,并安装CA证书到...
您可以使用社区版Flink或阿里云实时计算版Flink访问 云原生多模数据库 Lindorm 宽表。本文介绍同时适用于阿里云Flink和社区版Flink访问Lindorm宽表的方法。背景信息 您可以将 云原生多模数据库 Lindorm 宽表作为Flink中的维表或者结果表,...
本文为您介绍 OceanBase 数据传输服务的规格说明及性能测试情况。注意事项 本文的规格说明参考的是测试数据,仅供您在选择规格时进行参考,不作为产品 SLA(服务等级协议)的评判依据。不同的实例规格对应了增量同步的不同 RPS 性能表现,...
数据传输服务DTS(Data Transmission Service)支持将实例的规格临时升级到最大,让您可以体验实例最大规格的性能,帮助您解决突发大流量时高性能的需求。前提条件 已创建包含增量任务的同步或迁移实例,且实例已处于 运行中。创建方法,请...
前提条件 已购买引擎类型为LTS的Lindorm实例。已创建Lindorm实例并开通计算引擎服务,创建方法请参见 创建实例。添加方式 通过 云原生多模数据库 Lindorm 控制台添加Spark数据源 登录 Lindorm管理控制台。在 实例列表 页,单击引擎类型为 ...
前提条件 已完成Kafka集群的搭建,且Kafka的版本为0.10.1.0-2.7.0版本。Kafka集群的服务端口已开放至公网。背景信息 由于数据同步功能对自建Kafka的部署位置要求如下:ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 无...
通过数据传输服务DTS(Data Transmission Service),您可以将自建MySQL同步至消息队列Kafka版,扩展消息处理能力。前提条件 自建MySQL的数据库版本为5.1、5.5、5.6、5.7或8.0版本。目标Kafka实例的版本为0.10.1.0-2.x版本。目标Kafka实例...
前提条件 已登录目标实例的集群管理系统,具体操作请参见 登录集群管理系统。操作步骤 在集群管理系统的左侧导航栏中,选择 诊断>慢查询检测。在 检测时间 后,选择需要查询的时间段。选择需要查询的 idc、分组、节点 和 异常请求类型。...
Type名称 过滤条件 您可以设置SQL过滤条件,过滤待同步的数据,只有满足过滤条件的数据才会被同步到目标实例,详情请参见 通过SQL条件过滤任务数据。是否分区 选择是否设置分区,如果您选择为 是,您还需要设置 分区列 和 分区数量。设置_...
云原生多模数据库 Lindorm 支持修改实例的计费方式。您可以通过Lindorm管理控制台,将Lindorm实例的计费方式由包年包月修改为按量付费。前提条件 目标实例的计费方式为包年包月,且状态处于 运行中。计费方式的详细介绍,请参见 计费方式。...
本文介绍 云原生多模数据库 Lindorm 帮助文档中的相关名词和术语的解释。A 安全组 安全组是一种虚拟防火墙,用于控制安全组中的ECS实例的出入流量。在Lindorm实例的白名单中添加安全组后,该安全组中的ECS实例就可以访问Lindorm实例。更多...
前提条件 数据订阅通道需处于 正常、初始化中 或 异常 状态。费用影响 包年包月:无影响。按量付费:数据订阅通道将转变为 未配置 状态,停止计费,完成数据订阅通道的配置且成功启动后才会开始计费。操作步骤 登录 数据传输控制台。在左侧...
数据传输服务DTS(Data Transmission Service)支持为DTS实例设置用于标识实例的环境标签,以便您快速区分DTS实例。您可以在任务列表页面为目标实例添加、修改、删除环境标签,并以环境标签维度对DTS实例进行筛选。背景信息 DTS提供的环境...