为了保证DataWorks中数据同步、数据调度等任务的顺利操作,还需要确保资源组绑定的VPC网络与数据源(目标网络环境下的数据库、数据服务或其他数据)之间的连通性,本文为您提供了不同网络环境下的网络连通解决方案。背景信息 在DataWorks...
为了保证DataWorks中数据同步、数据调度等任务的顺利操作,还需要确保资源组绑定的VPC网络与数据源(目标网络环境下的数据库、数据服务或其他数据)之间的连通性,本文为您提供了不同网络环境下的网络连通解决方案。背景信息 在DataWorks...
数据保护 ECS自建数据库的灾备与安全 异地备份 自建数据库异地备份 备份上云 RDS MySQL通过专线接入金融云DBS 通过数据库网关DG备份本地或第三方云的私网数据库到云存储 DBS通过IPSec VPN备份自建数据库 通过专线访问的本地自建数据库备份...
在您使用IPsec-VPN时,IPsec协议会对数据包进行加密,加密过程会扩大数据包长度,扩大后的数据包长度可能会超过网络中设置的最大数据传输单元MTU(Maximum Transmission Unit),影响数据包的正常传输。本文介绍如何设置MTU以确保数据包的...
Reserve String 否 {"srcInstanceId":"cen-9kqshqum*"} DTS预留参数,格式为JSON串,您可以传入本参数完善源目库信息(如目标Kafka数据库的数据存储格式、云企业网CEN的实例ID)。更多信息,请参见 Reserve参数说明 参数说明。Checkpoint ...
若设置 压缩率 大于0,实际网络传输速度(即压缩后数据的传输速度)小于 迁移实时状态 中显示的速度。传输压缩率 迁移过程中,数据压缩传输的级别。请根据您的实际需要,设置压缩率。在带宽有限的环境下,使用高压缩率,可以提升数据的传输...
在调用部分接口配置或查询迁移或同步、订阅任务时,您需要配置或查询预留参数Reserve(数据类型为字符串String,传入格式为JSON)来完善或查看源或目标实例的配置信息(比如目标Kafka集群的数据存储格式、云企业网CEN的实例ID)。...
网络资源是指用于节点之间通信和数据传输的硬件和软件资源,除了包括广域网、局域网、交换机、路由器,还包括常用到的专有网络、虚拟交换机、负载均衡、弹性公网、VPN、DNS、CDN等资源。在分布式系统中,网络资源的主要作用是支持节点之间...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将通过专线、VPN网关、智能接入网关接入的自建MySQL迁移至其他云账号下的 RDS MySQL 或RDS MySQL Serverless 实例。DTS支持结构迁移、全量数据迁移以及增量数据迁移,同时...
全球数据库网络(Global Database Network,简称GDN)是由分布在同一个国家不同地域的多个 PolarDB 集群组成的网络,网络中所有集群的数据均保持同步。当您的业务部署在多个地域时,利用GDN可以实现应用访问数据库的低延迟和高稳定性。本文...
本文为您介绍如何将数据上传至MaxCompute或从MaxCompute下载数据,包括服务连接、SDK、工具和数据导入导出、上云等常见操作。背景信息 MaxCompute提供了多种数据上传下载的通道支持,方便您在各种场景下进行技术方案选型时参考。批量数据...
数据库网关DG(Database Gateway)是一种支持私网数据库远程访问的数据库连接服务。通过数据库网关,您可以安全且低成本地将第三方云或本地的数据库接入至阿里云。同时,数据库网关可以与其他阿里云产品(例如数据传输服务DTS,数据库备份...
数据传输独享资源费用(包年包月)MaxCompute为所有用户提供免费的 公共数据传输服务资源组,您也可以购买 独享数据传输服务资源组,以独享数据传输服务,可使用更多数据传输并发数,保障资源的独享性的同时提高了输出传输的稳定性。数据...
用户局域网安全 用户的企业局域网对接云盒Tor与云盒内部用户VPC网络实现互访,该流量出云盒Tor后即进入用户物理网络,不会传输到公共云或公网。该网络流量是无认证、无加密的,需要用户使用安全的应用层协议或者能够保证局域网络的安全性,...
从事数据安全与合规工作的管理人员 从事数据应用开发的开发人员 把控公司核心数据资产的管理人员 核心能力 基于DataWorks,您可以获得如下能力:数据集成:复杂网络环境、丰富数据源之间的数据传输与上云。数据开发:在线批处理、流处理和...
网络互通问题 经过上述排查后仍然无法通过源库连接性检查,可能是DTS服务器与源数据库网络互通问题。您可以 通过钉钉(钉钉通讯客户端下载地址)进入到DTS客户交流钉钉群(群号:68325004196或68640008972),进行咨询。
选择内网数据库的网络类型(包括 专有网络 和 经典网络)。专有网络 打开 VPC 开关,进入 专有网络 模式。填写数据库信息。参数 说明 VPC ID Hologres实例绑定的指定VPC的VPC ID。进入 Hologres管理控制台 的实例详情页,从 网络信息 的...
2021年12月1日起,新创建的DTS订阅任务限制了网络类型,源实例不支持为经典网络的云数据库,或部署在ECS经典网络中,并且下游消费客户端必须通过专有网络消费订阅数据。说明 对于2021年12月1日前已创建的DTS订阅任务,此次功能变更不会影响...
为保障数据迁移任务的顺利执行,在预检查阶段检查DTS服务器是否能够连通要迁移的目标数据库。本文将介绍目标数据库连接性检查...网络互通问题 经过上述排查后仍然无法通过目标数据库连接性检查,可能是DTS服务器与目标数据库网络互通问题。
SSL加密 在传输层对网络连接进行加密,提升通信数据安全性的同时,保证数据的完整性,详情请参见 设置SSL加密。透明数据加密TDE 对数据文件执行实时I/O加密和解密,数据在写入磁盘之前进行加密,从磁盘读入内存时进行解密。TDE不会增加数据...
如果Azure平台的数据库部署在虚拟网络中,并且您希望将数据库迁移至阿里云平台,您可以在Azure虚拟网络和阿里云VPC之间建立网络连接,在Azure虚拟网络和阿里云VPC实现网络互通的基础上,再通过 数据传输服务 DTS(Data Transmission ...
支持,DTS 当前已经对 VPC 网络的云数据库 MongoDB 作为迁移的源数据库提供支持。
A:不同规格实例的传输性能不同,当实例其他参数相同且影响因素(传输网络的带宽和网络延时等)固定时,规格越高性能越强,更多信息请参见 数据迁移链路规格说明 和 数据同步链路规格说明。Q:为什么数据同步实例的价格普遍高于数据迁移...
选择内网数据库的网络类型(包括 专有网络 和 经典网络)。专有网络 打开 VPC 开关,进入 专有网络 模式。填写数据库信息。说明 如果您需要新建数据库,请参见 创建数据库。参数 说明 名称 数据源的显示名称,可以自由命名。VPC ID VPC实例...
选择内网数据库的网络类型(包括 专有网络 和 经典网络)。专有网络 打开 VPC 开关,进入 专有网络 模式。填写数据库信息。说明 如果您需要新建数据库,请参见 创建数据库。参数 说明 名称 数据源的显示名称,可以自由命名。VPC ID VPC实例...
本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据源的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型...
本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据源的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面,单击 数据准备 数据源,进入 数据源 页面,...
概述 配置数据迁移任务时,可以进行数据库连接测试,很多时候会遇到测试连接失败。本文根据不同的实例类型介绍可能失败的原因及对应的解决方案。详细信息 当连接性预检查失败时,可能是由于如下原因:诊断内容 可能原因 解决方法 JDBC 数据...
数据库网关DG(Database Gateway)是一种支持私网数据库远程访问的数据库连接服务。通过数据库网关DG,您可以无需开通公网地址访问并管理本地IDC或其他云厂商的数据库。详情请参见 什么是数据库网关。说明 目前ADAM支持华北2(北京)、华北...
部分地域之间可以通过经典网络传输,但不能保证其连通性。如果测试经典网络不通,建议您使用公网方式进行连接。数据传输:数据集成仅完成数据同步(传输),本身不提供数据流的消费方式。数据一致性:数据集成同步仅支持at least once,不...
VPC数据通道是数据传输服务DTS(Data Transmission Service)通过专有网络VPC(Virtual Private Cloud)内的弹性网卡访问数据源的一项新技术方案,以实现通过私有网络地址访问数据库实例的效果。概述 当您通过 专线/VPN网关/智能网关 的 接...
数据订阅功能可以帮助您获取数据库的实时增量数据,您可以根据自身业务需求自由消费增量数据,并写入任意目标端,适配各类业务场景,例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。本文将介绍在DTS专属...
数据传输服务DTS(Data Transmission Service)将下线经典网络资源,并不再支持经典网络架构的云产品。背景信息 自2011年阿里云上线公共云服务以来,经典网络架构为云服务器提供了网络支撑,服务了海量云上客户。2014年,阿里云推出了全新...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将自建Redis迁移至 云原生内存数据库Tair 实例。DTS支持全量数据迁移以及增量数据迁移,同时使用这两种迁移类型可以实现在自建应用不停服的情况下,平滑地完成自建Redis...
对于List列表,由于DTS在调用 psync 或 sync 传输数据时,不会对目标端已有的数据执行 Flush 操作,所以可能出现重复的数据。如果源库中的某些Key使用了过期(expire)策略,由于可能存在Key已过期但未被及时删除的情况,所以在目标库中...
数据传输服务DTS(Data Transmission Service)支持从ECS上的自建Redis同步至 云原生内存数据库Tair。警告 完成数据同步作业的配置后,请勿变更源数据库或目标数据库的架构类型,否则会导致数据同步失败。前提条件 已创建源自建Redis实例和...
SSL传输在传输层对网络连接进行加密,能提升通信数据的安全性和完整性,但会同时增加网络连接响应时间。前提条件 已开通Hologres实例,开通方法请参见 购买Hologres。已下载安装PSQL客户端或者JDBC,详情请参见 PSQL客户端 或者 JDBC。注意...
本文为您介绍如何使用数据传输迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移任务长期处于非活跃状态(任务状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,任务可能无法恢复。数据传输...
无公网IP:Port的数据库(通过数据库网关DG接入)通过云企业网CEN接入的自建数据库 说明 数据同步基于内网传输,可以保证更低的网络延时。功能特性差异 支持库表列三级对象名映射。支持过滤待迁移的数据。支持选择同步的SQL操作类型,例如...
PolarDB 产品的安全能力可以从访问安全、数据传输安全、数据安全、数据脱敏和安全审计5个方面体现。访问安全 PolarDB 提供的集群白名单功能实现了集群访问安全,集群白名单功能包括集群IP白名单和安全组,创建 PolarDB MySQL版 集群后,您...