Datahub数据总线 功能集 功能 功能描述 参考文档 数据接入 API接入 使用REST API方式，将数据写入Datahub API参考 SDK接入 使用SDK将数据传入Datahub Java SDK C++ SDK Go SDK Python SDK 插件接入 使用插件将数据传入Datahub LogStash插件...
本文介绍数据传输服务中数据迁移任务、数据同步任务、数据订阅任务、数据校验任务 和Serverless任务 先购买再配置的流程。前提条件 已注册阿里云账号，注册流程请参见 注册阿里云账号。若您要创建按量付费的任务，请确保您的账户 余额大于...
数据灾备中心提供了对您名下的 对象存储 OSS资源 进行健康数据评分的功能，以帮助您了解整体云资源的数据保护情况。本文将介绍数据灾备中心针对 对象存储 OSS资源 进行数据评分的检查项，并提供相应的修复指导。通过数据评分检查和修复指导...
数据迁移 数据迁移功能帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景 功能集 功能 功能描述 参考文档 同构迁移 逻辑迁移 支持同构数据库间的数据迁移。自建MySQL...
数据传输服务DTS（Data Transmission Service）提供的数据订阅功能简单易用，您只需在控制台上进行简单操作，即可完成数据订阅任务的配置。注意事项 本文仅简单介绍数据订阅任务的通用配置流程，不同的数据源在配置数据订阅任务时略有不同...
数据类型 编号 MySQL 数据类型 映射AnalyticDB PostgreSQL版数据类型 1 BIT(N)BIT(N)2 TINYINT SMALLINT 3 TINYINT UNSIGNED SMALLINT 4 SMALLINT SMALLINT 5 SMALLINT UNSIGNED BIGINT 6 MEDIUMINT INT 7 MEDIUMINT UNSIGNED INT 8 INT ...
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发-数据开发。按照以下操作指引，进入...
通过离线集成管道通道，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。本文将为您介绍如何配置离线集成管道通道。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发-数据开发。按照以下操作指引，进入...
通过数据订阅功能，您可以实时订阅源库的增量数据，轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文将介绍如何创建 RDS MySQL 数据订阅任务。前提条件 已创建源 RDS MySQL 实例，创建方式，请参见 ...
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
如果写入源端系统的单个分区或者shard数据流量已经达到了同步速率的上限，例如，Kafka集群侧可以对分区读取流量配置限流、DataHub单分区的最大读取流量有4MB/s限制、Loghub单shard最大读取流量有10MB/s限制，如果实时同步任务对于单分区的...
访问流量监控 访问流量监控 仪表盘用于展示日志服务的访问情况，包括今日请求总数、客户端个数、今日用户数、SourceIP读取网络流量Top10、SourceIP写入流量Top 10、请求数、写入流量、Shard写入流量变化趋势、Shard消费流量趋势、每分钟...
例如在双11大促期间，大部分Topic数据流量会激增，平时的Shard数量可能完全无法满足这样的流量增长，此时可以对其中一些Shard进行Split操作，一变二，二变四，最大可扩容至256个Shard，按目前的流控限制足以达到1280MB/s的流量。...
在 数据输出预览 窗口，您可以根据需要修改输入数据，或者单击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够帮助...
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
数据订阅按量付费实例不支持转换为 半价配置费+1元/GB数据流量费 的付费方式，该方式仅在 购买页 购买源库为MySQL的DTS订阅按量付费实例时可选。包年包月实例转为按量付费后，会将余款按之前的支付方式原路退回给您。数据校验任务暂不支持...
云数据库RDS、云原生数据库PolarDB、云数据库MongoDB、云数据库Redis、云原生内存数据库Tair、云原生数据仓库 AnalyticDB for PostgreSQL 产品的备份恢复功能均由DBS提供，您可确认下该备份计费项是否因为您使用了上述产品的备份恢复服务所...
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版 集群间的迁移。前提条件 已创建源和目标 PolarDB PostgreSQL版 数据库集群，详情请参见 创建PolarDB PostgreSQL版数据库集群。已将源和目标 PolarDB ...
通过数据传输服务DTS（Data Transmission Service），可以实现 PolarDB PostgreSQL版（兼容Oracle）集群间的迁移。背景信息 PolarDB PostgreSQL版（兼容Oracle）作为一款企业级关系型数据库管理系统，具有广泛的应用和强大的社区支持。每个...
视频点播提供资源用量的查询和数据导出功能，提供了流量带宽、存储空间、转码时长、智能审核、视频DNA等多个维度的数据统计，便于您了解服务用量情况和数据分析。查询资源用量 登录 视频点播控制台。在点播控制台左侧导航栏选择 数据中心。...
此外，还支持统计无流量表和无流量索引数据，帮助您判断和清理这些数据，以提高存储利用率和数据库性能。前提条件 数据库实例为 PolarDB MySQL版。数据库实例内存需要大于等于8 GB。数据库实例需要开启performance_schema，开启方法请参见 ...
此外，还支持统计无流量表和无流量索引数据，帮助您判断和清理这些数据，以提高存储利用率和数据库性能。前提条件 数据库实例为：RDS MySQL MyBase MySQL 说明 不支持 RDS MySQL 基础系列。不支持 RDS MySQL 5.5。数据库实例内存需要大于...
此外，还支持统计无流量表和无流量索引数据，帮助您判断和清理这些数据，以提高存储利用率和数据库性能。前提条件 数据库实例为：RDS MySQL 说明 不支持 RDS MySQL 基础系列。不支持 RDS MySQL 5.5。MyBase MySQL PolarDB MySQL版 数据库...
此外，还支持统计无流量表和无流量索引数据，帮助您判断和清理这些数据，以提高存储利用率和数据库性能。前提条件 实例为RDS MySQL。说明 不支持RDS MySQL基础系列。不支持RDS MySQL 5.5。数据库实例内存需要大于等于8 GB。数据库实例需要...
导入Hive源数据 增量数据迁移说明 实际生产环境中，Hive数据主要分为离线数据和增量数据，由于Hive数据迁移到 SelectDB，通常的使用场景是拷贝一份数据到数据仓库进行查询加速，因此对于增量数据的迁移，可以考虑以下方式：在生产Hive数据...
开启网关流量监控功能，您可以查看SNAT转发流量监控数据，快速定位流量消耗最大的ECS实例，然后您可以对该ECS实例进行流量管控，实现快速定位并解决故障，提高业务的稳定性。查看网关流量监控前，请确保满足以下条件：您已经登录 NAT网关...
开启网关流量监控功能，您可以查看SNAT转发流量监控数据，快速定位流量消耗最大的ECS实例，然后您可以对该ECS实例进行流量管控，实现快速定位并解决故障，提高业务的稳定性。查看网关流量监控前，请确保满足以下条件：您已经创建了公网NAT...
说明 入流量：数据从轻量应用服务器外通过公网或内网传输至实例内产生的流量。出流量：数据从轻量应用服务器内通过公网或内网传输至实例外产生的流量。攻击防护 防止DDoS攻击 当用户使用外网连接和访问轻量应用服务器实例时，可能会遭受...
类别 限制项 说明 备注 Project 写入流量 原始数据写入流量最大为100GB/min。超过限制时，返回状态码403，提示Inflow Quota Exceed。如果您有更大的使用需求，请提 工单 申请。写入次数 写入次数最大为600000次/min。超过限制时，返回状态...
各指标含义 整体运营指标 指标 说明 数据指标 单次攻击事件流量峰值：对比所有网络层攻击事件，取单次攻击事件的入流量bps峰值，包含攻击流量和业务流量。单次攻击事件请求峰值：查询条件中包含域名时，才显示该数据。对比所有应用层攻击...
您可以通过ECR监控了解业务运行时流量、数据包等数据变化，您也可以通过创建阈值报警规则，及时得知异常监控数据以便快速采取相应措施。查看ECR监控信息 说明 VBR、TR、VPC与ECR之间的流量监控数据在高速通道控制台和云监控控制台均可查看...
查看访问公网IP的流量数据，进一步识别恶意流量：单击 操作 列 访问详情，在 开放公网IP 面板，查看访问该公网IP的详细信息。配置出方向访问控制策略，拦截资产主动外联的流量 单击 配置ACL策略，跳转到访问控制的互联网边界防火墙。具体...
direction 流量方向，包括：in：入方向流量 out：出方向流量 packets 数据包数量 bytes 数据包大小 start 捕捉窗口开始时间 end 捕捉窗口结束时间 log-status 流日志的日志记录状态，包括：OK：数据记录正常。NODATA：捕获窗口中没有传入或...
支持审计的数据库个数 性能参数 价格 1~4个 吞吐量峰值：9,000条SQL/秒 150 Mbps数据库流量峰值 2亿条在线SQL语句存储 默认500 GB存储空间 默认100 MB带宽 实例数与存储支持弹性扩容 1,000元/数据库实例/月 5~19个 5~9个数据库实例 吞吐量...
数据控制模块管理秒杀数据同步 最开始，利用读写分离Redis进行流量限制，只让部分流量进入下单。对于下单检验失败和退单等情况，需要让更多的流量进来。因此，数据控制模块需要定时将数据库中的数据进行一定的计算，同步到主从版Redis，...
远程日志服务的计费项为App发起的接口请求次数与App的数据上传流量，费用则为两者费用之和。本文介绍远程日志的计费规则、售卖模式，供您参考。计费规则 计费项 计费项 说明 数据上传流量（MB）App上报的日志流量。接口请求次数（万次）App...
相关性能指标说明如下：同步流量：数据写入模块每秒从数据拉取模块拉取到的数据量，单位为MB/s。同步速度：每秒同步到目标库的事务数。同步延迟：目标库同步的最新数据的时间戳和源库当前时间戳的时间差，单位为毫秒。DDL执行数量：选定的...
标准变配 增删节点扩缩容 当您的集群或者租户的容量不足时，增加节点使集群可以容纳更多的租户，也可使租户能够容纳更多的数据和业务流量。当集群或者租户的容量冗余时，也可以将节点下线，从而降低成本。增删节点后，你可调整对应租户的 ...
无 读写流量 读写流量包括写流量和读流量，详细说明如下：写流量：数据（压缩后）被上传到日志服务时，按照传输的数据量计算写流量费用。例如原始数据量为10 GB，则上传到日志服务会产生2 GB（压缩率20%）的写流量。读流量：投递数据（压缩...