数据订阅

_相关内容

创建PolarDB PostgreSQL版(兼容Oracle)数据订阅任务

本文为您介绍如何创建 PolarDB PostgreSQL版(兼容Oracle)数据订阅任务。前提条件 已创建源 PolarDB PostgreSQL版(兼容Oracle)集群,创建方式,请参见 创建PolarDB PostgreSQL版(兼容Oracle)集群。源 PolarDB PostgreSQL版(兼容...

使用SDK示例代码消费订阅数据

在完成数据订阅通道的配置(创建好订阅任务和消费组)后,您可以自行编写SDK示例代码或使用DTS提供的SDK示例代码来订阅数据变更信息,本文介绍示例代码的使用方法。重要 本操作为Java语言的SDK客户端示例,Python和Go语言的示例代码,请...

设备数据订阅

背景介绍:该文档适用于多租户和单租户两种模式,发布和订阅已授权给应用的设备端的消息。物联网平台提供HTTPS/2 (Java)设备SDK进行建联,用于建立设备端与物联网平台的通信。参考SDK链接:...

【通知】2020年3月31日RDS MySQL数据订阅(旧版)功能...

为了给您带来更优质的产品体验,阿里云自2020年3月31日起下线RDS MySQL的数据订阅(旧版)功能。背景信息 RDS MySQL数据订阅(旧版)只能有一个下游SDK消费数据,其他SDK需作为备份。如果需要对同一个数据库实例的增量数据进行重复消费,则...

使用DTS数据订阅时提示“Connection timed out”错误

问题描述 在使用DTS数据订阅时,报类似如下错误。2015-11-11 16:16:36,724 INFO[com.aliyun.drc.clusterclient.partition.PartitionPool]-client partition is empty,wait partition balance 2015-11-11 16:16:46,748 INFO...

使用数据订阅功能传输数据后日期数据格式发生变化

概述 本文主要介绍MySQL中数据类型为Date的数据,通过数据订阅传输数据后,数据格式由 YYYY-MM-DD 格式变化为 YYYY:MM:DD 的原因。详细信息 DTS默认数据存储格式为 YYYY:MM:DD,YYYY-MM-DD 是展现出来的格式,实际存储是 YYYY:MM:DD 格式。...

使用数据订阅SDK消费数据时报“failed to get master ...

问题描述 使用数据订阅SDK订阅数据时,报类似如下错误。failed to get master store addr for topic aliyun_sz_ecs_rdsr*y-1-0 问题原因 订阅通道的消费时间点设置早于实际消费时间。解决方案 数据订阅的前提是SDK配置 usePublicIp=true ...

订阅数据

云市场为用户提供两种订阅模式:模式1:用户自主搜索 进入 云市场,通过搜索或筛选的方式,查找感兴趣的数据集商品,进行选购。商品详情页查看详情介绍-标准数据集,即现成数据,如满足用户需求,可直接下单购买-定制数据集,可与服务商...

【通知】2021年12月01日PolarDB-X 1.0数据订阅(旧版...

DTS将于2021年12月01日下线 PolarDB-X 1.0 数据订阅(旧版)任务的创建和配置功能。为避免业务受到影响,建议您使用 PolarDB-X 1.0 数据订阅(新版)任务。内容 2021年12月01日,DTS将下线 PolarDB-X 1.0 数据订阅(旧版)任务的创建和配置...

SDK重新运行后不能成功订阅数据

问题描述 SDK重新运行后不能成功订阅数据。问题原因 因为数据订阅通道中保留数据的时间范围为1天,从当前时间减1天,当天时间订阅通道会删除过期数据。因此如果上次SDK退出时最后一条消费数据的时间点对应的数据,不在当前订阅通道中,就不...

数据订阅可以订阅实时增量数据,这个新增的数据是只指...

DTS的数据订阅可以订阅的增量数据包括:所有的增删改以及结构变更(DDL)。

DTS数据订阅报“java.io.IOException:Parse message ...

问题描述 DTS数据订阅报以下错误。java.io.IOException:Parse message attribute failed because Store aliyun_hz_ecs_rdsxxxxxxxxx-1-0.0000000003 find aliyun_hz_ecs_rdsxxxxxxxxx-1-0 without server id and 1444709748 failed error ...

使用flink-dts-connector消费订阅数据

完成数据订阅通道的配置后,您可以使用flink-dts-connector文件消费通道中的数据,用于Flink客户端消费。本文介绍如何flink-dts-connector文件的使用说明。注意事项 仅支持Flink客户端使用DataStream API、Table API和SQL。如您的Flink客户...

但是索引不同,可以使用数据订阅功能进行实时同步吗

可以,如果数据订阅订阅数据变更,那么两边索引不同不会影响。但是如果订阅了结构变更,而且RDS上涉及到索引变更的话,可能会由于两边索引不同,导致结构变更在本地消费失败。

通过实时计算订阅数据

订阅DataHub数据进行实时计算,插入到RDS实例的目标表中。在RDS数据库中,按照源表结构创建相应的表。参考 数据存储配置白名单,配置RDS数据库白名单。由于本案例的RDS数据库位于华东1区,而流计算项目位于华东2区,所以需要在RDS数据库中...

使用SDK示例代码消费PolarDB-X 1.0订阅数据

完成数据订阅任务后,您可以使用DTS提供的SDK示例代码来订阅数据变更信息。本文介绍通过SDK示例代码消费分布式订阅数据,支持的数据源包括PolarDB-X 1.0和DMS LogicDB。前提条件 已安装JDK 1.8版本。已安装IntelliJ IDEA软件。注意事项 ...

使用SDK示例代码消费PolarDB-X 1.0订阅数据

完成数据订阅任务后,您可以使用DTS提供的SDK示例代码来订阅数据变更信息。本文介绍通过SDK示例代码消费分布式订阅数据,支持的数据源包括PolarDB-X 1.0和DMS LogicDB。前提条件 已安装JDK 1.8版本。已安装IntelliJ IDEA软件。注意事项 ...

数据订阅SDK容灾

在上图这个示例架构中,对一个订阅通道中,接了两个SDK消费下游,这两个SDK互为主备,同一个时间内,只有主SDK能订阅并消费到增量数据。当主SDK异常或是出现网络连接异常时,DTS会自动failover漂移到备SDK上,同时使用最后消费的时间点启动...

数据订阅消费位点多久更新一次,为什么重启SDK时,有...

数据订阅SDK消费完每条message,必须调用ackAsConsumed 向服务端回复ACK。服务端接收到ACK后,会更新内存中的消费位点,然后每间隔10秒持久化一次消费位点。所以,如果在最新ACK未持久化时重启SDK,为保证消息不丢,服务端会从上一个持久化...

使用flink-dts-connector消费订阅数据

完成数据订阅通道的配置后,您可以使用flink-dts-connector文件消费通道中的数据,用于Flink客户端消费。本文介绍如何flink-dts-connector文件的使用说明。注意事项 仅支持Flink客户端使用DataStream API、Table API和SQL。如您的Flink客户...

设备数据订阅指引

服务端可以直接订阅产品下多种类型的消息:设备上报消息、设备状态变化通知、设备生命周期变更、网关发现子设备上报、设备拓扑关系变更等。配置服务端订阅后,物联网平台会将产品下所有设备的已订阅类型的消息转发至您的服务器。使用AMQP...

数据订阅如果消费端有一条记录没有ack,SDK重启后为...

当SDK有message没有ACK时,服务端会将buffer里的所有消息推送完成,当推送完后,SDK不能再接收到消息。...当SDK重启时,为了保证消息不丢,服务端会从未ACK前一条message对应的位点开始重新推送数据,所以SDK此时会重复收取一部分消息。

数据订阅在RDS主备切换/主库重启的时候是否发生问题?

RDS MySQL、RDS PostgreSQL、PolarDB MySQL、PolarDB PostgreSQL和PolarDB-X 1.0(存储类型为RDS MySQL)实例发生主备切换/重启时,DTS都会自适应切换,业务不会受到影响。

SDK正常下载数据过程中突然暂停且不能订阅数据

问题描述 通过SDK正常下载数据...解决方案 SDK内部设置了8192个Record的缓存空间,如果不调用ackAsConsumed汇报位点,那么这缓存空间数据就不会删除,当缓存满时,就不能拉取新的数据,就会出现SDK暂停不能订阅数据。适用于 数据传输服务DTS

园区空间数据变更订阅

当园区SaaS端想要获取园区的...选中应用管理菜单,选择数据管理菜单,可以看到园区空间数据订阅,模型编号为iotx_iwms_space_subscribe,如下图所示 4、建立连接 根据以上信息,建立消息连接通道,使用方法参考连接,选择AMQP方式建立连接 ...

Data Exchange数据订阅和转存服务关联角色

本文介绍Data Exchange数据订阅和转存服务关联角色AliyunServiceRoleForDataExchangeSubscribeDataSet以及如何删除该角色。背景信息 Data Exchange数据订阅和转存服务关联角色AliyunServiceRoleForDataExchangeSubscribeDataSet是Data ...

配置全局参数实现不同用户订阅不同数据

本教程通过配置仪表板全局参数的方式,使得同一份报表不同用户订阅时,可以查看到不同的数据。背景信息 假设您是一家大型全国连锁店的数据分析师,在一个报表中分析每个城市的销售量和利润金额,您需要发送该报表给区域经理,确保这些人...

数据转发到AMQP服务端订阅消费组

所有配置完成,设备上报订阅数据并被AMQP客户端接收后,您可以登录 物联网平台控制台,进入对应实例查看消息运行日志。在 监控运维 日志服务 云端运行日志 页签,查看设备上报数据、物联网平台转发数据到AMQP客户端和AMQP客户端返回ACK的...

数据转发到AMQP服务端订阅消费组消费

所有配置完成,设备上报订阅数据并被AMQP客户端接收后,您可以登录 物联网平台控制台,进入对应实例查看消息运行日志。在 监控运维 日志服务 云端运行日志 页签,查看设备上报数据、物联网平台转发数据到AMQP客户端和AMQP客户端返回ACK的...

如何保证SDK订阅到的数据是一个完整的事务,根据提供...

不会,根据用户提供的消费位点,服务端会搜索这个消费位点对应的完整事务,从整个事务的begin语句开始,向下游分发数据,所以可以接受到完整的事务内容。

Quick BI订阅任务仪表板选择数据附件时提示发送成功,...

订阅任务中电子表格带数据附件可以发送成功。问题原因 仪表板发PDF附件和Excel发PDF附件没有任何差别。OUTLOOK设置的问题。解决方案 1)开启Outlook Express。2)点“工具 选项”。3)“安全”选项卡下面,勾掉这个选项“Do not allow ...

AMQP服务端订阅后收到的数据条数不全,为什么?

相关文档 什么是服务端订阅:了解AMQP服务端订阅应用场景和使用优势。配置AMQP服务端订阅:了解如何配置推送到AMQP客户端消费的设备消息。AMQP客户端接入说明:了解AMQP客户端连接物联网平台原理和接收设备消息的策略、时序以及回执说明等...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用