对于无主键且包含 LOB 类型字段的表,反向增量会出现数据质量问题。如果源端字符集为 UTF-8,建议目标端使用兼容源端的字符集(例如,UTF-8、UTF-16 等),避免产生因字符集不兼容导致目标端出现乱码等问题。节点之间的时钟不同步,或者...
对于无主键且包含 LOB 类型字段的表,反向增量会出现数据质量问题。数据源标识和用户账号等,在数据传输系统内全局唯一。Oracle 数据库的增量日志解析最大支持 5T/天。Oracle 数据库 11G 及之前版本不支持创建超过 30 个字节的数据库对象。...
详细信息 数据库迁移过程中,会出现数据库中断或者闪断的情况。如出现闪断的情况,请参见 更多信息。以下是不同数据库迁移到RDS的方法。RDS MySQL版 关于将MySQL数据库迁移到RDS,请参见 从自建MySQL迁移至RDS for MySQL。RDS SQL Server版...
修复最新值查询在扩容后可能会出现返回多条数据的问题。修复降采样查询中不支持常量折叠计算的问题。修复正则查询降采样数据时间条件不生效的问题。3.4.10 2022年02月28日 新特性 SQL查询语句tags支持通过正则表达式过滤。支持non_negative...
在数据配置的过程中,可能会出现区域文字标注有偏移的问题,解决方法如下。查看下您的区域热力层版本,目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低,需要先删除该层,再重新添加。...
在数据配置的过程中,可能会出现区域文字标注有偏移的问题,解决方法如下。查看下您的区域热力层版本,目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低,需要先删除该层,再重新添加。...
在数据配置的过程中,可能会出现区域文字标注有偏移的问题,解决方法如下。查看下您的区域热力层版本,目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低,需要先删除该层,再重新添加。...
在数据配置的过程中,可能会出现区域文字标注有偏移的问题,解决方法请参考 基础平面地图 中 区域热力层 子组件内的 文字标注偏移解决方案。热力值数据接口 您可以通过配置热力值数据接口,自定义区域热力层的样式。区域热力层支持数据优先...
在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入层(ODS,Operation Data ...ODS层和DWD层会放在数据中间件中,供下游订阅使用。而DWS层和ADS层的数据通常会落地到在线存储系统中,下游通过接口调用的形式使用。
在阿里巴巴的数据体系中,我们建议将...ODS层和DWD层会放在数据中间件中,供下游订阅使用。而DWS层和ADS层的数据通常会落地到在线存储系统中,下游通过接口调用的形式使用。icmsDocProps={'productMethod':'created','language':'zh-CN',};
在实际业务中,ODS层会从数据源抽取数据。为了确保新用户能够轻松完成入门教程,本教程中将向ODS层写入测试数据。DWD:数据明细层,对ODS层数据进行清洗、过滤等处理。本教程以过滤为例。ADS:数据应用层,面向业务进行数据分析、生产报表...
文字标注偏移问题 在数据配置的过程中,可能会出现区域文字标注有偏移的问题,解决方法如下。查看当前区域热力层版本,目前可以使用的区域热力层组件包括 区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低,需要先删除该层,再...
问题现象 补数据选择业务时间昨天和今天,会出现等待时间的情况。产生原因 从平台维度来看,业务时间昨天的数据,今天调度运行。补数据补对应业务时间的数据相当于重新执行了一次对应业务时间的周期实例。如果您需要过滤今天的周期实例,您...
修复并发插入数据过程中,会出现误报主键冲突的问题。2023年04月(V2.0.0.2)类别 功能 功能描述 相关文档 缺陷修复 修复实时写入时,执行Flush、Compact以及并发DDL等操作可能出错的问题。2023年03月(V2.0.0.1)类别 功能 功能描述 相关...
背景信息 随着业务的发展,数据库会出现升降配、数据库整体迁移的需求,为支持此类业务场景,DMS推出数据库迁移功能,支持对多种数据库的结构、数据进行同构迁移,同时支持库名称修改、迁移前预校验、迁移后数据一致性校验及来源数据库的...
任务运行在独享数据集成资源上,日志中会出现如下信息:running in Pipeline[basecommon_S_res_group_xxx]。如果凌晨任务调度时偶尔失败,但重跑又能成功,请检查数据库在报错时间点的负载情况。如何切换数据集成任务执行资源组?您可以在 ...
常见问题 当添加地形子组件的同时也添加了道路、建筑或其它组件时,在场景地图中可能会出现地形遮挡建筑、道路等要素的问题,该怎么解决?您可以在场景编辑器中,单击需要调整参数的地形图层,在右侧图层数据面板中,单击 重新选择数据 ...
地形子组件常见问题 Q:当添加地形子组件的同时也添加了道路、建筑或其它组件时,在场景地图中可能会出现地形遮挡建筑、道路等要素的问题,该怎么解决?A:您可以在场景编辑器中,单击需要调整参数的地形图层,在右侧图层数据面板中,单击 ...
地形子组件常见问题 Q:当添加地形子组件的同时也添加了道路、建筑或其它组件时,在场景地图中可能会出现地形遮挡建筑、道路等要素的问题,该怎么解决?A:您可以在场景编辑器中,单击需要调整参数的地形图层,在右侧图层数据面板中,单击 ...
可以在查询条件中添加热数据时间范围,避免出现此类问题。示例如下:/您需要设置_l_ts_min_(当前时间-冷热分界线),_l_ts_max_(当前时间),注意时间单位统一 SELECT/*+_l_hot_only_(true),_l_ts_min_(1000),_l_ts_max_(2001)*/*FROM test ...
只需要将原来的 N 份数据,每一份都通过分区表打散为 M 个数据分区,利用分区表打破单机的容量限制,就可以从数据层完成这一拆分过程,无需业务改造,极大地节省了成本,降低了技术风险。同时,OceanBase 数据库的分区表方案也可以使得用户...
如果您需要将一个 云数据库 Redis 版 实例的数据迁移到另一个 云数据库 Redis 版 实例中,且您未创建新实例,推荐您通过 备份集克隆、数据闪回功能 将数据克隆至新实例,若您已创建新实例,建议您通过数据传输服务DTS(Data Transmission ...
问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒?在执行MaxCompute SQL过程中,对DOUBLE类型的数据进行等值比较,为什么结果不符合预期?如何解决DECIMAL数据类型精度溢出问题?新创建的MaxCompute项目不支持数据...
扫描算子读取字段个数较多 问题 扫描算子会在 AnalyticDB MySQL版 的存储层进行数据的过滤和明细数据的读取,如果SELECT的字段个数较多,需要读取的明细数据也较多,那么就会占用较大的磁盘I/O资源,影响 AnalyticDB MySQL版 集群整体稳定...
导致下游取数出现问题 若当前节点 Job_B 代码中配置了依赖A表的数据,但未将产出A表数据的节点 Job_A 作为当前节点依赖的上游,则可能会出现A表数据未产出,当前节点便开始执行,最终导致 Job_B 节点产出的表数据出现问题。虽然 Job_A 的...
原因:由于AnalyticDB MySQL连接层限制,使用DataX导入数据时可能会出现上述报错。解决方法:请修改JDBC连接串,添加rewriteBatchedStatements=false参数后重新导入数据 如何解决 导入MaxCompute数据 时,出现Query Exceeded Maximum Time ...
例如,uk(name)=a先后被id=1和id=2的数据所持有,但因无法保证 delete(id=1,name=1)和 insert(id=2,name=a)在目标库的执行顺序,当 insert(id=2,name=2)先于 delete(id=1,name=1)执行时,会出现写入冲突。此类场景建议设置拆分级别为表级。...
如下图所示,某个大表分布不均,存储节点0上的Shard_0和Shard_1中数据量较大,而在存储节点1上的Shard_2和Shard_3中数据量较小,那么当您查询这个大表时,较大概率会出现存储节点0需要处理的数据多,存储节点1上需要处理的数据少的情况,...
在数据配置的过程中,可能会出现区域文字标注有偏移的问题,解决方法如下。查看下您的区域热力层版本,目前可以使用的区域热力层组件包括区域热力层v0.2.4及以上版本。如果您使用的区域热力层版本较低,需要先删除该层,再重新添加。...
补数据可通过补历史或未来一段时间的数据,将写入数据至对应时间分区。代码中的 调度参数,将根据补数据选择的业务时间自动替换为具体值,并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑,与任务定义的代码...
局部性质:数据直接或间接用于某些业务线的运营、报告等,如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质:数据主要用于日常数据分析,出现问题带来的影响极小。标记为A4。未知性质:无法明确数据的应用场景...
分类分级模板 当开启敏感数据保护时,才会出现分类分级模板的配置项。可通过给实例绑定分类分级模板,识别实例中库表的字段是否符合模板内的识别规则,若符合,则给字段打上分类分级的标签,保护敏感等级高的字段。详细信息,请参见 管理...
局部性质:数据直接或间接用于某些业务线的运营、报告等,如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质:数据主要用于日常数据分析,出现问题带来的影响极小。标记为A4。未知性质:无法明确数据的应用场景...
产生原因 示例SQL是table1通过ID字段和table2的ID字段做左外关联,所以会出现以下情况:如果table2表中找不到关联数据,table1也会返回一条数据。如果table1找不到但是table2能找到关联数据,则不返回结果。如果table1和table2都能找到关联...
连接方式 选择连接方式,当前支持:非加密连接 SSL安全连接:SSL(Secure Sockets Layer)能在传输层对网络连接进行加密,提升通信数据的安全性和完整性,但会增加网络连接响应时间。说明 选择 SSL安全连接 前,请先在RDS实例中开启SSL。更...
您授权允许 数据安全中心(DSC)访问MaxCompute、RDS和对象存储OSS数据时,可能会出现授权失败的情况。您可以参考以下原因排查数据授权问题。RDS连接授权失败有哪些原因?RDS数据库账号或密码输入错误。您自行删除了RDS访问白名单中 DSC ...
表数据存储规范 按数据层规划数据的生命周期:源表ODS层:每天从业务系统同步过来的数据,全部保留,生命周期定义永久保存。当下游数据受损时,可以从ODS恢复数据。若ODS每天同步过来的是全量表,则可以通过全表拉链的方式来压缩存储。数据...
分类分级模板 若开启敏感数据保护,才会出现分类分级模板的配置项。可通过给实例绑定分类分级模板,识别实例中库表的字段是否符合模板内的识别规则,若符合,则给字段打上分类分级的标签,保护敏感等级高的字段。详细信息,请参见 管理分类...
局部性质:数据直接或间接用于某些业务线的运营、报告等,如果出现问题会给业务线造成一定的影响或造成工作效率降低。标记为A3。一般性质:数据主要用于日常数据分析,出现问题带来的影响极小。标记为A4。未知性质:无法明确数据的应用场景...
A:切换域名后,可能会存在DNS解析缓存问题,在缓存过期时间内可能会出现连接不上数据库或数据库只支持读操作而无法执行写入操作等情况,建议您刷新一下服务器的DNS缓存。Q:升级切换后,为什么在 PolarDB 控制台上看不见 完成升级 按钮?A...