问题描述Dataphin管道任务失败，报错“error occurred where call hadoop api”。问题原因Hive表字段改动导致。Hive表字段改动是要更新管道任务配置的，Hive输出组件的配置要求...
问题描述Dataphin管道任务源表SQL Server没有获取到demical的精度。解决方案Dataphin管道任务的输入组件暂时不支持decimal精度获取，但不影响实际任务同步，也不影响...
灵活的运维管道能力提供录入，执行用户自定义的运维命令和脚本通道，方便用户做自定义的运维指令操作。应用场景传统运维能力支持传统企业的大部分核心业务仍然未进行...
问题描述在管道任务中，SQL Server数据源无法显示数据表，只能显示数据源。当前用户具备数据源的读权限。数据源的设置如下：问题原因SQL Server中数据源的schema填写错误，...
问题描述管道任务将FTP数据源STRING类型数据同步到Hive数据源中DATE类型字段，当FTP中改STRING类型数据为空时，管道任务会提示脏数据。但是FTP中该字段为空数据...
概述本文主要描述了Dataphin配置集成管道任务，提示选择复制还是轮流分发的区别。详细信息复制：上游节点的数据根据下游节点数量进行等份复制，且每个下游节点的数据都...
问题描述Dataphin集成管道任务报错：“java.sql.SQLException:No database selected”是什么原因？问题原因任务节点的jdbcurl配置错误，url中存在空格字符，导致数据库信息未能...
概述本文主要介绍管道任务抽取数据量少于来源表数据量的原因。详细信息Dataphin管道任务为什么抽取数据量少于来源表数据量？原因如下：管道任务抽取之后，数据库数据发生...
问题描述Dataphin中通过管道任务将MongoDB中的数据同步到MaxCompute，发现有重复数据。原MongoDB表里有96条数据，同步到MaxCompute中有108条数据，通过对比分析发现_id...
问题描述Dataphin中管道任务选择MaxCompute数据源提示“元数据内部错误”。问题原因添加数据源时，Access ID和Access Key等信息正确，可以成功添加数据源。随后客户修改了...
产品名称Dataphin产品模块研发，权限概述本文为您介绍Dataphin中管道集成任务选不到已有数据源的原因及解决方法问题描述新建了数据源，在管道集成任务中选不到该...
问题描述Dataphin离线管道任务执行失败了，但目标表却被清空了是什么原因？解决方案输出组件有准备语句（preSql）和完成语句（postSql），管道任务的执行逻辑是会先执行...
问题描述Dataphin管道任务输入源为Oracle时，无法选择到数据表。问题原因Oracle数据源配置的schema不是业务数据使用的schema，导致没有表数据。解决方案修改数据源配置，...
问题描述Dataphin管道任务源表字段少于目标表字段，应该如何应对？解决方案可以添加字段计算组件，表达式设置为null，来补全源表字段。适用于Dataphin
问题描述Dataphin管道任务补数据提示will skip and set success.然后直接跳过，如下图所示。问题原因由于任务设置的空跑状态，所以会直接置成功。解决方案如果需要周期补充...
概述Dataphin管道任务可以读取Oracle数据源的伪列吗？详细信息管道任务读不到rowid。伪列只在数据库内部使用。伪列类似表的列，但不实际存在于表中。不能插入或删除...
问题描述Dataphin的管道任务提交时报错“ERROR：duplicate key value violates unique constraint”是什么原因？问题原因依赖关系配置中节点的输出名称重复了，导致了主键冲突...
问题描述Dataphin管道输入脚本输入模式组件配置了querySql参数不生效。问题原因参数所在层级配置错误。解决方案querySql参数正确的位置是在parameter connection层级下，...
产品名称Dataphin产品模块研发，集成，管道任务概述本文为您介绍Dataphin管道集成任务中目标库的加载策略的机制是怎样的问题描述请教个问题，加载策略选”覆盖数据“的...
概述本文主要介绍提交管道任务提示对数据源没有写权限的原因。详细信息在提交管道任务时，提示“对数据源没有写权限”，为什么会有这样的提示？原因如下：当创建Dev项目...
问题描述Dataphin的管道同步任务中如何配置使用多分区值和多分区字段来进行数据同步？解决方案配置使用多分区和多分区字段的方法示例参考（数据源是Maxcompute）：/*...
问题描述Dataphin管道同步任务提示报错“Query exceeded maximum time limit of 1800000.00 ms”，异常报错如下：问题原因源端ADB查询超过了对SQL查询执行设置的超时时间。...
问题描述Dataphin管道任务在开发环境一样的数据运行正常，发布到prod提示数据都是脏数据，提示outputRowMeta is not init。问题原因目标表在生产和开发环境的结构不一致...
问题描述用户使用管道任务同步数据时报错“java.lang.OutOfMemoryError:Compressed class space”。问题原因管道任务运行过程中压缩类空间溢出，默认大小1 GB。解决方案创建一个...
问题描述Dataphin管道任务同步数据，hive源表报错“ERROR DlinkTaskPluginCollector-脏数据”。问题原因hive源表字段数据中有单个双引号，导致同步时数据分割错了，抛出了...
问题描述用户在向MaxCompute同步数据，或者从MaxCompute读取数据，任务报错“ERROR RetryUtil-Exception when calling callable,异常Msg:RequestId=...适用于Dataphin管道任务
概述本文介绍如何通过代码调用API的方式创建计算任务、管道任务等功能。详细信息日常答疑中有客户提出想通过代码调用方式创建计算任务、管道任务等需求，经过官方确认...
概述Dataphin生产数据源和开发数据源不一致在管道任务中如何自动切换。详细信息只需要在配置数据源的时候将开发和生产按照业务实际绑定到对应的设置中，比如生产...
问题描述本文主要描述了Dataphin管道任务从MongoDB抽取数据报错“Reader adaptor run error”的解决方法。2022-10-20 02:22:23.538[DlinkTrans-MongoDB_1]ERROR DlinkLogbackListener-...
问题描述Dataphin管道任务输入组件Log Service报错“Description:[您配置的值不合法.].-Invalid DateTime[startTime=${yyyyMMddHHmmss}]!问题原因Log Service输⼊组件，日志开始...
问题描述从Oracle向ODPS通过管道任务同步数据，管道任务报错“ORA-00257:archiver error.Connect internal only,until freed”。问题原因由于Oracle数据库归档日志太多，占用了较多...
概述描述了管道任务从SQL Server向ODPS同步数据，报错“连接数据库失败”的原因及解决方法。问题描述SQL Server数据源测试连接成功，但是在管道任务中提示连接数据库失败。...
问题描述Dataphin管道任务列表中的名称和任务基本信息中的名称不一致，展示情况如下：问题原因修改节点名称后未进行提交，基本信息中显示的是提交后最新版本的名称...
概述本文介绍Dataphin管道任务中输入、输出组件字段类型是decimal，映射列表展示为double的原因。详细信息如下MySQL数据源中字段类型是decimal，但是数据集成输入、输出...
问题描述Dataphin管道任务下选择了SQL SERVER数据源但是找不到用户下的表，但是数据库中实际是有表的。问题原因数据源中配置的Schema错误。解决方案老版本的SQL Server...
产品名称Dataphin产品模块管道任务概述本文描述了当使用管道从SqlServer抽取数据时，SqlServer中存在空字符串的处理方法。问题描述当您使用管道从SqlServer抽取数据时...
问题描述用户使用Dataphin离线管道任务，同步数据到Oracle，报错“ORA-01461:仅能绑定要插入LONG列的LONG值”。问题原因用户向数据库执行插入数据操作时，某条数据的...
概述本文主要介绍管道任务写入ClickHouse表，发现写入分区的数据量少于ClickHouse表分区总量的原因。详细信息Dataphin管道任务写入ClickHouse表，发现写入分区的数据量...
概述本文主要解决Dataphin管道任务选择PostgreSQL数据源报错“SQLException An error occurred while setting up the GSS Encoded connection”。详细信息需要在数据源中加上?gssEncMode=...
问题描述Dataphin的管道任务中如何为目标表的预留字段设置默认值为null字符串？解决方案使用“字段计算”组件，新建一个字段作为存储null值的字段，表达式中的null字符串...