问题描述Dataphin中使用SQL任务union all两个分区，数据量不等于两个分区数据量的和。代码如下：select*from s_item_view_d where ds='${bizdate}'-1 union all select*from s_item_...
问题描述Dataphin集成管道任务报错：“java.sql.SQLException:No database selected”是什么原因？问题原因任务节点的jdbcurl配置错误，url中存在空格字符，导致数据库信息未能...
SchedulerX支持定时调度程序、多语言脚本和HTTP接口，也支持...SchedulerX平台支持Java和Kubernetes任务类型，能够实现离线与在线定时任务的混布调度，灵活满足不同需求。
问题描述用户使用管道任务同步数据时报错“java.lang.OutOfMemoryError:Compressed class space”。问题原因管道任务运行过程中压缩类空间溢出，默认大小1 GB。解决方案创建一个...
问题描述Dataphin管道任务从Oracle抽取数据到MySQL，运行报错“DlinkTaskPluginCollector-java.sql.SQLException:流已被关闭”、“java.lang.IndexOutOfBoundsException:Index:12,Size:12”...
需要注意java-jar命令是在Shell脚本中运行，而不是Spark任务。解决方案Jar包名称、上传资源的时候名称和类名称保持一致之后，问题解决。另外，需要注意的是：Dataphin环境...
如果要表格存储数据表中的数据投递到OSS Bucket中存储，您可以使用CreateDeliveryTask接口创建一个投递任务。重要表格存储Java SDK从5.10.3版本开始支持数据湖投递功能，...
概述本文主要介绍Dataphin资产质量中，双分区任务的质量规则，分区表达式写法。详细信息Dataphin资产质量中，双分区任务的质量规则，分区表达式怎么写？介绍如下：单分区...
Java应用客户端接入SchedulerX在应用程序的pom.xml文件中添加SchedulerxWorker依赖。请参见发布记录，schedulerx 2.version使用最新客户端版本。dependency groupId...
Java应用客户端接入SchedulerX在应用程序的pom.xml文件中添加SchedulerxWorker依赖。请参见发布记录，schedulerx 2.version使用最新客户端版本。dependency groupId...
创建完成后，单击目标任务操作列中的运行一次，在手动执行任务弹框中，指定机器，配置实例参数，单击确定单击更多调度记录，查看任务执行记录。单击左侧导航栏执行列表，...
无1.2.8.2，2021-8-6变更类型功能描述相关文档问题修复修复问题：秒级别广播任务大批量worker按批次发布过程中任务运行有概率卡住。无1.2.8，2021-6-23变更类型功能描述...
产品名称Dataphin产品模块数据集成概述提供数据集成任务运行报“java.io.IOException:Error writing request body to server”错误问题排查思路和方向问题描述adb数据集成到odps...
Agent接入后，您可以直接在SchedulerX控制台通过白屏化的方式编写定时任务、重跑任务、查看历史执行记录、查看运行日志等。本文介绍如何使用Agent（tar包或者镜像）将非...
安装DataLake SDK您可以在Maven Repository中获取数据湖构建最新的SDK包，获取地址Maven SDK地址。dependency groupId...
问题描述Dataphin集成管道任务报错“java.lang.IllegalArgumentException:Wrong number of args(2)passed to:UNIX_TIMESTAMP”。问题原因字段计算组件中UNIX_TIMESTAMP和FROM_UNIXTIME函数...
问题描述配置管道任务将Oracle数据库集成到MaxCompute数据库，使用“字段计算”组件中MD 5函数将字段CUST_NO进行加密之后，任务运行报空指针和脏数据的错误，具体异常...
转码任务参数需注意以下几点：region目前仅支持服务地域中的区域。name可以为空。inputPath、outputpath必须和region在同一区域。templateId可通过转码模板管理页面获取。...
问题描述管道任务MaxCompute数据库数据集成到MySQL数据库，数据中包含表情包等特殊字符，任务运行报错。2021-09-09 11:39:05.486[DlinkTrans-in_article]INFO DlinkLogbackListener-in_...
在旧版控制台EMR数据开发中使用EMR Doctor任务采集例如，在EMR数据开发中设置了参数spark.driver.extraJavaOptions，如果想使用EMR Doctor功能，则需要参照上表追加EMR...
问题描述Dataphin数据集成中SAP HANA可以选到表，但是管道任务中报错“invalid table name:Could not find table/view CE 9 PB 00_H in schema SLT_USER”。2022-09-23 09:42:20.231[job-...
问题描述Dataphin的集成任务在调度后运行过程中一直卡住无响应什么原因。DlinkTransRunner-Dlink Writer.Job[MySQL_1]do init work.obproxy Druid LogFactory,userDefinedLogType=null,...
概述本文介绍现场运维同学如何通过元数据库查询Dataphin环境中任务的节点ID、作业类型、任务节点名、任务状态、调度周期、调度时间等详细信息；查询任务上下游节点任务的...
问题描述Quick BI数据集跨空间复制报错“跨空间复制失败，任务执行失败：[15]java.sql.SQLException:[400]com.aliyun.odps.OdpsException:ODPS-0130161:Parse exception”。...
方式三：通过Java SDK部署SchedulerX如果您的应用为Java应用，除K 8 s任务外，还需要调度Java程序，您可以使用Java SDK部署。SchedulerX和您的在线业务处于一个进程中。...
概述本文主要介绍Dataphin中任务状态是"等待中"是什么原因。详细信息等待中指任务在等待资源或者调度时间。适用于Dataphin
查询回收站中的一个或多个任务信息。接口说明仅通用型NAS文件系统支持该功能。最多可以查询最近执行的50个任务。调试您可以在OpenAPI Explorer中直接运行该接口，免去...
JAVA离线任务应用zip包的规范如下：zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、...
JAVA离线任务应用zip包的规范如下：zip包里面根目录请勿出现start.sh和start_flow.sh zip包结构参照如下xxx.zip#上传的zip包中仅包含算法代码即可,不要含有start.sh、...
概述本文主要介绍Dataphin中任务调度配置中输出名和节点名有什么区别。详细信息节点输出名称是运维调度那边作为节点的一个唯一标识，用于依赖自动解析（根据SQL中的...
问题描述夜间周期性任务出现高并发时，运行过程中有些任务会出现等待资源问题，原本只需要几十秒的任务，有时需要20多分钟，为什么会出现这种情况？是否有改善的方案...
ir-a 12 ds 234 fasd*返回参数名称类型描述示例值object RequestId string请求ID。473469 C 7-AA 6 F-4 DC 5-B 3 DB-A 3 DC 0 DE 3*示例正常返回示例JSON格式{"RequestId":"473469 C 7-AA...
本文介绍了Prepare协议的概念、用途及在Java中的开启方法。Prepare协议介绍Prepare协议分为两种模式：二进制模式：该模式基于高效的客户端/服务器二进制协议，是程序开发...
如果需要通过镜像部署应用，请参见在K 8 s集群中使用镜像部署Java微服务应用。Java：支持通用的JAR包部署，适用于Dubbo和Spring Boot应用。选择后，可设置Java环境。...
本文介绍了Prepare协议的概念、用途及在Java中的开启方法。介绍PolarDB-X 1.0提供对服务器端预处理语句的支持，支持利用高效的客户端/服务器二进制协议。使用准备好的语句...
问题描述Dataphin中Shell任务调用自定义的udf函数，任务运行很长时间之后报错“Receive kill signal”。[Following shell scripts will be executed]java-jar/mnt/mesos/sandbox/resources...
本文将介绍如何在Java应用中使用JDBC连接PolarDB PostgreSQL版（兼容Oracle）数据库。前提条件支持PolarDB PostgreSQL版（兼容Oracle）2.0版本。已经在PolarDB集群创建用户，如何...
方式四：使用Job DSL插件构建部署任务在Jenkins中，您可以使用Job DSL插件来构建任务模板，并根据模板来快速构建部署任务。使用该方式前，您需要先安装Job DSL插件。更多...
方式四：使用Job DSL插件构建部署任务在Jenkins中，您可以使用Job DSL插件来构建任务模板，并根据模板来快速构建部署任务。使用该方式前，您需要先安装Job DSL插件。更多...
任务失败，报错“ClassNotFoundException”说明执行任务的Worker上没有该类，请确保Java任务配置的Processor类名必须是类的全路径，并非简写。如果配置的jobProcessor类名...