时序引擎特有扩展算子 TSDBDataScanRel算子 面向Lindorm时序引擎实现最基础的数据扫描算子，由逻辑算子LogicalTableScan转换而来，表示在某个具体的指标（metric）上执行的Scan操作。该算子在展示时会包含以下内容：filter：扫描时同时自带...
序号 区域 说明 ① 资源区 可拖拽数据表、本地数据、系统算子、脚本算子资源到画布的执行区组装模型。说明 系统算子是指将业务人员经常使用的计算逻辑进行组件封装，作为模型中心预置的算子。系统算子使用具体操作，请参见 算子手册。② ...
本文介绍多表合并算子的使用方法及注意事项。用途 多表合并算子可以将多张数据表按照设置的对齐字段进行数据合并。多表合并 算子是 两表并集 算子的高级版本，满足多张数据表合并的需求。适用场景 计算链路 计算引擎 是否支持 离线 ...
算子级别的统计信息如下：算子执行时间：取执行该算子的所有进程的最长执行时间。算子扫描总行数：取执行该算子的所有进程的扫描行数累加和。算子执行次数（循环）：取执行该算子的所有进程的循环次数累加和。算子的资源使用信息：取执行该...
物理执行计划由Stage和算子（Operator）组成，物理执行计划中的算子（Operator）会对数据按照一定规则进行处理。Executor节点将数据处理的最终结果返回到客户端，或者写入 AnalyticDB MySQL版 集群的内部表以及其它外部存储系统（如OSS）中...
本文介绍多表连接算子的使用方法及注意事项。用途 多表连接算子可以将多张数据表按照设置的连接条件进行连接。多表连接 算子是 两表交集 算子的高级版本，满足多张数据表之间多种连接类型的需求。适用场景 计算链路 计算引擎 是否支持 离线...
说明 此处定义的算子可在后续数据处理任务时调用运行，包括“数据标准化算子”、“数据预处理算子”和“数据预标注算子”。数据标准化算子：对接入平台的非标准格式数据进行标准化，支持RGB图像、视频、传感器内外参、点云、激光雷达原始...
用途 标签对象 算子用于从和读数据表算子类似可以作为下游节点输入数据的来源，区别是标签算子的数据表是固定的，一个标签算子会由1到N张表连接而成。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 RDS/MySQL 是 使用...
规则构成：智能质检 规则，由一个或多个 条件 通过一定的 逻辑关系 编排组成，条件由 算子 和 检查范围 组成，具体我们在一个业务场景中说明规则、条件、算子间的关系及其简单使用。使用示例：当客户询问有关在犹豫期内外退保费的问题时，...
算子介绍 含义 算子 可下推至DN的算子 LogicalView，LogicalModifyView，PhyTableOperation,IndexScan 连接（Join）BKAJoin，NLJoin，HashJoin，SortMergeJoin，HashSemiJoin，SortMergeSemiJoin，MaterializedSemiJoin 排序 MemSort，TopN...
背景信息 查询算子Append是分区表的常用算子，但是它的性能低下，为了解决这个问题，PolarDB 推出了PartitionedTable Scan算子，它是一个分区表的查询算子，比Append更加高效。用于解决分区表分区数量过多时，查询性能慢的问题。使用限制 ...
本文介绍如何使用 EXPLAIN 命令查询执行计划，并介绍一些基本的算子（例如 LogicalView，Gather，MergeSort 等）。更多算子（例如Join、Agg、Sort等）的介绍在后续的章节中单独列出。背景信息 通常SQL调优的过程离不开以下两个步骤：分析...
算子与计费项的对应关系如下：算子 计费项 收费方 OSSMeta算子 GetRequest OSS MIME算子 不收费 无 FaceDetection算子 ImageFace 注*IMM LabelClassification算子（图片）ImageClassification 注*IMM LabelClassification算子（视频）...
经典结构主要用于查看SQL代码中涉及的SQL算子，及各算子之间的关联关系。鼠标悬停至对应算子的图标上，即可查看该算子的含义。常用的SQL算子如下。源表：查询的目标表。筛选：筛选目标表中需要查询的具体分区。中间表（查询视图）：存放...
Explain Analyze：代表SQL真实的运行计划，相比Explain会包含更多的实际运行信息，能 准确 的反映出SQL的执行算子和算子耗时，可以根据算子耗时去做针对性的SQL优化。说明 从Hologres V1.3.4x版本开始，支持通过Explain和Explain Analyze...
算子下推 算子下推是非常关键的一步，PolarDB-X 1.0 内置了如下算子的下推优化规则：优化规则 描述 谓词下推或列裁剪 将Filter及Project算子下推至存储层MySQL执行，过滤掉不需要的行和列。JOIN Clustering 将JOIN按照拆分方式及拆分键的...
物理算子下推 物理算子下推是非常关键的一步，PolarDB-X 内置了如下物理算子的下推优化规则：优化规则 描述 谓词下推或列裁剪 将Filter及Project物理算子下推至存储层MySQL执行，过滤掉不需要的行和列。JOINClustering 将JOIN按照拆分...
以下是针对t1 NLJ t2这个算子，做枚举过程的一个简要示例：在整体枚举完成后，计划空间中会产生一系列带有数据分发 Exchange Enforcer 的物理算子树，基于代价选择最优树即可，然后以Enforcer作为子计划的切分点，可以构建出一系列的执行...
常见算子下盘场景及解决方法 查询内存太小导致的算子下盘 通过观察执行计划发现，算子需要的内存并不大，只有几K或几M，但还是发生了算子下盘。这种情况往往是查询能够使用的内存调小导致的，原因可能是受到了 resource group 或 resource ...
什么是算子 算子是一种独立、可复用的逻辑表达，能够通过组合的方式实现更高维度的业务逻辑。行为 和 输入输出 是所有算子都有的属性，描述了算子可以做什么及相应的接口。对于不可解释算子（如图像识别），仅需定义行为和输入输出即可；...
场景 详情 作业中某些算子存在反压 判断反压最直接的方式是使用Flink UI提供的反压检查功能，而不是通过指标判断。反压的存在会导致Source端数据发送至下游算子的速率下降，您可能会观察到sourceIdleTime周期性上升，...
本文介绍几何求交算子的使用方法。用途 几何求交算子用于计算主表与关联节点在空间位置上的交集。适用场景 计算链路 计算引擎 是否支持 离线 PostgreSQL 是 Polar_PG 是 AnalyticDB PostgreSQL(ADB_PG)是 使用说明 来源节点 几何求交算子...
Storage带来的挑战 架构原理 数据一致性 低延迟复制 Recovery优化 PolarDB PostgreSQL版HTAP架构详解 HTAP架构原理 分布式优化器 算子并行化 消除数据倾斜问题 SQL级别弹性扩展 事务一致性 TPC-H性能：加速比 TPC-H性能：和传统MPP数仓对比...
本文介绍几何求差算子的使用方法。用途 几何求差算子用于计算主表相对于关联节点（另一张数据表）在空间位置上的差集。适用场景 计算链路 计算引擎 是否支持 离线 PostgreSQL 是 Polar_PG 是 AnalyticDB PostgreSQL(ADB_PG)是 使用说明 ...
您可以在算子中心新建 离线 类型的脚本算子，可作为模型画布中的算子节点运行。本文主要介绍如何新建脚本算子。新建离线脚本算子 登录 数据资源平台控制台。在页面左上角单击 图标，选择 探索。在顶部菜单栏，单击 图标，选择目标工作组，...
算子中心包含算子管理、算子配置。算子管理 算子管理模块展示并管理用户添加的脚本算子，通过模型生成的模型算子，用于在构建模型时使用。算子配置 算子配置模块展示并管理用户上传的资源文件及函数信息、包含了资源文件和函数。资源文件 ...
process_cpu_seconds_total 该指标计算使用到 utime（Go进程执行在用户态模式下的滴答数）和 stime（Go进程执行在内核态时候的滴答数，例如系统调用时），他们的单位jiffies，jiffy 描述了两次系统定时器中断之间的滴答时间。process_cpu_...
process_cpu_seconds_total 该指标计算使用到 utime（Go进程执行在用户态模式下的滴答数）和 stime（Go进程执行在内核态时候的滴答数，例如系统调用时），他们的单位jiffies，jiffy 描述了两次系统定时器中断之间的滴答时间。process_cpu_...
5984 ScanTimeMax long 带数据扫描算子的阶段在各个存储节点读取数据耗时的最大值，单位为毫秒（ms）。0 InputSizeMax long 阶段在各个计算节点的输入数据量的最大值，单位为 Byte。173 StageId integer 阶段 ID。1 ScanSizeMax long 带...
外包框处理算子用来判断算子左侧对象和算子右侧对象两者的时空外包框是否满足指定的时空关系。算子类别标记 算子类别标记目前分为三种：相交类标记：&或&包含类标记：@>被包含类标记：说明 当维度标记存在于算子类别标记内部（例如&）时，...
外包框处理算子用来判断算子左侧对象和算子右侧对象两者的时空外包框是否满足指定的时空关系。算子类别标记 算子类别标记目前分为三种：相交类标记：&或&包含类标记：@>被包含类标记：说明 当维度标记存在于算子类别标记内部（例如&）时，...
外包框处理算子用来判断算子左侧对象和算子右侧对象两者的时空外包框是否满足指定的时空关系。算子类别标记 算子类别标记目前分为三种：相交类标记：&或&包含类标记：@>被包含类标记：说明 当维度标记存在于算子类别标记内部（例如&）时，...
外包框处理算子用来判断算子左侧对象和算子右侧对象两者的时空外包框是否满足指定的时空关系。算子类别标记 算子类别标记目前分为三种：相交类标记：&或&包含类标记：@>被包含类标记：说明 当维度标记存在于算子类别标记内部（例如&）时，...
多元索引包含b,c,d，通过多元索引读取数据，支持算子下推*/支持下推的算子 算子类型 下推算子 下推限制 逻辑运算符 AND、OR 不支持NOT算子下推。关系运算符=、!BETWEEN.AND.只有数据列和常数的比较才支持算子下推，不支持数据...
zk_max_latency ZooKeeper最大请求延迟，单位：ms。zk_watch_count ZooKeeper watch的数量。zk_znode_count ZooKeeper znode的数量。zk_num_alive_connections ZooKeeper存活的连接数。zk_outstanding_requests ZooKeeper排队请求的数量。...
zk_max_latency ZooKeeper最大请求延迟，单位：ms。zk_watch_count ZooKeeper watch的数量。zk_znode_count ZooKeeper znode的数量。zk_num_alive_connections ZooKeeper存活的连接数。zk_outstanding_requests ZooKeeper排队请求的数量。...
a742-ac23f442*\",\"source\":{\"cell\":\"8b261182-bfab-4803-ad8e-6bb08e3e*\",\"port\":\"out1\"},\"target\":{\"cell\":\"b36770df-f48c-4d6b-9644-54c5e924*\",\"port\":\"in1\"},\"zIndex\":7 }]} ETL任务的算子信息。说明 当任务为...
如果您想要挂载卷的子目录（如NAS、OSS子目录），可以通过阿里云存储CSI原生支持的能力进行挂载。存储卷配额说明 部分存储类型在每个节点的挂载数量是有限制的，例如：阿里云云盘类型在一个节点上最多挂载16块数据盘。对于这样的配额限制，...
1 Lambda string 普通算子逻辑 a CheckType integer 质检维度 1 Triggers array 关注的算子 string 算子 a BranchJudge boolean 是否开启分支判断 true CheckMoreSize integer 最多检测 N 句 1 Conditions array 算子信息 ...
问题描述 图片处理算子参数格式非法。问题原因 在单个算子参数的图片处理算子中传入多个参数，参数个数不符合要求。问题示例 GET/example_image?x-oss-process=image/rotate,90,200,300 ...