本文介绍如何使用累计变量的前置计算逻辑。创建自定义变量 假设现在要对单个账号大额交易的数量做累计，当大额交易超出一定数量时命中策略。大额交易的定义为“交易金额 10000”。当前已完成事件创建，事件字段包括：账户ID、订单号、交易...
例如，计算一个复杂的数学公式，或者对数据进行一些统计分析。下面是一个简单的例子，它计算了一个数组的平方差。def main(x:list)-dict:return {#注意在输出变量中声明result 'result':sum([(i-sum(x)/len(x))*2 for i in x])/len(x)} ...
相关性分析组件支持对历史数据进行相关性分析，计算出指定变量之间的相关系数，并绘制出相关图表。相关性分析是指对两个或多个具备相关性的变量元素进行分析，从而衡量两个变量因素的相关密切程度。相关性的元素之间需要存在一定的联系或者...
例如，计算一个复杂的数学公式，或者对数据进行一些统计分析。下面是一个简单的例子，它计算了一个数组的平方差。def main(x:list)-dict:return {#注意在输出变量中声明result 'result':sum([(i-sum(x)/len(x))*2 for i in x])/len(x)} ...
比如，在贷款申请场景下，往往需要处理几百个不同的字段，不同的字段之间通过一定的计算逻辑再衍生出上百个不同的变量，以便进一步刻画特征。本文介绍如何使用自定义变量功能对多个字段进行加工，从而衍生出更多变量（特征）。创建自定义...
具体公式如下：co v(X,Y)=E[(X − μ)(Y − ν)]其中：X和Y是两个随机变量。μ和ν分别是X和Y的期望值。E表示期望运算。协方差的性质 正协方差：表示两个变量呈正相关关系，即一个变量增加时，另一个变量也倾向于增加。负协方差：表示两个...
这允许 SELECT 的查询计划仅被准备一次并且被重用于之后的对于该变量不同值的计算。因此，在一个表达式第一次被使用时实际发生的本质上是一个 PREPARE 命令。例如，如果我们已经声明了两个整数变量 x 和 y，并且我们写了 IF x y THEN.在...
YAML示例模板如下：apiVersion:v1 kind:ConfigMap metadata:name:special-config namespace:default data:SPECIAL_LEVEL:very SPECIAL_TYPE:charm 使用配置项定义Pod环境变量 使用配置项的数据定义Pod环境变量 登录 容器计算服务控制台，在...
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务实时模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务实时模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务离线模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。本文为您介绍如何配置实时任务离线模式变量配置，并以Flink_SQL为例，讲解参数配置。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发...
类别 使用场景 API 代码限制 同步/异步 计算属性 数据转换 仅可读取计算属性的值 无副作用的 JavaScript 脚本 同步 变量 数据临时存储与通信 可读取或修改变量的值 初始值为表达式 同步 前端函数 编写复杂业务逻辑 可执行前端函数或读取...
DataWorks为您提供函数计算节点，允许您通过自定义代码实现不同业务需求。函数计算节点支持周期性调度，便于执行定时任务。同时，该节点能够与DataWorks其他类型节点配合使用，帮助您构建完整的数据处理流程。本文将为您介绍如何创建并使用...
DataWorks为您提供函数计算节点，允许您通过自定义代码实现不同业务需求。函数计算节点支持周期性调度，便于执行定时任务。同时，该节点能够与DataWorks其他类型节点配合使用，帮助您构建完整的数据处理流程。本文将为您介绍如何创建并使用...
计算逻辑原理 min-max归一化：将数据进行一次线性变换，将数据映射到[0,1]区间。其公式为：若x的值相同，则归一化输出0.5。Z-score归一化：经过处理后的数据符合正态分布。其公式为：若x的值相同，则归一化输出0。其中x是原始数据，min是...
通过表达式或筛选器节点解析源节点数据后，可使用相邻消息计算节点，取当前消息的某个数值字段的值（仅支持BIGINT、DOUBLE类型）与前一条消息的相同数值字段的值，按照定义的表达式进行计算，将计算的结果输出到定义的输出字段上。...
计算逻辑原理 min-max归一化：将数据进行一次线性变换，将数据映射到[0,1]区间。其公式为：Z-score归一化：经过处理后的数据符合正态分布。其公式为：说明 公式中x是原始数据，min是数据的最小值，max是数据的最大值，mean是数据的平均值，...
max 9999 无 控制变量下限 控制变量可执行范围的下限u_min-9999 小于控制变量上限 控制变量增量上限 控制变量每步变化率的上限du_max 9999 无 控制变量增量下限 控制变量每步变化率的下限du_min-9999 小于控制变量上限 设定值死区下限增量 ...
contains(foo,'hello')多个结果组合求值 语法 支持关联多个查询，在使用多个查询结果进行计算时，变量需要加上特定前缀以区分从哪个结果中获取对应的变量值，格式为$N.fieldname，其中N为查询编号，详情请参见 如何查看查询编号。...
高级：Iframe、气泡提示、步骤、时间轴、搜索、折叠面板、面包屑、进度指示器、底部通栏、轮播、树形控件、JSX。图表：折线图、柱形图、饼图、漏斗图、条形图、仪表盘、面积图、雷达图、环形图、水波图、词云。说明 您可以单击组件分组标题...
校验项 描述 实时模式 变量配置 变量配置是对计算任务代码中所用的变量进行检查，包括本地变量是否已设置、参数名称是否合法。更多信息，请参见 实时模式变量配置。离线模式 调度依赖 Dataphin通过各个节点的调度依赖配置结果，有序地运行...
校验项 描述 实时模式 变量配置 变量配置是对计算任务代码中所用的变量进行检查，包括本地变量是否已设置、参数名称是否合法。更多信息，请参见 实时模式变量配置。离线模式 调度依赖 Dataphin通过各个节点的调度依赖配置结果，有序地运行...
Flink支持作业变量和项目变量两种，区别如下：作业变量：仅支持在对应的单个作业下使用，包括ETL（SQL开发）、JAR/Python作业Main函数入参，使用格式为${变量名}，具体使用方法请参见 作业变量。项目变量：支持在该项目空间下使用，包括...
计算逻辑原理 静态模式：当参考变量和操作变量的质量码均正常时，输出信号值=参考变量信号值*比值。当操作变量的质量码正常，但参考变量的质量码异常时，输出信号值=操作变量信号值。其他情况，输出信号值=前次输出值。动态模式：当操作...
中间变量：中间变量是在策略计算时的过程变量，当某条设置了中间变量的策略命中后，中间变量会按照设置的逻辑进行计算或者输出。中间变量可以用在此事件的其他策略中。输出变量：除评分和标签外，还可以自定义输出变量，如：事件的入参、...
输出中间变量：中间变量是在策略计算时的过程变量，当某条设置了中间变量的策略命中后，中间变量会按照设置的逻辑进行计算或者输出。中间变量可以用在此事件的其他策略中。输出变量：除评分和标签外，还可以自定义输出变量，如：事件的入参...
安全性 创建或者更新环境变量时，函数计算 会对您的环境变量使用AES256（Advanced Encryption Standard 256）标准加密存储，在初始化函数实例时，会将环境变量解密后注入到函数实例环境中。使用限制 字符集规则 Key的字符集：必须以大小写...
在本地配置计算引擎的环境变量，将解压路径设置为SPARK_HOME环境变量。Windows系统配置计算引擎的环境变量步骤如下：打开本地的 系统属性 页面并单击 环境变量。在 环境变量 窗口，单击 系统变量 区域下的 新建。在 新建系统变量 窗口，...
计算逻辑原理 工艺模式建模是基于庞大的历史优质案例，每个案例具有描述变量，评价变量和推荐变量。描述变量：描述生产工况的参数，比如原料质检结果，环境温度等。评价变量：描述生产的结果，比如产品质量、生产能耗等。推荐变量：执行的...
完成规范建模相关任务开发并提交时，Dataphin系统将自动解析任务中表和字段的血缘关系及确认任务...操作执行 变量配置是对计算任务代码中所用的变量进行检查，包括本地变量是否已设置、参数名称是否合法。更多信息，请参见 离线模式变量配置。
完成规范建模相关任务开发并提交时，Dataphin系统将自动解析任务中表和字段的血缘关系及确认任务...操作执行 变量配置是对计算任务代码中所用的变量进行检查，包括本地变量是否已设置、参数名称是否合法。更多信息，请参见 离线模式变量配置。
计算巢应用日志管理功能将SLS日志服务能力集成到计算巢，支持ECS和ACK部署场景，补齐了应用可观测性能力，让用户能够一键查看日志。本文介绍如何私有化场景中配置并查看应用日志的详细操作。概述 应用日志功能的基本流程如下：创建私有部署...
配置内容安全变量进入 变量中心 变量选配 新增关联变量，选择具体的内容安全服务，系统将自动添加1个service下的4个变量。选择变量：以公聊评论服务（service：comment_detection）为例，选择 内容安全 文本审核 增强版 公聊评论。选择事件...
使用数值计算节点，您无需写代码就能实现简单的逻辑运算，例如多个设备属性值相运算、多个设备属性值之间取最大值、最小值、平均值等简单的逻辑运算操作。节点配置 在业务逻辑编辑页面的 节点 功能 列表下，拖拽 数值计算 节点到中间画布中...
变量分类说明 Dataphin中存在以下类型的变量：变量类型 描述 全局变量 在Dataphin 规划-公共定义-全局变量 中事先声明定义的变量，可以在租户内任何节点或代码中引用，系统初始内置的全局变量有${bizdate}。说明 全局变量暂不支持集成同步...
变量分类说明 Dataphin中存在以下类型的变量：变量类型 描述 全局变量 在Dataphin 规划-公共定义-全局变量 中事先声明定义的变量，可以在租户内任何节点或代码中引用，系统初始内置的全局变量有${bizdate}。说明 全局变量暂不支持集成同步...
变量配置：变量参数配置是对计算任务代码中所用的变量进行赋值，从而支持变量参数可以自动被替换为相应的变量值。配置说明，请参见 实时模式变量配置。Checkpoint配置：配置Flink SQL任务的Checkpoint，可有效的帮助当前Flink SQL任务运行...
运行参数配置是对离线管道中所涉及的变量进行赋值，以便在节点调度时，参数变量能够自动被替换为相应的变量值。本文为您介绍如何配置离线管道的运行参数。操作步骤 在Dataphin首页的顶部菜单栏中，选择 研发 数据集成。在顶部菜单栏选择 ...
运行参数配置是对离线管道中所涉及的变量进行赋值，以便在节点调度时，参数变量能够自动被替换为相应的变量值。本文为您介绍如何配置离线管道的运行参数。操作步骤 在Dataphin首页的顶部菜单栏中，选择 研发 数据集成。在顶部菜单栏选择 ...