本文以Excel为例，介绍如何通过Kettle将本地Excel数据导入至 云原生数据仓库 AnalyticDB MySQL 版 数仓版。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件，主要用于数据整合、转换和迁移。Kettle不仅支持各类关系型数据库和NoSQL数据...
MaxCompute支持您通过ETL工具Kettle实现MaxCompute作业调度。您可以通过拖拽控件的方式，方便地定义数据传输的拓扑结构。本文为您介绍如何通过MaxCompute JDBC驱动，连接Kettle和MaxCompute项目并调度作业。背景信息 Kettle是一款开源的ETL...
日志服务支持您进行字段设置，从而提升一键式交互查询体验，帮助您快速分析某一字段在指定时间内的分布情况。前提条件 已开启对应字段的索引和统计功能。具体操作，请参见 创建索引。例如，访问日志中存在 request_method 和 request_time ...
坐席挂机 AgentRelease 同上 2.0新增 话后处理 AgentACW 公共字段 坐席公共字段 话务ID(contactId)2.0删除事件 坐席小休 AgentBreak 公共字段 坐席公共字段 breakReason breakCode AgentBreak 公共字段 坐席公共字段 小休事件代码...
创建字段 管理员可前往 扩展字段 页面，单击 创建字段 按钮，弹出字段的创建表单。需要填写的内容说明如下：字段 说明 是否支持编辑 字段显示名称 字段的显示名称。可编辑。字段标识 字段的唯一标识，只允许英文小写字母和下划线，不能以下...
查看字段信息 单击字段，将为您打开字段详情页面，字段详情页面展示当前字段的数据位置信息、敏感字段类型，以及上、下游关联字段列表、字段之间的关联关系（例如，SELECT、SELECT_CONCAT、SELECT_REPEAT等关系）等。对于识别结果不准确的...
② 字段列表 字段列表为您展示字段的 序号、字段名称、数据类型、字段说明、字段标准、数据分类、数据分级 等字段的详细信息。序号：表字段序号。每新增1个字段，自增+1。字段名称：表字段名称。您可输入字段名称或中文关键词，将自动匹配...
② 字段列表 字段列表为您展示字段的 序号、字段名称、数据类型、字段说明、字段标准、数据分类、数据分级 等字段的详细信息。序号：表字段序号。每新增1个字段，自增+1。字段名称：表字段名称。您可输入字段名称或中文关键词，将自动匹配...
复制字段 针对已有字段，复制一个 字段表达式 和 字段类型 相同的字段，方便您快速创建同类型字段，提高数据准备的效率。删除字段 针对多余字段，完成数据的清洗加工。查看数据详情。支持查看 数据探查、数据详情 和 字段列表。聚合 根据...
Web应用防火墙（Web Application Firewall，简称WAF）开通日志服务后，支持您对投递的日志字段进行默认配置和防护对象级别的自定义配置，本文将介绍如何使用默认字段配置和防护对象级字段配置，满足您业务对于防护对象的防护日志灵活、统一...
本文介绍字段操作函数的语法规则，包括参数解释、函数示例等。函数列表 函数 说明 v 获得日志特定字段的值。当同时传入多个字段名时，返回日志中第一个存在的字段的值。支持和其他函数组合使用。相关示例，请参见 调用函数清洗数据。e_set ...
本文介绍如何在决策引擎中创建字段。背景信息 什么是字段？字段 指某个业务场景下可用于风控策略的数据，是决策引擎的入参。例如，在账户注册、登录场景中，通常会用手机号、ip、设备信息等；交易、支付场景中，会用到订单信息、支付信息、...
手动 新增字段，指的是当无法顺利获取上游字段取值时，也没有通过单击JSON文本编辑按钮手动上传字段JSON内容情况下手动定义固定字段解析规则，通过手动编辑取值内容的方式，来获取JSON内容，手动新增的详细参数如下：参数 说明 字段名 解析...
当某些字段值不能透出给用户时，您可以通过配置 数据集 的 列级权限，对手机号、身份证等敏感字段设置 禁止查看 或 数据脱敏。权限规则设置后，该用户只能查看规则范围内的字段值，从而保证数据安全。本文为您介绍数据集层面行列权限的设置...
支持的聚合类型：求和（仅支持数字字段）计数 去重计数 最大值 最小值 平均值（仅支持数字字段）配置字段数据排序样式 单击某一参数字段右侧的 图标，在弹出的字段样式菜单栏中，自定义选择当前参数映射字段数据的排序方式，系统默认选择 ...
每个识别字段包含字段名、Value值、字段类型等必选项，每个表格包括表头字段、识别列字段、列名、表头值、字段类型等必选项，以及高级配置作为可选项。字段名：识别字段对外透出的名称，即API接口中对应的名称，且字段名需全局唯一。Value...
配置日期累计示例 维度包含1个日期字段 维度包含日期字段（日粒度）维度包含日期字段（月粒度）维度包含日期字段（季粒度）维度包含日期字段（年粒度）维度包含多个日期字段 维度包含日期字段（日粒度）下面以交叉表为例配置日期累计。...
字段选择转换组件适用于将上游输入的字段进行选择性保留一部分、对字段重命名、修改数据类型和调整输出字段的顺序。本文为您介绍如何配置字段选择转换组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照...
您在创建索引时，可将字段的数据类型设置为text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启...
字段选择转换组件适用于将上游输入的字段进行选择性保留一部分、对字段重命名、修改数据类型和调整输出字段的顺序。本文为您介绍如何配置字段选择转换组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的开发页面。按照...
列字段配置 新建列字段 字段名称：配置为业务数据中实际的字段名称，且后续需要基于该字段创建服务单元。支持多层嵌套，使用点（.）分隔。字段类型：根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...
列字段配置 新建列字段 字段名称：配置为业务数据中实际的字段名称，且后续需要基于该字段创建服务单元。支持多层嵌套，使用点（.）分隔。字段类型：根据业务数据的字段类型选择对应的字段类型。支持选择的字段类型包括Double、Float、...
字段计算转换组件支持将输入字段进行相关计算后并输出。本文为您介绍如何配置字段计算转换组件。配置属性 请参见 离线管道组件开发入口，进入离线管道脚本的开发页面。按照以下操作指引，进入 字段计算配置 对话框。单击 组件库-单击 转换-...
字段计算转换组件支持将输入字段进行相关计算后并输出。本文为您介绍如何配置字段计算转换组件。配置属性 请参见 离线管道组件开发入口，进入离线管道脚本的开发页面。按照以下操作指引，进入 字段计算配置 对话框。单击 组件库-单击 转换-...
以下为表达式的常见用法：使用字段范围之外的字段：钉钉用户岗位：idpUser.title 钉钉用户办公地点：idpUser.work_place 钉钉部门负责人：idpOrganizationalUnit.org_dept_owner 钉钉的全部字段请参考《钉钉用户字段》、《钉钉部门字段》。...
如果您需要自定义HTTP头字段，并希望通过ALB监听的附加HTTP头字段实现部分特定功能，您可以通过本文查看ALB支持的附加头字段及如何添加附加HTTP头字段。ALB支持的附加头字段 HTTP头字段是指在超文本传输协议（HTTP）的请求和响应消息中的...
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
每个识别字段包含字段名、Value值、字段类型等必选项，每个表格包括表头字段、识别列字段、列名、表头值、字段类型等必选项，以及高级配置作为可选项。字段名：识别字段对外透出的名称，即API接口中对应的名称，且字段名需全局唯一。Value...
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
例如："name":"user_id","type":"String"表示把字段名为user_id的字段引入，设置字段类型为String。以TEXT格式批量配置，示例如下：0,cf1a,String 1,cf1b,String 行分隔符用于分隔每个字段的信息，默认为换行符（），可支持换行符（）、...
例如："name":"user_id","type":"String"表示把字段名为user_id的字段引入，设置字段类型为String。以TEXT格式批量配置，示例如下：0,cf1a,String 1,cf1b,String 行分隔符用于分隔每个字段的信息，默认为换行符（），可支持换行符（）、...
动作配置 选择数据源：获取Host数据源-excel 匹配更新模式：ip（匹配Excel中列名）等于 ip（对应Excel中列值）填充到字段：$.hostName（Excel查询返回结果得到的列名）填充到 hostname 替换内容 查找并替换指定字段中的字段内容，可以正则...
拆分字段即分库/分表字段，是在水平拆分过程中用于生成拆分规则的数据表字段。数据访问代理会根据拆分字段的值将数据表水平拆分到每个物理库实例上的物理分库/分表中。拆分原则 数据表拆分的首要原则，就是要尽可能找到数据表中的数据在...
③ 字段列表 字段列表为您展示字段的 序号、字段名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 等字段的详细信息。序号：表字段序号。每新增1个字段，自增+1。字段名称：表字段名称。您可...
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
字段另一个用法就是需要与数据源的字段进行映射，因为字段是OpenSearch里定义的，所以如果需要通过数据源导入数据到OpenSearch的话，就需要将数据源的字段与OpenSearch的字段做映射（类型匹配，字段名称与内容对应）。温馨提示：这里的对...
④ 字段列表 字段列表为您展示字段的 序号、字段名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 等字段的详细信息。序号：表字段序号。每新增1个字段，自增+1。字段名称：表字段名称。您可...
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
③ 字段列表 字段列表为您展示字段的 序号、字段名称、说明、数据类型、字段类别、关联维度、字段标准、字段约束、数据分类、数据分级 及 备注 等字段的详细信息。序号：表字段序号。每新增1个字段，自增+1。字段名称：表字段名称。您可...
选择合适的字段类型以提升字段识别效果，支持选择通用字段或用户自行添加自定义字段。无需后处理选择[常规]字段类型即可。如需内容替换或设置多行连接符的情况可通过配置高级配置完成。高级配置中正则表达式支持用户通过字符串定义替换前和...