您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，OceanBase 数据库 Oracle 租户允许执行修改一列是经过类型映射后的结果。本文表格中，短横线（-）表示没有、...
概述 本文主要介绍Quick BI能否基于数据集新建字段再创建新字段。详细信息 Quick BI不能基于数据集新创建的字段再创建新字段。可以使用数据库中的字段使用多个函数来创建新字段达到想要的结果。适用于 Quick BI
产品名称 Quick BI 产品模块 数据集 概述 本文向您介绍数据集添加计算字段时，嵌套其他计算字段的方法。问题描述 已经添加了一个计算字段（毛利率字段），另一个计算字段需要用到该计算字段，但是无法选择到这个字段 问题原因 已创建的计算...
使用BI分析模式配置组件数据是一个全新的数据配置功能，需要与您准备的数据集内容相结合，您可以使用BI分析模式，为组件自由分配所需数据集的字段内容，合理配置图表数据映射和其他数据筛选等功能。本文介绍BI分析模式下组件数据配置面板...
批量删除字段场景：按照下图操指引，删除多个字段。映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行映射。适用场景说明如下：同名映射：对字段名称相同的字段进行映射。如下图所示，选择...
DataWorks数据建模支持在建模前规划制定数据标准，或在建模...创建好字段标准后，后续在建模过程中涉及到会员ID这个字段的设置时，即可直接关联此标准，以此来保障所有会员ID字段的标准统一。DataWorks中字段标准的创建操作请参见 字段标准。
在列表底部选择 批量修改>目标表字段赋值 为上述步骤中添加的三个字段分别赋值为变量 DATASOURCE_NAME_SRC、DB_NAME_SRC、TABLE_NAME_SRC。说明 在赋值时支持赋值常量与变量，您可通过 图标切换赋值模式。配置DML规则 数据集成提供默认DML...
脏数据实时场景分析：场景一：报错现象：{"message":"写入 ODPS 目的表时遇到了脏数据:第[3]个字段的数据出现错误，请检查该数据并作出修改或者您可以增大阈值，忽略这条记录.","record":[{"byteSize":0,"index":0,"type":"DATE"},{...
字段是指某一个事物的一个特征，或者说是属性。本文为您介绍如何通过DDM管理字段。创建字段 主键是指唯一标识的一条记录，不能重复，不允许为空。表中，中央横线的上方创建的字段就是主键字段，字段前会有一个红色的标志。外键是指一个表的...
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
批量删除字段场景：按照下图操指引，删除多个字段。映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行映射。适用场景说明如下：同名映射：对字段名称相同的字段进行映射。如下图所示，选择...
专业版支持MaxCompute、MySQL、Oracle、AnalyticDB for MySQL 3.0和SqlServer跨源跨数据库进行表关联，其他版本暂不支持。MaxCompute数据源同步表结构是否有延迟？大约会延迟15分钟。如何在数据集中添加已删除的维度或度量？可在数据集编辑...
单表字段统计值一致性比较 用于对同一表两个字段进行统计数据的对比，如求和值、最大值等。单字段业务逻辑一致性比较 用于对同一表多个字段的复杂业务逻辑是否正确进行校验。两表字段值一致性比较 用于对不同表两个字段原值进行数据的对比...
单表字段统计值一致性比较 用于对同一表两个字段进行统计数据的对比，如求和值、最大值等。单字段业务逻辑一致性比较 用于对同一表多个字段的复杂业务逻辑是否正确进行校验。两表字段值一致性比较 用于对不同表两个字段原值进行数据的对比...
在 批量编辑目标表附加字段 弹窗，单击 新增字段，新增src_datasource、src_database和src_table三个字段。并为字段赋值。说明 数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据...
可以用对应的日期函数看下，ODPS数据库可以使用datediff函数，具体的函数跟对应的数据库有关。维度值时间是否支持显示“yyyy-mm-dd hh:mi:ss”数据格式？如果您需要将时间在同一个字段中显示，将此字段转换为文本类型即可。是否支持行总计...
示例 日志服务数据加工日志中 etl_context 字段值和 progress 字段值都为map类型，您可以使用map_concat函数将这两个字段值合并为一个Map。字段示例 etl_context:{ project:"datalab-148*6461-...
问题描述 原数据表里增加了几个字段，但是已创建的数据集没有展示出来，是否需要新建数据集？解决方案 原表里增加了字段，已创建数据集不需要重新做，只需要把新增字段添加进来即可：进入数据集编辑页面，点击左上方表名称 在右侧弹出的...
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库...
示例 {"connector":"-","sources":"id,title"} 结构 字段 类型 描述 connector String 连接符 sources String 指定的多个字段 HTMLTagRemover 剔除来源字段中的HTML标签，剔除标签后的内容复制到当前字段，源字段配置为当前字段则做内容...
示例 {"connector":"-","sources":"id,title"} 结构 字段 类型 描述 connector String 连接符 sources String 指定的多个字段 HTMLTagRemover 剔除来源字段中的HTML标签，剔除标签后的内容复制到当前字段，源字段配置为当前字段则做内容...
本文为您介绍 Oracle 数据库和 OceanBase 数据库 Oracle 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY DDL 对该列进行字段长度的修改操作，Oracle 数据库和 ...
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
概述 本文主要解决Quick ...原因是多个字段进行排序，该字段不是第一个排序字段，导致该字段看不是按顺序排序的，可以将其他排序字段去掉，或者后添加其他排序字段。适用于 Quick BI 说明：本文是基于Quick BI公共云专业版4.2.3版本进行验证。
参数说明 AND算法组件的 IN1/IN2/IN3/IN4端口-输入参数 参数名 描述 默认值 范围 可用字段 上级组件的输出字段均会在此列出，可选多个字段。无 无 已选字段 已选字段均会在此列出。无 无 AND算法组件的 OUT端口-输出参数 参数名 描述 out ...
参数说明 OR算法组件的 IN1/IN2/IN3/IN4端口-输入参数 参数名 描述 默认值 范围 可用字段 上级组件的输出字段均会在此列出，可选多个字段。无 无 已选字段 已选字段均会在此列出。无 无 OR算法组件的 OUT端口-输出参数 参数名 描述 out 所...
介绍 DataV数据集支持多种数据源的接入，如数据库、Excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分和地理信息处理等。创建 登录 DataV...
前提条件 已通过上传或者连接数据库完成数据集的创建。操作步骤 输入账户和密码，登录 可视分析创作间。在左侧导航栏，单击分析图标，进入 分析 页面。选择需要探查的数据集，单击 探索，进入卡片推荐页面。单击页面右上角的修改图标，设置...
解决方案 根据报错提示的字段名称，或者批量排查（报错信息一次只报一个字段名称），找到已经不存在的字段（可能数据库里更新了表结构，也可能修改过建数据集的SQL，导致该字段被删除，或者改了其他名字），删除该字段，然后保存后再预览...
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
如果需要删除大批量字段，则可以单击 字段管理，在 字段管理 页面选择多个字段后，单击 图标，将 已选的输入字段 移入到 未选的输入字段。映射关系 映射关系用于将源表的输入字段和目标表的输出字段映射起来。映射关系包括同名映射和同行...
概述 本文主要介绍建表选取字段时，快速选取全部字段的方法。详细信息 在建表选取字段时，一个一个去点效率会很慢，如何快速选取全部字段？方法如下：点击维度或度量的第一个字段，然后滑动到维度或度量的底部，按住键盘Shift键，点击维度...
RFC_READ_TABLE是SAP系统自带的RFC函数，用于读取SAP数据库表的结构和数据。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动生成步骤名称，您也可以根据业务场景修改。不超过64字符。数据源 可选取Dataphin中所有SAP Table...
RFC_READ_TABLE是SAP系统自带的RFC函数，用于读取SAP数据库表的结构和数据。参数 描述 步骤名称 即SAP Table输入组件的名称。Dataphin自动生成步骤名称，您也可以根据业务场景修改。不超过64字符。数据源 可选取Dataphin中所有SAP Table...
调整字段位置 当数据接口中添加了多个字段信息行后，您可以单击字段行最左侧的 图标，并拖动字段行即可调整各字段行之间的上下排列顺序。删除字段 单击字段行右侧的 图标，即可删除字段内容。说明 当您删除完列表内所有字段后，您可以单击...
每新增1个字段，自增+1。字段名称：表字段名称。您可输入字段名称或中文关键词，将自动匹配标准预置的字段名。说明：表字段说明信息，仅限填写512字符以内。数据类型：支持 string、bigint、double、timestamp、decimal、文本、数值、日期...
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...
每新增1个字段，自增+1。字段名称：表字段名称。您可输入字段名称或中文关键词，将自动匹配标准预置的字段名。说明：表字段说明信息，仅限填写512字符以内。数据类型：支持 string、bigint、double、timestamp、decimal、文本、数值、日期...
同步其他数据源的数据至MaxCompute数据源的场景中，完成源数据源的信息配置后，需要配置MaxCompute输出组件写入数据到目标数据源。本文为您介绍如何配置MaxCompute输出组件。操作步骤 请参见 离线管道组件开发入口，进入离线单条管道脚本的...