您需要将数据库添加至DataWorks上,以便在同步任务配置时,可通过选择数据源名称来控制同步读取和写入的数据库。详情请参见 MySQL数据源、创建MaxCompute数据源。说明 数据源相关能力介绍详情请参见:数据源概述。已购买合适规格的 ...
OpenSearch中的数据,既支持通过API/SDK/上传界面的方式导入,也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据,可以参照API手册直接上传,不支持本文中的插件配置。如果选择同步云端数据的方式,则需要将数据源的...
说明 可选的字段为数据表中的字段,并且一个字段只能添加一次。指标名称 填写指标名称。字段类型 字段类型默认 string。指标类型 指标类型包括 基础属性、基础指标 和 我的指标。联通状态 联通状态包括 成功 和 失败。指标注册 中只要有...
说明 可选的字段为数据表中的字段,并且一个字段只能添加一次。指标名称 填写指标名称。字段类型 字段类型默认 string。指标类型 指标类型包括 基础属性、基础指标 和 我的指标。联通状态 联通状态包括 成功 和 失败。指标注册 中只要有...
OpenSearch中的数据,既支持通过API/SDK/上传界面的方式导入,也支持直接从已有的云数据库进行同步。如果选择通过API或SDK来上传数据,可以参照API手册直接上传,不支持本文中的插件配置。如果选择同步云端数据的方式,则需要将数据源的...
问题描述 请求头缺少用于签名认证的合法日期字段。问题原因 请求头中缺少合法的 x-oss-date 字段或者 Date 字段。问题示例 您发起了基于请求头Authorization签名的请求,但是没有通过 Date 字段或者 x-oss-date 字段提供日期参数。GET/oss....
在很多情况下,利用这个特性非常的有用,例如:将增量数据从数据库同步到其他系统 日志审计 数据库的实时物化视图 数据库表的temporal join变更历史 Flink还支持将Flink SQL中的INSERT、UPDATE或DELETE消息编码为Maxwell格式的JSON消息,...
示例如下:[{"name":"张三","age":20,"phone":"1390000*","address":[{"province":"浙江省","city":"杭州市","street":"阳光大道幸福小区1201号"}]}]使用说明 对于多元索引中嵌套类型的字段,在数据表中必须为String类型,且对应的多元索引...
如果您有对敏感数据进行管控和脱敏的需求,可以使用 数据管理DMS 的敏感数据保护功能对数据库进行扫描,识别、脱敏和管理敏感数据。背景信息 通过敏感数据保护功能,可帮助企业及时有效地发现与识别敏感数据资产,避免敏感数据滥用,有效...
说明 需要提前配置好活动数据集,如果不理解活动数据集的字段组成,可以 下载模板,按照示例换成您自己的数据。活动选项:在配置完成的选项值中选择对应的 活动名称、活动ID 字段,时间粒度 默认为年月日,筛选方式 支持选择单日或日范围。...
说明 数据源属性字段匹配规则:维度:布尔型、字符型、时间型字段。度量:数值型字段。可选:单击左上角 数据表,查看已配置数据源的所有数据信息。步骤三:配置数据展示 在 数据展示 页签,设置饼图数据展示和样式,如图所示。根据实际...
背景信息 元数据(字典)是属于数据库本身的一些数据,包含数据库名、数据库字符集、表名、表的大小、表的记录行数、表的字符集、表的字段、表的索引、表的描述、字段的类型、字段的精度、字段的描述等。所有信息均来源于 information_...
拆分原则 数据表拆分的首要原则,就是要尽可能找到数据表中的数据在业务逻辑上的主体,并确保大部分(或核心的)数据库操作都是围绕这个主体的数据进行,然后可使用该主体对应的字段作为拆分字段,进行分库分表。选择业务逻辑主体 业务逻辑...
用户在配置了 模糊搜索 分析器的情况下并不能很好的满足业务需要并出现了一下bad_case,希望通过 查询分析 可以优化解决,但是由于模糊搜索本身就是扩大召回范围,以非精确性的方式召回数据,并且系统限制了SHORT_TEXT类型的字段配置的索引...
高防在代理网站流量时,会在转发到源站的请求中添加对应的字段值,方便您后端的服务进行统计分析。请不要使用以下默认字段作为自定义Header:X-Forwarded-ClientSrcPort:默认被用于获取访问高防七层引擎的客户端端口。X-Forwarded-...
字段 说明_topic_日志主题 redis_audit_log:DB节点的审计日志 redis_proxy_audit_log:Proxy节点的审计日志 account 数据库账号名称 command 执行的Redis命令 db 数据库名称 extend_information 附加信息 instanceid Redis实例ID ip IP...
本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题,固定为rds_...instance_id 集群ID collect_time 采集时间 db_type 数据库类型,包括MySQL、PostgrepSQL。db_version 数据库版本 content 日志内容 eventType 事件类型
本文介绍RDS相关日志的字段详情。审计日志 字段名称 说明_topic_日志主题,固定为rds_...instance_id 集群ID collect_time 采集时间 db_type 数据库类型,包括MySQL、PostgrepSQL。db_version 数据库版本 content 日志内容 eventType 事件类型
简介 日历组件与日期组件类型,都可用于展示和修改外层数据容器的DATETIME类型字段。不同点在于日期组件展示为一个输入框,而日历组件展示为一个日历。属性配置 日历组件属性由以下部分组成:分类 参数 示例 说明 属性 只读 通过设置日历...
数据合并的结果中将包含全部来源节点中的指定对齐字段的所有记录。示例如下所示,假设三个输入节点分别为A、B、C,设置两个对齐条件为"A.ID=B.ID=C.ID"、"A.NAME=B.NAME=C.NAME",则多表合并默认运算结果、去重合并后的运算结果如下图右侧...
支持的数据库:关系型数据库:MySQL、SQL Server、PostgreSQL、MariaDB、Oracle、达梦数据库(DamengDB)、PolarDB PostgreSQL版(兼容Oracle)、PolarDB分布式版、OceanBase、DB2、Lindorm_CQL、Lindorm_SQL、OpenGauss。数据仓库:...
字段 说明_topic_日志主题,固定为mongo_audit_log audit_type 日志类型,例如Command coll 数据集合 db 数据库名称 docs_examined 文档扫描行数 instanceid MongoDB实例ID keys_examined 索引扫描行数 latency 消耗时间 optype 操作类别 ...
当默认字段属性不满足需要时,您可以通过导入字段标准通用信息,快速批量为设计的字段标准添加自定义属性。本文介绍如何导入字段标准通用信息。操作步骤 登录 数据资源平台控制台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击...
如果不需要将某些字段输出至下游组件,则您可以删除对应的字段:如果需要删除少量的字段,则可以单击 操作 列下的 图标,删除多余的字段。如果需要删除大批量字段,则可以单击 字段管理,在 字段管理 页面选择多个字段后,单击 图标,将 已...
如果不需要将某些字段输出至下游组件,则您可以删除对应的字段:如果需要删除少量的字段,则可以单击 操作 列下的 图标,删除多余的字段。如果需要删除大批量字段,则可以单击 字段管理,在 字段管理 页面选择多个字段后,单击 图标,将 已...
当默认字段属性不满足需要时,您可以通过导入字段标准通用信息,快速批量为设计的字段标准添加自定义属性。本文介绍如何导入字段标准通用信息。操作步骤 登录企业数据智能平台。在页面左上角,单击 图标,选择 协同。在顶部菜单栏,单击 ...
如果不需要将某些字段输出至下游组件,则您可以删除对应的字段:如果需要删除少量的字段,则可以单击 操作 列下的 图标,删除多余的字段。如果需要删除大批量字段,则可以单击 字段管理,在 字段管理 页面选择多个字段后,单击 图标,将 已...
使用限制 Hologres输入组件不支持读取Hologres数据库的视图。前提条件 已创建Hologres数据源,如何创建,请参见 创建Hologres数据源。进行Hologres输入组件属性配置的账号,需具备该数据源的同步读权限。如果没有权限,则需要申请数据源...
阿里云数据库ClickHouse创建数据表的操作,请参见 创建表;非阿里云数据库ClickHouse创建数据表的操作,请参见 ClickHouse官方文档。操作步骤 请参见 离线管道组件开发入口,进入离线单条管道脚本的开发页面。按照下图指引,进入 ...
to_tsvector TSVECTOR 固定字段 保存全文检索字段,数据来源为full_text_retrieval_fields指定的字段数据。其中content为默认字段,本调用场景表示会从content和title两个数据源做全文检索。title text Metadata定义 用户自定义。page int ...
to_tsvector TSVECTOR 固定字段 保存全文检索字段,数据来源为full_text_retrieval_fields指定的字段数据。其中content为默认字段,本调用场景表示会从content和title两个数据源做全文检索。title text Metadata定义 用户自定义。page int ...
问题描述 数据库的建表语句已经给字段加了备注名称,希望创建数据集时,可以直接用该备注名称作为字段名 解决方案 需要修改工作空间的配置信息,个人空间与群空间配置入口不一样。要确认数据集是在哪个工作空间创建的,然后进入相应工作...
IBM DB2输出组件用于向IBM DB2数据源写入数据。同步其他数据源的数据至IBM DB2数据源的场景中,完成源数据的信息配置后,需要配置IBM DB2输出组件的目标数据源。本文为您介绍如何配置IBM DB2输出组件。前提条件 已创建IBM DB2数据源。更多...
IBM DB2输出组件用于向IBM DB2数据源写入数据。同步其他数据源的数据至IBM DB2数据源的场景中,完成源数据的信息配置后,需要配置IBM DB2输出组件的目标数据源。本文为您介绍如何配置IBM DB2输出组件。前提条件 已创建IBM DB2数据源。更多...
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务,实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前支持:华东1(杭州)、华东2(上海)、华北1(青岛)、华北2(北京)、华北3(张家口...
使用限制 Hologres输入组件不支持读取Hologres数据库的视图。前提条件 已创建Hologres数据源,如何创建,请参见 创建Hologres数据源。进行Hologres输入组件属性配置的账号,需具备该数据源的同步读权限。如果没有权限,则需要申请数据源...
比如为了满足服务的持续可用性,当前步骤写数据执行前先创建目标表Target_A,执行写入到目标表Target_A,当前步骤写数据执行完成后,对数据库中持续提供服务的表Service_B重命名成Temp_C,然后将表Target_A重命名为Service_B,最后删除Temp...
功能介绍 云原生数据仓库AnalyticDB MySQL版 在创建表时,默认为所有的字段创建了索引,使数据过滤的效率更高。然而在某些场景中,使用索引过滤数据不一定能得到较好的性能,甚至会影响整体性能。此时不建议继续使用索引进行数据过滤。虽然...
在时序数据库的高级应用中,如需对数据进行多维度查询和过滤,添加作为主键的数据字段可以加速查询效率,特别是在处理海量数据时,能够更精确地定位到感兴趣的时序数据。多租户时序数据管理。在为多个客户提供时序数据存储服务时,可能需要...
配置Doris输出组件,可以将外部数据库中读取的数据写入到Doris,或从大数据平台对接的存储系统中将数据复制推送至Doris,进行数据整合和再加工。本文为您介绍如何配置Doris输出组件。前提条件 已创建Doris数据源。具体操作,请参见 新建...