样例数据 自动从Kafka Topic中获取的最新数据作为样例数据。说明 Kafka Topic中的数据需为JSON格式，若存在其他格式的数据，数据同步时会报错。JSON解析层级 设置JSON的嵌套解析层数，取值说明：0：不做解析。1（默认值）：解析一层。2：...
分区表是指拥有分区空间的表，即将表数据按照某个列或多个列进行划分，从而使表中的数据分散存储...自动分区表（AUTO PARTITION）示例 有关自动分区表的示例介绍，请参见以下文档：基于时间计算函数的自动分区表 基于数据写入时间的自动分区表
下游会根据字段血缘关系自动继承直接上游字段的敏感等级，同时根据默认脱敏规则的配置，以实现对新增数据的自动保护，减少手动配置成本，也能更大程度上保证关联数据识别结果一致性和相关性。继承规则 当继承结果仅有一个时，支持选择 继承...
数据服务提供了计量大屏功能，您可以通过该功能查看各类可视化图表和统计数据，包括工作空间下的API总数、总调用次数以及总执行时长用量等信息，帮助您全面了解API的调用情况。同时，您也可以针对单个API查看监控图表，获取API网关状态码、...
业务分类、数据域与数据集市构成业务驱动的管理框架，通过划分数据归属领域（业务分类）、定义核心业务活动（数据域）、组织场景化数据服务（数据集市），实现从数据生产到消费的价值闭环。本文介绍 业务分类、数据域、业务过程、数据集市 ...
将数据库接入数据库审计系统后，您可以通过云盾数据库审计系统，查看系统审计到的SQL语句。本文为您介绍如何查看数据库审计系统审计到的SQL语句。操作步骤 登录 云盾数据库审计管理控制台。在左侧导航栏，单击 A100实例。在 A100实例 页面...
统计说明 实例统计功能统计的数据为 生产环境 的实例数据。对于逻辑表实例，统计的是逻辑表对应的实际物化实例的数量，可能与明细及汇总表列表中展示的实例数不同。实例统计入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发...
统计说明 实例统计功能统计的数据为 生产环境 的实例数据。对于逻辑表实例，统计的是逻辑表对应的实际物化实例的数量，可能与明细及汇总表列表中展示的实例数不同。实例统计入口 在Dataphin首页，单击顶部菜单栏的 研发。默认进入数据 开发...
本地备份是系统自动对表数据被删除或修改时备份数据的历史版本，这些数据版本会保留一定时间，并支持对保留周期内的数据进行快速恢复。备份数据默认免费保留1天时间，可设置保留周期大于1天。物化视图（Materialized View）是一种对预计算...
在排查云数据库 Tair（兼容 Redis）数据库实例的故障和性能降低的原因时，您可以通过时延洞察功能，对数据库所有命令以及自定义特殊事件进行时延统计，得到精确到微秒级别的延迟时间，从事件、时间、时延三个维度对实例进行分析，快速定位...
CloudDBA的时延洞察功能可以对 云数据库 Tair（兼容 Redis）数据库所有命令以及自定义特殊事件进行时延统计，并给出精确到微秒级别的延迟时间。您可以通过该功能排查 云数据库 Tair（兼容 Redis）数据库的故障和性能降低的原因。功能简介 ...
④ 数据探查 若您开通了数据质量功能，可以为数据表配置数据探查任务，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，详情请参见 新建数据探查任务。...
存储概览展示了截至前一天（T-1）的数据，主要包括 存储和元数据对象的基本信息、存储趋势、存储归档分布、表格式分布以及大小文件分布等信息，帮助您快速了解当前存储资源使用情况及潜在问题，从而采取措施进行优化。前提条件 已经开通OSS...
字段信息：包括字段详情（字段后若有 钥匙 图标，该字段为主键字段）、描述、数据类型、关联标准（需购买数据标准模块）、样例数据（仅开启 数据采样 功能时展示）、数据分类（需购买安全模块）、数据分级（需购买安全模块）、热度信息。...
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
注意事项 SQL洞察功能中分析和统计数据（不包括SQL明细数据）的存储时长为30天。SQL洞察功能中SQL明细数据的存储时长与DAS 企业版 设置的存储时长一致。关闭SQL洞察和审计功能后，不会对业务产生影响，但是SQL洞察和审计的所有存储数据会被...
当数据库出现慢SQL或SQL的执行效率对应用程序的运行效率产生较大影响时，您需要对SQL进行优化。数据库自治服务DAS支持自动SQL优化...GetInstanceSqlOptimizeStatistic 获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。
技术属性：为您展示指标类型、资产来源、所属汇总表、所属数据板块、业务限定、原子指标、统计粒度、统计周期、数据类型、度量单位、是否可累加信息。所属汇总表：为您展示所属表的名称，若您有该表的查看权限，可单击表名称跳转至资产目录...
技术属性：为您展示指标类型、资产来源、所属汇总表、所属数据板块、业务限定、原子指标、统计粒度、统计周期、数据类型、度量单位、是否可累加信息。所属汇总表：为您展示所属表的名称，若您有该表的查看权限，可单击表名称跳转至资产目录...
识别特征基于字段的数据内容、元数据属性，结合正则表达式、包含、不包含等运算条件对数据特征进行表达，从而智能推荐相关的数据分类分级或数据标准。Dataphin内置了多种识别特征表达式，如手机号、身份证号等。此外，您也可以自定义识别...
采集任务通过采集适配器连接到指定的数据源，将源数据库中的对象元数据信息采集至Dataphin，通过内置解析器进行解析后存储并进行统一呈现。本文为您介绍如何创建及管理元数据采集任务。前提条件 需先在 管理中心 数据源管理 应用系统 创建...
应用与数据库的连接被称为会话。通过会话管理功能，您可以查看租户会话、会话统计和死锁检测。查看租户会话 在 租户会话 页签：说明 代理会话 ID 是数据库代理服务器记录的会话 ID。数据库会话 ID 是 OceanBase 服务器记录的会话 ID，用来...
2022-12-05 实例画像 2022年11月 引擎 功能名称 功能描述 发布时间 相关文档 RDS MySQL、PolarDB MySQL版 自动SQL优化 新增自动SQL优化的API接口，用于获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。2022-11-29 ...
调用GetInstanceSqlOptimizeStatistic接口，获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。接口说明 使用该接口需满足以下前提条件：使用阿里云或 DAS 的 SDK 时，建议使用最新版本。使用 SDK 调用 DAS 服务时，...
数据自动多重冗余备份。动态伸缩 每个主题（Topic）的数据流吞吐能力可以动态扩展和减少，最高可达到每主题 256000 Records/s 的吞吐量。高安全性 提供企业级多层次安全防护，多用户资源隔离机制。提供多种鉴权和授权机制及白名单、主子...
通过OneData（OneModel、OneID、OneService）方法论体系，可以完成模型和指标的抽象与自助定义、代码自动化生产、主题数据自动聚合并输出服务。降低成本：以元数据为基础、算法智能为驱动，实现物理和逻辑分层的智能自动化生产。同时，分析...
本文为您介绍DataWorks中，数据集成、数据建模、数据开发、数据分析、数据服务等模块开发过程中涉及的相关基本概念。通用概念 工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间管理员可以为工作空间加入...
公司主营OpenRIS灾害风险大数据平台提供了海量灾害数据的快速地图展示、统计查询、切割下载、上传数据定制化在线分析等功能，实现了灾害数据与模型一体化云服务。在数据与系统上云过程前，遇到了如下挑战：长期积累的时空数据类型多、数据...
pg_profile 是 PolarDB PostgreSQL版（兼容Oracle）支持的一款第三方插件，能够统计目标数据库中资源密集型活动，来分析和优化数据库。此扩展基于PostgreSQL的统计视图和部分社区插件，完全由PL/pgSQL编写，无需任何外部库或软件。配合 pg_...
pg_profile 是 PolarDB PostgreSQL版 支持的一款第三方插件，能够统计目标数据库中资源密集型活动，来分析和优化数据库。此扩展基于PostgreSQL的统计视图和部分社区插件，完全由PL/pgSQL编写，无需任何外部库或软件。配合 pg_cron 插件可以...
通过识别规则模板可以使敏感数据自动符合合规要求。数据安全中心提供的内置识别模板，请参见 支持识别的行业模板。2024年 模板名称 新增记录 发布时间 通用识别模板 新增6条识别特征、新增5条识别模型。2024.07 金融行业分类分级模板 新增1...
RDS PostgreSQL支持使用pg_profile插件来统计数据库中资源密集型活动，用于分析优化数据库。您可以加入RDS PostgreSQL插件交流钉钉群（103525002795），进行咨询、交流和反馈，获取更多关于插件的信息。插件简介 此扩展基于PostgreSQL的...
auto_analyze_table_width_threshold 70 控制自动统计信息收集处理的最大表宽度，列数大于该值的表不会参与自动统计信息收集。FE配置项 如下FE配置项与统计信息有关，通常情况下无需关注。FE配置项 默认值 说明 analyze_record_limit 20000...
数据资产：数据资源平台中存在大量的数据表、标签、API等各类数据资产，数据管理者通过数据汇聚、数据治理、数据分析后，需要对整个平台数据进行统一管控，了解平台的核心数据资产，提供对应的数据资产管理规范。统一服务 应用：是调用API...
为了加强对 PolarDB PostgreSQL版 中敏感列数据的保护，防止非授权人员通过云平台软件或数据库连接工具直接访问敏感数据的明文信息，您可以利用 数据安全中心DSC（Data Security Center）提供的列加密功能。该功能能够在确保数据在数据库内...
StarRocks兼容MySQL协议语法，可以使用现有的各种客户端工具、BI软件访问StarRocks，对StarRocks中的数据进行拖拽式分析。流批一体 StarRocks支持实时和批量两种数据导入方式。StarRocks支持的数据源有Kafka、HDFS和本地文件。StarRocks...
读Lindorm数据 2023年6月 类别 名称 说明 相关文档 新增 资源总览和作业使用统计 湖仓版 支持查看以下资源使用情况：集群级别的计算资源和存储资源，包括预留资源和弹性资源。资源组级别的总计算资源、计算预留资源、计算最大资源。作业...
您通过控制台查看或修改RDS SQL Server数据库的各类属性，也可以手动收缩数据库事务日志和更新数据库统计信息，以优化数据库性能和提高查询效率。前提条件 已 创建数据库。查看或修改数据库属性 注意事项 部分修改数据库属性的操作会导致该...
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小、分区文件数、分区最后更新时间等...