各个分层的功能介绍如下：数据引入层 ODS（Operational Data Store）ODS层用于接收并处理需要存储至数据仓库系统的原始数据，其数据表的结构与原始数据所在的数据系统中的表结构一致，是数据仓库的数据准备区。ODS层对原始数据的操作具体...
背景信息 DataWorks的大部分功能（创建数据源、数据同步、数据分析、数据采集、数据服务等）均基于接入的数据源或计算资源进行相关操作，如果涉及访问的数据源不在当前DataWorks资源组绑定的VPC中（例如数据源在其他VPC或IDC中），需要根据...
背景信息 DataWorks的大部分功能（创建数据源、数据同步、数据分析、数据采集、数据服务等）均基于接入的数据源或计算资源进行相关操作，如果涉及访问的数据源不在当前DataWorks资源组绑定的VPC中（例如数据源在其他VPC或IDC中），需要根据...
系统默认为挂载至/mnt/data/，可以手动调整挂载路径。存储类型为文件存储（NAS）数据集配置：配置项 配置说明 存储类型 可选 文件存储（通用型NAS）或 文件存储（极速型NAS）内容类型 选择您注册数据的类型。此处非必选，默认为通用。导入...
停止Agent后，Agent会停止向数据库审计系统转发数据库的访问流量，并中断和数据库审计系统之间的网络连接。如果需要再次启用Agent，您需要在Agent所在服务器手动启用Agent。启动Agent 停止Agent后，如果您需要Agent再次正常运行，可以使用...
新建数据源是创建数据迁移或数据同步任务的前提。本文为您介绍如何在数据传输中新建 TiDB 数据源。安全风险提醒 使用 OceanBase 数据传输服务，您可以选择自动添加或手动添加 OceanBase 数据传输服务的公网 IP 地址段，但可能存在安全风险...
元数据中心负责从各业务系统中抽取、加工、集中存储和管理元数据，以支持数据治理，并加强组织内部数据的组织、检索和分析能力。5分钟快速了解 前提条件 默认支持关系型数据库的元数据采集，如需采集其他数据源类型，请增购对应功能。权限...
元数据中心负责从各业务系统中抽取、加工、集中存储和管理元数据，以支持数据治理，并加强组织内部数据的组织、检索和分析能力。前提条件 已经在元仓租户中完成元数据中心初始化配置，详情请参见 元数据中心设置。权限说明 仅超级管理员、...
DataWorks数据集成（Tunnel通道系列）DataWorks数据集成（即数据同步），是一个稳定高效、弹性伸缩的数据同步平台，致力于为阿里云上各类异构数据存储系统提供离线全量和实时增量的数据同步、集成、交换服务。其中数据同步任务支持的数据源...
代理连接地址的读写属性处理逻辑 读写属性 权限分配方式 主实例权重 正常情况 删除最后一个只读实例 只读实例全部故障 只读 系统分配或自定义 主实例权重不可设置 主实例：不可读不可写（不转发）代理地址：可读不可写 主实例：不可读不可...
您可在系统大盘页面，进行以下操作：采集系统诊断数据：单击 采集系统诊断数据，若当天无采集记录，则直接开始采集，您可单击 采集记录，查看采集进展和采集日志；若当前已有采集记录，您可重新采集或查看采集记录，采集记录中仅展示当天...
计算分析一体化：传统数据分析方案是定期从OLTP系统抽取数据同步到OLAP系统，有些可以做到准实时同步。该方案带来的问题是部署复杂，实时性低，数据冗余和高成本。理想情况是一套HTAP系统同时提供计算和分析。大数据与数据库一体化：早期大...
云数据库HBase是一个键值/宽表型的分布式数据库，适用于任何数据规模，可以提供单个毫秒响应的性能，尤其擅长低成本、高并发的场景，支持水平扩展到PB级存储和千万级QPS，在淘宝、支付宝、菜鸟等众多阿里巴巴核心服务中起到了关键支撑的...
为适应日趋复杂化多样化的终端设备、边缘设备、传感器以及第三方系统数据源采集、上报的异构数据，如图3所示，阿里 云原生多模数据库 Lindorm 在云端单实例融合了宽表、索引、时序等多种数据引擎能力，通过阿里云DTS/DMS或第三方开源数据...
元数据中心负责从各业务系统中抽取、加工、集中存储和管理元数据，以支持数据治理，并加强组织内部数据的组织、检索和分析能力。5分钟快速了解 前提条件 默认支持关系型数据库的元数据采集，如需采集其他数据源类型，请增购对应功能。V5.3...
新建数据源是创建数据迁移或数据同步任务的前提。本文为您介绍如何在数据传输中新建 OceanBase 数据源。安全风险提醒 使用 OceanBase 数据传输服务，您可以选择自动添加或手动添加 OceanBase 数据传输服务的公网 IP 地址段，但可能存在安全...
Lindorm是阿里云自研的云原生多模型数据库，面向海量多模型数据的低成本存储分析，构建万物互联时代的数据底座。Lindorm支持宽表模型、时序模型，提供自研的宽表引擎、时序引擎和搜索引擎，兼容HBase、Phoenix、OpenTSDB、Solr等多种开源...
数据同步费用（免费试用活动）在实例组中添加灾备实例（即从角色）时，系统会自动在主实例和灾备实例间构建单向数据同步链路，并根据地域和使用时长收取数据同步费用。数据同步费用=单向数据同步链路单价*使用时长 说明 2025年05月23日至...
背景信息 问题数据表 数据质量支持在部分规则校验不通过的情况下，系统自动创建 问题数据表 存储质量规则校验过程中发现的问题数据。问题数据表名生成规则：{监控数据表原表名}_dirtydata_dw_system_dqc。问题数据表所属空间：根据当前表所...
在数据库审计系统查看审计日志 步骤一：登录数据库审计系统 登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，选择 查询分析 审计日志。步骤二：设置查询条件 审计查询功能可以帮助您准确定位到具体操作或语句。您...
配置好数据源是创建数据迁移或数据同步任务的前提。本文为您介绍如何在数据传输中新建 RocketMQ 数据源。安全风险提醒 使用 OceanBase 数据传输服务，您可以选择自动添加或手动添加 OceanBase 数据传输服务的公网 IP 地址段，但可能存在...
索引：索引是数据库管理系统对数据库表中一个或多个列的值进行排序的数据结构，使用索引可快速访问数据库表中的特定信息。止血建议：在系统突发异常或性能故障时，优先实施的紧急处置措施，旨在快速恢复核心业务连续性，通过临时性优化或...
时序数据库（Time Series Database，TSDB）是一种专门设计用于高效存储和处理时间序列数据的数据库系统。时间序列数据是指按时间顺序排列的数据点序列，每个数据点通常包含一个时间戳和一个或多个值（度量Metrics）。这类数据广泛存在于物...
数据同步费用（免费试用活动）在实例组中添加灾备实例（即从角色）时，系统会自动在主实例和灾备实例间构建单向数据同步链路，并根据地域和使用时长收取数据同步费用。数据同步费用=单向数据同步链路单价*使用时长 说明 2025年05月23日至...
当您的数据库中有数据需要被保护时，可以使用RDS MySQL全密态数据库功能，该功能提供的加密解决方案能够在遵守数据保护法规的前提下保障您的数据安全，使被保护数据免受未授权访问。本文介绍全密态数据库的概念、应用场景和安全分级。更多...
备份集自动下载规则配置完成后，此时系统不会自动下载历史备份数据，只有在之后有新的备份数据（全量与增量）生成时，系统才会触发自动下载。（可选）下载完成后，若需要对下载的文件进行解压操作，可参考如下操作。下载文件格式为zip 以...
背景信息 Kudu提供接近于关系数据库管理系统（RDBMS）的功能和数据模型，提供类似于关系型数据库的存储结构来存储数据，允许用户以和关系型数据库相同的方式插入、更新、删除数据。Kudu仅仅是一个存储层，并不存储数据，因此需要依赖外部的...
数据引入层（ODS，Operational Data Store，又称数据基础层）：将原始数据几乎无处理地存放在数据仓库系统中，结构上与源系统基本保持一致，是数据仓库的数据准备区。这一层的主要职责是将基础数据同步、存储到MaxCompute。数据公共层（CDM...
配置数据库白名单 添加OceanBase for MySQL数据源 Quick BI 数据分析与展现 Quick BI 是一款全场景数据消费式的BI平台，秉承全场景消费数据，让业务决策触手可及的使命，通过智能的数据分析和可视化能力帮助企业构建数据分析系统。...
通过承接公交信息化和智慧化项目建设，应用先进的互联网商业模式，将”人、车、线、站“的大数据资源及相关配套资源进行商业化转换，引领行业提升公交系统的创新能力和服务水平，助力“互联网+城市公交”的提升发展。业务挑战 中国规模最大...
权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理员、板块架构师、项目管理员 系统角色创建数据源。操作步骤 在Dataphin首页的顶部菜单栏，选择 管理中心 数据源管理。在 数据源 页面，单击+新建数据源。...
背景信息 GDB创建只读实例时会利用云盘快照功能，发起最新的数据快照，数据与主实例一致，主实例的数据更新也会在主实例完成操作后立即自动同步到所有只读实例。前提条件 主实例为 高可用版，且已生成备份数据。只读实例目前仅支持内核版本...
跨地域日志备份为近实时同步，系统每2秒定时扫描主地域的本地日志（binlog）变化，并将新增日志增量上传至目标地域。但由于扫描和传输存在极短延迟，若出现极端情况（如整个地域不可用），可能无法完全恢复到最后1秒的数据。跨地域恢复到新...
MaxCompute推出DLF+OSS类型的外部Schema，通过映射DLF Legacy Catalog并配置和OSS的连接，实现...重要 删除外部数据源后，依赖此外部数据源的任务都会失去访问外部系统的权限，且一并删除此外部数据源与所有项目之间的已配置的挂载关系。
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
参数 描述 数据更新策略 新增/变更元数据 对比上一次采集，若源系统有新增、更新的数据，系统将会 添加新的元数据，更新已变更元数据；针对仪表板如果作品修改但未发布（即作品状态为“已保存未发布”），则会保留上一次采集的已发布数据不...
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
参数 描述 数据更新策略 新增/变更元数据 对比上一次采集，若源系统有新增、更新的数据，系统将会 添加新的元数据，更新已变更元数据；针对仪表板如果作品修改但未发布（即作品状态为“已保存未发布”），则会保留上一次采集的已发布数据不...
存储空间 存储空间包括数据空间、系统文件空间、日志文件空间和事务文件空间。调整存储空间时最小单位为5 GB。说明 高性能本地盘的独享套餐等规格由于资源独享的原因，存储空间大小和实例规格绑定。详情请参见 主实例规格列表。单击 下一步...
阿里云自研 故障探测切换系统（HA）：采用自研HA切换系统，实时探测主节点的异常情况，可以有效解决磁盘IO故障，CPU故障等问题导致的服务异常，及时进行主备切换，从而保证服务高可用。主备复制机制：对主备全量同步中的Fork问题进行了优化...