模块组合：实现方式：数据地图：分析师首先通过 数据地图 搜索关键字（如“GMV”、“活跃用户”），找到相关的指标和数据表。通过查看表的元数据和血缘关系，确认数据是否符合分析需求。安全中心：通过数据访问控制、分级分类、数据脱敏等...
安全性 OceanBase 数据库在调研了大量企业对于数据库软件的安全需求，并参考了各种安全标准之后，实现了企业需要的绝大部分安全功能，支持完备的权限与角色体系，支持 SSL、数据透明加密、审计、Label Security、IP 白名单等功能，并通过了...
数据开发更简单：平台提供的各种工具产品能够极大的简化数据开发过程，缩短数据治理周期，降低数据治理成本。通过标准化、精细化、规格化的智能数据生产流程，完成流水线式的数据生产作业，提升数据资源生产效率、消除数据供应品质差异。...
什么是AnalyticDB AnalyticDB是阿里云自研的云原生实时数据仓库，支持从OLTP数据库和日志文件中实时写入数据，并秒级完成PB级数据分析。AnalyticDB采用云原生存算分离的架构，存储按量付费，计算弹性伸缩，同时具备离线处理与在线分析资源...
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
业务相关的时序数据主要包括：QPS、查询RT、QueueTime、PlanningTime查询失败率等查询相关的时序指标，以及TPS、索引build任务个数、写入RT等数据写入相关时序指标。计算节点的主要时序指标包括CPU使用率等相关信息。存储节点相关的时序...
本文为您介绍数据集相关的管理操作。在Dataphin顶部菜单栏中，选择 标签 标签工作台。在左侧导航栏中，选择 数据准备 离线数据集。离线数据集 页面分别展示离线数据集列表，列表中包含 数据集名称、加工方式、更新方式、负责人、数据集状态...
本文为您介绍数据集相关的管理操作。在Dataphin顶部菜单栏中，选择 标签 标签工作台。在左侧导航栏中，选择 数据准备 离线数据集 或 实时数据集。离线数据集、实时数据集 页面分别展示离线数据集列表 和实时数据集列表，列表中包含 数据集...
背景信息 在海量数据场景下，传统数据库备份服务面临两大越来越严重的困难：存储成本：为了保障数据恢复点目标（Recovery Point Objective，RPO），周期性的全量和增量备份产生大量重复数据，导致存储成本过高。使用成本：您必须待数据完成...
本文介绍数据安全相关的常见问题。DSC 是否会保存您的数据和文件？数据安全中心 DSC（Data Security Center）不会保存您的数据和文件。在您授权访问数据源后，DSC 会对数据进行扫描，并仅将扫描的分析结果展示在 数据安全中心 DSC（Data ...
背景信息 企业依赖大数据平台快速地从海量数据中获得洞察从而更及时和有效地决策的同时，也对处理数据的新鲜度和处理本身的实时性要求越来越高。大数据平台普遍采用离线、实时、流三种引擎组合的方式以满足用户实时性和高性价比的需求。...
解决方案 数据归档 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至 AnalyticDB for MySQL 数据库中。数据库迁移 通过创建...
为满足多样化的数据导入需求，AnalyticDB for MySQL 提供了多种数据导入方式，包括：通过外表导入数据、通过DataWorks导入数据、通过DTS导入数据以及使用JDBC通过程序导入数据等。您可以通过本文了解各导入方式的特性及适用场景，帮助您...
有关创建数据库网关的信息，请参见 新建数据库网关。进入控制台，单击左侧导航栏中的 网关列表，进入 网关列表 页面，然后单击运行中的某个网关，在弹出的对话框中单击 添加数据库 按钮。进入控制台，单击左侧导航栏中的 数据库信息，进入 ...
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将符合筛选条件的表数据归档至其他数据库或存储服务中。...
解决方案 数据归档 数据归档功能支持定时将大表的数据归档至其他数据库，同时支持源表数据删除、表空间整理回收等。一键建仓 一键创建实时同步的数据仓库，数据在秒级的延迟下，同步至 AnalyticDB for MySQL 数据库中。数据库迁移 通过创建...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。核心能力 ...
步骤四：一键创建 通过复制DMS ChatBI数据助手应用模板，并开通相关的MCP服务，便于数据助手查询托管至DMS的数据库实例的数据。在DMS ChatBI数据助手页面，单击 复制此应用。系统将会检测您是否已开通相关MCP服务。说明 开通dms-mcp时，...
数据归档 数据归档功能定时将大表的数据归档至其他数据库，支持源表数据删除、表空间整理回收等功能。数据库迁移 通过创建工单实现数据库迁移、校验和清理的闭环操作。运维管理 通知管理 可根据您的业务需求，订阅不同功能模块的消息事件，...
创建RDS SQL Server实例后，您需要在实例中创建与您业务相关的数据库。您可参考本文快速掌握数据库创建的基本流程，并了解如何规划数据库数量以满足业务需求。前提条件 已 创建RDS SQL Server实例。数据库数量限制 2008 R2数据库最大数量为...
冷数据指的是 30 日内没有访问的数据，但是 90 日以内有访问的数据。freezeDataSize:极冷数据数的据量大小。极冷数据指的是 90 日以内都没有访问的数据。totalDataSize:总数据量大小。hotDataRatio:热数据的数据量大小占比。热数据指的是 7...
您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务，并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决Hive数仓上云的问题，经过多年迭代...
相关操作 在 数据管理 页面，执行如下操作：操作 说明 搜索数据 在左上角的搜索框中，输入关键字，单击 图标，筛选需要的目标数据。查看数据详情 在数据列表，单击目标数据 操作 列的 详情，可查看空间数据基本信息、空间信息和缩略图。...
为避免迁移前后数据不一致，迁移前请停止自建数据库的相关业务，并停止数据写入。本操作仅适用于数据库引擎为PolarDB PostgreSQL版。如您的数据库引擎为 PolarDB PostgreSQL版（兼容Oracle）且需要迁移请 联系我们。操作步骤一 备份自建...
您可以在控制台管理所有的 PolarDB 数据库。创建数据库 登录 PolarDB控制台。在左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航栏中，单击 配置与管理 数据库管理。单击 创建数据库。在 创建数据库 面板中，设置以下参数...
AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征，并利用特征向量作为非结构化数据的唯一标识，帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中，绝大多数的数据都...
地图书签功能 新增空间筛选 新增地图绘制时的筛选和过滤功能，提升用户在大数据集中的数据管理体验。空间筛选 新增购置资源包 当项目资源包无法满足业务需求时，您可对项目资源包的配置进行升级。产品升级和降配 2023年 2023年10月 功能...
背景介绍 TPC-DS是一套决策支持系统的基准测试，它对决策支持系统的几个通用方面进行建模，包括查询和数据维护，用于衡量大数据产品的分析性能。TPC-DS模拟了零售企业三种销售渠道（实体店、互联网、目录）的销售和退货业务，除了建立相关...
MaxFrame是阿里云MaxCompute为了满足用户在Python生态中日益增长的高效大数据处理和AI开发需求，提供的基于Python编程接口的分布式计算框架。您可直接利用MaxCompute的海量计算资源及数据通过MaxFrame进行TB/PB级数据处理、可视化数据探索...
提供同步速率功能控制流量，避免同步速度过快对数据来源端或者数据去向端造成太大的压力。不限流的情况下则会提供现有硬件环境下最大的传输性能。任务运维 线上干预 支持重跑、补数据、置成功、冻结/解冻等线上干预操作。监控报警 支持配置...
云原生多模数据库 Lindorm 使用容量型云存储作为冷数据存储介质。本文介绍时序引擎的冷数据归档功能的使用方法。功能概要 在时序数据库持续写入的场景下，早先写入的时序数据会随着时间推移，查询频度逐渐降低。这样的数据通常被称为“冷...
MMS通过与MaxCompute Spark引擎集成，简化了从自建数据源到MaxCompute的大规模数据迁移过程，降低了配置复杂度和运维成本。功能概述 迁移架构 MaxCompute数据迁移服务MMS支持元数据和数据迁移。元数据迁移：通过元数据API（如Hive ...
规则名称 规则类型 规则等级 规则配置 非工作时间查询大数据量敏感数据 数据访问风险 低 如下时间段查询数据量大于10,000时命中该规则。周一至周五：19:00～24:00。周六至周日：00:00～24:00。相似SQL查询 数据访问风险 低 十分钟内查询...
获取MMA数据源内的某个分区 CreateMmsJob 创建数据迁移任务 创建数据迁移任务 ListMmsJobs 获取迁移作业列表 获取迁移作业列表 GetMmsJob 获取单个迁移作业详情 获取单个MMA迁移计划详情 GetMmsAsyncTask 获取数据迁移相关的单个异步任务...
HBase数据源类型和添加方式 HBase数据源类型 添加HBase数据源的方式 云数据库HBase标准版 如果云数据库HBase标准版或者云数据库HBase增强版与LTS使用相同的专有网络ID，添加方法请参见 通过Lindorm控制台添加HBase数据源。如果云数据库...
本文介绍云数据库MongoDB支持升级的数据库大版本以及如何升级数据库大版本。注意事项 协议要求：升级分片集群实例的数据库大版本时，实例的协议类型需为 MongoDB协议。升级方式与影响：自动重启：升级采用轮转升级的方式进行，升级过程中会...
2025 年 2 月 25 日 功能名称 功能描述 相关文档 新增数据同步任务 新增支持 OB_MySQL 至 OB_Oracle，以及 OB_Oracle 至 OB_MySQL 之间的数据实时同步，可以实现 OceanBase 数据库不同租户之间的结构同步、全量同步和增量 DML/DDL 同步。...
云数据库MongoDB提供了多种数据恢复方案，可满足不同场景下MongoDB数据库的数据恢复需求。数据恢复至云数据库MongoDB实例 重要 将数据恢复至新实例时，请注意以下事项：新实例的数据库大版本需与原实例相同。您需要根据原实例的数据库版本...
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、Hudi（Hudi格式仅...
警告 为保障Kafka集群可以正常接收TiDB数据库产生的较大的Binlog数据，请适当将Broker组件中的 message.max.bytes、replica.fetch.max.bytes 参数以及Consumer组件中的 fetch.message.max.bytes 参数对应的值调大，详情请参见 Kafka配置...