本文介绍 云原生数据仓库AnalyticDB ...索引数据收集 您可以使用 VACUUM 命令收集索引数据，收集索引数据示例如下：VACUUM customer;说明 仅BRIN索引需要使用索引数据收集。更多信息 关于索引的更多信息，请参见 Pivotal Greenplum 官方文档。
当下企业在开展数据处理相关业务时，只要存在数据收集、处理、使用等行为，就需要从以下方面保障企业的经营合法合规。重点关注及遵守相关法律法规，时刻监督自己是否存在违规行为。例如，网络安全法、数据安全法、个性信息保护法、民法典及...
Alluxio 数据集成 数据集成层的组件提供数据批量传输、实时消息流处理和分布式日志收集的能力，提升数据传输效率和数据收集的可靠性。组件类型 组件名称 组件说明 常用文档 开源 Flume Flume是一个分布式、可靠和高可用的系统，用于收集、...
当今社会数据收集的方式不断丰富，行业数据大量积累，导致数据规模已增长到传统软件行业无法承载的海量级别。MaxCompute服务于批量结构化数据的存储和计算，已经连续多年稳定支撑阿里巴巴全部的离线分析业务。过去，如果您想要通过DataV...
完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度的思考和分析。需求分析的途径有两种：根据与分析师和业务运营人员的沟通获知需求。对报表系统中现有的报表进行研究分析。在需求分析阶段，您需要沉淀出业务分析或...
完成业务调研后，您需要进一步收集数据使用者的需求，进而对需求进行深度的思考和分析。需求分析的途径有两种：根据与分析师和业务运营人员的沟通获知需求。对报表系统中现有的报表进行研究分析。在需求分析阶段，您需要沉淀出业务分析或...
Apache Flume是一个分布式、可靠和高可用的系统，可以从大量不同的数据源有效地收集、聚合和移动日志数据，从而集中式的存储数据。使用场景 Flume使用最多的场景是日志收集，也可以通过定制Source来传输其他不同类型的数据。Flume最终会将...
收集运行期应用请求数据库的基本信息，比如请求的sql-schema-调用栈、应用系统信息、性能信息、SQL热度等。数据集中收集Collector。集中收集各应用Agent传输过来的数据，并进行脱敏、加工。应用采集可以完成：采集应用访问的SQL与调用栈...
自动负载信息库AWR（Automatic Workload Repository）是数据库收集和分析性能数据的工具。通过AWR工具，可以从数据库的动态视图等统计信息中生成某个时间段的性能报告。概述 PolarDB PostgreSQL版 的Global AWR性能报告功能，在提供数据库...
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。核心能力 实时同步支持的能力如下图所示：能力 描述 多种数据源...
自动负载信息库AWR（Automatic Workload Repository）是数据库收集和分析性能数据的工具。通过AWR工具，可以从数据库的动态视图等统计信息中生成某个时间段的性能报告。概述 PolarDB PostgreSQL版（兼容Oracle）的Global AWR性能报告功能，...
自动负载信息库AWR（Automatic Workload Repository）是数据库收集和分析性能数据的工具。通过AWR工具，可以从数据库的动态视图等统计信息中生成某个时间段的性能报告。概述 PolarDB PostgreSQL版（兼容Oracle）的Global AWR性能报告功能，...
个人信息 甲乙双方均应严格遵守网络安全与数据保护相关法律法规的要求，其中，用户使用瓴羊服务收集、储存、处理、使用的个人信息和实施与这些数据有关的活动，须遵循合法、正当、必要原则，且应当遵守相关法律法规、瓴羊产品服务协议和瓴...
以1GB SSB数据集为例，是否收集统计信息列的查询效果如下：SSB查询 不开启c_nation列收集统计信息（ms）开启c_nation列收集统计信息（ms）Q3.2 993 36.7 Q3.3 12.3 12.5 说明 该结果仅比较开启指定列收集的相对性能差异，不代表 云原生数据...
添加数据库后，您需要进行以下操作：您必须在已添加的数据库服务器上部署数据库审计的Agent程序，才能使数据库审计服务收集目标数据库的访问流量信息。具体操作，请参见 安装Agent。您可以为已添加的数据库配置审计规则，使命中规则的审计...
步骤5：部署Agent程序 在数据库审计系统中添加数据库实例后，您必须在数据库服务器上部署Agent程序，才能使数据库审计服务收集目标数据库的访问流量信息，并进行审计。步骤6：查看系统审计结果 完成数据库接入和Agent部署后，您可以在数据...
本文为您介绍在白名单内的用户如何使用数据传输迁移 OceanBase 数据库 MySQL 兼容模式的数据至 MySQL 数据库。如果您需要加入白名单，请联系技术支持人员。重要 如果数据迁移任务长期处于非活跃状态（任务状态为 失败、已暂停 或 已完成）...
添加数据库后，您必须在数据库服务器上部署数据库审计的Agent程序，数据库审计服务才能收集目标数据库的访问流量信息。具体操作，请参见 安装Agent。同时，您还可以为数据库配置审计规则，使命中规则的审计记录触发告警。具体操作，请参见 ...
背景信息 在数据传输控制台创建从 OceanBase 数据库 Oracle 租户迁移数据至 Oracle 数据库的数据迁移任务，您可以通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至 Oracle 数据库。数据传输支持将多个 ...
数据同步包括以下两个阶段：同步初始化：DTS先开始收集增量数据，然后将源数据库的结构和存量数据加载到目标数据库。数据实时同步：DTS同步正在进行的数据变更，并保持源数据库和目标数据库的同步。为了同步正在进行的数据变更，DTS使用两...
同步初始化 同步初始化 同步初始化是指在开始执行增量数据同步前，DTS先开始收集增量数据，然后将待同步对象的结构和存量数据同步到目标库。同步初始化包括增量数据采集、结构初始化和全量数据初始化。增量数据采集：采集源库中待同步对象...
您可以通过数据迁移功能实时迁移其他数据源的数据至 OceanBase 数据库，以及迁移 OceanBase 数据库的数据至其他数据源。本文以迁移 MySQL 数据库的数据至 OceanBase 数据库为例，介绍如何使用数据传输迁移数据。前提条件 在迁移数据之前，...
本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移任务长期处于非活跃状态（任务状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，任务可能无法恢复。数据传输将主动释放...
本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 兼容模式。重要 如果数据迁移任务长期处于非活跃状态（任务状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，任务可能无法恢复。数据传输将...
CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建为单独的用户数据使用。您可在DataWorks中注册CDH及CDP集群，基于业务需求进行相关任务开发、调度、数据地图（元数据管理）和数据质量等一系列的数据开发和...
本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移任务长期处于非活跃状态（任务状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，任务可能无法恢复。数据传输将主动...
本文为您介绍在 云原生数据仓库AnalyticDB PostgreSQL版 数据库中如何使用 ANALYZE 命令手动收集统计信息。适用场景 手动收集统计信息，无需频繁使用。可在满足以下条件时，手动执行 ANALYZE 命令收集统计信息。表中超过20%数据更新...
Flume（DataHub通道系列）Apache Flume是一个分布式的、可靠的、可用的系统，可高效地从不同的数据源中收集、聚合和移动海量日志数据到集中式数据存储系统，支持多种Source和Sink插件。Apache Flume的DataHub Sink插件可以将日志数据实时...
概述 本文介绍云数据库 RDS MySQL 版如何收集表的统计信息。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改...
手动收集统计信息 收集全表统计信息 ANALYZE TABLE 命令会扫描全表来收集统计信息，对于数据量大的表，全表收集统计信息需消耗更多的时间，建议在业务低峰期执行或采样收集统计信息。语法 ANALYZE TABLE[schema_name.]table_name[UPDATE...
本文介绍 AnalyticDB for ...通过 INSERT INTO、REPLACE INTO 等实时导入方式导入数据，需要等到运维时间，或者Build完成后的增量收集周期时间触发增量收集任务，建议您在导入数据后手动收集一次基础统计信息。详情请参见 手动收集统计信息。
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA...具体场景示例请参见 Flume收集网站日志数据到MaxCompute 和 海量日志数据分析与应用。
异构数据库迁移ADAM（Advanced Database&Application Migration）提供数据库平滑迁云解决方案，全面评估上云可行性、成本和云存储选型，内置实施协助、数据迁移、应用迁移等工具，覆盖数据库迁移的全生命周期，帮助企业降低数据库和应用...
例如，于2023年08月28日，电商公司发现2023年08月17日收集的某个产品的报表数据有误，需要重新输出2023年08月17日的报表数据，可以使用补数据来纠正报表数据。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 Data+AI 数据开发 任务...
背景信息 您可以在数据传输控制台创建从 OceanBase 数据库迁移数据至 OceanBase 数据库同类型租户的数据迁移任务，通过结构迁移、全量迁移和增量同步，无缝迁移源端数据库中的存量业务数据和增量数据至目标端数据库。前提条件 数据传输已...
阿里云流数据处理平台数据总线 DataHub 是流式数据（Streaming Data）的处理平台，提供流式数据的发布(Publish)、订阅（Subscribe）和分发功能，支持构建基于流式数据的分析和应用。产品概述 数据总线（DataHub）是阿里云提供的一款流式...
Flume高效写入OSS Flume高效写入OSS 2021-06-01 Flume是一个分布式、可靠、高可用的系统，支持从不同数据源高效地收集、聚合、迁移大量日志数据，聚合到中心化的数据存储服务，被广泛用于日志收集场景中。由于OSS本身不支持Flush功能，而...
数据采集：MaxCompute支持将开源 Logstash 收集的日志数据流式写入MaxCompute。Flink实时写入：您可以通过 Flink 平台对流式数据进行实时写入。解决方案的可靠性 MaxCompute具有服务等级协议（SLA），因批量数据通道、流式数据通道默认使用...
时序数据库（Time Series Database，TSDB）是一种专门设计用于高效存储和处理时间序列数据的数据库系统。时间序列数据是指按时间顺序排列的数据点序列，每个数据点通常包含一个时间戳和一个或多个值（度量Metrics）。这类数据广泛存在于物...
数据安全中心（敏感数据保护）是 数据安全中心 DSC（Data Security Center）的一款产品，可以通过收集和分析数据资产的信息，提供云上数据中敏感数据识别的分类（数据标签）分级（敏感等级）能力。本文介绍如何快速在DSC控制台实现敏感数据...