在安全合规或静态数据加密等场景下，推荐使用透明数据加密TDE（Transparent Data Encryption）功能，对数据文件执行实时I/O加密和解密，通过在数据库层执行静态数据加密，阻止可能的攻击者绕过数据库直接从存储中读取敏感信息，有效提高...
本文介绍了通过mysqldump工具将 PolarDB-X 数据导出的场景和详细操作步骤。工具介绍 PolarDB-X 支持MySQL官方数据导出工具mysqldump，mysqldump能够导出表结构信息和表内数据，并转化成SQL语句的格式方便用户直接导入。说明 mysqldump适合...
数据导入方式 数据导入方式 数据写入分类 每日数据增量 每日新行数 任务数 实时写入（Flink）实时数据 10 GB 1 亿行 80 Kafka+Routine 实时数据 10 GB 1 亿行 20 离线导入（Spark Connector、DataX）离线数据 10 GB 1 亿行 120 物化视图...
质量评估报告 支持根据系统数据质量监测运行结果以天的维度自动生成系统整体质量监控报告。支持根据数据唯一性、准确性、规范性、一致性、时效性和完整性进行多维度评估分析。物理表监控明细 支持以物理表为维度，查看物理表在数据开发-...
本文主要介绍如何使用阿里巴巴的开源工具Datax 实现从 MySQL 到 TSDB 的数据迁移。背景 本文主要介绍如何使用阿里巴巴的开源工具Datax 实现从 MySQL 到 TSDB 的数据迁移。DataX相关使用介绍请参阅 DataX 的 README 文档。下面将首先介绍 ...
在iOS、Android等移动设备中，您可以通过阿里云App登录RDS控制台，快速便捷地对RDS进行监控和管理。您可以随时查看实例信息、监控指标和主动运维事件，确保数据库运行的健康与稳定。对于突发的运维需求或接入请求，您可以快速重启实例、...
在iOS、Android等移动设备中，您可以通过阿里云App登录RDS控制台，快速便捷地对RDS进行监控和管理。您可以随时查看实例信息、监控指标和主动运维事件，确保数据库运行的健康与稳定。对于突发的运维需求或接入请求，您可以快速重启实例、...
在iOS、Android等移动设备中，您可以通过阿里云App登录RDS控制台，快速便捷地对RDS进行监控和管理。您可以随时查看实例信息、监控指标和主动运维事件，确保数据库运行的健康与稳定。对于突发的运维需求或接入请求，您可以快速重启实例、...
数据湖作为一个集中化的数据存储仓库，支持的数据类型具有多样性，包括结构化、半结构化以及非结构化的数据，数据来源上包含数据库数据、binglog 增量数据、日志数据以及已有数仓上的存量数据等。数据湖能够将这些不同来源、不同格式的数据...
安全检测维度 安全检测项 检测对象 检测方式 数据源保护 数据源访问控制 说明 DataWorks支持对已配置的数据源设置访问权限，避免安全等级较低的人员访问安全等级较高的数据。DataWorks工作空间数据源 此安全检测项为你扫描哪些工作空间未对...
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
您可使用数据管理DMS的数据质量功能来自定义表或列维度的数据质量规则，并结合任务编排的稽核任务自动检查数据质量，保证数据的一致性、唯一性、充分性等，从而提升二次数据分析与开发的质量。前提条件 目标实例的管控模式为安全协同。更多...
TPC-DS官方工具只包含SQL生成器以及单机版数据生成工具，并不适合大数据场景，所以本文教程中使用的工具和集群信息如下：Hive TPC-DS Benchmark测试工具。该工具是业界最常用的测试工具，是由Hortonworks公司开发，支持使用Hive和Spark运行...
数据库整库 实时同步写入-DataWorks数据集成 当前数据库系统与大数据处理引擎都有各自擅长的数据处理场景，面对一些复杂的业务需求，往往需要同时运用OLTP（联机事务处理）、OLAP（联机分析处理）及离线分析引擎来对数据进行全面且深入的...
如果您希望在不变更RDS PostgreSQL实例规格的前提下，减少存储空间占用，提高数据库读取性能，则可以参考本文，使用透明页压缩功能。该功能牺牲部分CPU性能，对Buffer Pool中的页数据进行实时压缩和解压缩，可以有效降低存储成本、提高IO...
以下列举了部分连接数据库集群的示例：使用DMS连接集群 DMS是阿里云提供的图形化的数据管理工具，它是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。...
在您成功部署兼容MongoDB语法的 PolarDB PostgreSQL轻量版 集群后，下一步是将现有MongoDB数据库中的数据迁移过来。本文将提供在线热迁移和离线恢复两种方法，您可以根据业务场景选择最合适的方案。选择迁移方法 PolarDB 提供 dsync 工具...
以下列举了部分连接数据库集群的示例：使用DMS连接集群 DMS是阿里云提供的图形化的数据管理工具，它是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。...
D DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
会话线索 支持根据时间、客户端IP、客户端端口、服务端IP、服务端端口、数据库账号、资产信息、数据库实例、客户端工具、数据库类型、主机名等多角度分析会话。详细语句线索 支持根据时间、报文检索、资产信息、数据库账号、SQL模板、客户...
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
商业智能（BI）分析工具可以将复杂的数据转换成图表、仪表盘等形式，以直观的方式展示分析结果，使您能够快速把握业务状态。BI分析工具连接MaxCompute，能够充分利用MaxCompute强大的数据处理能力和高性能的计算资源，为您带来更高效的数据...
本文为您介绍如何将数据上传至MaxCompute或从MaxCompute下载数据，包括服务连接、SDK、工具和数据导入导出、上云等常见操作。背景信息 MaxCompute提供了多种数据上传下载的通道支持，方便您在各种场景下进行技术方案选型时参考。批量数据...
本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例，创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建，请...
迁移流程概述 迁移过程主要分为五个阶段，由 nimo-shake（数据同步，包括全量同步与增量同步）、nimo-full-check（数据校验）和 PolarDBBackSync（数据反向同步）三个核心工具协同完成。全量同步（Full Synchronization）工具：nimo-shake ...
云数据库MongoDB版（ApsaraDB for MongoDB）旨在简化您的数据库部署和管理过程，是阿里云基于飞天分布式系统和高可靠存储引擎研发的文档数据库，提供多节点高可用架构、弹性扩容、备份恢复等功能。其完全兼容MongoDB协议，用于处理非结构化...
准备工作 准备工作 包含如下内容：准备CSV数据文件 获取图数据库GDB实例信息 获取OSS中的Bucket信息 OSS导入授权 图数据库GDB控制台一键授权 通过RAM控制台授权 将数据上传至OSS 使用OSS控制台上传数据文件 使用ossutil工具上传数据文件 ...
本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移任务长期处于非活跃状态（任务状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，任务可能无法恢复。数据传输将主动释放...
Flink CDC背景介绍 Flink CDC是一个端到端的开源实时数据集成工具，定义了一套功能完整的编程接口和ETL数据处理框架，用户可通过提交Flink作业使用其功能，详情请参见 Flink CDC。Flink CDC深度集成并由Apache Flink驱动，提供以下核心功能...
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
以下列举了部分连接数据库集群的示例：使用DMS连接集群 DMS是阿里云提供的图形化的数据管理工具，它是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。...
以下列举了部分连接数据库集群的示例：使用DMS连接集群 DMS是阿里云提供的图形化的数据管理工具，它是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。...
数据安全中心 DSC（Data Security Center），在满足等保2.0“安全审计”及“个人信息保护”的合规要求的基础上，为您提供敏感数据识别、分级分类、数据安全审计、数据脱敏、智能异常检测等数据安全能力，形成一体化的云上全域数据防泄漏与...
数据库自治服务DAS提供异常检测功能，基于机器学习和细粒度的监控数据，无需手动开启，自动实现7x24小时的异常检测。相比基于规则或阈值的告警方式，能够更及时地发现数据库异常变化。前提条件 目标数据库实例为：数据库 地域 RDS MySQL ...
DMS Data Management，数据管理，是一种阿里云提供的图形化的数据管理工具，集数据管理、结构管理、访问安全、BI图表、数据趋势、数据轨迹、性能与优化和服务器管理于一体的数据管理服务。支持MySQL、SQL Server、PostgreSQL、MongoDB、...
扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、智能异常检测等数据安全解决方案提供基础。数据安全中心对于...
为适应日趋复杂化多样化的终端设备、边缘设备、传感器以及第三方系统数据源采集、上报的异构数据，如图3所示，阿里 云原生多模数据库 Lindorm 在云端单实例融合了宽表、索引、时序等多种数据引擎能力，通过阿里云DTS/DMS或第三方开源数据...
本文为您介绍DataWorks中，数据集成、数据建模、数据开发、数据分析、数据服务等模块开发过程中涉及的相关基本概念。通用概念 工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间管理员可以为工作空间加入...
步骤二：配置并启动迁移任务 DSync工具提供自动化的Collection同步、全量数据同步与增量数据同步，仅需将DSync工具启动，数据同步即可自动进行。设置环境变量：启动DSync工具仅需提供源库和目标库的连接串（URI）即可，这里通过环境变量的...