本文介绍如何使用数据传输服务（Data Transmission Service，简称DTS），实现RDS实例间的数据迁移。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成数据库的迁移。...
本文介绍如何使用数据传输服务DTS（Data Transmission Service），依次将本地MongoDB分片集群数据库中的各个Shard节点，迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停服的情况下，平滑...
当项目用户具备查询E-MapReduce项目中的某些敏感数据权限，担忧不希望用户能看到完整的敏感数据信息时，可以对查询结果进行数据动态脱敏。本文为您介绍如何开启E-MapReduce的动态脱敏功能，并提供参考示例。使用限制 EMR集群仅支持数据保护...
本文主要列举使用 数据管理DMS 时遇到的常见问题。商品订单 如何查看与管理DMS的商品订单？DMS商品订单与数据库实例是绑定关系吗？已购买的包年包月和按量付费商品，在DMS使用上有没有区别？已退订DMS按量付费商品订单，为何还会收到账单...
使用 数据安全中心 DSC（Data Security Center）服务，可授权扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储）、自建数据库等数据库中的数据，为您提供敏感数据识别、基线安全检查、数据安全审计、...
本文以Excel为例，介绍如何通过Kettle将本地Excel数据导入至 云原生数据仓库 AnalyticDB MySQL 版 数仓版。背景信息 Kettle是一款非常受欢迎的开源ETL工具软件，主要用于数据整合、转换和迁移。Kettle不仅支持各类关系型数据库和NoSQL数据...
对于非ONLINE状态的同名数据库，根据不同场景解决：场景1：OSS备份数据恢复上云时选择不打开数据库 产生原因 在使用 OSS备份数据恢复到RDS SQL Server 时如果选择了 不打开数据库（还有差异备份或日志文件）选项，数据库会处于非ONLINE状态...
Lindorm时序引擎支持设置每个数据库的保数据有效期（TTL），您可以结合连续查询，将数据降精度后写入到有效期更长的数据库中。以下示例介绍了如何通过连续查询与数据库TTL设置来实现数据降精度与长期存储。示例 假设，原始数据采样周期为1...
列加密 列加密功能是一种数据安全技术，通过对数据库中的特定列进行加密，防止非授权人员通过云平台软件或数据库连接工具直接获取敏感数据明文，从而有效抵御内外部安全威胁，保障数据安全。图片脱敏 通过OSS图片脱敏功能，可以创建图片...
请检查是否设置了数据有效期TTL。如果写入数据的时间超过TTL，则该数据写入后会被清理，导致查询结果为空。冷数据归档和TTL清理数据为什么会滞后？时序引擎中的冷数据归档和TTL清理数据是通过Compaction任务异步执行的，因此操作可能不会...
如果同步的源集群为 PolarDB MySQL版，您需要在配置具体的同步任务前，参考本文的注意事项及限制，以保障数据同步任务的正常运行。源实例为PolarDB MySQL版的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认...
如果迁移的源集群为 PolarDB MySQL版，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为PolarDB MySQL版的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：PolarDB MySQL版...
安全基线检查 列加密 对 云数据库 RDS MySQL 版 和 云原生数据库 PolarDB MySQL 版（PolarDB for MySQL）中已识别出的敏感列数据进行加密，以免非授权人员通过云平台软件或数据库连接工具直接访问到敏感数据明文。列加密 数据检测响应 数据...
数据安全中心 DSC（Data Security Center）列加密功能是一项数据安全技术，通过对数据库中的特定列进行 加密存储，实现对RDS（MySQL或PostgreSQL）、PolarDB（MySQL、PostgreSQL或Oracle）、PolarDB-X 2.0等数据库敏感列数据的加密访问，...
在 OceanBase 管理控制台对实例发起数据合并操作后，您可以进入实例工作台查看该实例的数据合并记录。前提条件 已对集群实例发起数据合并操作。发起数据合并的操作，详见 发起合并。操作步骤 查看数据合并记录时，涉及如下两种操作场景：...
本文介绍 云原生数据仓库AnalyticDB PostgreSQL版 如何查看备份数据以及如何设置备份策略。查看和修改备份策略 登录 云原生数据仓库AnalyticDB PostgreSQL版控制台。在控制台左上角，选择实例所在地域。找到目标实例，单击实例ID。在左侧...
所属行业：互联网、软件 网站地址：上海伯俊软件科技有限公司 公司介绍 伯俊软件是国内老牌数字化服务商，创立20余年，已为3000多家大中型企业提供数字化管理产品、解决方案、“业务+数据”中台、培训及专业的技术服务，客户覆盖零售、制造...
数据管理DMS的测试数据构建功能拥有强大的算法引擎，支持批量生成各类随机值、地区名、虚拟IP地址等信息，可以大大减轻准备测试数据的负担。本文介绍构建测试数据的方法。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、...
当表类型选择为 数据源表、数据源视图、数据源物化视图 时，建议选择数据源表所在的数据源。说明 批量申请权限最多选择100张数据表。筛选项为非必选项，若未选择筛选项，可混合选择多种类型的数据表；若选择筛选项，可精确筛选数据表。选择...
创建预降采样规则用于产生预降采样数据。引擎与版本 CREATE PREDOWNSAMPLE语法仅适用于时序引擎。无版本要求。语法 create_predownsample_statement:=CREATE PREDOWNSAMPLE time_interval AGGREGATORS '('function_identifier(',' function...
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等...
入库任务 支持将Shapefile、GeoJSON和CSV文件类矢量数据添加到系统默认的空间数据库或者指定的PostGIS、Ganos数据库，方便对空间数据库进行空间检索、数据质检、血缘记录，打通数据计算引擎链路，使得空间数据被用于数仓建设、标签管理等...
为了加强对 PolarDB PostgreSQL版 中敏感列数据的保护，防止非授权人员通过云平台软件或数据库连接工具直接访问敏感数据的明文信息，您可以利用 数据安全中心DSC（Data Security Center）提供的列加密功能。该功能能够在确保数据在数据库内...
4、控制台路径：费用与成本 – 企业财务 – 财务关联 调用 查询企业财务关系列表 获取“企业财务关系列表”数据。调用方法可参见 API选择方案 中，“数据字段”为“财务云主、子账号”的接口说明。重要 调用 查询企业财务关系列表 获取的...
时序引擎在执行删除操作时并不是直接删除数据，而是为需要删除的数据添加删除标记，确保这些数据不再被查询到，直到这些数据超过有效期TTL被彻底清理。因此，如果提交了大量的删除请求，则会产生大量的删除标记，导致查询以及后台数据的...
您可以根据数据表的名称、表所属板块/项目/数据源的关键字进行搜索，也可以按照所属板块/项目/数据源、账号类型、表类型进行筛选，或快捷筛选 七日内到期 的数据表。您可以对筛选后的数据表执行如下操作。操作项 描述 查看数据表权限详情 ...
本文为您介绍如何申请和交还数据源权限。申请数据源权限 在Dataphin首页，单击顶部菜单栏的 管理中心。按照下图操作指引，进入 申请数据源权限 对话框。在 申请数据源权限 对话框，配置参数。参数 描述 数据源 选择所需申请的数据源。如需...
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。5分钟快速了解 前提条件 已购买 资产安全 增值服务并且当前租户已开通 资产安全 模块。应用场景 基于Dataphin实现数据...
通过数据分类分级、敏感数据识别、敏感数据脱敏等措施，帮助客户建立完善的数据安全体系，确保数据使用的安全合规性。5分钟快速了解 前提条件 已购买 资产安全 增值服务，详情请参见 开通Dataphin。应用场景 基于Dataphin实现数据安全保护...
本文为您介绍如何申请和交还数据源权限。申请数据源权限 在Dataphin首页的顶部菜单栏，选择 管理中心 权限管理。在左侧导航栏选择 我的权限 数据源权限，在 数据源权限 页面，单击 申请数据源权限 按钮。在 申请数据源权限 对话框，配置...
支持的ETL工具见下，可以同时参见更详细的同步方案列表 数据迁移及同步方案综述：数据传输服务（DTS）：阿里云提供的实时数据同步服务，可以将其他数据源（RDS MySQL，ECS自建MySQL，PolarDB等）实时同步数据到 AnalyticDB PostgreSQL版，...
如果迁移的源数据库类型为MySQL，如自建MySQL、RDS MySQL，您需要在配置具体的迁移任务前，参考本文的注意事项及限制，以保障数据迁移任务的正常运行。源库为MySQL的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：MySQL间...
云原生多模数据库 Lindorm 宽表引擎支持实时数据订阅功能，实时数据订阅功能帮助您获取Lindorm的实时增量数据，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。背景信息 云原生多模数据库 Lindorm 数据订阅功能支持任何...
时序引擎也支持创建多个数据库，不同的数据库在存储层面进行物理隔离，支持设置不同的数据有效期（TTL）、时间分区和冷热存储分界线。创建数据库的具体操作，请参见 CREATE DATABASE。示例 创建一个名为DB1的数据库，设置数据为不过期。...
元数据的作用在于使数据更易于理解、管理和使用，它帮助用户识别和定位特定数据集，支持数据的组织和检索，同时，元数据还促进了数据的一致性和可交换性，为数据治理合规性和数据质量管理提供了基础。通过元数据，组织可以有效地监控和分析...
数据库开发 数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。结构设计 在新项目、新需求或者优化等业务场景中，一般会涉及到新建表、修改表等结构的变更操作，此时可以使用DMS的结构设计功能。库表...
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。SQL审核 SQL审核功能帮助您避免无索引SQL、不规范SQL等，降低SQL注入风险。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成...
云原生数据仓库AnalyticDB MySQL 2.0 云原生数据仓库AnalyticDB MySQL 3.0 云原生数据仓库AnalyticDB PostgreSQL Elasticsearch Tablestore PolarDB-X 2.0 Oracle PostgreSQL MySQL间的同步 MySQL同步至PolarDB MySQL版 MySQL同步至云原生...
测试数据构建 测试数据结构可以在频繁的数据准备过程中确保数据安全、保障数据离散型、提高生产效率。SQL审核 SQL审核功能帮助您避免无索引SQL、不规范SQL等，降低SQL注入风险。数据库克隆 数据库克隆功能提供MySQL数据库的克隆功能。集成...
同步源数据库 同步目的数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能网关接入的自建数据库 通过数据库网关接入的自建数据库 通过云企业网CEN接入的自建数据库 RDS MySQL实例 ECS上的自建数据库 通过专线、VPN网关或智能...