将某个项目下、数据板块下或数据源下的表授权给另外一个项目、数据板块或数据源的用户或生产账号，或申请某张表下的字段权限，以实现数据互通。本文为您介绍如何批量授予或批量回收表权限。前提条件 需在 元数据中心 配置MySQL和Oracle数据...
当表类型选择为 数据源表、数据源视图、数据源物化视图 时，建议选择数据源表所在的数据源。说明 批量申请权限最多选择100张数据表。筛选项为非必选项，若未选择筛选项，可混合选择多种类型的数据表；若选择筛选项，可精确筛选数据表。选择...
若您无需使用DTS提供的库表结构同步功能（例如目标端已配置好数据分片），请勿在 对象配置 页面中勾选 同步类型 的 库表结构同步，否则可能会因为分片冲突而导致数据不一致或任务失败。在将业务切换为目标MongoDB数据库后，您需自行确保...
DataWorks是一站式智能大数据开发治理平台，适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务，为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
每个Task负责处理一个独立的数据分片。通过这种并行处理机制，可显著提升整体数据同步的效率。插件化数据流（Reader与Writer）每个Task内部的数据流由读 Reader插件 和 Writer插件 通过一个内存缓冲区连接而成：Reader插件：负责连接源数据...
2024.09.24 OSS图片脱敏 列加密 新增 新增列加密服务，可以对RDS数据库表中已扫描识别的敏感数据列进行访问加密，避免非授权人员通过云平台软件或数据库连接工具直接访问到敏感数据明文，实现数据在数据库内可用不可见。2024.09.20 列加密 ...
PolarDB-X 2.0 的全密态数据库并非在数据库自身的控制台完成，而是统一通过 数据安全中心DSC（Data Security Center）进行配置和管理。这种方式旨在提供集中、一致的数据安全治理体验。整个过程涉及授权DSC、连接数据库资产，并最终定义...
为了加强对 PolarDB PostgreSQL版 中敏感列数据的保护，防止非授权人员通过云平台软件或数据库连接工具直接访问敏感数据的明文信息，您可以利用 数据安全中心DSC（Data Security Center）提供的列加密功能。该功能能够在确保数据在数据库内...
代码来源 采集口径 触发采集方式 数据开发 数据开发-创建节点并编辑代码 自动采集 数据开发（旧版）数据开发（旧版）-创建节点并编辑代码 数据分析 数据分析-新建SQL查询并编辑代码 数据服务 数据服务-新建API数据推送服务 API资产 数据...
创建TDSQL for MySQL数据源 创建MySQL数据源 创建Microsoft SQL Server数据源 创建PostgreSQL数据源 创建Oracle数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for MySQL 3.0数据源 创建AnalyticDB for PostgreSQL数据源 创建...
为了帮助您深入理解 云数据库 SelectDB 版 的分区分桶的概念和如何实施分区分桶，本文档详细阐释了分区分桶的原理和操作示例，以帮助您理解分区分桶原理和如何实施分区分桶。概述 为了能高效处理大数据量的存储和计算，云数据库 SelectDB ...
若目标库为分片集群架构的MongoDB，在将业务切换为该数据库后，您需自行确保业务行为符合该MongoDB数据库对分片集合的要求。当源数据库为MongoDB 5.0或更高版本，而目标数据库版本低于5.0时，不支持迁移 capped collection。迁移时，会导致...
当所有的数据分片验证通过后，OSS将把这些分片组合成一个完整的文件。CompleteMultipartUploadRequest completeMultipartUploadRequest=new CompleteMultipartUploadRequest(bucketName,objectName,uploadId,partETags);完成分片上传。...
EMR集群类型 元数据存储类型 数据存储类型：OSS 数据存储类型：OSS-HDFS 数据存储类型：HDFS 新版数据湖集群（DataLake）数据湖构建（DLF）RDS实例 MySQL 自定义集群（Custom）数据湖构建（DLF）RDS实例 MySQL 其他集群-数据保护伞为什么有...
数据探索自身预置了诸多函数，用于常见的数据处理需求。这些预置的系统函数具有跨引擎的特点，在离线、实时、在线3种模型的不同引擎中具有相同的行为和使用方式。本文为您介绍数据探索提供的系统函数类型及函数使用相关说明。函数分类 数据...
在DataV-Note（智能分析）中，分析单元是进行数据分析及报告制作的主要工作区域，而数据集和变量则是分析单元用于进行分析的输入数据。本文为您介绍DataV-Note支持的分析单元类型，以及数据分析及报告制作的流程概述。概念须知 分析单元：...
数据安全中心（敏感数据保护）是 数据安全中心 DSC（Data Security Center）的一款产品，可以通过收集和分析数据资产的信息，提供云上数据中敏感数据识别的分类（数据标签）分级（敏感等级）能力。本文介绍如何快速在DSC控制台实现敏感数据...
如果您有对敏感数据进行管控和脱敏的需求，可以使用 数据管理DMS 的敏感数据保护功能对数据库进行扫描，识别、脱敏和管理敏感数据。背景信息 通过敏感数据保护功能，可帮助企业及时有效地发现与识别敏感数据资产，避免敏感数据滥用，有效...
背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则，帮助您识别组织内的敏感数据，对于识别结果不准确的数据，您可以通过 查看敏感数据识别结果并手动修正，并在 敏感数据概况 模块为您展示最近的通过数据识别规则...
DataWorks的数据使用诊断，为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力，以及诊断相关安全问题的最佳实践及解决方案，帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...
购买 数据安全中心DSC（Data Security Center）实例后，在使用DSC检测云产品（包括RDS、PolarDB等）中存在的敏感数据或审计数据库活动前，您需要先完成资产实例授权。本文适用的数据库范围 DSC仅支持为阿里云上的数据库资产提供数据安全...
分桶 分区 否 分区能够根据指定字段（如时间、地域等）将原始表划分为多个子表，以便于对数据进行分区管理和查询，同时利用分区裁剪来提升查询速度。分区 索引 否 索引能够快速地过滤或定位数据，从而大幅提升查询性能。索引加速 如果您是...
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
其他数据类型的操作可参考下述文档：自建数据库 云原生MongoDB数据库 非结构化数据OSS 非结构化数据SLS 大数据 前提条件 已开通数据安全中心免费版实例或已购买数据安全中心付费版实例。具体操作，请参见 数据安全中心免费版服务 或 购买...
如需迁移至阿里云MongoDB分片集群实例，建议对数据进行分片，详情请参见 设置数据分片。设置阿里云MongoDB实例的数据库密码，详情请参见 重置密码。说明 如果您在创建实例时设置了数据库密码，可跳过本步骤。在本地设备上成以下准备工作：...
本文为您介绍DataWorks中，数据集成、数据建模、数据开发、数据分析、数据服务等模块开发过程中涉及的相关基本概念。通用概念 工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间管理员可以为工作空间加入...
分段函数 分段函数是一种将数据值划分为多个区间的映射方式，通过对连续或离散数据的分段处理，实现对数据的精细化控制和可视化表达。说明 当字段为数值类型且映射类型为分段映射时可配置。等距 每个分段的宽度固定，适合样本分布比较均匀...
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
StarRocks提供两种分桶方式：哈希分桶：根据数据的分桶键值，将数据划分至分桶。选择查询时经常使用的条件列组成分桶键，能有效提高查询效率。随机分桶：随机划分数据至分桶。这种分桶方式更加简单易用。数据类型 除了基本的数据类型，如...
存储引擎 存储引擎是基于Raft协议实现的分布式实时强一致高可用的引擎，通过数据分片和Multi-Raft实现并行，利用分层存储实现冷热分离降低成本，通过行列存储和智能索引达到很好的性能。在这三层架构之上，通过服务秒级恢复，支持跨可用区...
时间分区 时间分区会按照时间维度进行数据分区存储，存储底层会将不同时间分区内的数据进行分段存储，一个时间分区内的数据包含时间线索引和时序数据。时序引擎支持在数据库设置时间分区，一般情况下，如果创建周期性时间线导致了时间线...
数据管理功能，以数据源维度展示了数据看板中所有组件使用的数据源合集，您可在该界面查看/编辑数据源配置，或批量替换目标组件所使用的数据源类型。批量替换数据源时，仅会更改数据来源（例如，由Hologres更改为RDS for MySQL），数据源已...
将ECS上分片集群架构的自建MongoDB迁移上云 使用DTS迁移分片集群架构的自建MongoDB数据库上云 使用MongoDB工具将自建数据库迁移至分片集群实例 第三方云数据库迁移至云数据库MongoDB。使用NimoShake将Amazon DynamoDB迁移至阿里云 使用...
购买 数据安全中心DSC（Data Security Center）实例后，在使用 DSC 检测大数据产品（包括TableStore、MaxCompute、AnalyticDB-MYSQL、AnalyticDB-PG）中存在的敏感数据或审计数据库等功能前，您需要先开启对应功能。前提条件 已开通数据...
购买 数据安全中心DSC（Data Security Center）实例后，在使用DSC检测ECS自建数据库中存在的敏感数据或监控数据库异常操作前，您需要先完成资产实例授权。使用限制 仅支持VPC网络中的ECS自建数据库。仅支持MySQL、SQL Server和Oracle类型的...
购买 数据安全中心DSC（Data Security Center）实例后，在使用 DSC 检测MongoDB中存在的敏感数据或审计数据库等功能前，您需要先开启对应功能，同时支持配置其检测功能的识别节点。前提条件 已开通数据安全中心免费版实例或已购买数据安全...
上图是查询每秒内读请求数据量最大的五个分片，再将属于同一张表的分片聚合在一起，并按照分片读请求数据量的值升序排列后的结果。实时查询热点Key 在左侧导航栏中，选择 流量诊断 topregion/key实时查询。设置筛选条件，包括排序维度、...