在 新建数据集 页面,填写数据集相关信息:数据集类型为 数据源:参数 描述 基本信息 名称 自定义数据集名称。类型 数据集类型,包括:数据源 本地文件 此处选择 数据源 类型。数据源类型 数据源类型,包括:Hologres MaxCompute StarRocks...
2025年 10月 功能名称 描述 开始发布时间 预计发布地域 使用客户 相关文档 DataWorks开放数据 DataWorks开放数据(DataWorks OpenData)为您提供集中、统一且易用的元数据集合,涵盖当前租户下的表、任务节点、实例、工作空间、成员及项目...
说明 通常情况下,生产数据源和开发数据源需配置为非同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 描述 部署方式 支持 集群 和 ...
说明 通常情况下,生产数据源和开发数据源需配置非为同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 描述 实例URL 访问Salesforce...
说明 通常情况下,生产数据源和开发数据源需配置非为同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 描述 实例URL 访问Salesforce...
创建RDS MySQL实例后,您需要在实例中创建与您业务相关的数据库。RDS MySQL支持通过控制台、SQL命令、API接口管理数据库,包括创建、删除数据库。背景信息 概念 实例:实例是虚拟化的数据库服务器。您可以在一个实例中创建和管理多个数据库...
写入端(Writer)操作 说明 preSql&postSql(配置同步前后执行语句)部分数据源支持在同步前(数据写入目标端数据源前)与同步完成后(数据写入目标端后),在目标端执行相关数据库SQL。示例:MySQL Writer支持配置preSql与postSql,即在...
作为工作空间的管理者,在使用数据开发(DataStudio)时,您可以针对用户的开发行为实施有效的管控措施,进行开发流程、数据安全、审计等相关操作,本文将帮助您快速掌握DataStudio的相关功能,实现对数据开发过程的有效管控。背景信息 ...
2020.01.18 配置和执行数据脱敏 数据审计 迭代 配置并开启审计模式 敏感数据识别 迭代 通过识别任务扫描敏感数据 2019年 功能名称 变更类型 动态说明 发布时间 相关文档 数据脱敏 迭代 优化脱敏功能:支持在未配置主键的情况下进行数据脱敏...
说明 通常情况下,生产数据源和开发数据源需配置为非同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 描述 部署方式 支持 集群 和 ...
如果您需要对RDS实例中的敏感数据进行管控和脱敏,可以使用数据管理DMS提供的敏感数据保护功能。费用 请参见 敏感数据保护功能定价。功能介绍 数据管理DMS的敏感数据管理提供如下功能:提供敏感数据资产大盘,统一管理企业敏感数据分布 ...
数据去向 操作 说明 配置同步前后执行语句 部分数据源支持在同步前(数据写入目标端数据源前)与同步完成后(数据写入目标端后),在目标端执行相关数据库SQL。示例:MySQL Writer支持配置preSql与postSql,即在数据写入MySQL前或后,可以...
管理MaxCompute表 使用数据专辑管理表 您可以将当前表加入目标数据专辑中,在目标数据专辑详情页面进行表管理,或者查看当前表已经加入的相关数据专辑。详情请参见 业务视角管理:数据专辑。配置类目导航管理表 您可以在数据地图左侧菜单栏...
说明 通常情况下,生产数据源和开发数据源需配置为非同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。Sap Table数据源支持 单机、负载均衡 ...
数据传输服务DTS(Data Transmission Service)支持数据迁移、数据订阅和数据实时同步功能,帮助您实现多种典型应用场景。不停机迁移数据库 传输方式:数据迁移 为了保证数据的一致性,传统的迁移过程需要您在迁移数据时停止向源数据库写入...
MongoDB相关 云数据库MongoDB逻辑备份与恢复:介绍如何使用 数据灾备 实现云数据库 MongoDB 数据库的逻辑备份与恢复。跨云或自建MongoDB逻辑备份与恢复:介绍如何使用 数据灾备 实现跨云或自建 MongoDB 数据库的逻辑备份与恢复。从备库备份...
说明 通常情况下,生产数据源和开发数据源需配置为非同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。Sap Table数据源支持 单机、负载均衡 ...
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段,扫描MaxCompute、OSS、阿里云数据库服务(RDS、PolarDB-X、PolarDB、OceanBase、表格存储等)和自建数据库中的数据,通过敏感数据规则,判断和打标敏感数据,为数据安全审计、...
数据源支持情况 数据集成目前支持40种以上的数据源类型(包括关系型数据库、非结构化存储、大数据存储、消息队列等),通过定义来源与去向数据源,并使用数据集成提供的数据抽取插件(Reader)、数据写入插件(Writer),实现任意结构化、...
业务背景 假设您是一家综合性互联网公司的数据开发工程师,负责处理三个核心业务线的数据:电商(ecom)、金融(finance)和物流(logistics),且后续存在增加业务线的可能。您需要每天对这三个业务线的用户行为日志执行相同的聚合逻辑,...
在 新建Lindorm(宽表)数据源 页面中,配置相关连接数据源参数。配置数据源的基本信息。参数 描述 数据源名称 命名规则如下:只能包含中文、英文字母大小写、数字、下划线(_)或短划线(-)。长度不能超过64字符。数据源编码 配置数据源...
在 新建Lindorm(宽表)数据源 页面中,配置相关连接数据源参数。配置数据源的基本信息。参数 描述 数据源名称 命名规则如下:只能包含中文、英文字母大小写、数字、下划线(_)或短划线(-)。长度不能超过64字符。数据源编码 配置数据源...
业务背景 假设您是一家综合性互联网公司的数据开发工程师,负责处理三个核心业务线的数据:电商(ecom)、金融(finance)和物流(logistics),且后续存在增加业务线的可能。您需要每天对这三个业务线的用户行为日志执行相同的聚合逻辑,...
购买 数据安全中心DSC(Data Security Center)实例后,在使用DSC检测ECS自建数据库中存在的敏感数据或监控数据库异常操作前,您需要先完成资产实例授权。使用限制 仅支持VPC网络中的ECS自建数据库。仅支持MySQL、SQL Server和Oracle类型的...
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后,删除源数据库中的数据,以提高数据库查询性能,降低在线存储成本。本文档以新建数据清理为例,介绍如何在 ODC 中清理数据库 test2 中的表 employee。说明 文中所使用的均为示例...
相关操作 在 数据管理 页面,执行如下操作:操作 说明 搜索数据 在左上角的搜索框中,输入关键字,单击 图标,筛选需要的目标数据。查看数据详情 在数据列表,单击目标数据 操作 列的 详情,可查看空间数据基本信息、空间信息和缩略图。...
本文介绍数据资产授权的常见问题及解决方法。授权失败的可能原因 您授权允许 数据安全中心DSC(Data Security Center)访问MaxCompute、RDS和对象存储OSS数据时,可能会出现授权失败的情况。您可以参考以下原因排查...相关文档 数据资产授权
创建RDS SQL Server实例后,您需要在实例中创建与您业务相关的数据库。您可参考本文快速掌握数据库创建的基本流程,并了解如何规划数据库数量以满足业务需求。前提条件 已 创建RDS SQL Server实例。数据库数量限制 2008 R2数据库最大数量为...
2021年08月 功能名称 功能描述 发布时间 发布地域 相关文档 产品计费:策略优化及数据处理单元规格拓展 同步任务和集成任务对应的数据处理单元由1:1修改为3:1,且前200个集成任务免费,进一步降低数据上云成本。同时,手动任务、汇总逻辑表...
购买 数据安全中心DSC(Data Security Center)实例后,在使用DSC检测云产品(包括RDS、PolarDB等)中存在的敏感数据或审计数据库活动前,您需要先完成资产实例授权。本文适用的数据库范围 DSC仅支持为阿里云上的数据库资产提供数据安全...
本文介绍了外部数据的相关内容。简介 本数据库实现了部分的 SQL/MED 规定,允许我们使用普通 SQL 查询来访问位于本地数据库之外的数据。这种数据被称为外部数据。说明 这种用法不要和外键混淆,后者是数据库中的一种约束 外部数据可以在...
本文介绍如何通过DataWorks将Oracle数据导入至 云原生数据仓库 AnalyticDB MySQL 版。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前,配置好您需要同步的源端和目标端数据库,以便在同步任务配置过程中,可通过选择数据源...
本文档旨在介绍如何通过提交数据归档工单实现归档数据。背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中,以解决因线上数据增多影响查询性能与业务运作的问题。本文档以新建数据归档为例,介绍如何在 ...相关文档 数据清理
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
DataWorks的平台安全诊断,为您提供了当前DataWorks工作空间与数据源在数据传输、存储、运算等过程中,与身份认证、访问权限控制、开发模式等功能相关的安全能力,以及诊断相关安全问题的最佳实践,帮助您及时发现平台的安全隐患,在进行...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源:如果业务数据源区分生产数据源和开发数据源,则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源,则选择 生产数据源。标签 您可根据标签给数据源进行分类...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源:如果业务数据源区分生产数据源和开发数据源,则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源,则选择 生产数据源。标签 您可根据标签给数据源进行分类...
ClickHouse控制台查看监控 2022年04月 功能名称 描述 相关文档 备份恢复 新特性 版本为20.3、20.8和21.8的 云数据库ClickHouse 社区兼容版 集群支持数据备份和数据恢复功能。数据备份 数据恢复 新规格发布 新特性 社区兼容版集群新增80核...
若您要使用DataV-Note(智能分析)对您的数据库、数据仓库(例如,RDS MySQL、MaxCompute)、本地文件数据进行分析及报告制作,则需先将相应数据创建为DataV-Note的数据源或导入至DataV-Note。本文为您介绍DataV-Note支持接入的数据类型,...
数据地图是在元数据基础上提供的企业数据目录管理模块,涵盖全局数据检索、元数据详情查看、数据预览、数据血缘和数据类目管理等功能。数据地图可以帮助您更好地查找、理解和使用数据。版本限制 仅DataWorks标准版及以上版本支持代码搜索、...