步骤二:连接数据库 数据库连接方式说明 DSC通过收集和分析数据库中存储的数据、数据库活动,提供数据的分类分级、数据审计、安全态势监控等能力。DSC需要连接您的数据库,才能实现相应能力。DSC支持使用一键连接和账密连接两种方式连接...
数据管理DMS的SQL窗口可以非常便捷地执行各类SQL语句,同时支持以可视化的方式对目标数据库进行增、删、改、查等操作,适用于数据查询、数据开发等场景。前提条件 已具备目标库或表的查询权限。申请权限,请参见 通过提交工单申请资产权限...
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
Kafka(离线与实时)Logstash(流式)支持将开源Logstash收集的日志数据写入MaxCompute。Logstash(流式)阿里云Flink(流式)支持使用Flink在高并发、高QPS场景下写入MaxCompute。阿里云Flink(流式)DataHub(实时)DataHub是MaxCompute...
Kafka是应用较为广泛的分布式、高吞吐量、高可扩展性消息队列服务,普遍用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域,是大数据生态中不可或缺的产品之一。通过数据传输服务DTS(Data Transmission Service),...
云数据库RDS、云原生数据库PolarDB、云数据库MongoDB、云数据库 Tair(兼容 Redis)、云原生数据仓库AnalyticDB PostgreSQL版产品的备份恢复功能均由 数据灾备 提供,各产品功能动态详情如下。功能发布更新 2025年 09月 功能名称 变更类型 ...
数据灾备中心BDRC(Backup and Disaster Recovery Center)作为阿里云企业灾备管理服务,通过智能巡检,发现云上数据资源,展示数据资源保护状态并建议修复方案,使用策略中心对数据资源进行集中化管理,同时提供定制化报表,帮助客户简单...
同步自动收集统计信息 由于异步自动收集统计信息存在延时(约1分钟),作为异步自动收集统计信息的补充,云原生数据仓库 AnalyticDB PostgreSQL 版 也有同步自动收集统计信息的功能。即在表中数据发生变更的命令执行结束前,同步地自动收集...
说明 相关文档 数据迁移 上传下载数据 MaxCompute提供Tunnel批量数据通道、Streaming Tunnel流式数据写入通道和DataHub实时数据通道三种数据上传下载的通道,同时还支持基于DataHub和Tunnel提供的SDK实现上传下载数据,满足多样化场景需求...
OceanBase 数据库相同租户之间的数据同步 新功能特性 迁移 PostgreSQL 数据库的数据至 OceanBase 数据库 Oracle 租户时,新增支持动态修改迁移/同步对象,包括动态增加/减少对象和动态修改匹配规则,支持用户在一个数据迁移/同步任务中管理...
该数据包括在2015年8月18日至2015年9月18日期间,在两个站点(加州Santa Monica(ID 9410840)和加州(Coyote Creek(ID 9414575))上收集到的水位(ft)观测值,这些数值每6秒收集一次,总共15,258个观测值。请注意,average_temperature...
如果您的业务读流量较小或暂时不需要使用数据库代理的相关功能,可以参考本文,关闭RDS MySQL数据库代理。关于RDS数据库代理的使用问题和更多相关信息,欢迎加入用户钉钉群(106730000316)进行咨询、反馈和交流。前提条件 已开通数据库...
AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能,可以定期自动诊断数据库内的所有表,并生成诊断信息表。您可以通过诊断信息表,查看表的膨胀情况并获得相应的处理建议(如执行VACUUM或VACUUM FULL操作)。注意事项 智能诊断数据膨胀...
OceanBase Binlog 服务是用于收集 OceanBase 的事务日志并转换为 MySQL Binlog 的服务,主要用于实时数据订阅等场景。背景信息 MySQL Binlog 是实现主从复制和数据订阅的起点,用户可以以较低的性能和消耗来开启 Binlog 日志,主要用于实时...
通过数据同步功能同步SLS数据至数仓版 通过数据同步功能同步SLS数据至湖仓版 无感数据集成(Zero-ETL)支持无感集成(Zero-ETL)功能,可创建 RDS for MySQL 和 PolarDB for MySQL 的同步链路,可以帮助您一站式完成数据同步和管理,实现...
pg_dump的数据库活动通常由统计收集器收集,如果不需要收集,可以通过 PGOPTIONS 或 ALTER USER 命令将参数 track_counts 设置为 false。示例 执行以下命令,将名称为 mydb 的数据库备份到SQL脚本文件中:pg_dump mydb db.sql 执行以下命令...
敏感数据主要包括客户资料、技术资料、个人信息等高价值数据,以不同形式存在于客户资产中。敏感数据的泄露会给企业带来严重的经济和品牌损失。数据作为客户重要的信息资产,需要得到有效保护,确保有明确定义的、技术可实现的数据分类与...
数安侧分类 法规分类 个人信息 用户数据 公司信息 经营管理数据 技术管理 系统运维数据 业务数据 业务数据 营销服务 业务数据 综合管理 经营管理数据 法规分类说明,请参见《数据安全技术-数据分类分级规则》(GB/T 43697-2024)附录A中的 ...
个人信息 甲乙双方均应严格遵守网络安全与数据保护相关法律法规的要求,其中,用户使用瓴羊服务收集、储存、处理、使用的个人信息和实施与这些数据有关的活动,须遵循合法、正当、必要原则,且应当遵守相关法律法规、瓴羊产品服务协议和瓴...
DM(达梦)数据源 Milvus数据源 TiDB数据源 DRDS(PolarDB-X 1.0)数据源 MongoDB数据源 TSDB数据源 Elasticsearch数据源 MySQL数据源 Vertica数据源 FTP数据源 OpenSearch数据源 TOS数据源 GBase8a数据源 Oracle数据源 HBase数据源 Graph ...
Amazon S3数据源 Graph Database(GDB)数据源 PolarDB数据源 Amazon Redshift数据源 HDFS数据源 PolarDB-X 2.0数据源 AnalyticDB for MySQL 2.0数据源 Hive数据源 PostgreSQL数据源 AnalyticDB for MySQL 3.0数据源 Hologres数据源 Redis...
元数据 API 标题 API概述 目录 目录 CreateCatalog 创建数据湖数据目录 创建数据湖数据目录。DeleteCatalog 删除数据湖数据目录 删除数据目录。UpdateCatalog 更新目录 更新数据目录内容。ListCatalogs 获取数据目录列表 分页查询,获取...
企业管理员使用数据域可以基于业务属性、组织架构、数据特征等维度对数据资产进行分类管理。通过将拥有共同属性的数据资产集中到同一个数据域中,管理员可以高效管理数据资产及资产中的敏感数据。本文介绍如何使用数据域功能分类管理资产。...
在弹出的添加 数据对话框 中,选择需要添加的数据源类型,支持添加 RDS for PostgreSQL数据源、RDS for MySQL数据源、兼容MySQL数据库的数据源、实时数仓Hologres数据源、AnalyticDB for MySQL数据源。操作数据集 在数据集管理页面右上角...
元数据管理是构建数据湖重要一环,通过有效的集中式元数据管理,可以提升数据资产价值。本文为您介绍数据湖构建中数据库、数据表及函数的相关操作。数据库 创建数据库 登录 数据湖管理控制台。在左侧菜单栏,选择 元数据 元数据管理。单击 ...
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台,提供企业级数据资产构建能力和一致性使用体验,助力客户快速构建数据智能平台,实现数据资源统一管理,挖掘潜在规律,优化业务决策,让大数据真正的驱动客户业务。...
数据库 数据库 ListDatabases 查询数据地图数据库列表 查询数据地图中给定实例/集群/数据目录下的数据库列表。对于dlf/starrocks类型,查询给定数据目录下的数据库列表,其中starocks类型仅支持查询Internal Catalog;对于其他类型,查询...
DLF数据权限:主要控制DLF内部资源的访问和使用权限,包括数据库、数据表、数据列、函数、数据目录等,以及数据权限的操作权限。数据权限详细说明,请参见 数据权限。数据授权相关的操作,请参见 数据授权。湖管理 湖管理包括Location托管...
在ChatBI中进行交互式会话之前,需要通过数据集来圈定开展分析的数据范围。数据集可以是目标数据源中的数据表,也可以是本地文件。准备工作 已在使用ChatBI功能的对应地域创建 Serverless资源组。适用范围 数据源类型的数据集,仅支持选择...
数据管理功能,以数据源维度展示了数据看板中所有组件使用的数据源合集,您可在该界面查看/编辑数据源配置,或批量替换目标组件所使用的数据源类型。批量替换数据源时,仅会更改数据来源(例如,由Hologres更改为RDS for MySQL),数据源已...
当线上数据库中的历史数据(访问率很低的数据)越来越多,占用的存储越来越大,以至于会影响数据库的查询性能与业务运转,此时您可以使用 数据管理DMS 的数据归档功能,周期性地将符合筛选条件的表数据归档至其他数据库或存储服务中。...
数据传输(DTS)数据同步 数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。更多信息,请参见 数据同步方案概览。数据迁移 数据迁移...
MaxCompute提供多种渠道,以便您从业务系统或外部数据源写入数据到MaxCompute,或者从MaxCompute写出数据到外部系统或外部数据源。数据传输渠道 SDK-Tunnel渠道 外表(湖仓一体)JDBC渠道 场景数据写入MaxCompute 离线数据批量写入(数据...
监控告警 数仓和数据湖 功能集 功能 功能描述 参考文档 数据存储 数据缓存 云数据库SelectDB支持数据缓存功能,当您需要管理缓存数据并提升云数据库 SelectDB 版的访问速度时,可以根据该文档对缓存进行有效管理,并利用LRU和TTL管理策略,...
在数据管理DMS离线集成中,可以组合各类任务节点,形成数据流,通过周期调度运行达到数据加工、数据同步的目的。本文介绍创建数据流和配置的方法。前提条件 支持的数据库类型:MySQL:RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB...
若您要使用DataV-Note(智能分析)对您的数据库、数据仓库(例如,RDS MySQL、MaxCompute)、本地文件数据进行分析及报告制作,则需先将相应数据创建为DataV-Note的数据源或导入至DataV-Note。本文为您介绍DataV-Note支持接入的数据类型,...
数据源用于连接各类数据库和存储服务(如MaxCompute、MySQL、OSS等),是 数据集成同步任务 的必备配置,决定任务读取(数据来源)和写入(数据去向)的数据库。数据源的作用 在数据集成任务中,数据源扮演着数据流动两端的“端点”角色:...
数据分类分级是保障数据安全的重要前提。它为各行业提供对敏感数据类型及其级别的识别与划分能力,能够有效检测组织数据资产中是否存在敏感信息,并根据其敏感程度进行等级划分。分类分级不仅有助于准确掌握数据资产中的敏感内容,还为后续...
数据源适配组件 数据源方式接入业务数据流程如下:先接入数据,再通过 数据响应结果 观察业务数据和组件数据的结构差距,通过 数据映射 或 过滤器 进行数据的适配处理,最终得到适配数据。本示例基于一份关键数据字段为 category 产品类别...
您可以使用 DMS 录入云数据库 OceanBase 的数据,通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能,帮助企业高效、安全地挖掘数据价值,助力企业数字化转型。什么是数据管理DMS 支持的数据库...