可以通过next逐条获取SQL执行结果数据，每条数据为表的一个字段的元数据（仅支持列名、数据类型）。获取列名：resultSet.getString("column_name")。获取列的数据类型：resultSet.getString("data_type")。ResultSet getColumns(String ...
数据灾备 支持对Windows或Linux操作系统上的Oracle数据库进行物理备份，支持备份Oracle单实例、Data Guard Physical Standby、RAC等多种架构的Oracle数据库。本文介绍Oracle物理备份，关于Oracle逻辑备份的信息，请参见 跨云或自建Oracle...
调用此API可以获取数据湖的数据目录。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
调用此API可以获取数据湖的数据目录。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 ...
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组，具体操作，请参见 新建工作组。已在工作组中...
当您需要进行数据库备份、导出数据库表进行数据分析等操作时，您可使用 数据管理DMS 的数据导出功能，该功能可通过提交工单的方式导出数据库。前提条件 数据库类型如下：MySQL系列：自建MySQL、RDS MySQL、PolarDB MySQL版、AnalyticDB for...
数据管理DMS的安全访问代理可以为访问数据库带来更全面的安全保障。实例开启安全访问代理后，您可以使用标准的MySQL、HTTPS协议，通过命令行、数据库管理工具或程序代码直接连接安全访问代理生成的地址，安全地访问目标实例。前提条件 支持...
在DataV-Atlas（分析地图）中基于PolarDB PostgreSQL数据制作分析地图前，需先将您的PolarDB PostgreSQL实例添加为DataV-Atlas的数据源。添加完成后，可在DataV-Atlas的各项目中使用该数据源，访问实例数据并创建数据分析地图。本文为您...
数据安全中心DSC根据为不同行业预先定义的敏感数据关键字段，扫描MaxCompute、OSS、阿里云数据库服务（RDS、PolarDB-X、PolarDB、OceanBase、表格存储等）和自建数据库中的数据，通过敏感数据规则，判断和打标敏感数据，为数据安全审计、...
Flume插件 OGG插件 Canal插件 Fluentd插件 数据订阅 数据订阅 目前用户在DataHub上消费Topic数据，为了做到“断点续消费”的功能，即消费者failover重启后可以继续从failover时间点继续获取数据，需要用户自己保存当前消费的点位信息，同时...
连接RDS PostgreSQL实例 在获取数据库代理连接地址和端口后，支持使用数据库代理连接地址连接RDS PostgreSQL实例。具体操作步骤，请参见 连接PostgreSQL实例。相关文档 连接PostgreSQL实例 配置数据库代理连接地址访问策略 相关API API ...
应用场景 针对不同业务场景所面临的不同数据安全问题，以下列举了一些全密态数据库适用的典型场景：保护应用数据，防止数据库端泄露 此场景适用于您作为应用服务方，希望防止数据库服务及其运维人员接触到业务敏感数据明文。加密操作在您的...
获取用户所属空间以及预置空间角色列表 获取组织下的工作空间列表 获取指定空间角色的配置信息 获取数据源配置信息 新建数据源 修改数据源基础信息 查询数据集详情 查询用户有权查看的作品列表 根据数据集ID，查询建立在数据集之上的所有...
连接RDS MySQL实例 在获取数据库代理连接地址和端口后，您可以通过命令行、客户端和应用程序连接数据库，目前暂不支持在DMS控制台中使用数据库代理的内网连接地址访问。连接方式详情请参见：通过命令行、客户端连接RDS MySQL实例 通过应用...
Quick BI是一款专为云上用户和企业量身打造的新一代自助式智能BI服务平台，其简单易用的可视化操作和灵活高效的多维分析能力，让精细化数据洞察为商业决策保驾护航。您可以在Quick BI中添加 AnalyticDB for MySQL 数据源并使用 AnalyticDB ...
RDS PostgreSQL支持使用pg_profile插件来统计数据库中资源密集型活动，用于分析优化数据库。您可以加入RDS PostgreSQL插件交流钉钉群（103525002795），进行咨询、交流和反馈，获取更多关于插件的信息。插件简介 此扩展基于PostgreSQL的...
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。源库限制 限制项 说明 网络...
该接口用于获取数据保护伞的敏感数据识别结果。接口说明 该 API 功能对应数据保护伞控制台界面的查询功能，通过与租户 ID 关联，获取指定租户的敏感数据识别结果。支持根据数据源类型、项目空间等维度进行筛选。支持对某个字段进行升降序...
同步ArgoDB数据源的数据至其他数据源的场景中，您需要先配置ArgoDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置ArgoDB输入组件。使用限制 ArgoDB输入组件支持数据格式为orc、parquet、text、holodesk、rc、seq...
准备工作 在连接数据库集群前，您需要进行以下操作：获取数据库连接地址与端口 集中式 PolarDB PostgreSQL版 集群 集中式 PolarDB PostgreSQL版 集群指 产品版本 为 企业版 或 标准版 的集群。您可以前往 PolarDB控制台，在 集群列表 中...
DataWorks提供的数据分析平台，可以流畅地进行数据处理、分析、加工及可视化操作。在数据分析板块中，您不仅可以在线洞察数据，还可以编辑和共享数据。本文为您介绍数据分析平台的优势、功能、权限等概要信息。产品优势 与本地数据分析相比...
完成数据订阅任务后，您可以使用DTS提供的SDK来订阅数据变更信息。本文介绍通过SDK代码消费分布式订阅数据，支持的数据源包括PolarDB-X 1.0和DMS LogicDB。前提条件 已创建订阅实例，且实例的运行状态为 正常。更多信息，请参见 创建...
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将符合筛选条件的表数据归档至其他数据库或存储服务中。...
若源库为8.0.23及以后版本的MySQL数据库，且待同步或迁移的数据中包含不可见的隐藏列，则可能会因为无法获取该列的数据而导致数据丢失。说明 您可以使用 ALTER TABLE table_name ALTER COLUMN column_name SET VISIBLE;命令，将该隐藏列...
然而，传统数据分析方案通常依赖专业数据团队获取与分析数据，而核心指标的下钻与归因则依赖运营团队的经验，这种方式不仅效率较低，还常因数据口径不一致而限制了数据的广泛应用。AnalyticDB for MySQL 的AI指标分析方案，提供了一套从...
然而，传统数据分析方案通常依赖专业数据团队获取与分析数据，而核心指标的下钻与归因则依赖运营团队的经验，这种方式不仅效率较低，还常因数据口径不一致而限制了数据的广泛应用。AnalyticDB for MySQL 的AI指标分析方案，提供了一套从...
数据订阅功能可以帮助您获取数据库的实时增量数据，您可以根据自身业务需求自由消费增量数据，并写入目标端，实现各类业务场景，例如缓存更新、业务异步解耦、异构数据源数据实时同步及含复杂ETL的多种业务场景。源库限制 限制项 说明 网络...
说明 单击 获取数据库，获取数据库列表，若对所有数据库进行压测，不需要进行选择，若对部分数据库进行压测，可选择最多不超过5个的数据库。在 目标端表结构和数据生成方式 区域框中，设置以下参数。配置 说明 数据库类型 目标数据库实例的...
在DataV-Note（智能分析）中基于PolarDB PostgreSQL数据制作报告前，需先将您的PolarDB PostgreSQL实例添加为DataV-Note的数据源。添加完成后，可在DataV-Note各项目中使用该数据源连接PolarDB PostgreSQL实例，访问实例数据并进行相应的...
准备工作 在连接数据库集群前，您需要进行以下操作：获取数据库连接地址与端口 您可以前往 PolarDB控制台，在 集群列表 中单击目标集群ID进入集群详情页。在 数据库连接 中获取 数据库连接地址（主地址、集群地址和自定义地址）。说明 推荐...
在DataV-Note（智能分析）中基于PostgreSQL数据制作报告前，需先将您的PostgreSQL实例添加为DataV-Note的数据源。添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您...
风险等级名称和默认风险等级描述的映射关系如下：NA：未识别到敏感数据 S1：1 级敏感数据 S2：2 级敏感数据 S3：3 级敏感数据 S4：4 级敏感数据 S5：5 级敏感数据 S6：6 级敏感数据 S7：7 级敏感数据 S8：8 级敏感数据 S9：9 级敏感数据 S...
准备工作 在连接数据库集群前，您需要进行以下操作：获取数据库连接地址与端口 您可以前往 PolarDB控制台，在 集群列表 中单击目标集群ID进入集群详情页。在 数据库连接 区域中获取 数据库连接地址。说明 推荐使用 集群地址，默认端口号为...
如需了解更多详细信息，可在数据集详情页的 基础信息 页签下，单击 数据集介绍 后的 点击查看，跳转至相应网页查看数据集的详细内容。管理自定义数据集 创建自定义数据集 单击AI Catalog数据目录左侧的 图标，在数据目录中找到 数据集 ...
数据传输（DTS）数据同步 数据同步功能帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。更多信息，请参见 数据同步方案概览。数据迁移 数据迁移...
在数据同步过程中，原始数据可能存在格式不一、信息冗余或非结构化等问题。DataWorks离线同步任务内置的数据处理功能，可在数据同步链路中直接对数据进行清洗、AI辅助处理和向量化转换，以简化ETL架构。使用限制 仅启用了新版数据开发的...
Notebook可以结合大语言模型给业务开发、数据开发、分析师和数据运营同学赋能，提升数据交付效率和数据自助分析的效率。当您需要将查询的数据、测试的数据、以及数据变化趋势等信息，以文档的形式进行交付，并在交付后，希望有工具可以替您...
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
当完成数据集配置后，点击 下一步 进入 数据洞察 步骤，将自动开始对数据集进行扫描，获取数据取值特征，有助于提升会话过程中的分析准确性。数据洞察可能耗时较久，您可以直接单击 完成，后续可在数据集中查看。查看数据集 在页面左侧导航...