目标库 Hologres实例下的数据库名称。外部表来源 已有外部表 已经提前在Hologres中创建映射MaxCompute数据的外部表。新建外部表 表示无相应的外部表，需要同步时新建。外部Schema Hologres中已创建的MaxCompute外部表所在的Schema。当 外部...
本文为您介绍如何通过DataWorks加工采集至MaxCompute的数据，并获取清洗后的数据。前提条件 开始本文的操作前，请首先完成 准备数据 中的操作。新建表 进入 数据开发 页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据...
如果您已部署CDH集群并希望借助DataWorks执行Hive任务（例如，数据查询作业或处理批量数据），可以使用CDH Hive节点。本文为您介绍如何创建CDH Hive节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于...
在DataWorks中，CDH Presto节点可以实现实时数据分析。该节点提供了分布式SQL查询引擎，进一步增强了CDH环境的数据分析能力。本文为您介绍如何创建和使用CDH Presto节点。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发...
除了DTS，您也可以使用其他工具迁移数据库，本文以本地SQL Server数据库到阿里云云数据库SQL Server 2012的数据全量迁移为例，介绍了如何通过使用SQL Server Management Studio（SSMS）和大容量复制程序实用工具（BCP）来迁移SQL Server...
开启归档模式 数据库备份DBS 通过Oracle的RMAN工具进行数据库备份。Oracle数据库的归档模式默认为关闭状态，需将其开启才能进行备份。使用系统管理员sysdba角色通过 as sysdba 命令登录Oracle数据库。通过SQL命令 ARCHIVE LOG LIST 查询...
您可以创建EMR（E-MapReduce）Impala节点，对PB级大数据进行快速、实时的交互式SQL查询。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，所以您创建节点前需要先...
您可以通过企业数据智能平台的可视化操作界面，编排节点工作流、配置运行参数和调度参数，从而验证数据处理流程的正确性。前提条件 已根据快速入门教程完成加载样例数据操作，具体信息请参见 样例数据。已根据快速入门教程完成数据标准建模...
通道配置：通过离线集成管道通道配置，您可定义离线集成任务运行时的容错、并发数、JVM资源、数据库配置及集成管道流量监控。更多信息，离线集成管道通道配置。质量监控：您可以为集成管道中的数据表配置质量监控规则。更多信息，请参见 ...
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
在使用 AnalyticDB PostgreSQL版 向量数据库前，需按照本文操作初始化向量数据库以及全文检索相关功能，每个实例仅需执行一次即可。所有的向量数据都存放在固定的库knowledgebase中，因此每个实例需执行一次初始化。初始化向量数据库的作用...
您可以创建EMR（E-MapReduce）HIVE节点，通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库，完成海量日志数据的分析和开发工作。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务...
数据集成附加字段支持的变量字段如下：EXECUTE_TIME：执行时间 UPDATE_TIME：更新时间 DB_NAME_SRC：原始数据库名称 DB_NAME_SRC_TRANSED：转换后数据库名称 DATASOURCE_NAME_SRC：源端数据源名称 DATASOURCE_NAME_DEST：目的端数据源名称 ...
场景描述 企业上云最大的难点在于业务数据库迁移，很多企业在上云前，数据库域名或IP往往是已被写入应用客户端代码中，当从本地构建的数据库迁移到RDS时，需要用户修改客户端代码进行应用改造，此过程复杂，且风险高。解决方案 通过内网DNS...
单击 临时查询工具栏的 图标。在 自然语言SQL生成 对话框中，下拉选择需要分析的数据表并输入需要查看的结果描述，例如这里的获取门店订单总数和总计销售额，单击 图标。在 自然语言生成 对话框中，确认SQL语句无误后，单击 插入SQL。自动...
标注数据是模型训练的基础核心，公有云基于数据的标注开发了一套数据标注的功能供用户使用，【数据标注功能】：画笔、区域、矩形、圆形、折线、十字和AI画笔的工具使用，可针对不同的缺陷类型比如划痕、斑点、区域等瑕疵进行使用【图片的...
本文向您介绍工具栏中的全局搜索功能。说明 全局搜索功能为7.0版本产品新增功能，请根据 新版控制台 环境进行操作。前提条件 已登录DataV控制台 已进入画布编辑器页面 操作步骤 在画布上方单击 搜索，直接进入 搜索 面板。单击空白处可退出...
Presto（即PrestoDB）是一款灵活、可扩展的分布式SQL查询引擎，支持使用标准的SQL查询语言进行大数据的交互式分析查询（Presto概述），DataWorks为您提供EMR Presto节点，便于您在DataWorks上进行Presto任务的开发和周期性调度。...
pg_dump是 PolarDB PostgreSQL版（兼容Oracle）提供的一种逻辑备份工具，用于将集群中的单个数据库备份为脚本文件或其他存档文件。简介 pg_dump用于备份单个数据库。即使当前数据库正在被访问，也会对正在访问的数据进行一致的备份，并且在...
您可以通过创建EMR（E-MapReduce）Spark SQL节点，实现分布式SQL查询引擎处理结构化数据，提高作业的执行效率。前提条件 数据开发（DataStudio）中已创建业务流程。数据开发（DataStudio）基于业务流程对不同开发引擎进行具体开发操作，...
DataWorks的SSH节点可通过指定SSH数据源的方式，在DataWorks远程访问该数据源连接的主机，并触发脚本在远程主机执行。例如，您可通过此方式实现在DataWorks远程访问ECS（Elastic Compute Service）并触发ECS中的脚本周期性调度执行。本文为...
无 配置目标数据湖信息 目标数据库 存储目标表的数据库。database_1 目标数据表名称 作业会以此名称来建表。anti_rds 存储格式 目标表的数据格式。Hudi 数据湖存储位置 数据存储的OSS路径。格式为 oss:/名称>/目录名称>/。oss:/doc-test-01...
Spark是一个通用的大数据分析引擎，具有高性能、易用和普遍性等特点，可用于进行复杂的内存分析，构建大型、低延迟的数据分析应用。DataWorks为您提供CDH Spark节点，便于您在DataWorks上进行Spark任务的开发和周期性调度。本文为您介绍...
8：脚本编辑工具栏 脚本编辑工具栏包含6个分组：分组 说明 常用 用于模拟终端设备的基本操作。图像 用于采用不同方式识别图片控件。说明 为提高图像识别度，建议：截取屏幕图像时选择颜色对比鲜明的区域。OCR（Optical Character ...
7.数据视图 1)数据视图工具栏 说明：导入：导入本地Excel文件，需要列名和Excel中对应。导出：将数据视图中的数据导出到本地，输出形式为Excel文件。8.参数面板 1)参数面板可选择多种参数类型。2)点击设置值可以设置默认值和修改参数名称。...
本文介绍如何通过数据库备份DBS恢复 PolarDB分布式版 数据库。前提条件 已完成数据库备份，具体操作，请参见 PolarDB分布式版逻辑备份。操作步骤 登录 DBS控制台。单击左侧导航栏中的 备份计划，然后在上方选择目标地域。找到目标备份计划...
数据库驱动 Lindorm面向目前主流的应用开发语言分别提供了以下数据库驱动（Database Driver，可以简单理解为执行SQL的SDK）。Java Lindorm面向Java语言应用开发提供了遵循 JDBC 接口规范的Driver。关于该Driver的安装和使用，请参见 使用...
所有右侧工具栏的配置、数据修改都会实时展示在中心画布的组件上。组件的白框代表了组件的容器范围大小，每个方向上的白框都可以缩放来测试组件在任意方向缩放的表现。4 组件配置栏 分为 配置、数据、交互 和 发布 4个面板。配置：配置页面...
所有右侧工具栏的配置、数据修改都会实时展示在中心画布的组件上。组件的白框代表了组件的容器范围大小，每个方向上的白框都可以缩放来测试组件在任意方向缩放的表现。4 组件配置栏 分为 配置、数据、交互 和 发布 4个面板。配置：配置页面...
已选择的恢复时间点 选择需要恢复的时间，设置的时间必须在可恢复的时间范围内 恢复目标数据库 数据库所在位置 选择恢复目标数据库所在位置，支持类型如下：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的...
支持的选项：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 PolarDB实例 无公网IP:Port的自建数据库（通过数据库网关DG接入）数据库类型 默认为Oracle数据库。实例地区 选择恢复的目标实例的...
通过数据管理DMS登录云虚拟主机的MySQL数据库后，无法看到数据库信息。本文介绍这种情况的可能原因和解决方案。问题现象 通过数据管理DMS登录云虚拟主机的MySQL数据库，无法看到数据库的任何信息。可能原因 在本地主机的数据库客户端误删除...
在读写分离、高并发读等业务场景中，建议在业务应用中将数据库连接地址配置为数据库代理连接地址，RDS PostgreSQL可以根据代理连接地址配置的读写属性和读权重进行自动分配，减少主实例负载。本文介绍如何通过数据库代理连接地址连接RDS ...
恢复目标数据库 数据库所在位置 本例中将备份集恢复至提前新建的 RDS实例 实例中，请确保目标数据库服务正在运行中，同时还支持恢复至如下数据库实例所在位置：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入...
单击工具栏的，切换代码调试阶段任务执行所用的调度资源组。其他任务 单个任务修改 在左侧导航栏，单击 数据开发，找到目标任务，进入编辑页面。在 调度配置 页面，在 资源属性 区域内修改 调度资源组。保存任务并在运行成功后提交。批量...
本文档为您介绍创建RDS MySQL数据库表的具体步骤。操作步骤 登录阿里云 云数据库RDS控制台。单击 创建实例，创建RDS MySQL实例。单击RDS MySQL实例链接，进入 基本信息 页面。说明 您需要记录RDS MySQL实例的内网和外网地址，后面在DataV中...
数据库管理 在左侧导航栏单击 数据库管理，进入数据库管理页面，您可在数据库列表中查看 数据库名称、字符集、状态、已使用磁盘、绑定账号 等信息，具体操作参见 数据库管理。账号管理 在左侧导航栏单击 账号管理，进入账号管理页面，可...
恢复目标数据库 数据库所在位置 本例中将备份集恢复至提前新建的 RDS实例 实例中，请确保目标数据库服务正在运行中，同时还支持恢复至如下数据库实例所在位置：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入...
支持的数据库类型 源数据库：Oracle、Teradata、DB2 for LUW。目标库：PolarDB MySQL引擎、PolarDB PostgreSQL引擎、PolarDB O引擎、PolarDB-X、RDS MySQL、RDS PostgreSQL、AnalyticDB PostgreSQL版。新建数据库档案 如下以目标数据库为 ...