若资源组与数据源无法连通，则相应数据源任务将无法正常执行。请确保独享调度资源组可正常访问您的主机，网络连通方案详情请参见 配置资源组与网络连通。说明 仅支持使用独享调度资源组运行SSH数据调度任务，并且独享调度资源组需 提交工单...
保障资源组与数据源（目标网络环境下的数据库、数据服务或其他数据）连通后，您还需保障资源组与数据源之间的数据交互不会因为白名单的限制而无法进行数据访问，例如，部分数据源设置白名单后会不允许白名单外的IP访问，您需要将资源组的...
行业场景 面向零售店铺的模型构建与管理 功能场景 数据引入：自定义RDBMS数据库及同步数据 DataX同步数据 使用Python读文件 规范建模：规范定义最佳实践 数据源云网络方案：网络方案概述 公网直连方案 VPN网关ECS反向代理方案 数据开发：...
准备数据源 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型及操作指导，请参见 Dataphin支持的数据源。重要 确定业务数据源类型后，在Dataphin创建...
准备数据源 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型及操作指导，请参见 Dataphin支持的数据源。重要 确定业务数据源类型后，在Dataphin创建...
测试资源组与数据来源、数据去向之间的网络连通性，确认独享数据集成资源组与数据源网络已打通。然后单击 下一步。配置任务。配置数据来源与去向。在 数据来源 和 数据去向 区域，配置任务读取与写入的表，及同步的数据范围。详情请参见 ...
网络环境 应用和自建数据库都需要部署于ECS实例，且与RDS实例位于同一地域，使得应用与RDS之间，以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例，则应用到自...
网络环境 应用和自建数据库都需要部署于ECS实例，且与RDS实例位于同一地域，使得应用与RDS之间，以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例，则应用到自...
网络环境 应用和自建数据库都需要部署于ECS实例，且与RDS实例位于同一地域，使得应用与RDS之间，以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例，则应用到自...
详情请参见：配置资源组与网络连通。配置数据来源与去向 配置数据来源：Hive侧参数 配置离线同步节点的数据来源相关参数。本实践将Hive数据整库离线同步至MaxCompute，数据来源为Hive表，配置要点如下所示。配置项 配置要点 数据源 选择...
同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个阿里云账号下，进行数据同步时如何...
BatchSize或maxfilesize参数控制一次性批量提交的记录数大小，该值可以减少数据同步与数据库网络交互次数，并提升吞吐量。但如果该值设置过大，会导致数据同步运行进程OOM异常。出现上述报错后，请参见：离线同步常见问题。附录：查看实际...
使用阿里云Dataphin可以实现零部署成本、零运维成本构建智能大数据研发与治理平台。使用阿里云Dataphin时，若已有的数据源部署在本地IDC机房，首先需要打通本地IDC机房与阿里云Dataphin网络。本文将介绍本地IDC机房数据源与阿里云Dataphin...
使用阿里云Dataphin可以实现零部署成本、零运维成本构建智能大数据研发与治理平台。使用阿里云Dataphin时，若已有的数据源部署在本地IDC机房，首先需要打通本地IDC机房与阿里云Dataphin网络。本文将介绍本地IDC机房数据源与阿里云Dataphin...
网络连通方案 DataWorks资源组本质上为一组阿里云ECS实例，在运行数据集成、数据开发等任务时，需保障资源组与数据源之间的网络是连通的，且不会因为白名单等特殊安全访问设置阻断资源组与数据源之间的网络连通性。网络连通 公共资源组支持...
本文介绍物联网络管理平台中相关的名词解释。名词 描述 物联网络管理平台 又称Alibaba Cloud Link WAN，简称Link WAN。网络商户 接入网关，自组网络的用户。应用商户 使用网络商户颁发的凭证，接入设备开发应用的用户。设备商户 制造与销售...
若资源组与数据源无法连通，则相应数据源任务将无法正常执行。后续操作 数据源创建完成后，您可根据需要执行如下操作：计算任务开发与调度：DataWorks的数据开发与运维中心模块，为您提供ClickHouse任务的开发与调度能力，若您需要基于该...
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
网络资源是指用于节点之间通信和数据传输的硬件和软件资源，除了包括广域网、局域网、交换机、路由器，还包括常用到的专有网络、虚拟交换机、负载均衡、弹性公网、VPN、DNS、CDN等资源。在分布式系统中，网络资源的主要作用是支持节点之间...
数据中心互联 快速搭建企业自建数据中心之间的专用通道，实现数据中心与数据中心之间的高速稳定互联。连锁企业跨地域内网搭建 通过快速搭建各个线下分支机构到阿里云POP网关链接，实现云下与云上的快速通道连接，提供企业跨地域低成本搭建...
工具用途 简介 Ganos FDW是对象关系型数据库PostgreSQL兼容版本（PolarDB PostgreSQL版）的一个时空引擎扩展，实现了PostgreSQL数据库与多种地理空间数据格式的集成和查询，它支持多格式数据源的映射为PostgreSQL的外部表，实现数据访问和...
工具用途 简介 Ganos FDW是对象关系型数据库PostgreSQL兼容版本（PolarDB PostgreSQL版（兼容Oracle））的一个时空引擎扩展，实现了PostgreSQL数据库与多种地理空间数据格式的集成和查询，它支持多格式数据源的映射为PostgreSQL的外部表，...
全球数据库网络（Global Database Network）全球数据库网络（GDN）是由分布在全球不同地域的多个 PolarDB 数据库集群组成的一张网络。网络中所有集群的数据保持同步，完全一致。更多详情，请参见 创建与删除全球数据库网络。主集群...
提供拓扑网络路径分析和大规模点云存储与查询支持 Ganos所包含的几何网络数据库引擎支持Node-Edge拓扑网络构建，支持Turn、U-Turn等概念，支持TSP（旅行商问题）、KSP（多条线路最短路径）、TRSP（转向限制的最短路径）等一系列路径规划...
若资源组与数据源无法连通，则相应数据源任务将无法正常执行。方式二：通过连接串模式创建数据源 该方式仅支持使用当前阿里云账号创建数据源。配置基础信息。参数 说明 数据源名称 定义数据源在DataWorks的名称，名称必须唯一。配置模式 ...
若资源组与数据源无法连通，则相应数据源任务将无法正常执行。后续操作 为保障您的开发过程更加顺畅，建议先阅读 DataWorks On Hologres使用说明，了解在DataWorks使用Hologres的开发流程、相关费用、环境准备、权限控制等内容。数据源创建...
若资源组与数据源无法连通，则相应数据源任务将无法正常执行。方式二：通过连接串模式创建数据源 使用该模式创建的数据源不支持用于数据开发和调度，只能用于数据同步。创建数据源配置如下。配置基础信息。参数 说明 数据源名称 定义数据源...
云数据传输 网络与CDN 云上网络 共享带宽 网络与CDN 云上网络 共享流量包 网络与CDN 云上网络 专有网络 VPC 网络与CDN 云上网络 NAT 网关 网络与CDN 云上网络 私网连接 网络与CDN 云上网络 云解析 PrivateZone 网络与CDN 云上网络 网络智能...
网络与资源配置：在下拉框中分别选择已创建的Oracle数据源、Tablestore数据源、独享数据集成资源组，单击 测试所有连通性，保障资源组与数据源之间的网络连通性。配置Oracle来源信息。单击页面上方的 Oracle来源，在Oracle来源信息选择所...
数据源在其他复杂网络环境下：您还需通过 VPN网关 或 高速通道 等方式，将新版资源组绑定的VPC与数据源所在VPC网络打通。详情请参见 网络连通方案。说明 如果下拉列表没有选项，需要前往 VPC控制台 创建。专有网络VPC的更多信息，请参见 ...
网络连通 为了实现数据源与Dataphin之间的网络互通，您需要将访问数据库的链接地址添加至Dataphin实例的沙箱白名单中。Dataphin的IP加入至RDS数据源的白名单中。详情请参见 通过客户端、命令行连接RDS MySQL实例。Dataphin不同区域的IP白...
若资源组与数据源无法连通，则相应数据源任务将无法正常执行。说明 数据源创建成功后平台会进行访问身份授权，即将访问身份账号添加至MaxCompute项目中，并为该身份映射MaxCompute对应的权限。在授权完成前，连通性测试可能会产生连通无...
数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能，该功能基于数据生态服务中的数据迁移，将数据存储至阿里云对象存储服务OSS（Object Storage Service，简称OSS）中，定期全量备份数据，实时增量同步数据，来满足对...
通过数据订阅功能，您可以实时订阅源库的增量数据，轻松帮助业务实现轻量级缓存更新、业务异步解耦、含ETL逻辑的数据实时同步等场景。本文为您介绍如何创建Oracle数据订阅任务。前提条件 自建Oracle数据库的版本为9i、10g、11g版本，暂不...
数据库审计支持3个数据库实例7天免费试用的活动，本文介绍如何开通数据库审计免费试用。限制条件 开通数据库审计免费试用需要满足以下条件：需要使用阿里云账号申请、开通数据库审计试用。每个阿里云主账号最多可申请2次免费试用。开通试用...
安全架构从阿里云云通信产品架构、网络安全、主机（含容器）安全、数据安全、应用安全、业务安全、内容安全、账户安全、安全监控与运营9个方面详细描述。2.安全责任共担 基于相关法律法规及阿里云云通信云平台对客户提供的相关应用及服务，...
通过离线单条管道构建同步任务 离线的数据管道通过定义数据来源和去向的数据源和数据集，提供一套抽象化的数据输入组件、数据输出组件及流程和转换组件，并基于此框架设计一套简化版的中间数据传输格式，从而实现数据源之间数据传输。数据...
网络连通配置，请参见 配置资源组与网络连通。（可选，RAM账号需要）进行任务开发的RAM账号已被添加至对应工作空间中，并具有 开发 或 空间管理员（权限较大，谨慎添加）角色权限。添加成员并授权，详情请参见 为工作空间添加空间成员。...
网络连通配置，请参见 配置资源组与网络连通。（可选，RAM账号需要）进行任务开发的RAM账号已被添加至对应工作空间中，并具有 开发 或 空间管理员（权限较大，谨慎添加）角色权限。添加成员并授权，详情请参见 为工作空间添加空间成员。...
网络连通配置，请参见 配置资源组与网络连通。（可选，RAM账号需要）进行任务开发的RAM账号已被添加至对应工作空间中，并具有 开发 或 空间管理员（权限较大，谨慎添加）角色权限。添加成员并授权，详情请参见 为工作空间添加空间成员。...