否 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够较大的提升数据抽取性能。说明 fetchSize 值过大（2048）可能造成数据同步进程OOM。否 1024 Writer脚本...
自动化执行 蚂蚁链抽奖活动审计合约服务可以自动执行存证操作，无需人工干预，提高了数据存证 的效率。快速接入设计 提供灵活便捷的API调用机制，实现标准一致，便捷接入。密钥托管服务 提供密钥托管服务，减少用户维护公私钥的复杂性和...
如何验证已经正确配置了数据库审计服务？审计结果中出现未知用户是什么情况？数据库审计服务是否支持审计通过ssh代理主机（已安装rmagent）连接的数据库？数据库审计服务支持查看管理员操作日志吗？使用数据库审计时，我可以为RAM用户授予...
通过将证书的相关信息和数据存储在区块链上，实现对证书的不可篡改性和可追溯性。应用场景 学历证书和职业资格证书（教育培训机构）学校、教育机构、企业、行业机构可以使用证书存证智能合约来存证学历证书和职业资格证书。证书存证智能...
这种类型的架构好处显而易见，数据Sharding的方式让数据存取以及处理可以并行化，计算存储本地化最大化提升了数据读写的带宽以及延时。在过去网络IO还是一大瓶颈的年代，分布式系统设计以及优化的一大原则就是尽量使得计算存储本地化，避免...
本文介绍在DataV中配置专有网络VPC（Virtual Private Cloud）内数据源的方法。通过专有网络VPC数据源的配置，您可以将专有网络VPC内的数据库接入到DataV中，并作为组件的数据源进行大屏展示。背景信息 了解专有网络VPC，详情请参见 什么是...
本文介绍在DataV中配置专有网络VPC（Virtual Private Cloud）内数据源的方法。通过专有网络VPC数据源的配置，您可以将专有网络VPC内的数据库接入到DataV中，并作为组件的数据源进行大屏展示。背景信息 了解专有网络VPC，详情请参见 什么是...
为了给您提供更优质的数据库审计服务，...如何验证已经正确配置了数据库审计服务？审计结果中出现未知用户是什么情况？数据库审计服务是否支持审计通过ssh代理主机（已安装rmagent）连接的数据库？数据库审计服务支持查看管理员操作日志吗？
全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家不同地域的多个 PolarDB 集群组成的网络，网络中所有集群的数据均保持同步。当您的业务部署在多个地域时，利用GDN可以实现应用访问数据库的低延迟和高稳定性。本文...
本文介绍如何开通 全球数据库网络（Global Database Network，简称GDN）服务的操作步骤。创建全球数据库网络 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。在 实例列表 页，单击 PolarDB-X 2.0 页签。找到目标实例，...
概览 您可以从以下几个方面排查无法连接云数据库MongoDB实例的问题：检查白名单设置 检查网络环境 检查实例连接地址 检查域名解析情况 检查实例状态 检查第三方工具 检查白名单设置 您需要将正确的客户端IP地址添加到云数据库MongoDB实例的...
说明 如果您在上述步骤中选择了数据源所在的可用区和交换机，可跳过此步骤。如果您选择了其他可用区和交换机，则需要参考以下指导进行自定义路由的操作。进入 DataWorks管控台资源组列表页面，找到您要连通的独享数据集成资源组，单击资源...
在 数据输出预览 窗口中，您可以根据需要修改输入数据，或者点击 手工构造数据 按钮自定义输入数据，然后单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点处理异常，或者产生脏数据时，也会实时反馈异常信息，能够...
为了保证DataWorks中数据同步、数据调度等任务的顺利操作，还需要确保资源组绑定的VPC网络与数据源（目标网络环境下的数据库、数据服务或其他数据）之间的连通性，本文为您提供了不同网络环境下的网络连通解决方案。背景信息 在DataWorks...
为了保证DataWorks中数据同步、数据调度等任务的顺利操作，还需要确保资源组绑定的VPC网络与数据源（目标网络环境下的数据库、数据服务或其他数据）之间的连通性，本文为您提供了不同网络环境下的网络连通解决方案。背景信息 在DataWorks...
本文为您介绍如何新建HttpFile和MySQL数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要...
在 数据输出预览 窗口，您可以根据需要修改输入数据，或单击 手工构造数据 按钮自定义输入数据，再单击 预览 按钮，查看当前数据处理节点对数据的处理结果，当数据处理节点对输入数据处理异常，或产生脏数据时，也会反馈出异常信息，能够...
如果您在数据迁移过程中切换 PolarDB-X 2.0 数据库的网络类型，请在切换成功后，调整数据迁移任务的网络连接信息。如果数据迁移任务中仅配置了全量迁移，请不要向源端实例写入新的数据，避免导致源端和目标端的数据不一致。建议您在配置...
通过MaxCompute与Hadoop构建湖仓一体方案旨在实现对海量数据的统一管理、存储和分析，提供了一个既能处理结构化、半结构化数据，又能满足高并发分析需求的一体化数据平台。本文为您介绍如何通过MaxCompute与Hadoop构建湖仓一体，以及管理湖...
提供了数据库层面的用户权限功能，从而在网络白名单的基础上进一步对数据访问进行更细的权限管理。数据存储默认采用多副本策略，充分保证数据的可用性。数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过...
分享数据看板时，可使用Token方式进行访问验证，该方式通过认证和授权机制，保证了数据看板分享过程的安全、高效和灵活。采用Token后，DataV-Board支持使用“携带自定义签名参数”或“不携带自定义签名参数”方式访问数据看板。“携带...
PolarDB数据源网络联通性测试失败怎么办？Oracle数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：...
本文以同阿里云主账号下的DataWorks资源组与数据源（目标网络环境下的数据库、数据服务或其他数据）为例，介绍如何进行网络连通。背景信息 网络连通方案选择取决于数据源与DataWorks工作空间资源组之间的环境关系。详情请参见 网络连通方案...
本文以同阿里云主账号下的DataWorks资源组与数据源（目标网络环境下的数据库、数据服务或其他数据）为例，介绍如何进行网络连通。背景信息 网络连通方案选择取决于数据源与DataWorks工作空间资源组之间的环境关系。详情请参见 网络连通方案...
PolarDB PostgreSQL版 提供了网络通道管理功能，通过网络通道您可以基于fdw外部表、dblink等多种方式实现跨库访问数据，使得跨库访问数据变得更为灵活和便捷。本文介绍如何通过网络通道跨库查询数据。前提条件 已创建源集群和目标集群。...
账本数据访问 经过数据授权，业务合约发出跨链数据访问请求，通过跨链寻址的方式，将跨链网络上对应的区块链上的数据安全可靠、不可篡改地返回给请求者。合约消息推送 用户可以授权其他区块链的指定合约，推送跨链合约消息，经过跨链寻址，...
不管使用什么外部数据包装器，本数据库会要求外部数据包装器从外部数据源获取数据，或者在更新命令的情况下传送数据到外部数据源。访问远程数据可能需要在外部数据源的授权。这些信息通过一个用户映射提供，它基于当前的本数据库角色提供了...
网络 无法保证网络连通，包括但不限于以下场景：数据源处于公网环境中，但数据源有白名单设置，限制了未知IP的访问。数据源处于阿里云VPC网络环境中。可通过网络配置连通复杂的网络环境。详情请参见：独享调度资源组。任务执行时效性要求 ...
PolarDB数据源网络联通性测试失败怎么办？MySQL数据源网络联通性测试失败怎么办？实时任务，运行报错：com.alibaba.otter.canal.parse.exception.PositionNotFoundException: can't find start position for XXX 实时任务，运行报错：...
VPC网络连接：VPC网络是一种虚拟化的私有网络环境，您可以在阿里云VPC私有网络环境中创建虚拟网络、子网、路由表等网络设备，并且可以通过VPN或专线等方式将VPC连接到阿里云的VPC中，构建私有网络环境。适用于对网络安全有较高要求的场景，...
VPC网络连接：VPC网络是一种虚拟化的私有网络环境，您可以在阿里云VPC私有网络环境中创建虚拟网络、子网、路由表等网络设备，并且可以通过VPN或专线等方式将VPC连接到阿里云的VPC中，构建私有网络环境。适用于对网络安全有较高要求的场景，...
HDFS是一个分布式文件系统，为您提供读取和写入HDFS双向通道的功能，本文为您介绍如何通过DataWorks将HDFS数据导入至 云原生数据仓库 AnalyticDB MySQL 版。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步...
上传数据至MaxCompute引擎：支持使用 Serverless资源组（推荐）、旧版资源组（独享调度资源组 或 独享数据集成资源组），且需确保数据上传任务使用的数据源与所选资源组网络连通。所选Serverless资源组和独享资源组需绑定至待接收数据的表...
本文以不同阿里云主账号下的DataWorks资源组与数据源（目标网络环境下的数据库、数据服务或其他数据）为例，介绍如何进行网络连通。背景信息 网络连通方案选择取决于数据源与DataWorks工作空间（资源组）间的环境关系。详情请参见 网络连通...
本文以不同阿里云主账号下的DataWorks资源组与数据源（目标网络环境下的数据库、数据服务或其他数据）为例，介绍如何进行网络连通。背景信息 网络连通方案选择取决于数据源与DataWorks工作空间（资源组）间的环境关系。详情请参见 网络连通...
网络连通方案 DataWorks资源组本质上为一组阿里云ECS实例，在运行数据集成、数据开发等任务时，需保障资源组与数据源之间的网络是连通的，且不会因为白名单等特殊安全访问设置阻断资源组与数据源之间的网络连通性。网络连通 公共资源组支持...
数据同步网络连通问题 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
如果添加路由后，仍然存在网络连通问题，请根据如下因素进行排查：如果独享资源组访问的是本地IDC数据源，或者跨账号访问数据源，请先参考 配置资源组与网络连通 进行网络连通，再为独享资源组绑定与数据库网络连通的VPC。如果您的数据源已...
使用数据同步任务同步了数据源表至Hologres的外部表。目前，Hologres Writer不支持写入数据至Hologres外部表。如何处理：您需要使用Hologres的内部表作为同步任务的目标表。如果Hologres目标表不存在，请在配置数据同步任务时使用 自动建表...
背景信息 随着国家对数据安全和个人敏感信息的加强监管，原子化的数据安全能力无法满足监管要求，国家标准和行业标准逐渐提出数据全生命周期的安全保障的需求，传统的三方安全加固和客户端加密都在客户成本、架构改造、数据库性能等带来了...