DSC支持的数据库类型和地域，请参见 支持的数据资产类型 和 支持的地域。本示例规划使用已创建的华北3（张家口）地域的RDS SQL Server实例的数据库表进行敏感数据识别扫描。RDS SQL Server实例、数据库管理账号及数据库的创建，请参见 快速...
全局数据源管理 添加的数据源会按照类型分别放至数据库、其他、应用网关、文件等页签，平台支持以页签为单位（即相关操作的结果会展示在相应页签下），执行如下全局操作：查看数据源：可查看当前已添加的数据源名称、类型、创建时间等基本...
您需要通过创建导出任务来设置筛选条件，只导出满足条件的数据。说明 安全报告能导出的数据包括：设备端安全SDK、IoT安全管理一体机（探针）识别的威胁、漏洞。创建导出任务 1，登录 产品控制台，在左侧菜单中选择 安全报告，单击 创建任务...
数据服务功能支持在项目中为数据源创建可以被访问调用的数据服务，本文为您介绍DataV-Atlas（分析地图）如何创建和管理数据服务。发布数据服务 为项目中的数据源创建可被访问和调用的数据服务。登录 DataV-Atlas控制台 并进入目标项目的...
通过兼容MySQL数据库的数据源，您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中，以确保DataV-Board能正常访问您的数据...
数据扫描会影响我的数据库性能吗？数据安全中心DSC（Data Security Center）采用全量扫描、增量扫描和定时扫描策略扫描您的数据库。全量扫描会对您的数据库性能产生较小的影响，不会影响您数据库的正常业务。增量扫描只扫描修改后的文件，...
数据订阅功能可以帮助您获取数据库的实时增量数据，适用于缓存更新策略、业务异步解耦、异构数据源的数据实时同步和复杂ETL的数据实时同步等多种业务场景。本文介绍数据订阅功能的具体使用流程，帮助您快速掌握创建、监控、管理数据订阅...
MaxCompute目前提供了三种不同类型的数据类型版本，包括1.0数据类型、2.0数据类型以及Hive兼容数据类型，您可以根据业务需求选择合适的数据类型版本。本文为您介绍三种数据类型版本、选择数据类型版本以及查看和修改项目的数据类型版本。...
在左侧导航栏，选择全部资源列表下，目标数据源的数据表。在数据集管理页面，单击 目标数据表卡片，查看数据集详情信息。说明 另一入口：单击全部资源页面左上角的 图标，在 操作 列单击 探查。在 数据预览 页签，查看数据集的表数据信息。...
本文适用的数据库范围 DSC仅支持为阿里云上的数据库资产提供数据安全服务，支持的数据库类型详情，请参见 支持的数据资产类型。本文以RDS数据库为例介绍授权和接入的完整流程，可参考本文接入DSC的数据库类型包括：RDS、PolarDB、PolarDB-X...
通过选择已注册的数据源端数据和目标端，实现全量任务自动建表的方式创建离线同步周期任务，本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组，具体操作，请参见 新建工作组。已在工作组中...
为满足多样化的数据导入需求，AnalyticDB for MySQL 提供了多种数据导入方式，包括：通过外表导入数据、通过DataWorks导入数据、通过DTS导入数据以及使用JDBC通过程序导入数据等。您可以通过本文了解各导入方式的特性及适用场景，帮助您...
热力层是三维城市构建器的数据映射图层，能够使用热力网格点的形式表现地理位置上的点数据信息。热力层图层支持独立的样式和数据配置，包括热力层网格数、透明度、热力半径和色带等参数。本文介绍热力层配置项的含义。在场景编辑器左侧图层...
在DataV-Board（数据看板）中使用达梦数据库之前，需要先将达梦数据库实例添加为DataV-Board的数据源。本文为您介绍如何添加达梦数据库。前提条件 已准备好待添加的达梦数据库实例信息。使用限制 仅支持DataV企业版及以上版本。通过内网...
支持的数据源 DataWorks支持多种数据源创建数据库节点，以下为支持的数据库节点：说明 应用于数据库节点的数据源在创建时均需以 JDBC连接串 形式创建数据源。部分数据库本身支持存储过程，但在DataWorks数据开发中暂不支持使用存储过程。...
基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog StarRocks 2.3及以上版本支持Catalog功能，方便您轻松访问并查询存储在各类外部源的数据。...
是否支持再次分享已被分享的数据源？数据源的创建者是否有权控制该数据源？什么是私有模式的数据源？哪些用户能够收回数据源的分享权限？如何检查数据源分享关系的移除、关联情况？分享数据源后，其资源组的连通状态是否会被同步分享？分享...
如果您需要独立设置脱敏规则，请将行业模板中的数据类型设置为停用，并添加新的数据类型。在数据脱敏页面，点击 动态脱敏 页签，进入动态脱敏设置页面。单击动态脱敏页签内的 规则 页签，进入脱敏规则设置页面。单击左上角的 新增规则 按钮...
基于冷温热数据的数据量以及查询频度的特点，Lindorm时序引擎实现了对时序数据冷温热分层存储。如下所示：对于数据量最大的冷数据，时序引擎会自动根据用户设置的基于业务时间戳的冷热分界线自动将冷数据归档到冷存储中。当需要查询冷数据...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。核心能力 ...
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、iceberg（iceberg...
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
DataWorks为您提供的实时数据同步功能，方便您使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至目标数据库中，实现目标库实时保持和源库的数据对应。核心能力 实时同步支持的能力如下图所示：能力 描述 多种数据源...
在DataV-Board（数据看板）中使用人大金仓数据库之前，需要先将人大金仓数据库实例添加为DataV-Board的数据源。本文为您介绍如何添加人大金仓数据库。前提条件 已准备好待添加的人大金仓数据库实例信息。使用限制 仅支持DataV企业版及以上...
同步其他数据源的数据至ClickHouse数据源的场景中，完成源数据的信息配置后，需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源及...
MaxCompute平台支持丰富的数据上传和下载工具（其中大部分工具已经在GitHub公开源代码，以开源社区的方式进行维护）。您可以根据实际应用场景，选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端（Tunnel通道系列）...
公有云实例中创建数据源：公有云的实例中，单击 登录数据库，输入用户名，跳转至 ODC 后输入密码，会自动创建以该实例和用户名命名的数据源。操作步骤 方法一：ODC 首页中创建数据源 新建 OceanBase 数据源 重要 拥有 AdministratorAccess ...
自建数据库包含第三方云的数据库实例、部署在您本地的数据库、部署在ECS实例的数据库。库表结构任务 结构任务 库表结构同步 或 库表结构迁移 模块运行时对应的任务。全量任务 全量任务 全量同步 或 全量迁移 模块运行时对应的任务。增量...
重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中，以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面，...
MaxCompute支持通过DataWorks的 数据集成功能 以离线或实时方式导入其他数据源的数据，也支持导入部分类型的本地文件数据。本文介绍如何使用DataWorks将数据导入MaxCompute的。操作步骤 已 创建MaxCompute项目 和 创建表。用于存储后续同步...
您可以根据不同的业务为对应的实例配置不同的研发规范、研发流程、审批流程的设计与实施，轻松实现个性化、灵活、安全的数据库研发流程，构建企业专属的数据库DevOps流程。功能项 说明 结构设计 便捷、规范地完成表结构变更。普通数据变更 ...
提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，同时DMS内置的 数据灾备（DBS）还提供了低成本、高可靠的备份恢复能力，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。前置概念 ...
DataWorks的数据使用诊断，为您提供了对当前DataWorks工作空间的数据内容及数据隐私的安全保护能力，以及诊断相关安全问题的最佳实践及解决方案，帮助您快速建立数据使用时和使用后的基本安全体系。进入数据使用诊断 登录 DataWorks控制台...
动态轨迹层是三维城市构建器的数据映射图层，以一系列三维空间点之间的顺序连线形式表示人或物体移动的轨迹。动态轨迹层图层支持独立的样式和数据配置，包括动态轨迹层是否动效、显示头部、叠加模式、飞线速度、飞线长宽和颜色等参数。本文...
说明/app目录 是指 redash_server、redash_scheduler、redash_adhoc_worker、redash_scheduled_worker 四个容器中的/app目录。将 adb_spark_ds.py 文件复制到目标路径下。通过源码方式部署Redash，目标路径为：源码所在根目录/redash/query...
引用数据字典 选择已新建的数据字典，或新建新的数据字典后进行选择，新建数据字典的具体操作，请参见 新建数据字典。质量校验函数 选择已新建的质量校验函数，或新建质量校验函数后进行选择，新建质量校验函数的具体操作，请参见 新建质量...
若您需要在SQL变更或结构设计中快速载入多个数据库，可以创建一个数据库分组，将多个数据库环境、引擎类型相同的数据库绑定成为一个分组。本文介绍如何创建数据库分组。背景信息 当您的业务部署在多个地域，且存在多个数据库时，您每次做...
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
热力层是三维城市构建器的数据映射图层，能够使用热力网格点的形式表现地理位置上的点数据信息。热力层图层支持独立的样式和数据配置，包括热力层网格数、透明度、热力半径和色带等参数。本文介绍热力层配置项的含义。在场景编辑器左侧图层...