采集任务通过采集适配器连接到指定的数据源，将源数据库中的对象元数据信息采集至Dataphin，通过内置解析器进行解析后存储并进行统一呈现。本文为您介绍如何创建及管理元数据采集任务。前提条件 需先在 管理中心 数据源管理 应用系统 创建...
云数据库HBase是一个键值/宽表型的分布式数据库，适用于任何数据规模，可以提供单个毫秒响应的性能，尤其擅长低成本、高并发的场景，支持水平扩展到PB级存储和千万级QPS，在淘宝、支付宝、菜鸟等众多阿里巴巴核心服务中起到了关键支撑的...
增量同步阶段（Dsync Progress Report:ChangeStream）：全量同步完成后，DSync工具自动切换到此阶段，持续同步数据变更。进度指标含义 字段 含义 说明 Namespace 迁移对象 当前迁移的数据库和集合（db.collection）。Percent Complete 完成...
识别特征基于字段的数据内容、元数据属性，结合正则表达式、包含、不包含等运算条件对数据特征进行表达，从而智能推荐相关的数据分类分级或数据标准。Dataphin内置了多种识别特征表达式，如手机号、身份证号等。此外，您也可以自定义识别...
列存即列式存储，是一种将数据按列进行存储和处理的数据管理方式。Lindorm计算引擎支持将半结构化、结构化数据以列存方式进行存储，相较于行式存储，列式存储的查询响应时间更短，消耗IO更少。本文介绍如何通过计算引擎访问Lindorm列存数据...
云原生数据仓库 AnalyticDB MySQL 版 支持数据同步APS（AnalyticDB Pipeline Service）功能，您可以新建Kafka同步链路，通过同步链路从指定时间位点，实时同步Kafka中的 数据入仓。本文主要介绍添加Kafka数据源、新建Kafka同步链路并启动...
仪表盘是 数据管理DMS 数据分析的其中一种可视化应用类型，其提供自动布局和可交互能力，您可以通过使用仪表盘来进行数据分析和制作可视化报表。本文介绍仪表盘的基本概念、功能展示及操作步骤。基本概念 仪表盘集合：仪表盘集合是用户管理...
Lindorm是阿里云自研的云原生多模型数据库，面向海量多模型数据的低成本存储分析，构建万物互联时代的数据底座。Lindorm支持宽表模型、时序模型，提供自研的宽表引擎、时序引擎和搜索引擎，兼容HBase、Phoenix、OpenTSDB、Solr等多种开源...
本文介绍了设置数据自动备份的方法。注意事项 备份过程中不能进行实例的扩容、升降配等操作，以避免备份失败。备份过程中不能执行DDL命令，避免因锁表导致备份失败。操作步骤 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在...
高效满足IoT/监控等场景的测量数据、设备运行数据的存储处理需求，整体架构如下：TSCore 是时序引擎中负责数据组织的核心部分，其整体思想与LSM结构相似，数据先写入Memchunk，然后Flush到磁盘，但由于时序数据天然的顺序写入特征，定向...
业务数据分散在本地数据中心、第三方云存储，或分布在不同地域、不同账号的阿里云 OSS Bucket 中，缺乏统一管理会导致运维复杂、成本高昂。...此时可配置镜像回源规则，在迁移过程中自动抓取未迁移的数据并同步到 OSS，保障服务持续稳定运行。
DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系，自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段，帮助您梳理敏感数据的扩散情况及影响面，提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...
阿里云流数据处理平台数据总线 DataHub 是流式数据（Streaming Data）的处理平台，提供流式数据的发布(Publish)、订阅（Subscribe）和分发功能，支持构建基于流式数据的分析和应用。产品概述 数据总线（DataHub）是阿里云提供的一款流式...
2021年10月13日（V6.3.5.2）类别 功能 功能描述 相关文档 新增 自动增量排序 自动增量排序（AutoMerge）是 AnalyticDB PostgreSQL版 在后台运行的数据自动排序进程。自动增量排序会定期巡检表的数据状态，对新增无序数据进行排序，并与已有...
湖元数据治理 Data Lake Formation(DLF)提供跨OSS、数据库、文件系统的统一元数据目录服务，支持自动元数据发现、细粒度权限控制、数据血缘追踪，简化湖内数据治理流程。全栈分析引擎 Spark、Hive、Presto/Trino 集成离线ETL（Spark/Hive）...
工具优势：自动建表和数据导入为一体。可视化平台进行操作，简单易用。支持导入的数据源：Doris、Hive、Kudu、StarRocks和ClickHouse。导入Hive源数据 安装X2Doris 注意事项 安装X2Doris的服务器必须是Hadoop集群的一个节点，或者是有...
本篇为您介绍阿里云自动驾驶云开发平台整体架构。...开放平台供应数据、仿真、车云协同采集等在云端自动驾驶研发体系需要的原子能力：工具链产品提供自动驾驶云上数据处理、云仿真、车云协同采集等端到端、开箱即用的软件产品：
数据安全中心DSC（Data Security Center）提供的数据审计功能，可以通过查看审计日志分析数据库活动信息，进而帮助您跟踪数据库潜在的恶意行为或未授权访问，调查安全事件原因。在使用数据审计前，您需要先完成审计模式配置，DSC 才能根据...
数据管理 实例完成纳管后，会自动集成数据管理服务（DMS），当前提供免费模式，主要功能如下：数据库实例可视化数据管理、结构管理。SQL窗口：支持手动写SQL进行单库查询，适用于业务代码上线数据验证、产品效果数据分析、线上问题排查定位...
配置后，数据库审计服务将不再根据配置的资产自动抓包，只在抓包网口抓取匹配该过滤串的流量。配置示例：(host 192.168.1.100 and port 3306)or(host 192.168.1.101 and port 3306)。按工具过滤 配置后将不再转发指定客户端工具的流量，可...
一个重要网页的快照往往会在搜索引擎数据库中保存有多份网页快照，这些快照的抓取时间并不相同。在一些极特殊情况下，搜索引擎系统可能会选择不同于当前搜索结果中的快照版本，导致出现快照时间倒退的情况。这对网站在搜索引擎中的表现无...
抓取网络包不再像 Charles/Fiddler 那样可以通过“中间人”代理模式来捕获报文，TCP 报文的抓取一般是非侵入式的，通过监听网卡接口数据，直接进行 TCP 报文的“镜像”捕获。在一般场景下，可以抓包的点比较多，可以在客户端抓（A），可以...
一个重要网页的快照往往会在搜索引擎数据库中保存有多份网页快照，这些快照的抓取时间并不相同。在一些极特殊情况下，搜索引擎系统可能会选择不同于当前搜索结果中的快照版本，导致出现快照时间倒退的情况。这对网站在搜索引擎中的表现无...
Data Agent for Analytics是阿里云瑶池数据库团队推出的面向企业用户的数据分析智能体，可以根据自然语言描述进行需求分析，自动完成数据理解，并基于数据理解提出分析需求，扩展分析思路，最终通过调用工具交付分析结果，可以到阿里云官网...
当您需要对少量数据进行快速的、临时的分析，或者需要一个像Excel一样灵活的工具来整理、计算和可视化数据时，传统的SQL查询显得过于笨重，而专业的BI工具又可能过于复杂，学习成本高。DataWorks数据分析提供电子表格功能，它是一个在线的...
DataV-Board 7.0（数据看板）提供完整的可视化搭建工具链，支持接入多种数据源（例如，静态数据、CSV文件、API、RDS for MySQL等各类数据库），支持通过图形化界面轻松搭建PC看板、移动端看板等多种应用，满足企业经营分析、展示汇报、业务...
数据管理提供自动驾驶采集数据在云上数据预处理、预标注、管理、检索、重组、回放、输出到仿真或训练系统中的能力：非结构化数据处理：针对非结构化数据处理提供DAG调度和并行计算能力，构建自动调度的10倍加速的自动驾驶数据工作流 多模态...
AskTable是一款基于人工智能和自然语言处理技术的数据分析工具。它能够通过自然语言查询，自动生成数据查询指令，并直接返回结果。同时也支持 MySQL、PostgreSQL等多种数据源，帮助用户轻松地探索和可视化数据。本文介绍使用 AskTable 连接...
2025年04月 类别 功能 功能描述 相关文档 新增 自动迁移Amazon Redshift数据 阿里云提供了自动化迁移工具，支持DDL转换，可以帮助您将Amazon Redshift数据自动迁移至 AnalyticDB for PostgreSQL。自动迁移Amazon Redshift数据至AnalyticDB ...
本文为您介绍如何基于 阿里云百炼 和 DMS MCP 一键创建ChatBI数据助手（Agent），协助您使用自然语言进行数据分析、提升业务响应速度、赋能全员数据洞察。背景信息 随着大数据时代的到来，数据分析已成为企业决策不可或缺的一环。然而，...
本文为您介绍在DataV中添加ClickHouse数据源的方法，以及相关参数配置说明。前提条件 已准备好待添加的ClickHouse数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中，以确保DataV-Board能正常访问您的数据库。详情请...
为满足多样化的数据导入需求，AnalyticDB for MySQL 提供了多种数据导入方式，包括：通过外表导入数据、通过DataWorks导入数据、通过DTS导入数据以及使用JDBC通过程序导入数据等。您可以通过本文了解各导入方式的特性及适用场景，帮助您...
数据编辑器是一款支持多种地理数据编辑与管理功能的小工具，本文介绍数据编辑器的详细功能。进入数据编辑器 单击 DataV.GeoAtlas地理小工具系列，打开 数据编辑器 工具页面。界面概述 数据编辑器页面分为三大主要功能面板，分别为 地图面板...
Dataphin支持敏感数据的识别和敏感数据的脱敏保护，可以结合权限管控方案一起，构建起完善的敏感数据保护体系。数据分类分级 Dataphin支持对数据的分类分级进行管理，内置了常用的个人信息数据分类，同时支持客户自定义企业的数据分类分级...
Dataphin支持敏感数据的识别和敏感数据的脱敏保护，可以结合权限管控方案一起，构建起完善的敏感数据保护体系。数据分类分级 Dataphin支持对数据的分类分级进行管理，内置了常用的个人信息数据分类，同时支持客户自定义企业的数据分类分级...
在DataV-Board（数据看板）中使用PolarDB-X数据源之前，需要先将PolarDB-X数据源实例添加为DataV-Board的数据源。本文为您介绍如何添加PolarDB-X数据源。前提条件 添加数据库前请先参见 创建PolarDB-X实例，开通对应的数据库服务。说明 ...
Disallow:/.jpg$：禁止抓取网页所有.jpg格式的图片。Disallow:/ab/adc.html：禁止爬取ab目录下面的adc.html文件。Allow:/cgi-bin/：这里定义是允许爬取 cgi-bin 目录下面的目录。Allow:/tmp：这里定义是允许爬取 tmp 整个目录。Allow:.htm$...
类别 实施方案 说明 数据备份 自动或手动备份 支持数据持久化，实例会按照默认的策略自动备份数据（基于RDB），您可以根据业务需求修改自动备份策略，也可以手动发起临时的备份。下载备份文件 备份文件支持保留 7~730 天，如果需要更长时间...
数据灾备 为云数据库、ECS自建数据库提供灵活的备份与恢复功能，同时也支持将云上备份集下载到本地，进一步增强数据的安全性。您可通过手动或自动模式进行数据下载，下载的备份集可用于恢复到本地数据库、Excel分析与审计、备份到本地存储...
您可以通过 数据灾备 的手动添加数据源功能，将不同环境的数据库添加至 数据灾备 中，同时 数据灾备 也支持自动添加数据源，可以将阿里云上的RDS实例自动同步到 数据灾备 数据源中，便于后续对数据源进行管理与备份。费用说明 添加数据源...