待系统执行完成后，您可以在工单详情页下方单击 执行导出，选择导出 数据 的文件类型、字符集 等，并单击 确定执行。单击 下载导出文件，文件将下载至本地。导出整个数据库 支持导出整个数据库的表结构、数据、以及存储过程、函数、触发器...
数据流动 数据下载统计 统计各个项目的数据下载请求任务，分析规划可下载数据的项目。您可以通过MaxCompute元数据服务 Information_Schema 提供的TUNNELS_HISTORY视图进行分析统计。权限调整建议 权限调整过程中，您可以参考如下建议。调整...
文件类型 选中导入数据的文件类型：SQL脚本：安全协同模式下，默认仅放开INSERT和REPLACE命令类型。如需调整，可以由DBA或管理员在 安全规则 SQL变更 批量数据导入 中修改。CSV格式：文件中的分隔符必须为逗号。Excel格式：Excel文件中可以...
根据数据源ID，查询指定的数据源。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。需要在 DataWorks 项目空间中具有如下至少一种角色：租户所有者、空间管理员、部署、开发、项目所有者、运维 调试 您可以在OpenAPI Explorer中...
⑤ 数据探查 若您开通了数据质量功能，仅支持数据探查的数据源表可发起和查看数据探查，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情...
⑤ 数据探查 若您开通了数据质量功能，仅支持数据探查的数据源表可发起和查看数据探查，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情...
分层建模：通过多级“Paimon+ODS”组合构建分层数据架构（例如ODS贴源层→DWD明细层→DWS汇总层），以实现数据的逐层沉淀与复用。OSS-HDFS：持久化存储原始日志、Paimon增量快照及历史归档数据。数据应用：基于StarRocks生成实时业务报表...
数据探查：若您开通了数据质量功能，可以为数据源表配置数据探查任务，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情请参见 新建数据...
背景信息 阿里云Elasticsearch是基于开源Elasticsearch构建的全托管Elasticsearch云服务，被广泛应用于实时日志分析处理、信息检索、以及数据的多维查询和统计分析等场景。如果您使用的是阿里云Elasticsearch，在将Dataphin数据导出至...
同一个名称的数据源可存在开发环境和生产环境两套配置，设置两个不同的数据库/实例，使任务在测试和生产调度时操作的数据隔离，确保生产环境数据的安全。如：执行数据开发或离线同步任务时，系统自动根据任务当前所在环境，访问对应的数据...
通过创建Tablestore数据源能够实现Dataphin读取Tablestore的业务数据或向Tablestore写入数据。本文为您介绍如何创建Tablestore数据源。背景信息 Tablestore即阿里云表格存储Tablestore。表格存储面向海量结构化数据提供Serverless表存储...
通过创建Tablestore数据源能够实现Dataphin读取Tablestore的业务数据或向Tablestore写入数据。本文为您介绍如何创建Tablestore数据源。背景信息 Tablestore即阿里云表格存储Tablestore。表格存储面向海量结构化数据提供Serverless表存储...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至Impala，您需要先完成Impala数据源的创建。更多Impala信息，请参见 Impala官网。权限管理 仅支持具备 新建数据源权限点 的...
背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至Impala，您需要先完成Impala数据源的创建。更多Impala信息，请参见 Impala官网。权限管理 仅支持具备 新建数据源权限点 的...
背景信息 阿里云Elasticsearch是基于开源Elasticsearch构建的全托管Elasticsearch云服务，被广泛应用于实时日志分析处理、信息检索、以及数据的多维查询和统计分析等场景。如果您使用的是阿里云Elasticsearch，在将Dataphin数据导出至...
2024-11-21 所有地域 使用新版数据开发（Data Studio）的用户 元数据采集 数据地图 支持在数据地图的MaxCompute表详情页创建数据洞察，通过深度数据分析和解读来获取数据统计及分布情况。2024-11-21 华东1（杭州）、华东2（上海）、华北2...
同时，也可进入 数据治理中心，查看DataWorks检测的待治理问题，进行相关数据的治理。模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据...
背景信息 HBase是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是HBase，在导出Dataphin数据至HBase，您需要先完成HBase数据源的创建。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理...
数据安全中心 DSC（Data Security Center）提供数据洞察能力，通过管理敏感数据识别任务，可协助您识别已授权资产中存在的敏感信息，并进行分类分级管理，包括敏感数据的位置、敏感类型和级别等。掌握数据资产中敏感数据有助于正确管理对应...
StarRocks自2.3版本起支持Catalog（数据目录）功能，实现在一套系统内同时维护内、外部数据，方便您轻松访问并查询存储在各类外部源的数据。本文为您介绍什么是Catalog，以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：...
ModifyDefaultLevel 修改敏感数据的风险等级定义规则 调用本接口修改敏感数据的风险等级定义规则，包括未能识别数据的默认风险等级、归类为“敏感”的数据风险等级。ModifyRuleStatus 修改识别规则的检测功能状态 调用本接口开启或关闭敏感...
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
使用限制 当网络配置为内置网关、阿里云API网关（开启专享实例+SLS模式）时，您可查看 异常影响APP数、异常影响应用（APP）Top 10、影响APP数 信息。权限说明 超级管理员 支持查看及管理所有数据服务项目的API调用情况。运维用户 支持查看...
使用限制 当网络配置为内置网关、阿里云API网关（开启专享实例+SLS模式）时，您可查看 异常影响APP数、异常影响应用（APP）Top 10、影响APP数 信息。权限说明 超级管理员 支持查看及管理所有数据服务项目的API调用情况。运维用户 支持查看...
对普通表和分区表执行冷数据归档操作后，您可以通过以下方法查询归档后的冷数据：普通表：执行冷数据归档后，查询冷数据的方法和查询热数据的方法一致，不需要修改访问方式。分区表：执行冷数据归档后，查询冷数据的操作方法请参见 查询...
在阿里云App上，您可以通过云监控实时查看当前账号下所有云资源的使用情况，以便预防和快速定位问题，从而确保系统的健康运行。例如：查看云服务器ECS实例的CPU使用率。查看云产品监控 在每个云产品的监控页面，展示的监控信息不同。您可以...
数据地图支持对当前租户下所有工作空间的数据服务API进行搜索和定位，实现数据服务API的高效查找。进入API查找界面 进入数据地图页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据治理 数据地图，在右侧页面中单击 ...
已开通 Chat App 消息服务。重要 账单金额为根据使用量计算的应付金额，最终实付以月底结算为准（如代金券抵扣、账户余额扣款等），请前往阿里云 费用与成本 查看实付金额。您可以通过下载账单，导出页面上查询的账单、明细、实例账单...
API计量详情提供了各类可视化图表及统计数据，可以针对单个API分别查看监控图表，包括API网关状态码、数据服务错误码、App请求次数、流量带宽、平均响应时间。进入计量详情页面 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 ...
使用DataWorks连接MaxCompute有如下方式：数据分析的 SQL查询 功能：实现编辑MaxCompute SQL、查询数据、分析数据（电子表格）、在线分享数据及下载数据等功能。SQL查询功能详情请参见 SQL查询。数据开发的 MaxCompute任务节点：DataWorks...
数据演化：数据的Schema并非固定不变，Delta支持通过API 方式改变数据的Schema。实时机器学习：在机器学习场景中，通常需要花费大量的时间用于处理数据，例如数据清洗、转换、提取特征等等。同时，您还需要对历史和实时数据分别处理。而...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可以根据标签给数据源进行分类...
在主备容灾场景，可以将备实例切换为主实例，保障数据的一致性和业务的可用性，详情参见 切换为主实例。在业务拆分等场景，可以将备实例从主备实例场景变更为两个独立的集群实例，提搞资源利用率，详情参见 解耦备实例。
Ganos FDW允许用户在PostgreSQL中配置外部数据源，并将这些数据源中的地理空间数据映射为PostgreSQL中的外部表，从而实现地理空间数据的集成和查询。Ganos FDW的主要特点和功能如下：多格式支持：Ganos FDW支持许多常见的地理空间数据格式...
Ganos FDW允许用户在PostgreSQL中配置外部数据源，并将这些数据源中的地理空间数据映射为PostgreSQL中的外部表，从而实现地理空间数据的集成和查询。Ganos FDW的主要特点和功能如下：多格式支持：Ganos FDW支持许多常见的地理空间数据格式...
本文介绍查询用户OSS或专属存储的归档数据的操作步骤以及常见问题。前提条件 已完成 数据归档至用户OSS 或 数据归档至专属存储 的用户，包含老用户和新用户。说明 老用户：数据归档查询功能未上线（上线时间：2022年09月14日）前，使用过...
数据源 权限说明 数据源范围 数据源 连接模式：仅支持选择有权限的工作空间内的数据源数据，因此您需要先联系管理员将您 添加为工作空间的 数据分析师、开发、运维、空间管理员。直接连接 模式：仅支持选择当前登录账号已经加入的...