10 TotalCount integer 结果中数据的总条数。61 Items array object 数据表的列的识别结果列表。array object 数据表的列的识别结果对象。ColumnName string 列名称。hide14 DataType string 列的数据类型。varchar ColumnComment string ...
在用户指定Cluster Key之后，后台Clustering作业会对数据执行增量Reclustering，从而保证数据的整体有序性。Append Delta Table在复杂业务场景上表现优秀，显著的效能提升也反映出数据存储格式的技术优化在大数据分析场景下的核心价值。其...
在DataV-Note（智能分析）的分析单元中，数据集将作为您进行查询分析的数据来源，变量则可用于构建联动查询，帮助您动态更新及筛选相关数据。本文为您介绍如何使用及管理数据集和变量。使用须知 为确保相关操作能够顺利执行，在使用数据集...
对普通表和分区表执行冷数据归档操作后，您可以通过以下方法查询归档后的冷数据：普通表：执行冷数据归档后，查询冷数据的方法和查询热数据的方法一致，不需要修改访问方式。分区表：执行冷数据归档后，查询冷数据的操作方法请参见 查询...
我可用的 页面可以作为您个人的资产消费门户，展示您当前所拥有的查表数据权限及权限过期时间在90天内的生产环境的资产对象，并可对有权限的对象快捷创建对应的分析任务及数据预览等。本文为您介绍如何查看及管理我可用的资产。5分钟快速...
在对数据的数量和内容进行比对，需要确认下使用的 数据源环境，避免开发、生产查询不一致。在实际生产业务当中，在线数据源往往有对应的预发或者测试环境，而实际同步任务使用的生产数据库和预发测试数据库不一致，需要进行数据检查对比...
AnalyticDB PostgreSQL版 查询分析功能可供您查看SQL执行计划以及对应统计信息，供您...磁盘读取数据耗时 算子从磁盘中读取数据的耗时。网络传输数据量 Motion算子节点间网络传输的数据总量。网络传输耗时 Motion算子节点间网络传输数据耗时。
安全：您无需下载数据至本地，即可在线上完成数据的分析，并可以控制分析和分享数据的权限。进入数据分析 登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据分析与服务 数据分析，单击 进入数据分析 页面。进入 数据分析 ...
安全性 OceanBase 数据库在调研了大量企业对于数据库软件的安全需求，并参考了各种安全标准之后，实现了企业需要的绝大部分安全功能，支持完备的权限与角色体系，支持 SSL、数据透明加密、审计、Label Security、IP 白名单等功能，并通过了...
备份功能 为保证数据的完整性和可靠性，数据库需要常规的自动备份来保障数据的可恢复性。MongoDB提供如下备份功能：快照备份：保留某一时间点磁盘的数据状态。能够做到在分钟级完成数据库的恢复。物理备份：备份MongoDB实例中数据库相关的...
语句查询样本数据的行数，完整的样本数据约为599万条。Q：样本数据加载好了，我该怎么测试？A：您可以使用TPC-H的查询语句进行性能测试，具体语句信息，请参见 示例查询。Q：样本数据集加载完成后，在DMS客户端看不到加载的数据集怎么办？A...
目标数据源 选择数据源，作为导入数据的存储库。说明 支持的资源类型有MaxCompute、Hive、RDS MySQL、OTS和ADB。数据目录 选择目录，将数据表进行归类展示。描述文字 导入数据的描述，自定义即可。单击 确定。界面提示上传数据成功，在数据...
关于支持的产品名称，请参见 支持识别敏感数据的数据类型。RDS PageSize integer 否 分页查询时，设置列表中每页显示的数据资产实例的最大条数。默认值：10。10 CurrentPage integer 否 分页查询时，设置当前页面的页码。默认值：1。1 返回...
数据预览：若您拥有当前表的查表数据权限，可以使用数据预览功能，仅查询您有select权限（包括字段权限和行级权限）的字段对应的结果，可预览前50条数据。如何申请权限，请参见 申请、续期和交还表权限。您可以对筛选后的数据根据字段进行...
阿里云Flink（流式）DataHub（实时）DataHub是MaxCompute提供的流式数据处理（Streaming Data）服务，它提供流式数据的发布（Publish）和订阅（Subscribe）的功能构建基于流式数据的分析和应用。DataHub（实时）SLS投递 将日志服务采集的...
DMS的 普通数据变更 支持提交更多SQL语句类型，包括数据的增删改查、表结构的变更等功能，详情请参见 普通数据变更。在 数据导入 面板中，配置如下信息。配置项 说明 数据库 数据导入操作的目标数据库。仅支持选择一个数据库。说明 管控...
索引通常用来加速查询，可以通过增加一种新的索引类型来解决海量数据的复杂查询问题，Lindorm作为一个多模数据库，原生支持搜索引擎，天然具备全文索引能力。因此，通过融合搜索引擎，Lindorm宽表增加了SearchIndex，使得业务在不用感知...
文件类型 选中导入数据的文件类型：SQL脚本：安全协同模式下，默认仅放开INSERT和REPLACE命令类型。如需调整，可以由DBA或管理员在 安全规则 SQL变更 批量数据导入 中修改。CSV格式：文件中的分隔符必须为逗号。Excel格式：Excel文件中可以...
⑤ 数据探查 若您开通了数据质量功能，仅支持数据探查的数据源表可发起和查看数据探查，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情...
根据数据源ID，查询指定的数据源。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。需要在 DataWorks 项目空间中具有如下至少一种角色：租户所有者、空间管理员、部署、开发、项目所有者、运维 调试 您可以在OpenAPI Explorer中...
⑤ 数据探查 若您开通了数据质量功能，仅支持数据探查的数据源表可发起和查看数据探查，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情...
分层建模：通过多级“Paimon+ODS”组合构建分层数据架构（例如ODS贴源层→DWD明细层→DWS汇总层），以实现数据的逐层沉淀与复用。OSS-HDFS：持久化存储原始日志、Paimon增量快照及历史归档数据。数据应用：基于StarRocks生成实时业务报表...
背景信息 阿里云Elasticsearch是基于开源Elasticsearch构建的全托管Elasticsearch云服务，被广泛应用于实时日志分析处理、信息检索、以及数据的多维查询和统计分析等场景。如果您使用的是阿里云Elasticsearch，在将Dataphin数据导出至...
通过创建Tablestore数据源能够实现Dataphin读取Tablestore的业务数据或向Tablestore写入数据。本文为您介绍如何创建Tablestore数据源。背景信息 Tablestore即阿里云表格存储Tablestore。表格存储面向海量结构化数据提供Serverless表存储...
同一个名称的数据源可存在开发环境和生产环境两套配置，设置两个不同的数据库/实例，使任务在测试和生产调度时操作的数据隔离，确保生产环境数据的安全。如：执行数据开发或离线同步任务时，系统自动根据任务当前所在环境，访问对应的数据...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
通过创建Tablestore数据源能够实现Dataphin读取Tablestore的业务数据或向Tablestore写入数据。本文为您介绍如何创建Tablestore数据源。背景信息 Tablestore即阿里云表格存储Tablestore。表格存储面向海量结构化数据提供Serverless表存储...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至Impala，您需要先完成Impala数据源的创建。更多Impala信息，请参见 Impala官网。权限管理 仅支持具备 新建数据源权限点 的...
数据探查：若您开通了数据质量功能，可以为数据源表配置数据探查任务，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情请参见 新建数据...
背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala，在导出Dataphin数据至Impala，您需要先完成Impala数据源的创建。更多Impala信息，请参见 Impala官网。权限管理 仅支持具备 新建数据源权限点 的...
2024-11-21 所有地域 使用新版数据开发（Data Studio）的用户 元数据采集 数据地图 支持在数据地图的MaxCompute表详情页创建数据洞察，通过深度数据分析和解读来获取数据统计及分布情况。2024-11-21 华东1（杭州）、华东2（上海）、华北2...
背景信息 阿里云Elasticsearch是基于开源Elasticsearch构建的全托管Elasticsearch云服务，被广泛应用于实时日志分析处理、信息检索、以及数据的多维查询和统计分析等场景。如果您使用的是阿里云Elasticsearch，在将Dataphin数据导出至...
行业趋势 数据库系统至关重要 数据库与操作系统、中间件并称为系统软件的三驾马车，是企业IT系统不可或缺的组件，也是互联网应用级企业信息管理系统存储数据和管理数据的核心平台。数据库系统是一切应用软件的数据处理及交换核心，是所有...
背景信息 HBase是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是HBase，在导出Dataphin数据至HBase，您需要先完成HBase数据源的创建。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理...
同时，也可进入 数据治理中心，查看DataWorks检测的待治理问题，进行相关数据的治理。模块 说明 相关文档 数据地图 DataWorks数据地图提供了企业级数据管理平台，能够基于统一元数据的底层建设，提供数据对象的管理和盘点的能力，以及数据...
数据安全中心 DSC（Data Security Center）提供数据洞察能力，通过管理敏感数据识别任务，可协助您识别已授权资产中存在的敏感信息，并进行分类分级管理，包括敏感数据的位置、敏感类型和级别等。掌握数据资产中敏感数据有助于正确管理对应...
数据探查：若您开通了数据质量功能，可以为数据源表配置数据探查任务，快速了解数据概况，提前评估数据的可用性和潜在风险，如果您需要开启自动探查，可以在 治理 元数据中心 探查及分析 中开启相应配置，探查任务配置详情请参见 新建数据...
StarRocks自2.3版本起支持Catalog（数据目录）功能，实现在一套系统内同时维护内、外部数据，方便您轻松访问并查询存储在各类外部源的数据。本文为您介绍什么是Catalog，以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：...
使用RDS MySQL数据库代理时，您可以随时查看数据库代理的CPU利用率，了解数据库代理的负载情况，以便及时调整代理数量（规格）。本文介绍如何通过控制台和API接口查看RDS MySQL数据库代理的CPU利用率。关于RDS数据库代理的使用问题和更多...