默认打开该SQL查询的代码编辑页签。在代码编辑页签下，可以进行数据库SQL开发。（可选）您可配置并开启查询加速，开启后需选择加速方式。MCQA：即MaxCompute MCQA加速查询。MCQA每一个租户下，作业数量与并发数有限制，可能会导致加速失败...
如果查询需要处理的数据量较大，就可能会长时间占用大量的资源，导致整体查询效率降低，进而影响最终的查询效果。此外，如果 AnalyticDB MySQL版 中表存储的数据量较大，那么在执行索引过滤、明细数据读取等操作时也会出现相互争抢磁盘I/O...
高级脱敏功能具有但不限于如下特性：统一管理敏感数据 敏感数据分类分级 周期性扫描敏感数据 主动发现敏感数据 应用场景 实时从生产环境中的数据库（即生产库）获取用户已脱敏的数据来进行报表生成、数据分析、开发测试等。前提条件 已录入...
整体选型说明 架构概述 本架构围绕“数据采集—数据计算—数据架构—数据服务”的逻辑展开，以DataWorks和MaxCompute为核心技术栈，结合标准化的数据建模方法与治理体系，构建稳定、高效、可扩展的数据服务能力。最终目标是支撑商家增长、...
默认打开该SQL查询的代码编辑页签。在代码编辑页签下，可以进行数据库SQL开发。（可选）您可配置并开启查询加速，开启后需选择加速方式。加速源：通过加速源进行查询加速，加速方式选择为加速源时，还需要选择加速源和资源组。加速源：可...
本文介绍如何使用 云数据库 SelectDB 版 的查询审计。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作，请参见 创建实例。实例版本大于等于3.0.7。操作步骤 登录 云数据库 SelectDB 控制台。在页面左上角，选择实例所在地域。在 实例...
本文介绍如何使用 云数据库 SelectDB 版 的查询审计。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作，请参见 创建实例。实例版本大于等于3.0.7。操作步骤 登录 云数据库 SelectDB 控制台。在页面左上角，选择实例所在地域。在 实例...
修复进行删除操作后新写入的数据无法查询的问题。优化读写性能，稳定性修复。3.4.34 发布日期 类型 说明 2023年11月02日 功能优化 稳定性修复。3.4.33 发布日期 类型 说明 2023年10月11日 功能优化 优化内存使用体验。优化查询性能。完善...
数据资源平台为用户提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
通过讲述数据集成数据同步的原理机制，理解数据同步的过程，进而对数据同步的执行效果有判断能力，判断数据同步效果具体包括：数据同步的数据量、目标端数据实际数量等。本文将为您列举一些常见数据质量方面的场景，方便您排查是否存在符合...
例如，受管控的字段为buyer_name，受管控的行值为name1、name2和name3，在已有数据库、表dms_test的查询权限的前提下，通过SQL窗口执行如下SQL，查询受管控的数据行。查询单个管控值所在的数据行时，可在SQL语句的WHERE条件中使用=和 IN。...
MongoDB 6.0新推出可查询加密功能，允许用户从客户端加密敏感数据，将其作为完全随机的加密数据存储在数据库服务器端，并对加密数据进行丰富的查询。可查询加密只允许在客户端查看敏感数据的明文，在查询到达服务器端时会同时包含从KMS获取...
由于DBS产品能力调整，数据灾备（DBS）将于2024年05月起逐步下线备份数据查询页面的相关功能。下线背景 本次下线是基于云原生数据湖分析（Data Lake Analytics，DLA）服务自2024年01月01日开始按地域逐步停止服务支持所做出的调整。由于 ...
Bloom Filter索引 Bloom Filter 索引可以快速判断表的数据文件中是否可能包含要查询的数据。如果确定不包含，查询可以直接跳过该文件，从而减少扫描的数据量。适合基数在 100,000 以上且列的重复度很低的列。适用于IN和等值（=）过滤条件的...
如何选择排序键 当您的查询SQL的等值条件或范围条件经常包含几个固定列，可以考虑将这些列作为排序键，从而利用数据排序结合粗糙索引，加速这类SQL的查询速度。一般情况下应该考虑使用组合排序。当您的查询SQL包含的过滤条件不是固定的列，...
说明 运行任务时，若查询的目标数据无权限，可参考 引擎与数据权限管控概述 了解DataWorks中各引擎的权限管控。运行方式 描述 场景选择 运行（图标）支持为代码测试场景的变量赋值，以及指定调度资源组。相关赋值及指定的资源组会被记录，...
MyBase提供了实例纳管功能，支持纳管自建的开源MySQL 8.0版本数据库。本文将为您介绍如何在MyBase控制台添加实例以及实例纳管功能的重点功能。费用说明 您可以免费开通实例纳管功能，使用MyBase自建纳管基础功能不产生额外的费用。纳管之后...
查询时，全局索引也将自动汇聚各个数据索引中的查询结果，并返回最终结果。全局索引的数据结构如下所示：在创建全局索引后，您可以使用 TVS.EXPANDINDEXGLOBAL 接口直接创建对应的数据索引；或者您也可以通过 TVS.IMPORTINDEXGLOBAL 接口...
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。核心能力 ...
具有目标数据库的查询、导出等权限。更多信息，请参见 管理访问控制权限。导出表结构 登录 数据管理DMS 5.0。在页面左侧的 数据库实例 列表区域，找到目标数据库。左键双击数据库名称，进入SQL Console。右键单击目标表，选择 导出 导出表...
当您需要将特定用户设置为数据库Owner、授予数据库的查询和导出等权限时，可参考本文进行操作。注意事项 待设置的数据库Owner需要是已录入至DMS的用户。若需要录入新的用户，请参见 用户管理。本文的数据库Owner为DMS的资源角色名。更多...
创建StarRocks 数据目录 在StarRocks数据目录管理页面，您可将已有的StarRocks数据源作为数据集添加到数据目录列表。单击StarRocks数据目录右侧的 图标，进入添加实例页面。在 DataWorks数据源 页签将StarRocks数据源添加到数据目录列表。...
本文介绍了在云盾数据库审计系统中查询告警日志的具体操作。通过告警日志，您可以查询数据库的告警信息。查看告警日志 步骤一：登录数据库审计系统 登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，选择 查询分析...
数据倾斜会导致部分计算节点存储的数据过多，查询负载大，查询耗时变长。因此请不要选择bool类型、时间日期类型的列作为分布键。选择经常作为查询条件的列作为分布键，可以实现按分布键进行节点裁剪。您可以选择一个或多个列作为分布键，...
将数据库添加到数据库审计系统后，您可以为数据库配置安全规则（即审计规则），当数据库的审计记录命中审计规则时，数据库审计系统会触发告警。本文介绍如何配置审计规则。规则说明 审计规则支持内置规则和自定义规则。内置规则即数据库...
MMS通过与MaxCompute Spark引擎集成，简化了从自建数据源到MaxCompute的大规模数据迁移过程，降低了配置复杂度和运维成本。功能概述 迁移架构 MaxCompute数据迁移服务MMS支持元数据和数据迁移。元数据迁移：通过元数据API（如Hive ...
您可以通过下载账单，导出页面上查询的账单、明细、实例账单（号码账单）Excel，当前只支持下载最近24个月账单，更多历史账单请通过工单联系云通信技术支持获取。查询账单 登录 Chat App 消息服务控制台。在左侧导航栏，选择 账单查询。在 ...
拥有数据库的查询权限：可在 SQL 窗口中执行该数据库下的查询语句。拥有数据库的变更权限：可在 SQL 窗口中执行该数据库下的变更语句、发起除导出和导出结果集之外的工单。拥有数据库的导出权限：可发起数据库导出工单。拥有数据库的查询和...
使用SQL查询的业务数据表数量太大，查询超时 针对查询条件所使用的字段添加索引，减少扫描行数。在数据库中增加定时任务，定时计算所需要的业务指标并更新结果表。DataV组件直接查询结果表的数据，不需要在每次组件获取数据时，再次执行SQL...
本教程以MySQL中的用户基本信息 ods_user_info_d 表和OSS中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至StarRocks的 ods_user_info_d_starrocks、ods_raw_log_d_starrocks 表。旨在介绍如何通过...
问题原因 查询超时的原因如下：使用SQL查询的业务数据表数量太大。API接口内部业务调用链路较长。解决方案 执行以下操作，通过优化查询时间的方式进行解决：使用SQL查询的业务数据表数量太大 针对查询条件所使用的字段添加索引，减少扫描行...
您需要登录图数据库GDB才能对数据库内的数据进行查询和分析，本教程以DMS为例介绍如何登录数据库。前提条件 已根据快速入门完成创建账号步骤，具体操作请参见 创建账号。操作步骤 登录 DMS数据管理服务控制台。单击页面左侧 数据库实例 旁...
StarRocks自2.3版本起支持Catalog（数据目录）功能，实现在一套系统内同时维护内、外部数据，方便您轻松访问并查询存储在各类外部源的数据。本文为您介绍什么是Catalog，以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：...
PolarDB 采用存储和计算分离的架构，提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务，既融合了商业数据库稳定可靠、高性能、可扩展的特征，又具有开源云数据库简单开放、自我迭代的优势。本文介绍深圳法...
说明 使用EMR Trino节点查询数据时，返回的查询结果最大支持10000条数据，并且数据总量不能超过10MB。如需定期执行节点任务，请根据业务需求配置调度信息。配置详情请参见 节点调度。节点任务配置完成后，需对节点进行发布。详情请参见 ...
count(*)｜+-+｜70000000｜+-+1 row in set(47.30 sec)批量查询场景：下图为近千条SQL批量查询的对比图，横坐标为SQL时延，纵坐标为SQL延迟的百分比，能够直观的对比出使用EMP后，SQL延迟大幅下降，批量SQL总延迟减少50%。
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
计算报表需要消耗大量计算资源，双十一大促时，报表生成的速度会很慢，当多人查看时，不时发送大查询到数据库也容易导致系统不稳定。业务效果 使用物化视图将近7天的抽检报表数据保存下来，每次查看报表时只需要查询物化视图即可。物化视图...
DescribeOssObjectDetailV2 查询OSS存储对象的详细信息V2 调用本接口查询数据安全中心连接授权的OSS的单个存储对象的详细信息 DescribePackages 查询数据包的信息 调用本接口查询已完成扫描授权的MaxCompute数据包的信息，例如数据包的名称...
已开通 Chat App 消息服务。已创建通道，且绑定或授权了账号。已创建消息模板，且模板已审核通过。已发送消息。查询统计日报 登录 Chat App 消息服务控制台。在左侧导航栏，选择 通道管理。在 通道管理 页面，单击需要进行管理的 通道ID 或...