调用GetDataServiceApplication查询数据服务App的详情。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 ...
获取Spark App指标数据。接口说明 在调用该接口前,必须先调用 PreloadSparkAppMetrics 接口预加载 Spark 任务的指标数据,否则会调用失败。地域的公网接入地址:adb.region-id.aliyuncs.com 。示例:adb.cn-hangzhou.aliyuncs.com 。地域...
例如:您可以将多台ECS实例的内存使用率作为监控图表的数据源,使用阿里云App随时随地监控这些数据,分析内存使用趋势,从而灵活调整ECS实例的内存大小,以实现资源的高效利用和成本控制。前提条件:请您确保已在云监控的PC端创建自定义...
通过分页的形式查询应用下每个接口的请求量、错误数、平均响应时间三种性能数据。可通过返回信息中的Completed字段判断分页是否结束。如未结束,CurrentPage参数加一后继续发起查询即可。调试 您可以在OpenAPI Explorer中直接运行该接口,...
本产品(大数据开发治理平台 DataWorks/2020-05-18)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
优先查询热存储中的数据,若热存储中的数据查完了,用户仍然在调用获取下一条数据,则会开始查询冷数据。false:否。不开启优先查询热数据功能。方式二:HBase Java API scan=new Scan();scan.setAttribute(AliHBaseConstants.COLD_HOT_...
数据查询提供通过SQL查询预览数据资源,为开发人员和数据应用人员提供全面直观的数据呈现。本文介绍如何查询物理表数据。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角,...
DescribeOssObjectDetailV2 查询OSS存储对象的详细信息V2 调用本接口查询数据安全中心连接授权的OSS的单个存储对象的详细信息 DescribePackages 查询数据包的信息 调用本接口查询已完成扫描授权的MaxCompute数据包的信息,例如数据包的名称...
云原生多模数据库 Lindorm 使用容量型云存储作为冷数据存储介质。本文介绍时序引擎的冷数据归档功能的使用方法。功能概要 在时序数据库持续写入的场景下,早先写入的时序数据会随着时间推移,查询频度逐渐降低。这样的数据通常被称为“冷...
数据库 数据库 ListDatabases 查询数据地图数据库列表 查询数据地图中给定实例/集群/数据目录下的数据库列表。对于dlf/starrocks类型,查询给定数据目录下的数据库列表,其中starocks类型仅支持查询Internal Catalog;对于其他类型,查询...
本文将为您介绍在Dataphin中使用代码方式查询数据时存在的限制和规则。使用限制 Dataphin最多返回10000条查询结果的记录。您可以在查询语句后增加 limit 返回条数,自定义返回记录的条数,例如 select*from ht5_out limit 20;即返回20条...
本文将为您介绍在Dataphin中使用代码方式查询数据时存在的限制和规则。使用限制 Dataphin最多返回10000条查询结果的记录。您可以在查询语句后增加 limit 返回条数,自定义返回记录的条数,例如 select*from ht5_out limit 20;即返回20条...
Spark开发 API 标题 API概述 PreloadSparkAppMetrics 预加载Spark App指标数据 预加载Spark App 指标数据。GetSparkAppMetrics 查询Spark App指标数据 获取Spark App指标数据。ListSparkLogAnalyzeTasks 查询Spark日志分析任务列表 获取...
权限类型:本次运行脚本中所需要的权限,其中数据源表只有查表数据权限;数据源只有执行权限。操作:若检查对象失败,您可以针对单个或多个对象进行权限申请。单个对象权限申请:单击目标对象 操作 列的 图标,申请该对象权限点的个人权限...
使用预降采样查询提升查询性能 大范围的时间查询 预降采样 通过存储引擎将写入的数据降低精度后单独存储,查询时按查询条件中指定的降采样精度自动查询最接近预降采样精度的数据,然后再对查询的数据进行聚合计算,减少实时查询的计算数据...
本文介绍如何通过减少单次查询数据点来提升查询效率。时序查询优化的其中一个原则就是,查询命中的数据点越少,查询效率越高。因此来说查询条件尽量精确。如何减少扫过的数据点数 查询周期与写入的采集周期强相关,尽量减少毫秒级采集周期...
使用DataWorks连接MaxCompute有如下方式:数据分析的 SQL查询 功能:实现编辑MaxCompute SQL、查询数据、分析数据(电子表格)、在线分享数据及下载数据等功能。SQL查询功能详情请参见 SQL查询。数据开发的 MaxCompute任务节点:DataWorks...
Delta Lake是新型数据湖方案,推出了数据流入、数据组织管理、数据查询和数据流出等特性,同时提供了数据的ACID和CRUD操作。通过结合Delta Lake和上下游组件,您可以搭建出一个便捷、易用、安全的数据湖架构。在数据湖架构设计中,通常会...
权限类型:本次运行脚本中所需要的权限,其中数据源表只有查表数据权限;数据源只有执行权限。操作:若检查对象失败,您可以针对单个或多个对象进行权限申请。单个对象权限申请:单击目标对象 操作 列的 图标,申请该对象权限点的个人权限...
DataWorks支持工作空间角色或成员使用指定的身份访问数据源,并对查询结果的展示、复制、下载、分享等操作进行权限管控,以确保数据操作的安全性。本文为您介绍数据查询与分析管控的相关内容。背景信息 DataWorks数据分析的用户使用指定...
Delta Lake以数据为中心,围绕数据流走向(数据从流入数据湖、数据组织管理和数据查询到流出数据湖)推出了一系列功能特性,协助您搭配第三方上下游工具,搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
为了更好地指导您使用数据管理DMS(Data Management),DMS推出解决方案系列文档,旨在通过最佳实践(Step by Step)的形式向您介绍DMS研发流程、数据安全、数据开发的解决方案。研发流程解决方案 DMS为在线流程化系统,可统一管理企业内...
调用本接口查询数据表、文件的数据识别结果。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略...
如果需要快速地对数据进行查询与分析,您可以使用SQL语句查询MaxCompute、EMR Hive、Hologres等数据源。本文为您介绍如何通过SQL语句查询数据源。重要 DataWorks推荐您体验 新版数据分析,以获得最新功能和更好体验。支持的数据源 SQL查询...
PolarDB PostgreSQL版 提供了网络通道管理功能,通过网络通道您可以基于fdw外部表、dblink等多种方式实现跨库访问数据,使得跨库访问数据变得更为灵活和便捷。本文介绍如何通过网络通道跨库查询数据。前提条件 已创建源集群和目标集群。...
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口,您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统,具体操作请参见 登录集群管理系统。使用限制 为确保数据...
数据探查 单击 数据探查,展示数据预览、表信息、临时查询信息和数据探查相关信息。重要 如该表类型在数据查询模块不支持,则此处不展示探查功能。单击 数据预览,对数据表数据进行预览。更多信息,请参见 预览物理表数据。单击 表信息,...
2 3 4 0 1 Time taken:2.937 seconds,Fetched:5 row(s)说明 查看数据与在Spark中插入的数据一致,说明Hive已经成功访问了Delta表的数据。通过Presto查询Delta表数据 执行以下命令,进入Presto命令行。presto-server master-1-1:8889-...
TSDB 提供时序数据的高效读写。对于百万数据点的读取,响应时间小于 5 秒,且最高可以支撑每秒千万数据点的写入。数据写入 TSDB 支持通过 HTTP 协议和 TSDB Java Client 两种方式进行数据写入。数据查询 TSDB 支持通过 HTTP 协议、TSDB ...
当数据库中表的数据量过大时,可能会影响查询数据速率,在不考虑将数据迁移到其他数据库的情况下,您可以将数据库中的历史数据或使用频率低的冷数据归档在当前数据库下的其他表中。同时,结合DMS提供的归档时清理源表功能,帮助您提升数据...
Lindorm助力新榜构建高并发高性能的数据处理平台,实现了无感知的跨引擎协同操作、每秒千万级的高并发写入与点查能力和压缩率100%的提升,降低存储的同时全面保障业务的稳定性和数据处理效率。客户简介 新榜作为数据驱动的头部内容科技公司...
数据管理DMS的SQL窗口可以非常便捷地执行各类SQL语句,同时支持以可视化的方式对目标数据库进行增、删、改、查等操作,适用于数据查询、数据开发等场景。前提条件 已具备目标库或表的查询权限。申请权限,请参见 通过提交工单申请资产权限...
使用RDS MySQL数据库代理时,您可以随时查看数据库代理的CPU利用率,了解数据库代理的负载情况,以便及时调整代理数量(规格)。本文介绍如何通过控制台和API接口查看RDS MySQL数据库代理的CPU利用率。关于RDS数据库代理的使用问题和更多...
PolarDB PostgreSQL版(兼容Oracle)提供了网络通道管理功能,通过网络通道您可以基于fdw外部表、dblink、database link 等多种方式实现跨库访问数据,使得跨库访问数据变得更为灵活和便捷。本文介绍如何通过网络通道跨库查询数据。前提...
说明 您可以根据需要选择Extractor、StorageHandler或Outputer类型:Extractor:自定义输入数据解析器,用来实现自定义处理数据读取的逻辑,即如何读取非结构化数据。StorageHandler:用于指定和配置自定义Extractor和Outputer的实现类。...
登录目标数据库,详情请参见 登录数据库。重要 对于MongoDB副本集实例,需要登录Primary(主)节点。单击首页左侧的数据库实例,在实例列表中右键单击目标实例名称,再单击 数据库账号管理。单击页面左上角的 创建数据库账号,配置以下信息...
随着企业的数据资料持续积累,需要持久化地保留数据资产,但是数据的存储成本居高不下,因此DMS和 AnalyticDB PostgreSQL版 Serverless模式共同推出了数据归档功能,可以面对数据库实现灵活低价、归档管理和高分析性能的能力。功能介绍 DMS...
时序数据高效读写 Lindorm时序引擎提供高效的并发读写,支持每秒百万数据点的数据读取及千万数据点的写入能力。数据写入 支持以下方式进行数据写入:使用SQL的INSERT语句(推荐使用JDBC)。兼容InfluxDB的写入Line Protocol。兼容OpenTSDB...
元数据 API 标题 API概述 目录 目录 CreateCatalog 创建数据湖数据目录 创建数据湖数据目录。DeleteCatalog 删除数据湖数据目录 删除数据目录。UpdateCatalog 更新目录 更新数据目录内容。ListCatalogs 获取数据目录列表 分页查询,获取...
数据查询提供不同数据资源的物理表基础信息,包括物理表基本信息、表结构和物理表DDL语句。本文介绍如何查看物理表信息。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源。操作步骤 登录 数据资源平台控制台。在页面左上角,...