但是，实际项目可能会因为某些原因导致作业运行时间延长（例如参与计算的数据量增加），相当于W会变大。同时，由于通过DataWorks或Dataphin运行调度作业还会产生很多延迟时间、作业获取计算资源也会耽误很多时间，这部分延迟时间会加大作业...
您可以使用RAM控制台和SDK获取阿里云临时安全令牌STS（Security Token Service）并实现跨账号授权查看或管理 函数计算 的资源。使用示例 企业A开通了 函数计算 服务，该企业需要企业B代为操作 函数计算 的资源。同时企业A有如下诉求：希望...
Serverless GPU是一种新兴的云计算GPU服务，它采用了服务器无感知计算的理念，通过提供一种按需分配的GPU计算资源，有效地解决原有GPU长驻使用方式导致的低资源利用率、高使用成本和低弹性能力等痛点问题。本文介绍Serverless GPU的详细...
0 InterConnect string 队列中计算节点间的网络类型，可能值：vpc eRDMA erdma VSwitchIds array 队列中计算节点可用的虚拟交换机列表。N 的取值范围 1～5。VSwitchId string 虚拟交换机 ID。VSwitchId ComputeNodes array 队列中计算节点...
同时，开启弹性计算资源并设置可用最大弹性计算资源为20 CU（或更多），在高峰时间段，当固定计算资源不足时，会使用弹性计算资源，按实际使用弹性计算资源量计费，最大不超过可用最大弹性计算资源20 CU。对比其他计费方式，采用混合计费...
作业管理 创建作业：提交到E-HPC INSTANT计算服务进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等。复制作业：可以快速创建与目标作业相同或相似的作业配置，一般用于复制测试环境、大规模的数据处理、复杂的计算任务、或者是...
设备接入 设备接入是指用户需要计算的设备接入到VCS后，可以上传数据完成计算。接入配额 接入配额是指基于用户设备购买接入量分配的设备接入数量的额度。设备注册 设备注册是指设备发送注册请求到VCS的SIP服务器中。注册成功后，设备处于...
本文为您介绍MaxCompute的包年包月标准计算资源规格下的计算费用规则。背景信息 MaxCompute的计算费用（包年包月）是提前预定一部分资源，先付费后使用。包年包月的计算资源分为多AZ高可用计算资源和标准计算资源，即SQL、MapReduce、Spark...
调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM...
说明 在转换前，请计算原CU量以预估包年包月计算资源CU量，详情请参见 按照计存比规划计算资源 或 按照项目实际消耗的计算资源数量规划计算资源。通常立即生效。但如果您有正在运行中的作业，下次运行时才会转换过来。包年包月标准计算资源...
计算时 公共云：用量×单价（0.22元/计算时）金融云：用量×单价（0.418元/计算时）SpotMapReduce作业计算 取当前Project当日使用按量付费闲时版计算配额执行成功的MapReduce任务所消耗的计算时总和。计算时 公共云：用量×单价（0.154元/...
使用弹性高性能计算（E-HPC），您无需采购和管理服务器等基础设施，只需配置所需的计算资源和上传应用程序，就可以实现高性能和弹性的计算能力。本入门教程将引导您了解E-HPC的使用流程，涵盖从创建集群到提交作业的各个步骤，帮助您快速...
MaxCompute为您提供了SQL计算功能，您可以在MaxCompute SQL中使用系统的 内建函数 完成一定的计算和计数功能。但当内建函数无法满足要求时，您可以使用MaxCompute提供的Java或Python编程接口开发自定义函数。内建函数：可以简化SQL查询的...
公共子查询中需要包含JOIN或AGG（聚合，Aggregation）等涉及数据重组计算的运算符。当前物化视图推荐功能仅支持华东1（杭州）、华东2（上海）、华北2（北京）、华北3（张家口）、华南1（深圳）、西南1（成都）、德国（法兰克福）地域。使用...
Spark on MaxCompute是MaxCompute提供的兼容开源Spark的计算服务。它在统一的计算资源和数据集权限体系之上，提供Spark计算框架，支持您以熟悉的开发使用方式提交运行Spark作业，满足更丰富的数据处理分析需求。使用限制 Spark on ...
任务（Task）是MaxCompute的基本计算单元，用户通过编写SQL或者MapReduce程序来表达数据处理的逻辑，然后提交这些程序到MaxCompute服务上执行，MaxCompute会把这些程序转换为一个或多个任务，并在分布式环境中并行执行。对于您提交的大多数...
对于外部表的计算，如果使用包年包月计算资源或弹性预留CU计算资源，外表计算费用均包含在预付费的计算资源费用中。如果使用按量付费模式，外表计算费用目前仅统计计算任务访问OSS和OTS的扫描数据量。其他外部表方式的访问，包括通过外部表...
概念 说明 集群 集群指运行高性能计算的节点集合，可以提供单节点不能提供的强大计算能力，拥有高性能、弹性扩展、稳定可靠等优点。集群包含弹性公网IP、集群节点、调度器、域账号、集群用户、运行软件等资源。节点 每个集群包含管理节点、...
您可以根据业务规模以及实时计算的计算能力，估算所需购买的资源数量。计费概述 配置作业资源 标签管理 草稿（Draft）您在实时计算开发控制台ETL界面中创建的SQL作业，以及在数据摄入页面创建的YAML作业称均为草稿。该概念只适用于通过实时...
云渲染管理系统（Render Manager 简称渲管）是一个开源的 Web 应用，可以帮助用户轻松搭建阿里云上的私有渲染系统，直接调用海量计算资源，一键管控集群规模，在加速渲染任务的同时省去自建集群的烦恼。渲管建立在阿里云 BatchCompute、OSS...
使用流程 如上图所示，E-HPC 的使用流程包括以下几步：创建集群 E-HPC集群是运行高性能计算的节点集合，可以提供单节点不能提供的强大计算能力，拥有高性能、弹性扩展、稳定可靠等优点。具体操作，请参见 通过控制台快速创建和管理集群。...
配额（Quota）是MaxCompute的计算资源池，为MaxCompute SQL、MapReduce、Spark、Mars、PAI等计算作业提供所需计算资源（CPU及内存）。您可以根据实际业务合理设置配额组，确保资源的合理分配和利用，防止某一部分任务占用过多资源而影响...
视频介绍 物联网边缘计算的核心功能如下：边缘实例 边缘实例提供一种类似文件夹的管理功能，您可以通过实例的方式管理边缘端相关的网关、子设备，同时也可以管理场景联动、函数计算、流数据分析和消息路由内容。通过部署实例，将边缘实例中...
MaxCompute提供 计算成本优化 功能，当需要在保证作业完成的前提下 降低 包年包月规格计算资源的费用或遇到基于现有资源配置作业完成时间达不到预期的情况时，可基于实际作业请求量和资源配置期望，对 包年包月一级Quota 类型的计算资源...
集群是运行高性能计算的节点集合，可以提供单节点不能提供的强大计算能力，拥有高性能、弹性扩展、稳定可靠等优点。本文介绍集群的定义、E-HPC支持的集群类型和组成部分，以及集群相关的功能。支持的集群 类型 E-HPC集群根据部署环境、集群...
MaxFrame是由阿里云自研的分布式科学计算框架，是对历史相关产品功能（PyODPS、Mars）的重大升级，提供了兼容Pandas接口的API，并以更符合Python社区习惯的方式支持MaxCompute的使用。本文为您介绍MaxCompute提供的Python开发生态的背景...
AI计算资源是MaxCompute 为满足客户使用模型进行数据处理或离线推理且对于计算效率要求较高时提供的一种资源配额类型，简称：GU Quota。本文介绍MaxCompute AI计算资源的计费规则。适用范围 支持地域：当前仅以下地域支持购买AI计算资源：...
由于PyODPS DataFrame自身会对整个操作进行优化，您可以通过可视化方式直观地展示整个表达式的计算过程，以便进行调试。可视化DataFrame 可视化需要依赖 graphviz软件 和 graphviz Python包。df=iris.groupby('name').agg(id=iris....
如果购买的MaxCompute包年包月资源无法满足或者超过业务计算量需求，需要购买更多资源以支撑业务需求或者降低资源以减少费用，可以通过相应的资源升级和资源降配操作实现。规格说明 MaxCompute包年包月规格包含标准计算资源、存储密集型160...
功能介绍 在数据仓库领域，物化视图是优化重复计算的重要手段。假设用户的业务场景中存在大量的查询语句，这些查询语句共享一些高频的、耗时计算（如JOIN/AGGREGATE）的公共子查询，利用物化视图，可以将这些公共子查询的计算结果存储于...
当有请求到达后端服务设置为函数计算的云原生API网关时，会触发函数执行，同时函数计算会将执行结果返回给API网关。背景信息 云原生API网关触发器与 API网关触发器 类似，函数计算与云原生API网关对接后，可以通过API形式安全地对外开放...
概念 说明 集群 集群指运行高性能计算的节点集合，可以提供单节点不能提供的强大计算能力，拥有高性能、弹性扩展、稳定可靠等优点。集群包含弹性公网IP、集群节点、调度器、域账号、集群用户、运行软件等资源。节点 每个集群包含管控节点、...
MaxCompute以项目为单位，对存储、计算和下载操作进行计费。本文为您介绍MaxCompute费用组成、计费项与计费方式以及计费方式选择。计费项与计费方式 MaxCompute计费项以及计费说明如下表所示。计费方式 说明 存储费用 存储费用：按照存储在...
ECS资源复用版是MaxCompute按量付费类型中的一种实例规格，旨在将ECS闲置实例转换为可用的MaxCompute计算资源，该方式可以充分利用已有的计算资源，而不需要额外购买新的MaxCompute计算资源，从而在满足大数据处理需求的同时，提高资源利用...
在阿里云负载均衡（ALB）服务中，配额计算方式是根据不同的资源类型和资源使用情况来确定的。本文从标准版ALB实例、服务器组、监听和转发规则几个方面介绍ALB的配额计算方式。ALB配额计算示例场景 ALB实例通过Ingress资源来管理和路由来自...
E-HPC支持将运行不同作业或执行不同任务的计算节点进行分类，便于筛选节点。本文介绍如何使用队列分组管理计算节点，包括创建和删除队列，以及在队列之间移动节点。背景信息 创建集群时会自动创建一个默认队列，计算节点默认会加入到该队列...
每个计算节点是一台ECS实例，它们提供了计算能力和存储能力，能够承载和运行各种类型的计算工作负载，如并行计算、大规模数据处理、深度学习训练等。通过配置多个计算节点，您可以构建一个强大的计算集群，以快速、高效地完成大规模计算...
包年包月的资源是独享型资源，MaxCompute会根据您购买的资源量分配固定数量的计算资源，您可以对计算资源设置配额组、并设置分时时段，请参见 计算资源-Quota管理。包年包月资源最佳实践，请参见 包年包月资源分时配额 或 包年包月资源隔离...
本文主要介绍欠费对的E-HPC INSTANT计算服务影响、如何结清欠费账单以及如何避免欠费等。欠费影响 欠费后，E-HPC INSTANT计算服务无法继续使用，即无法创建新的作业。欠费前已经处于 重试中 和 运行中 状态的计算作业将受到保护并继续运行...
什么是作业 在E-HPC集群中，作业是指通过命令行命令、Shell脚本或可执行文件形式提交到集群进行高性能计算的基本工作单元。作业的具体运行方式将根据您设置的队列和调度器配置进行决定。您可以根据自己的需求设置作业的优先级和资源要求，...