作业列表 运行任务按照应用定义，解析生成的不同计算作业，每个作业属于一个分析步骤，并提供具体的执行信息。输入 用户提交运行任务时，使用的所有输入参数。输出 由应用定义的，运行任务成功完成后，产生的分析结果输出。运行任务中计算...
Call-Caching Call-Caching是指当用户在基因分析平台中计算作业，被检测到与之前的执行记录一致，可以直接使用之前的计算结果而无需重新计算，可以节省时间和费用。简单来说，当一个计算作业成功完成后，如果平台再遇到完全一致的输入、...
会覆盖vCPU和内存设置 计算存储 计算作业的本地化的输入和输出文件存储 高效云盘 disks:"local-disk 20G cloud_efficiency"可作为系统盘或数据盘使用，参考 设置运行时属性 SSD云盘 disks:"/mnt 100G cloud_ssd"软件算法 计算作业使用的...
配置项 配置项 是否必选 说明 示例 任务名词 是 任务名词 视频分析任务 作业预启动数 是 任务下的计算作业数量 1 作业可支持流 是 单个计算作业可分析的视频流数量 6 任务流类型 是 任务处理的流类型，默认为视频流-video video 算法包 是 ...
spot spark Spark 作业计算 SpotSpark作业计算 odps_computation_spark odps_computation_mars_spot mars 数据科学（Mars）按量付费 SpotMars作业计算 odps_computation_mars odps_computation_mars_spot MapReduce MR作业计算 ...
在开通地域创建的项目默认可以选择包年包月规格下的计算资源，且该地域项目下的计算作业默认在此固定的计算资源池里执行。如果您发现购买的CU量不够或者闲置过多，也可以增加或减少CU量。例如：A账号在华东1（杭州）地域购买包年包月 标准...
配额（Quota）是MaxCompute的计算资源池，为MaxCompute SQL、MapReduce、Spark、Mars、PAI等计算作业提供所需计算资源（CPU及内存）。您可以根据实际业务合理设置配额组，确保资源的合理分配和利用，防止某一部分任务占用过多资源而影响...
计费单价如下：公共云：0.154元/计算时 金融云：0.293元/计算时 SpotSpark作业（指计算配额为os_SpotQuota的Spark作业）SpotSpark作业当日计算费用=当日总计算时×单价 计费单价如下：公共云：0.22元/计算时 金融云：0.418元/计算时 ...
MaxCompute资源包含存储资源和计算资源（CU）两种，存储资源用于存储表或资源（Resource），计算资源用于运行作业。为实现以最低的费用，满足业务对存储资源、计算资源的需求，企业必须要根据自身情况合理规划资源。本文为您介绍如何规划...
资源说明 基础资源 资源说明 计费规则 计算资源 资源池为共享型，计算作业按需抢占资源，例如SQL（含UDF）、MapReduce、Spark、交互式分析（Lightning）和Graph等。不可指定用量也无使用限制。说明 若瞬时作业过多，存在因多用户抢占而无法...
但是当同一地域已经开通按量计费模式时，如果作业量较大，您可以考虑对于消耗资源少的作业采用包年包月计费模式，消耗资源较大的作业采用按量计费模式，保证作业运行时一直有计算资源。更多包年包月项目使用按量计费资源信息，请参见 包年...
包年包月 项目的计算作业只能使用购买的 预留计算资源 和 非预留计算资源。预留计算资源 为独占资源，计算资源即CU资源。计费转换方式如下。转换场景 说明 生效周期 按量计费标准版 转为 按量计费开发者版 不支持。不涉及。按量计费开发者...
升级公告 因消息队列RocketMQ接入点地域化变更（详情请参见 关于TCP内网接入点设置的公告），如果您已使用了VVR 3.0.1以下版本的RocketMQ Connector，则您需要将您的实时计算作业升级至VVR 3.0.1及以上版本，并将作业中EndPoint参数取值...
配额组（Quota）是MaxCompute的计算资源池，为MaxCompute中的计算作业提供所需计算资源（CPU及内存）。在MaxCompute中支持根据计算作业对计算资源的需求，指定匹配的Quota，助力您高效使用计算资源。本文为您介绍如何使用MaxCompute的Quota...
1 背景 由于历史原因，提交了大量的批量计算 DAG 作业，但是作业没有及时清理；或者单次提交了大量的作业，需要做清理操作。目前批量计算控制台支持单页批量删除，但若存在几十页作业的情况，清理动作也比较麻烦。因此提供了一个批量清理...
元数据 当发现异常的计算作业时，您可以通过查看元数据来查看作业执行详细信息，找出具体的问题作业进行治理。您可以通过 Information Schema 视图中的TASKS_HISTORY数据统计作业量和TOP费用作业。具体可参考最佳实践 MaxCompute后付费消费...
计算费用（按量付费）存储费用 数据传输费用（公网下载）作业量不稳定，且需要灵活存储空间的项目。按量付费闲时版 闲时计算资源池与按量付费标准版计算资源共享，与包年包月计算资源隔离，不可指定用量。不涉及 不涉及 计算费用（按量付费...
当您发现MaxCompute账单持续上涨，而且成本变得难以管理时，您可以从计算作业着手，通过对SQL作业和MapReduce作业的优化而减少计算成本。本文为您介绍SQL作业和MapReduce作业计算成本的控制方法。预估计算成本 您可以在计算前对计算成本...
升级公告 因消息队列RocketMQ接入点地域化变更（详情请参见 关于TCP内网接入点设置的公告），如果您已使用了VVR 3.0.1以下版本的RocketMQ Connector，则您需要将您的实时计算作业升级至VVR 3.0.1及以上版本，并将作业中EndPoint参数取值...
您可以通过调用 o.create_mars_cluster，在MaxCompute内部创建Mars集群，并将计算作业直接提交至Mars集群，调度费用极小。在数据规模较小时，Mars更有优势。PyODPS PyODPS是一个客户端，不包含任何服务端部分。执行PyODPS DataFrame时，...
资源观测提供某段时间内，数据传输服务资源组（包括共享资源组和独享资源组）与计算资源组内各类CPU、内存、并发数等资源的使用情况，您可通过观测各指标的曲线图，优化和调整作业的执行计划及资源配置，提高作业的效率和性能。开通地域 ...
本文为您介绍将自建开源Flink集群的流式作业（包含Table API、SQL和Datastream）迁移至阿里云实时计算Flink全托管版的迁移优势、迁移方案和相关文档。迁移优势 Flink全托管产品按CU售卖，根据业务需要按需购买，可以降低成本。另外提供提交...
本文介绍实时计算Flink版产品的计费项、计算公式、资源估算方法，以及Flink开通和使用过程中涉及的其他云产品的费用情况。资源估算 Flink工作空间的基本计量单位为Compute Unit（CU），即计算资源，1 CU=1核CPU+4 GiB内存+20 GB本地存储...
本文为您介绍如何在开发者本地环境中运行和调试包含阿里云实时计算Flink版连接器的作业，以便快速验证代码的正确性，快速定位和解决问题，并节省云上成本。背景信息 当您在Inteillij IDEA中运行和调试Flink作业，如果其包含了阿里云实时...
RocketMQ接入点变更导致实时计算作业适配升级公告 升级公告 因消息队列RocketMQ接入点地域化变更（详情请参见 关于TCP内网接入点设置的公告），如果您已使用了Blink 3.7.10以下版本的RocketMQ Connector，则您需要将您的实时计算作业升级至...
如果您需要控制SQL作业的计算成本，请参见 计算成本优化。通过DataWorks执行补数据操作后，为什么费用会产生较大波动？DataWorks会在您定义的补数据时间区间内的每个调度周期都运行一次补数据操作。例如补30天的数据，调度周期为天，则补...
MaxCompute作业运维功能支持查看历史作业和正在运行的作业，方便您了解作业运行详情及分析作业运行时的资源负载情况，帮助您对作业进行运维管理。功能介绍 MaxCompute的作业运维功能支持查看并运维您当前项目下 历史作业和正在运行的作业。...
背景信息 MaxCompute Quota作为计算资源的单元，为MaxCompute SQL、MapReduce、Spark、Mars、PAI等计算作业提供所需计算资源（CPU及内存）。MaxCompute Quota分为一级和二级Quota，一级Quota之间相互独立；二级Quota从属于一级Quota，二级...
本文介绍如何安装函数计算PHP SDK。环境准备 安装PHP。更多信息，请参见 安装PHP。说明 安装完成后，您可以执行命令 php-v查看PHP语言版本。安装Composer。更多信息，请参见 安装Composer。安装SDK 您可以通过以下方式安装PHP SDK。执行...
SQL作业计算费用高出预期 SQL作业整体消费较高（包含外部表作业），可能是单条作业消费异常，也可能由于重复执行或调度属性配置不合理造成作业量突增。可以通过查询消费异常作业的实例ID（inst_id），查看具体的执行信息。登录 MaxCompute...
您需要提前配置该监控指标，如果作业运行时间过长，可以及时检查是否存在资源紧张或作业计算量过大等问题。作业运行时长_SQL类型 以MaxCompute项目为单位，监控项目下的所有SQL类型作业。如果某个SQL作业的运行时间（包含等待时间）超过...
计算引擎作业提交成功后，您可以通过SparkUI界面或者HDFS Shell工具查看作业运行状态。前提条件 已开通 云原生多模数据库 Lindorm 实例的计算引擎服务，具体操作请参见 开通与变配。已将客户端IP地址添加至 云原生多模数据库 Lindorm 实例...
阿里云实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台，提供端到端亚秒级实时数据分析能力，并通过标准SQL降低业务开发门槛，助力企业向实时化、智能化大数据计算升级转型。产品概述 阿里云实时计算Flink版是一种全...
MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库，支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业，推荐您使用SQL查询或DataWorks的临时查询等工具，高效便捷地完成数据分析...
2018年12月 功能名称 变更类型 功能描述 相关文档 表格存储触发器 新增 函数计算推出表格存储触发器，通过表格存储触发器，当您的表格变更时会实时触发函数计算对数据进行自定义处理。使用表格存储触发器，您可以轻松实现对数据的计算、...
重要 如果您已使用了VVR 3.0.1以下版本的RocketMQ连接器，则您需要将您的实时计算作业升级至VVR 3.0.1及以上版本，并将作业中EndPoint参数取值更改为新的RocketMQ接入点，旧的接入点存在稳定性风险或不可用的问题，详情请参见 实时计算...
计算时数量的计算规则如下：计算时数量=max(CPU Core数量×时长,内存×时长/4)例如1小时消耗了2 个CPU Core和5 GB内存，则计算时数量为：计算时数量=max(2×1,5×1/4)=2 账单金额为：账单金额=计算时数量×单价 本例中账单金额为：2（计算...
作业是E-HPC集群进行高性能计算的基本工作单元，包括Shell脚本、可执行文件等。本文介绍如何使用E-HPC客户端提交作业。准备工作 提交作业前，您需要准备好作业文件，并上传到E-HPC集群中。E-HPC客户端支持以下两种方式上传作业文件：通过...
通常，Flink作业是事件驱动计算的，但在一些场景下，Flink作业需要基于处理时间（ProcessingTime）或者事件时间（EventTime）驱动计算和发送数据，这时便需要使用Timer。算子可以注册一个Timer，当时间达到指定的处理时间，或事件时间水印...
您可以通过以下任何一种方式来使用连接器：（推荐）上传连接器JAR包到实时计算控制台后，填写配置信息 直接将连接器作为项目依赖打进作业JAR包 重要 请使用我们在 支持的连接器 中指明提供DataStream API的连接器。如果某个连接器未注明...