异常根因 实时计算VVR 11.1及更低版本引擎在全量切换到增量阶段之后,有可能无法正确清理状态中持久化保存的表结构信息,导致从Checkpoint恢复时内存不足。解决方案 升级实时计算Flink引擎到VVR 11.2或更高版本。快照即将结束时作业失败,...
SpotQuota且引用了OTS、OSS外部表的SQL作业)引用外部表的SpotSQL作业当日总费用=计算输入数据量×单价 计费单价如下:公共云:0.03元/GB 金融云:0.057元/GB SpotMapReduce作业(指计算配额为os_SpotQuota的MapReduce作业)SpotMapReduce...
背景信息 MaxCompute原支持对包年包月预留计算资源进行 自定义Quota切分以及分时配置(一天最多可分为三个时段),配置不同Quota在不同时段占用不同的预留CU量,极大提高了计算资源的使用率。MaxCompute新推出 弹性预留CU,结合全新的Quota...
简化数仓架构,一份计算逻辑,一个引擎,同时支持增量计算和全量计算,同时满足低延迟和高吞吐需求。成本效益,平衡数据新鲜度和成本,高效处理增全量ETL。适用场景 该功能适用于以下场景:离线业务实时化 从T+1数仓演进到分钟级近实时数仓...
为了使计费更加直观和方便用户理解,函数计算 统一使用 CU使用量 计费项,单位为CU,所有资源使用量将按照一定的转换系数转换为CU使用量并按照CU使用量单价进行计费。函数计算 针对 CU使用量 推出了 CU资源包,且不再提供 GPU资源包、vCPU...
本文介绍计算巢服务控制台服务市场的相关信息。在 计算巢-服务目录 页面中,服务分为 服务目录 和 共享服务 两种。服务目录 页签中,展示的是已经发布上线并将服务上到了服务市场的服务;共享服务 页签中,展示的是服务商将您添加到服务白...
与用户通信时,函数计算 使用TLS 1.2及以上协议加密传输调用请求及回包,内部通信使用私有协议防止信息泄露及篡改。本页面分模块阐述数据面安全性保障。接入服务安全性保障 在数据面内部流程中,接入服务主要负责函数的调用。作为函数调用...
本文为您介绍如何对长周期指标的计算进行优化。实验背景 电子商务公司在电商数据仓库和商业分析场景中,经常需要计算最近N天...计算老买家数量时,判断最近一次购买时间是否在30天之内,从而最大程度上的数据关系对去重,减少计算输入数据量。
产品线 产品名称 弹性计算 云服务器ECS 轻量应用服务器 无影云桌面 数据库 关系型数据库RDS 数据传输服务DTS 云数据库Tair(兼容 Redis)云数据库KVStore版 云数据库MongoDB版分片集群 云数据库MongoDB版副本集 云数据库专属集群(托管版)...
DescribeDatabaseInstanceParameters 查看轻量数据库实例的参数信息 查看轻量数据库实例的参数信息。DescribeDatabaseInstances 查看轻量数据库实例信息 查看轻量数据库实例信息。AllocatePublicConnection 申请公网访问地址 申请公网访问...
函数计算 会记录每次调用的 FC Invoke Start 和 FC Invoke End 行,以及执行摘要信息,执行摘要的参数说明如下:参数 说明 Request ID 调用的请求ID。代码校验码 调用所使用代码包的校验码。函数执行时间 处理程序实际运行所花费的时间。...
背景信息 若通过计算巢部署链接创建,请参见 通过计算巢控制台创建服务实例。若通过云市场商品链接(首页搜索或服务商提供)创建,请参见 通过云市场创建服务实例。本文只介绍了通用的服务实例部署流程,具体的服务实例部署详情,请参见...
查看轻量数据库实例信息。接口说明 通过此接口可查看指定地域下一个或多个轻量数据库实例的详细信息,包括轻量数据库实例 ID、名称、套餐、数据库版本、公网访问地址、内网访问地址、创建时间、到期时间等信息。调试 您可以在OpenAPI ...
背景信息 作为流式计算引擎,Flink可以广泛应用于实时数据处理领域,例如ECS在线服务日志,IoT场景下传感器数据等。同时Flink还能订阅云上数据库RDS、PolarDB等关系型数据库中Binlog的更新,并利用DataHub、SLS、Kafka等产品将实时数据收集...
配置项 基础版 高配版 本地SSD ECS实例 3台8 vCPU 64 GiB的本地SSD ECS实例 3台16 vCPU 64 GiB的本地SSD ECS实例 计算型ECS实例 4台2 vCPU 4 GiB的计算型ECS实例 2台4 vCPU 8 GiB的计算型ECS实例 3台4 vCPU 8 GiB的计算型ECS实例 2台8 vCPU...
配置项 基础版 高配版 本地SSD ECS实例 3台8 vCPU 64 GiB的本地SSD ECS实例 3台16 vCPU 64 GiB的本地SSD ECS实例 计算型ECS实例 4台2 vCPU 4 GiB的计算型ECS实例 2台4 vCPU 8 GiB的计算型ECS实例 3台4 vCPU 8 GiB的计算型ECS实例 2台8 vCPU...
背景信息 MaxCompute的计算费用(包年包月)是提前预定一部分资源,先付费后使用。包年包月的计算资源分为多AZ高可用计算资源和标准计算资源,即SQL、MapReduce、Spark、MaxFrame等类型任务计算所需资源。多AZ高可用计算资源:高可用计算...
配置项 基础版 高配版 本地SSD ECS实例 3台8 vCPU 64 GiB的本地SSD ECS实例 3台16 vCPU 64 GiB的本地SSD ECS实例 计算型ECS实例 4台2 vCPU 4 GiB的计算型ECS实例 2台4 vCPU 8 GiB的计算型ECS实例 3台4 vCPU 8 GiB的计算型ECS实例 2台8 vCPU...
自2024年08月27日起,函数计算将统一函数调用和资源使用计费项为 CU使用量 计费项,单位为 CU,所有资源使用量将按照一定的转换系数转换为 CU使用量 并按照 CU使用量 单价进行计费。函数计算针对 CU使用量 推出了全新的资源包,并支持存量...
UpdateProjectBasicMeta 修改项目基本信息 修改项目基本信息 UpdateProjectDefaultQuota 修改项目默认计算Quota 修改项目默认计算Quota UpdateProjectIpWhiteList 修改项目IP白名单 修改MaxCompute项目IP白名单。UpdateProjectModelTier ...
按照项目实际消耗的计算资源数量规划计算资源 按照项目实际消耗的计算资源数量规划计算资源的流程如下:查看项目的CPU消耗量。Information Schema 提供的 TASKS_HISTORY 视图记录了MaxCompute项目中所有计算作业消耗的计算资源情况。您可以...
产品概述 轻量应用服务器基于云服务器ECS的计算、存储、网络资源,并结合阿里云公共镜像和云市场镜像,为您提供了高效的应用部署方案。如果您是正在了解云计算服务的入门用户;或是需要在服务器中部署简单应用的个人开发者、中小企业,那么...
计算费用(按量付费):后付费方式,系统分配可使用的公共二级Quota,不可自行控制CU量以及进行二次分配。查看Quota 登录 MaxCompute控制台,在左上角选择地域。在左侧导航栏,选择 管理配置 配额(Quota)管理。在 Quota管理 页面,查看可...
在执行SQL查询之前,您可使用计量预估命令查询即将消耗的计算资源量。即基于一条SQL作业的输入数据量大小、UDF个数以及SQL复杂等级估算作业执行费用,以便优化成本、提高效率并合理规划资源。如果UDF涉及分区裁剪,由于无法确定最终扫描的...
函数计算 的错误类型的更多信息,请参见 基础信息。函数计算 返回错误信息的方式如下。在入口函数直接返回错误信息,示例如下。package main import("errors""fmt""github.com/aliyun/fc-runtime-go-sdk/fc" )func HandleRequest()error { ...
函数计算 的各运行环境中已内置常用的依赖,供您直接在函数中引用。如果这些内置依赖不能满足您的项目需求,可以安装额外的第三方依赖。...更多信息 关于函数计算安装第三方依赖的总结,请参见 函数计算安装依赖库方法小结。
元数据 当发现异常的计算作业时,您可以通过查看元数据来查看作业执行详细信息,找出具体的问题作业进行治理。您可以通过 Information Schema 视图中的TASKS_HISTORY数据统计作业量和TOP费用作业。具体可参考最佳实践 MaxCompute后付费消费...
背景信息 您在 函数计算 的控制台提交触发器创建请求后,函数计算 会根据触发器的配置信息,自动在 事件总线EventBridge 侧创建 事件流 资源。创建完成后,您可以在 函数计算 控制台查看触发器信息,同时也可以在 事件总线EventBridge 控制...
大规模数据分析与处理:当数据量庞大、处理逻辑复杂时,MaxFrame借助MaxCompute海量数据和计算资源的分布式能力,显著提高数据分析、处理及数据挖掘的开发效率。Data+AI开发:对于整个分布式数据开发和模型开发过程依赖于第三方或自定义...
修改轻量应用负载均衡配置信息 访问 轻量应用服务器控制台-负载均衡。单击目标负载均衡ID。单击 后端实例 页签,在 负载均衡实例设置 区域,修改配置信息。您可以根据业务需要,手动修改以下配置信息。修改会话保持 在 会话保持 后,单击 ...
项目空间缩容时显示资源分配失败 Flink计算资源升配后没生效 如何查看AccessKey ID和AccessKey Secret信息?如何在OSS上传文件让Flink作业使用?实时计算控制台未显示已开通的Flink工作空间?报错:Has not enough ip address:abnormal ...
弹性实例 弹性实例是指 函数计算 根据函数的调用量自动进行实例扩缩容,在调用增加时创建实例,在请求减少后销毁实例。整个过程中,通过请求自动触发实例创建。首次发起调用时,需要等待实例冷启动。弹性实例(浅休眠(原闲置))设置最小...
当minibatch开启时,数据是以批量方式进行计算并存储在State中,而State中的数据是基于之前的全量计算结果。如果State由于TTL过期而被清除,之前的累积计算结果也消失了,导致无法根据minibatch的结果更新数据。相反,如果未开启minibatch...
MaxCompute提供作业洞察能力,支持查看作业概览信息、智能诊断详情、资源消耗情况及特定时刻计算Quota的资源分配情况。同时,还能够对相似作业(以相同的Signature或ExtNodeId为识别依据)在过去一段时间内的历次运行指标进行对比分析。您...
服务商在计算巢控制台将服务发布上线之后,可以选择将计算巢服务在云市场上架为商品,从而打通计算巢服务和云市场的商品交易链路,同时可根据服务特性设置不同的售卖方式,便于用户选择、购买服务。按次/按周期售卖 按次售卖与按周期售卖均...
调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...
调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM...
资源池为独享型,按购买计算资源CU量分配固定资源。说明 资源的基本单位定义为CU(Compute Unit),1 CU=4 GB内存+1 CPU Core。不同Region初始的最大可购买CU量不同,具体以购买页显示的为准,如果需要购买超过这个CU量(新购或者升级),...
计算时 公共云:用量×单价(0.154元/计算时)金融云:用量×单价(0.293元/计算时)SpotOSS外表作业计算 取当前Project当日使用按量付费闲时版计算配额执行成功的计算OSS外部表的SQL任务输入量总和。Byte 公共云:用量×单价(0.03元/GB)...
实验数据 场景 文件数 压缩前总大小 压缩后总大小 执行时间 1 7 1.2 MB 1.16 MB 0.4s 2 57 1.06 GB 0.91 GB 63s 您可以通过以上表格获取以下两个信息:场景1说明使用 函数计算 实现多个文件的下载,可以减少文件的存储空间。场景2说明使用 ...