计算指定两个数值列的总体协方差。此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后,产品扩展了部分函数。如果您用到的函数涉及新数据类型(TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY),在使用扩展...
此问题可能在使用任意实时计算VVR引擎版本的作业中出现。异常表现 任务在全量快照阶段频繁异常重启,查看JobManager日志可见包含OutOfMemory内存不足错误栈。在监控告警界面的数据摄入相关指标中,可以看到“Num of remaining ...
本文介绍函数计算在资源使用上的关键限制,包括函数配额、运行资源、触发器、层、地域和镜像大小等。帮助开发者,尤其是新手用户避免在不了解函数原理时,因误配或者代码有误而造成费用不可控的问题,例如循环调用、死循环等。管理配额 ...
本文介绍计算成本优化功能的实现原理与使用指导。MaxCompute提供 计算成本优化 功能,当需要在保证作业完成的前提下 降低 包年包月规格计算资源的费用或遇到基于现有资源配置作业完成时间达不到预期的情况时,可基于实际作业请求量和资源...
多方安全分析(Secure Collaborative Query Language,简称 SCQL)是一种基于多方安全计算技术,使用安全加密算法将多方数据进行联合分析的服务。在不允许原始数据离开本地,同时又需要将原始数据与合作方数据进行联合分析的场景中,利用...
本文为您介绍如何使用云数据库RDS MySQL版连接器。RDS MySQL基于阿里巴巴的MySQL源码分支,经过双十一高并发、大数据量的考验,拥有优良的性能。RDS MySQL支持实例管理、账号管理、数据库管理、备份恢复、白名单、透明数据加密以及数据迁移...
当您发现MaxCompute账单持续上涨,而且成本变得难以管理时,您可以从计算作业着手,通过对SQL作业和MapReduce作业的优化而减少计算成本。本文为您介绍SQL作业和MapReduce作业计算成本的控制方法。预估计算成本 您可以在计算前对计算成本...
说明 使用函数计算产品前,您可以使用 价格计算器 从业务量、函数规格等维度提前预估费用。使用函数计算产品后,您可以在函数计算控制台的 资源用量明细 页面查看指定目标函数在指定时间范围内的 CU使用量、各资源使用量 和 账单 情况。...
使用说明 需要开启多AZ存储容灾和多AZ计算高可用能力,才能实现存储和计算的整体同城容灾能力。在存储容灾准备过程中,作业运行不受影响,业务保持无感知状态。在存储容灾准备过程中,历史表分区数据正在进行流式写入时,存储容灾数据准备...
什么是冷启动 函数计算 默认使用弹性实例,即按请求自动弹性,收到请求时系统自动创建实例处理请求,无请求后实例自动回收。您只需要根据实例执行请求的时间按需付费。这种弹性模式降低了管理应用资源的难度,但也造成了冷启动、延时等性能...
实现原理 函数计算抽象架构 函数计算作为Serverless服务,实现弹性调度、计算托管与免运维能力。可将函数计算核心组件抽象为三部分:Gateway:网关层,用户流量入口,负责接收用户请求、鉴权、流控等功能。Scheduler:调度引擎层,负责将...
如果您希望了解和分析在使用MaxCompute时产生的费用、计算用量和存储用量,MaxCompute为您提供成本分析功能,从费用出发下钻到用量明细,为关注费用的管理人员提供更便捷的费用分析能力,方便您后续进行成本优化。本文为您介绍使用...
本文介绍使用 函数计算 编写代码相关的基础概念信息,包括请求处理程序、函数实例生命周期回调方法和日志记录等。请求处理程序 在创建函数时,您需要指定请求处理程序。函数计算 的运行时会加载并调用您的请求处理程序处理请求。对于内置...
初次使用前,您可以先了解阿里云 视图计算使用限制。协议接入 视图计算目前支持通过两种协议接入:通过RTMP协议进行设备推流,直接把监控设备的直播流推入到阿里云视图计算服务的接入点。通过国标GB/T28181协议进行设备拉流,拉流前需要...
功能分类 功能描述 数仓基础能力 按需弹性 阿里云MaxCompute提供开箱即用的全托管数据仓库服务,采用Serverless架构,存算分离,存储和计算资源均可独立扩展、动态扩缩容。无需提前规划容量和预留资源,可从容应对业务突增等变化。SQL开发 ...
本文为您介绍2022年3月4日发布的实时计算Flink版的重大功能变更和主要缺陷修复。概述 2022年3月4日正式对外发布VVR 4.0.12版本,该版本是基于Apache Flink 1.13。在本次新版本中,对于常见的Kafka-Flink-Hologres链路,我们支持JSON Schema...
作业指提交到E-HPC集群进行高性能计算的基本工作单元,包括Shell脚本、可执行文件等,具体作业执行顺序根据您设置的队列以及调度器决定。E-HPC管理控制台提供了作业相关的提交作业、停止作业、查看作业状态等功能,本文介绍如何使用E-HPC...
内积和余弦距离 量化使用 支持量化器使用,一般配置量化器可提升性能,减少索引大小,召回视情况有所损失。量化使用 参考内容。参考内容 指导文档 全量参数及内核参考 参考:Proxima CE全量参数说明 参考:内核参考 测试报告 功能测试 数据...
当您需通过事件源如对象存储OSS触发函数执行时,可授予该事件源触发函数的权限,该权限是触发器级别的,每个触发器的角色均可以被授予相应权限,该角色也可以同时被授予不同触发器。本文以授予OSS访问函数计算的权限为例,介绍授予事件源...
您的日均资源利用率(仅时间维度,不包含显存维度)=3600秒/86400秒=0.041,即4.1%您的云服务器ECS的日均GPU资源费用=14元/小时×24小时=336元 您的函数计算的日均GPU资源费用=3600秒×4 GB×0.00011元/GB*秒=1.584元 使用函数计算的GPU后...
本文介绍视图计算使用自定义权限策略的场景和策略示例。什么是自定义权限策略 在基于RAM的访问控制体系中,自定义权限策略是指在系统权限策略之外,您可以自主创建、更新和删除的权限策略。自定义权限策略的版本更新需由您来维护。创建...
您可以根据 函数计算 资源的欠费情况,删除不再使用的资源或者及时为业务使用资源续费,确保服务的连续性。计费周期 函数计算 以小时为计费周期进行计费,在每个计费周期开始时生成上一周期的账单,并从账户中扣除余额或者代金券。更多信息...
权限策略名称 备注 AliyunECSFullAccess 管理云服务器服务(ECS)的权限 AliyunEHPCFullAccess 管理弹性高性能计算(EHPC)的权限 AliyunNASFullAccess 管理文件存储(NAS)的权限 AliyunVPCFullAccess 管理专有网络(VPC)的权限 ...
弹性加速计算实例是为AI模型推理提供算力加速的云服务。本文系统阐述了其产品优势、应用场景、实例规格与使用限制,助您快速选型并规划高效的AI推理加速方案。
3.使用 您在创建集群或作业时,可以指定在您已有的 VPC内创建,此时需要提供用户 VPC(VpcId)和 VPC内规划给批量计算使用的网段(Cidrblock)。当然,如果您还没有 Vpc,也可以只提供 Cidrblock,批量计算会为您创建默认 Vpc。以下我们将展示...
计算节点镜像 创建项目时选择的计算节点镜像(需要先在镜像管理页面添加计算节点镜像)是提交 AutoCluster 作业时使用的镜像,如果提交作业时指定了集群(在集群管理页面可以创建)则作业直接跑在所指定的集群中。ii.OSS数据映射 OSS 数据...
使用 函数计算 时,系统提供的服务关联角色及其包含的系统权限策略如下:服务关联角色:AliyunServiceRoleForFC 系统权限策略:AliyunServiceRolePolicyForFC AliyunServiceRoleForFC 服务关联角色AliyunServiceRoleForFC可以获取访问 专有...
您在使用视图计算时,您可查阅以下常见问题场景及解决方案。摄像头注册不成功 摄像头注册不成功请按照如下步骤排查:检查摄像头所处的网络,是否能够连通SIP服务器的IP跟端口。检查摄像头所处的网络是否有防火墙,是否允许UDP包的收发。...
实例类型及使用模式 图像处理最佳实践 人工智能最佳实践 音视频处理最佳实践 EventBridge触发器 新增 EventBridge触发器是指 事件总线EventBridge 作为阿里云官方事件源和自定义事件源的事件中心,支持阿里云官方事件源和自定义事件源作为...
函数计算 支持将 应用型负载均衡 ALB(Application Load Balancer)作为事件源,通过为ALB实例添加 函数计算 类型的服务器组,实现ALB转发请求到 函数计算 并调用函数。功能简介 ALB支持将函数计算添加为后端服务,当接收到访问请求时,ALB...
函数计算 支持API网关作为事件源,即支持将 函数计算 设置为API的后端服务。当有请求到达后端服务设置为 函数计算 的API网关时,会触发关联的函数执行一次,函数计算 将执行结果返回给API网关。背景信息 API网关触发器与HTTP触发器类似,可...
TCO工具 您可以使用如下TCO工具进行费用预估:MaxCompute报价速算器下载:适用包年包月方式。您可通过输入上传和下载的数据大小以及需要的计算资源自动地计算月成本。CostSQL方法:适用按量计费方式。您在实际生产环境中,即正式上线一个...
本文汇总使用E-HPC Instant计算服务过程中涉及的基本概念,方便您查询和了解相关概念。使用E-HPC Instant计算服务涉及的相关概念如下表所示。概念 说明 应用 用于创建用户作业的应用和镜像,可使用E-HPC Instant计算服务提供的公共应用或...
在MaxCompute中,若需要使用模型进行数据处理或离线推理且对计算效率要求较高时,可以选择购买并使用MaxCompute AI计算资源(GU Quota),以满足业务对于GPU算力的需求。本文介绍如何购买和使用该类计算资源。适用范围 地域限制:目前开放...
流数据分析提供了连接边缘端消息总线的能力,您可以通过配置消息路由将设备数据传入到流数据分析中,利用流数据分析方便地对设备数据进行实时计算,并将结果输出到RDS、本地文件、函数计算或IoTHub中。本使用示例将会从多个使用场景来讲述...
弹性高性能计算将计算能力积聚,用并行计算方式解决更大规模的科学、工程和商业问题,在科研机构、石油勘探、金融市场、气象预报、生物制药、基因测序、图像处理等行业均有广泛的应用。为什么 选择 弹性高性能计算E-HPC 相较于其他HPC集群...
本文向您介绍基于Flink CDC的数据摄入作业的Source和Sink模块及其支持使用的连接器。连接器参数配置 您可以在基于Flink CDC的数据摄入作业中配置 Source 及 Sink 连接器的参数。支持的连接器及相应的参数请参考下文。Source 模块 source:...
选择函数类型 在使用 函数计算 时,您可以根据业务场景和技术栈偏好,选择适合的函数类型。对比项 事件函数 Web函数 任务函数 GPU函数 功能 用于处理文件和数据流,可以通过各类云产品的事件触发(如 OSS触发器、Kafka触发器、SLS触发器)...
本文汇总使用弹性高性能计算E-HPC过程中涉及的基本概念,方便您查询和了解相关概念。使用弹性高性能计算涉及的相关概念如下表所示。概念 说明 集群 集群指运行高性能计算的节点集合,可以提供单节点不能提供的强大计算能力,拥有高性能、...
大数据计算服务MaxCompute TableStore(OTS)支持自增主键和脏数据处理参数 在OTS连接器作为结果表使用时,表结构支持自增主键。在OTS连接器作为源表使用时,配置skipInvalidData参数为true可以忽略脏数据,否则遇到脏数据会报错。表格存储...