如果您在本地IDC,或者阿里云的ECS上自建了Kubernetes集群,则可以通过部署虚拟节点(VNode)的方式来使用ECI。VNode对标原生kubernetes节点,内置了virtual-kubelet、kube-proxy等组件,兼容原生kubernetes节点API。当有Pod调度到VNode上...
Pod间亲和性调度策略,用于表达Pod之间的亲和性偏好,相较于节点亲和性,Pod间亲和性调度支持基于已经在虚拟节点上运行的Pod的标签来约束Pod可以调度到的范围。在ACS集群中,您可以通过Kubernetes原生调度语义实现Pod间亲和性调度,通过在...
借助ACK虚拟节点,您可以将Pod快速地调度到弹性容器实例ECI上运行,无需购买和管理ECS节点。本文介绍如何在 ACK托管集群 中将Pod调度到ECI上运行。适用场景 在ECI上运行Pod适合应对突发流量,也能降低计算成本。典型场景包括:有明显波峰...
借助ACK虚拟节点,您可以将Pod快速地调度到弹性容器实例ECI上运行,无需购买和管理ECS节点。本文介绍如何在 ACK托管集群 中将Pod调度到ECI上运行。适用场景 在ECI上运行Pod适合应对突发流量,也能降低计算成本。典型场景包括:有明显波峰...
Kubernetes版本 虚拟节点组件版本 1.26及以上 v2.13.0及以上 安装ACK Virtual Node组件启用ACS算力 ACS容器算力可以以虚拟节点的形式接入到ACK集群中,使得集群可以轻松获得极大的弹性能力,而不必受限于集群的节点计算容量。具体操作步骤...
本文介绍如何在 ACK Serverless集群 或虚拟节点中给Pod挂载EIP。前提条件 创建一个 ACK Serverless集群 或在Kubernetes集群创建一个 部署虚拟节点Chart。请确保该集群的安全组已开放相关端口(本示例中需要开放80端口)。说明 需要升级ack-...
虚拟节点是租户配置调度参数时可选的依赖节点。本文为您介绍如何基于Dataphin构建VIRTUAL类型的虚拟节点。背景信息 在开始构建数据模型前,您可以创建基于该数据模型的虚拟节点,以便于该数据模型中其他任务配置调度参数时依赖该节点。操作...
虚拟节点是租户配置调度参数时可选的依赖节点。本文为您介绍如何基于Dataphin构建VIRTUAL类型的虚拟节点。背景信息 在开始构建数据模型前,您可以创建基于该数据模型的虚拟节点,以便于该数据模型中其他任务配置调度参数时依赖该节点。操作...
为解决DeepSeek推理服务对GPU规格需求越来越高的问题,您可以通过 ACK Edge集群 管理本地IDC的GPU机器,并借助集群的虚拟节点快速接入云上ACS Serverless GPU算力。该方案可以使推理任务优先在IDC GPU上运行,当本地IDC GPU资源不足时,...
虚拟节点按照CPU架构、操作系统类型可以分为以下几种:普通虚拟节点(Linux、x86架构)Arm架构的虚拟节点 Windows虚拟节点 默认情况下会自动调度到普通虚拟节点,无需配置。如果需要调度到指定CPU架构或操作系统的虚拟节点,或者有可用区...
一个业务流程存在多个分支结果时,您需要新建一个虚拟节点(例如,业务流程_end_虚拟节点),业务流程_end_虚拟节点 依赖上游多个分支结果,当 业务流程_end_虚拟节点 执行成功,则表示该业务流程执行完成。当包含多个分支结果的业务流程...
事件名称 事件含义 ApolloSchedulePod 为Pod调度合适的虚拟节点。ApolloUpdatePod 更新Pod调度相关信息。ApolloUpdateVirtualNode 更新虚拟节点调度相关信息。BatchCreateContainerGroups 批量创建容器组。CreateContainerGroup 创建一个...
本文介绍如何指定ECS Arm规格创建一个Arm架构的ECI Pod,该Pod将运行在Arm架构的虚拟节点上。前提条件 已在集群中创建了Arm架构的虚拟节点。关于如何创建Arm架构的虚拟节点,请参见 添加Arm架构的虚拟节点。规格说明 Arm规格基于Arm架构,...
虚拟节点 API 标题 API概述 CreateVirtualNode 创建一个虚拟节点 创建一个虚拟节点(VNode),用于对接自建Kubernetes集群,使其可以扩展资源到ECI。DeleteVirtualNode 删除一个虚拟节点 调用DeleteVirtualNode删除一个虚拟节点。...
由于ACS集群以虚拟节点的形式提供资源,因此您无需考虑复杂的资源分配策略,只需专注于应用的编排规则即可。本文介绍ACS集群中常用调度能力的使用方法和注意事项。Kubernetes原生调度策略 Kubernetes原生调度器提供了多种的调度插件,在ACS...
ACK One注册集群 通过ACK Virtual Node实现Kubernetes与云上...计费信息 虚拟节点功能本身不计费,在虚拟节点上运行的Pod正常收取算力费用。ECI Pod运行所产生的费用请参见 ECI计费概述。ACS Pod运行所产生的费用请参见 ACS计费说明。
有了虚拟节点后,当您的ACK集群需要扩容时,无需规划节点的计算容量,可以直接在虚拟节点下按需创建ECI,ECI与集群中真实节点上的Pod之间网络互通。建议您将长时间运行的业务负载的弹性流量部分调度至ECI,这可以缩短弹性扩容的时间,减少...
优先使用ECS 由于虚拟节点默认带有污点,您需要配置对于该污点的容忍度,才能将Pod调度到虚拟节点。同时,配置节点亲和性,通过 preferredDuringSchedulingIgnoredDuringExecution 可以指定Pod调度的偏好:优先调度到未带有 type:virtual-...
使用DataWorks周期性调度MaxCompute作业时,您也可以灵活使用DataWorks已有的通用节点,例如虚拟节点、分支和归并节点、循环类节点等,与MaxCompute的其他节点联合使用可实现更复杂的业务效果,本文为您概要介绍常用的通用节点和典型应用...
您可以在拓扑分布约束协议字段 TopologyKey 中指定虚拟节点中的标签,实现对工作负载的可用区打散能力。针对不同种类的虚拟节点,ACS分别支持以下拓扑标签。虚拟节点类型 Label 含义 样例 普通虚拟节点 topology.kubernetes.io/zone 网络...
如果您想在Arm节点上部署单架构类型(例如Arm)或多架构类型(例如Arm、x86)的工作负载,您可以创建一个Arm节点池或集群,进行Arm...您也可以创建Arm虚拟节点,通过配置将工作负载调度至Arm虚拟节点。具体操作,请参见 调度至Arm虚拟节点。
同步任务调度配置 节点依赖关系 离线同步任务 离线同步任务的上游任务:由于同步任务可依赖平台侧血缘,因此,您可根据工作空间业务复杂性,选择挂载依赖至 工作空间根节点或 虚拟节点,即由工作空间根节点调度当前节点执行,还是由虚拟...
Kubernetes版本 虚拟节点组件版本 1.26及以上 v2.13.0及以上 安装ACK Virtual Node组件启用ACS算力 ACS容器算力可以以虚拟节点的形式接入到ACK集群中,使得集群可以轻松获得极大的弹性能力,而不必受限于集群的节点计算容量。具体操作步骤...
虚拟节点介绍,请参见 虚拟节点;节点空跑说明,请参见 空跑。(可选)节点上下文 用于定义上下游任务间的参数传递,定义后,可在下游节点中使用该参数获取上游节点传递过来的值。后续:提交并测试运行节点 任务调度属性配置完成后,您可...
普通节点或虚拟节点:ACK集群支持普通节点(ECS节点)和虚拟节点。节点负责执行实际的工作负载和提供运行容器所需的资源。ACK集群默认提供了多可用区(Availability Zone,AZ)的高可用集群部署架构。以 ACK托管集群 为例,集群架构示例...
注意事项 ACS集群中Node对象有两种形式:普通虚拟节点、GPU-HPN预留节点,针对不同的节点类型,默认情况下ACS分别支持以下标签和污点的增加、删除和修改操作。若您需要对GPU-HPN预留节点开启其他格式的标签,请 开启GPU-HPN节点自定义标签...
ASM Serverless网关是基于虚拟节点和ECI提供的一种Serverless网关形态,用于支撑各种弹性和免节点运维的场景。本文介绍如何使用ASM Serverless网关支撑弹性业务场景。前提条件 已添加ACK集群(包括ACK基础版、ACK Pro版和ACK专有版)到ASM...
ASM Serverless网关是基于虚拟节点和ECI提供的一种Serverless网关形态,用于支撑各种弹性和免节点运维的场景。本文介绍如何使用ASM Serverless网关支撑弹性业务场景。前提条件 已添加ACK集群(包括ACK基础版、ACK Pro版和ACK专有版)到ASM...
ASM Serverless网关是基于虚拟节点和ECI提供的一种Serverless网关形态,用于支撑各种弹性和免节点运维的场景。本文介绍如何使用ASM Serverless网关支撑弹性业务场景。前提条件 已添加ACK集群(包括ACK基础版、ACK Pro版和ACK专有版)到ASM...
依赖虚拟节点 当工作空间中业务流程较多或较复杂时,您可通过 虚拟节点 管理该业务流程,将需要统一管控的节点挂载依赖至某虚拟节点,使工作空间下数据流转路径更加清晰。例如,控制业务流程整体调度时间、控制业务流程整体调度与冻结(即...
业务场景 节点类型 使用说明 节点编码 TaskType 业务管理 虚拟节点 虚拟节点属于控制类型节点,它是不产生任何数据的空跑节点,通常作为业务流程统筹节点的根节点,方便您管理节点及业务流程。99 VIRTUAL 事件触发 HTTP触发器节点 如果您...
配置调度逻辑 本案例通过虚拟节点 workshop_start_starrocks 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见...
虚拟节点运行时不占用调度资源,因此虚拟节点不需要并且不支持修改调度资源组。仅标准版及以上版本支持使用资源编排。操作步骤 进入 数据开发 页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,...
配置调度逻辑 本案例通过虚拟节点 workshop_start_Spark 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...
配置调度逻辑 本案例通过虚拟节点 workshop_start_Spark 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...
配置调度逻辑 本案例通过虚拟节点 workshop_start_odps 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...
配置调度逻辑 本案例通过虚拟节点 workshop_start_odps 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...
在工作流编排页面,鼠标悬浮于虚拟节点上,单击上方出现的 打开节点,进入虚拟节点编辑页面。配置虚拟节点。打开节点右侧的 调度配置,配置以下参数信息。参数 说明 调度资源组 选择您在环境准备中创建的Serverless资源组。节点依赖配置 ...
常用的代码及名称类型对应关系如下:6(Shell)、10(ODPS SQL)、11(ODPS MR)、23(数据集成)、24(ODPS Script)、99(虚拟节点)、221(PyODPS 2)、225(ODPS Spark)、227(EMR Hive)、228(EMR Spark)、229(EMR Spark SQL)、...
ACK集群默认会将所有工作负载调度到x86架构的Worker节点。如果您的集群中既有Arm节点,又有非Arm节点(例如x86节点),为了确保只兼容Arm...如果您有大数据任务需求且不想关心底层集群资源的运维工作,您可以 使用Arm虚拟节点运行Spark作业。