虚拟节点

_相关内容

自建Kubernetes集群对接ECI

如果您在本地IDC,或者阿里云的ECS上自建了Kubernetes集群,则可以通过部署虚拟节点(VNode)的方式来使用ECI。VNode对标原生kubernetes节点,内置了virtual-kubelet、kube-proxy等组件,兼容原生kubernetes节点API。当有Pod调度到VNode上...

Pod间亲和性调度

Pod间亲和性调度策略,用于表达Pod之间的亲和性偏好,相较于节点亲和性,Pod间亲和性调度支持基于已经在虚拟节点上运行的Pod的标签来约束Pod可以调度到的范围。在ACS集群中,您可以通过Kubernetes原生调度语义实现Pod间亲和性调度,通过在...

将Pod调度到ECI上运行

借助ACK虚拟节点,您可以将Pod快速地调度到弹性容器实例ECI上运行,无需购买和管理ECS节点。本文介绍如何在 ACK托管集群 中将Pod调度到ECI上运行。适用场景 在ECI上运行Pod适合应对突发流量,也能降低计算成本。典型场景包括:有明显波峰...

将Pod调度到ECI上运行

借助ACK虚拟节点,您可以将Pod快速地调度到弹性容器实例ECI上运行,无需购买和管理ECS节点。本文介绍如何在 ACK托管集群 中将Pod调度到ECI上运行。适用场景 在ECI上运行Pod适合应对突发流量,也能降低计算成本。典型场景包括:有明显波峰...

通过ACK Edge集群使用ACS算力

Kubernetes版本 虚拟节点组件版本 1.26及以上 v2.13.0及以上 安装ACK Virtual Node组件启用ACS算力 ACS容器算力可以以虚拟节点的形式接入到ACK集群中,使得集群可以轻松获得极大的弹性能力,而不必受限于集群的节点计算容量。具体操作步骤...

如何给Pod挂载弹性公网IP

本文介绍如何在 ACK Serverless集群 或虚拟节点中给Pod挂载EIP。前提条件 创建一个 ACK Serverless集群 或在Kubernetes集群创建一个 部署虚拟节点Chart。请确保该集群的安全组已开放相关端口(本示例中需要开放80端口)。说明 需要升级ack-...

创建VIRTUAL任务

虚拟节点是租户配置调度参数时可选的依赖节点。本文为您介绍如何基于Dataphin构建VIRTUAL类型的虚拟节点。背景信息 在开始构建数据模型前,您可以创建基于该数据模型的虚拟节点,以便于该数据模型中其他任务配置调度参数时依赖该节点。操作...

创建VIRTUAL任务

虚拟节点是租户配置调度参数时可选的依赖节点。本文为您介绍如何基于Dataphin构建VIRTUAL类型的虚拟节点。背景信息 在开始构建数据模型前,您可以创建基于该数据模型的虚拟节点,以便于该数据模型中其他任务配置调度参数时依赖该节点。操作...

部署DeepSeek蒸馏模型推理服务

为解决DeepSeek推理服务对GPU规格需求越来越高的问题,您可以通过 ACK Edge集群 管理本地IDC的GPU机器,并借助集群的虚拟节点快速接入云上ACS Serverless GPU算力。该方案可以使推理任务优先在IDC GPU上运行,当本地IDC GPU资源不足时,...

调度概述

虚拟节点按照CPU架构、操作系统类型可以分为以下几种:普通虚拟节点(Linux、x86架构)Arm架构的虚拟节点 Windows虚拟节点 默认情况下会自动调度到普通虚拟节点,无需配置。如果需要调度到指定CPU架构或操作系统的虚拟节点,或者有可用区...

场景3:如何配置跨业务流程、跨工作空间的调度依赖

一个业务流程存在多个分支结果时,您需要新建一个虚拟节点(例如,业务流程_end_虚拟节点),业务流程_end_虚拟节点 依赖上游多个分支结果,当 业务流程_end_虚拟节点 执行成功,则表示该业务流程执行完成。当包含多个分支结果的业务流程...

弹性容器实例的审计事件

事件名称 事件含义 ApolloSchedulePod 为Pod调度合适的虚拟节点。ApolloUpdatePod 更新Pod调度相关信息。ApolloUpdateVirtualNode 更新虚拟节点调度相关信息。BatchCreateContainerGroups 批量创建容器组。CreateContainerGroup 创建一个...

指定Arm规格创建Pod

本文介绍如何指定ECS Arm规格创建一个Arm架构的ECI Pod,该Pod将运行在Arm架构的虚拟节点上。前提条件 已在集群中创建了Arm架构的虚拟节点。关于如何创建Arm架构的虚拟节点,请参见 添加Arm架构的虚拟节点。规格说明 Arm规格基于Arm架构,...

API概览

虚拟节点 API 标题 API概述 CreateVirtualNode 创建一个虚拟节点 创建一个虚拟节点(VNode),用于对接自建Kubernetes集群,使其可以扩展资源到ECI。DeleteVirtualNode 删除一个虚拟节点 调用DeleteVirtualNode删除一个虚拟节点。...

调度概述

由于ACS集群以虚拟节点的形式提供资源,因此您无需考虑复杂的资源分配策略,只需专注于应用的编排规则即可。本文介绍ACS集群中常用调度能力的使用方法和注意事项。Kubernetes原生调度策略 Kubernetes原生调度器提供了多种的调度插件,在ACS...

接入云上Serverless算力

ACK One注册集群 通过ACK Virtual Node实现Kubernetes与云上...计费信息 虚拟节点功能本身不计费,在虚拟节点上运行的Pod正常收取算力费用。ECI Pod运行所产生的费用请参见 ECI计费概述。ACS Pod运行所产生的费用请参见 ACS计费说明。

ACK对接ECI

有了虚拟节点后,当您的ACK集群需要扩容时,无需规划节点的计算容量,可以直接在虚拟节点下按需创建ECI,ECI与集群中真实节点上的Pod之间网络互通。建议您将长时间运行的业务负载的弹性流量部分调度至ECI,这可以缩短弹性扩容的时间,减少...

指定ECS和ECI的资源分配

优先使用ECS 由于虚拟节点默认带有污点,您需要配置对于该污点的容忍度,才能将Pod调度到虚拟节点。同时,配置节点亲和性,通过 preferredDuringSchedulingIgnoredDuringExecution 可以指定Pod调度的偏好:优先调度到未带有 type:virtual-...

高级应用:实现复杂作业逻辑

使用DataWorks周期性调度MaxCompute作业时,您也可以灵活使用DataWorks已有的通用节点,例如虚拟节点、分支和归并节点、循环类节点等,与MaxCompute的其他节点联合使用可实现更复杂的业务效果,本文为您概要介绍常用的通用节点和典型应用...

可用区拓扑打散

您可以在拓扑分布约束协议字段 TopologyKey 中指定虚拟节点中的标签,实现对工作负载的可用区打散能力。针对不同种类的虚拟节点,ACS分别支持以下拓扑标签。虚拟节点类型 Label 含义 样例 普通虚拟节点 topology.kubernetes.io/zone 网络...

配置Arm节点

如果您想在Arm节点上部署单架构类型(例如Arm)或多架构类型(例如Arm、x86)的工作负载,您可以创建一个Arm节点池或集群,进行Arm...您也可以创建Arm虚拟节点,通过配置将工作负载调度至Arm虚拟节点。具体操作,请参见 调度至Arm虚拟节点

数据集成

同步任务调度配置 节点依赖关系 离线同步任务 离线同步任务的上游任务:由于同步任务可依赖平台侧血缘,因此,您可根据工作空间业务复杂性,选择挂载依赖至 工作空间根节点或 虚拟节点,即由工作空间根节点调度当前节点执行,还是由虚拟...

通过ACK托管集群Pro版使用ACS算力

Kubernetes版本 虚拟节点组件版本 1.26及以上 v2.13.0及以上 安装ACK Virtual Node组件启用ACS算力 ACS容器算力可以以虚拟节点的形式接入到ACK集群中,使得集群可以轻松获得极大的弹性能力,而不必受限于集群的节点计算容量。具体操作步骤...

节点调度配置

虚拟节点介绍,请参见 虚拟节点;节点空跑说明,请参见 空跑。(可选)节点上下文 用于定义上下游任务间的参数传递,定义后,可在下游节点中使用该参数获取上游节点传递过来的值。后续:提交并测试运行节点 任务调度属性配置完成后,您可...

集群高可用架构推荐配置

普通节点或虚拟节点:ACK集群支持普通节点(ECS节点)和虚拟节点。节点负责执行实际的工作负载和提供运行容器所需的资源。ACK集群默认提供了多可用区(Availability Zone,AZ)的高可用集群部署架构。以 ACK托管集群 为例,集群架构示例...

节点标签和污点管理

注意事项 ACS集群中Node对象有两种形式:普通虚拟节点、GPU-HPN预留节点,针对不同的节点类型,默认情况下ACS分别支持以下标签和污点的增加、删除和修改操作。若您需要对GPU-HPN预留节点开启其他格式的标签,请 开启GPU-HPN节点自定义标签...

使用ASM Serverless网关支撑弹性业务场景

ASM Serverless网关是基于虚拟节点和ECI提供的一种Serverless网关形态,用于支撑各种弹性和免节点运维的场景。本文介绍如何使用ASM Serverless网关支撑弹性业务场景。前提条件 已添加ACK集群(包括ACK基础版、ACK Pro版和ACK专有版)到ASM...

使用ASM Serverless网关支撑弹性业务场景

ASM Serverless网关是基于虚拟节点和ECI提供的一种Serverless网关形态,用于支撑各种弹性和免节点运维的场景。本文介绍如何使用ASM Serverless网关支撑弹性业务场景。前提条件 已添加ACK集群(包括ACK基础版、ACK Pro版和ACK专有版)到ASM...

使用ASM Serverless网关支撑弹性业务场景

ASM Serverless网关是基于虚拟节点和ECI提供的一种Serverless网关形态,用于支撑各种弹性和免节点运维的场景。本文介绍如何使用ASM Serverless网关支撑弹性业务场景。前提条件 已添加ACK集群(包括ACK基础版、ACK Pro版和ACK专有版)到ASM...

调度依赖配置指引

依赖虚拟节点 当工作空间中业务流程较多或较复杂时,您可通过 虚拟节点 管理该业务流程,将需要统一管控的节点挂载依赖至某虚拟节点,使工作空间下数据流转路径更加清晰。例如,控制业务流程整体调度时间、控制业务流程整体调度与冻结(即...

支持的节点类型

业务场景 节点类型 使用说明 节点编码 TaskType 业务管理 虚拟节点 虚拟节点属于控制类型节点,它是不产生任何数据的空跑节点,通常作为业务流程统筹节点的根节点,方便您管理节点及业务流程。99 VIRTUAL 事件触发 HTTP触发器节点 如果您...

同步数据

配置调度逻辑 本案例通过虚拟节点 workshop_start_starrocks 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见...

资源组编排

虚拟节点运行时不占用调度资源,因此虚拟节点不需要并且不支持修改调度资源组。仅标准版及以上版本支持使用资源编排。操作步骤 进入 数据开发 页面。登录 DataWorks控制台,切换至目标地域后,单击左侧导航栏的 数据开发与运维 数据开发,...

同步数据

配置调度逻辑 本案例通过虚拟节点 workshop_start_Spark 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...

同步数据

配置调度逻辑 本案例通过虚拟节点 workshop_start_Spark 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...

同步数据

配置调度逻辑 本案例通过虚拟节点 workshop_start_odps 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...

同步数据

配置调度逻辑 本案例通过虚拟节点 workshop_start_odps 控制整个业务流程每天00:30调度执行,以下为虚拟节点关键调度配置,其他节点调度无须变更,实现逻辑详情请参见:场景:如何配置业务流程定时时间。其他调度配置相关说明,请参见:...

同步数据

在工作流编排页面,鼠标悬浮于虚拟节点上,单击上方出现的 打开节点,进入虚拟节点编辑页面。配置虚拟节点。打开节点右侧的 调度配置,配置以下参数信息。参数 说明 调度资源组 选择您在环境准备中创建的Serverless资源组。节点依赖配置 ...

ListFileType-查询任务节点类型

常用的代码及名称类型对应关系如下:6(Shell)、10(ODPS SQL)、11(ODPS MR)、23(数据集成)、24(ODPS Script)、99(虚拟节点)、221(PyODPS 2)、225(ODPS Spark)、227(EMR Hive)、228(EMR Spark)、229(EMR Spark SQL)、...

调度至Arm节点

ACK集群默认会将所有工作负载调度到x86架构的Worker节点。如果您的集群中既有Arm节点,又有非Arm节点(例如x86节点),为了确保只兼容Arm...如果您有大数据任务需求且不想关心底层集群资源的运维工作,您可以 使用Arm虚拟节点运行Spark作业。
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用