集群软件

_相关内容

ListInstalledSoftware-查询指定集群已安装的软件列表

调用ListInstalledSoftware查询指定集群已安装的软件列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在...

使用IMB软件和MPI通信库测试集群通信性能

本文以IMB软件和MPI通信库为例介绍如何测试E-HPC集群的通信性能。背景信息 IMB(Intel MPI Benchmarks)用于评估HPC集群在不同消息粒度下节点间点对点、全局通信的效率。MPI(Message Passing Interface)是支持多编程语言编程的并行计算...

InstallSoftware-安装软件

调用InstallSoftware为指定集群安装软件。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句...

手动扩容集群

执行结果 扩容后,新增计算节点会自动安装集群软件并初始化,原有计算节点的使用不受影响。您可以单击 资源管理>节点与队列,在集群列表中选择扩容的集群,在 节点类型 列表中选择 计算节点,即可查看已扩容节点的状态。当该节点状态为 ...

Hadoop集群迁移至DataLake集群

您可以根据旧集群软件版本信息,结合以下表格中的信息,确定新集群的服务版本。旧平台集群服务 向下兼容区间1 向下兼容区间2 向下兼容区间3 向下兼容区间4 Spark 2.x 3.x-Hive 2.x 3.x-Tez 全部新旧版本兼容-Delta Lake 0.6.x 0.8.0-1.1.0-...

使用Schrodinger软件计算分子结构

本文介绍如何使用E-HPC集群运行Schrodinger软件来计算分子结构。背景信息 Schrodinger基于物理学的计算平台,集成了用于预测建模、数据分析的差异化解决方案,以实现对化学空间的快速探索,主要应用于药物发现,以及航空航天、能源、半导体...

安装与卸载软件

使用E-HPC集群进行高性能计算时,需要根据业务需求安装相关业务软件。本文介绍如何安装和卸载软件。安装软件 您可以通过控制台直接安装E-HPC提供的常用软件,也可以在集群中手动安装其他软件。通过控制台安装 登录 弹性高性能计算控制台。...

导出和导入服务配置

JSON:可以作为新集群软件预设配置,使用详情请参见 导入服务配置。单击 确定。导入服务配置 以JSON格式导出的服务配置,可以在创建集群阶段,作为新集群的预设配置。在 EMR on ECS 页面,单击 创建集群。在 软件配置 的 高级设置 区域,...

使用VNC远程可视化

对于已有集群,您可以在集群软件管理 页安装VNC服务。具体操作,请参见 安装软件。连接可视化服务 登录 弹性高性能计算控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,单击 集群。在 集群 页面,找到目标集群,选择 更多>VNC。...

创建Doris集群

高级设置 软件自定义配置:可指定JSON文件对集群中的基础软件(例如Hadoop、Spark和Hive等)进行配置。默认不开启。硬件配置。配置项 描述 付费类型 默认包年包月。当前支持的付费类型如下:按量付费:一种后付费模式,即先使用再付费。...

配置自建RDS

步骤二:创建集群 在创建集群软件配置 页面,配置以下参数,其他参数的配置请参见 创建集群。DataLake和Custom集群参数 Hadoop集群参数 描述 元数据 选择 自建RDS。说明 仅当 Custom 集群选择了HDFS、YARN和Hive服务后,元数据 参数才...

API概览

ListInstalledSoftware 查询指定集群已安装的软件列表 调用ListInstalledSoftware查询指定集群已安装的软件列表。UninstallSoftware 卸载软件 调用UninstallSoftware卸载指定集群中已安装的软件。存储 API 标题 API概述 ...

弹性高性能计算E-HPC的审计事件

ListInstalledSoftware 查询单个集群下已安装的软件列表。ListInvocationResults 查看交互执行命令执行结果。ListInvocationStatus 查看交互执行命令状态。ListJobs 查询作业列表。ListJobsWithFilters 根据参数获取集群作业详情。...

创建ClickHouse集群

高级设置 软件自定义配置:可指定JSON文件对集群中的基础软件进行配置,详细使用方法请参见 配置自定义软件。默认不开启。硬件配置。配置项 说明 付费类型 默认包年包月。当前支持的付费类型如下:按量付费:一种后付费模式,即先使用再...

创建EMR Studio集群

高级设置 软件自定义配置:可指定JSON文件对集群中的基础软件(例如Hadoop、Spark和Hive等)进行配置,详细使用方法请参见 软件配置。默认不开启。硬件配置。区域 配置项 描述 付费类型 付费类型 默认包年包月。当前支持的付费类型如下:...

准备环境

在创建EMR集群进行软件配置时,关键参数配置如下:地域:选择 华东2(上海)。业务场景:选择 新版数据湖。产品版本:选择最新版本。可选服务:根据实际需求选择组件,其中Hive组件在本案例中必选。元数据:选择 DLF统一元数据。集群存储根...

创建StarRocks集群

高级设置 不开启 软件自定义配置:可指定JSON文件对集群中的基础软件(例如Hadoop、Spark和Hive等)进行配置。默认不开启。硬件配置。配置项 示例 描述 付费类型 按量付费 默认包年包月。当前支持的付费类型如下:按量付费:一种后付费模式...

创建DataFlow Kafka集群

高级设置 不开启 软件自定义配置:可指定JSON文件对集群中的基础软件(例如Hadoop、Spark和Hive等)进行配置。默认不开启。硬件配置。配置项 示例 描述 付费类型 按量付费 默认包年包月。当前支持的付费类型如下:按量付费:一种后付费模式...

创建集群

软件自定义配置 可指定JSON文件对集群中的基础软件(例如Hadoop、Spark和Hive等)进行配置,详细使用方法请参见 配置自定义软件。默认不开启。说明 针对Hive作业并发量的设置,请参见 如何预估Hive作业并发量的上限值?硬件配置 配置项 ...

集群管理常见问题

解决方法:关闭采集服务日志 创建集群时:在创建集群软件配置阶段,单击 允许采集服务运行日志。创建集群后:在目标集群的 基础信息 页面的 软件信息 区域,单击 服务运行日志收集状态。验证关闭情况。查看/usr/local/ilogtail/user_log_...

通过数据面集群KubeAPI访问Istio资源

kubectl delete Virtualservice<虚拟服务的名称>场景示例二:使用Helm安装软件 启用集群KubeAPI访问Istio资源功能后,Helm可以使用集群的kubeconfig同时安装软件集群,安装Istio资源至ASM。获取集群KubeConfig并通过kubectl工具连接集群...

查看集群列表与详情

软件信息 该区域为您展示集群版本、集群类型、软件信息和Hive元数据类型等信息。网络硬件 该区域为您展示可用区、专有网络和硬件配置等信息。安全 该区域为您展示密钥对、ECS实例角色、集群安全组和集群服务角色等信息。相关文档 查看集群...

配置自定义软件

如果您需要调整这些服务的配置项,则可以在集群创建时使用软件自定义配置功能,以修改现有配置或添加新的配置项。使用限制 软件配置操作仅在集群创建时执行一次。操作步骤 登录 E-MapReduce控制台。在顶部菜单栏处,根据实际情况选择地域 ...

克隆集群

集群创建后,您在EMR控制台修改的服务配置目前不会克隆到新集群,但创建集群时自定义软件配置中配置的参数,则会克隆最新的修改值到新集群。创建集群后,您手动在集群机器上修改的文件或内容,例如JAR包等,无法克隆到新集群。注意事项 在...

实践教程概览

本教程介绍如何使用E-HPC集群运行LAMMPS开源仿真软件,以3d Lennard-Jones melt模型进行工业仿真,并通过可视化的方式查看仿真结果。使用Intel oneAPI编译运行LAMMPS E-HPC集群集成了Intel oneAPI工具包,该工具包结合HPC软件使用,可以...

使用OSS作为HBase的底层存储

从OSS恢复一个新的HBase集群,也是创建集群时在 软件配置 的 高级设置 区域,开启 软件自定义配置 参数,配置参数如下。[{"ServiceName":"HBASE","FileName":"hbase-site","ConfigKey":"hbase.rootdir","ConfigValue":"oss:/${bucket}.${...

集群概述

各节点功能如下表所示:节点 说明 登录节点 用于远程登录集群,进行相关操作的节点,操作包括软件调试、编译和安装,以及作业提交等。管控节点 用于管理集群的节点,部署了调度服务和域账号服务。调度服务:主要作用是运行PBS或Slurm等调度...

功能发布记录

2022-06-07 监控作业 2022年5月 功能名称 变更类型 功能描述 发布时间 相关文档 创建集群 优化 为加快集群创建速度,使用控制台向导创建集群的过程中不再支持安装软件,您可以在集群创建完成后,在软件管理页面安装需要的软件。2022-05-16 ...

使用MirrorMaker 2(Dedicated)跨集群同步数据

使用限制 EMR DataFlow集群的Kafka软件的版本为2.12_2.4.1及以上。操作步骤 准备MM2配置文件 mm2.properties 并上传到您的OSS存储。以下配置内容仅作为参考,您需要替换文本中的源集群和目标集群的 src.bootstrap.servers 和 dest....

功能特性

创建集群 创建Data Science集群 释放集群集群不再使用时,您可以释放集群以删除对应的Namespace以及该Namespace下的所有软件服务,但不会释放实际的物理资源。释放集群 查看集群信息 查看您账号下拥有的集群概况。查看集群信息 查看集群...

使用MirrorMaker 2(on Connect)跨集群同步数据

使用限制 目标集群的Kafka软件版本为2.12_2.4.1及以上。操作流程 步骤一:在目标集群创建Kafka Connect集群 步骤二:使用MirrorMaker2 connector 步骤一:在目标集群创建Kafka Connect集群 新增EMR Task机器组。在EMR控制台目标集群emrdest...

管理引导操作

添加引导操作,可以安装您需要的第三方软件或者修改集群运行环境。本文为您介绍如何添加引导操作及其示例。背景信息 引导操作功能可以在集群扩容或弹性伸缩时自动在新增节点上运行指定脚本。手动执行功能可以批量选择在已有节点上运行指定...

入门概述

下文以创建集群,在集群中安装GROMACS软件并运行水分子算例进行高性能计算为例,介绍弹性高性能计算的使用流程,帮助您快速上手使用弹性高性能计算。使用流程如下图所示。创建集群 集群可为E-HPC计算提供计算资源,用于后续提交、调试、...

基本概念

调度器 调度器指集群上调度作业的软件。域账号 E-HPC支持创建NIS和LDAP两种域账号服务。NIS:网络信息服务(Network Information Service),是一种集中身份管理的方式。您可以在NIS服务器上建立用户,当新节点加入到NIS中时,便可以使用...

安装脚本配置说明

如果您创建集群后需要安装自定义软件或者配置软件环境,可以设置安装脚本。集群所有节点启动并安装好自动部署的软件后,会自动下载并执行安装脚本。本文介绍安装脚本中配置参数说明。使用场景 使用系统镜像创建集群后,需要在创建集群后...

手动执行脚本

手动执行类似引导操作,在集群创建完成后,您可以通过手动执行功能来安装集群尚未支持的软件和服务,例如:使用YUM安装已经提供的软件。直接下载公网上公开的软件。读取您OSS中的自有数据。安装并运行服务(例如,Flink或者Impala),但...

测试SCC集群性能

集群用户用于登录集群,进行编译软件、提交作业等操作,配置用户权限时,权限组请选择 sudo权限组。安装软件。具体操作,请参见 安装软件。需安装的软件如下:linpack,版本为2018。intel-mpi,版本为2018。测试SCC集群的网络性能 测试RDMA...

创建集群

软件配置 配置项 说明 地域 在选择的对应地域内创建集群,一旦创建不能修改。Kerberos身份认证 是否开启集群的Kerberos认证功能。默认不开启。通常个人用户集群无需该功能。默认安装服务 创建集群时默认安装的服务,可根据需求进行选择。...

快速入门

软件配置 配置项 说明 地域 在选择的对应地域内创建集群,一旦创建不能修改。Kerberos身份认证 是否开启集群的Kerberos认证功能。默认不开启。通常个人用户集群无需该功能。默认安装服务 创建集群时默认安装的服务,可根据需求进行选择。...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用