在E-MapReduce中，RAM的典型使用场景如下：用户：如果您购买了多台E-MapReduce集群实例，您的组织里有多个用户（如运维、开发或数据分析）需要使用这些实例，您可以创建一个策略允许部分用户使用这些实例。避免了将同一个AccessKey泄露给...
RDS MySQL实例须与E-MapReduce的实例处于同一个安全组，以便RDS与E-MapReduce可以通过内网地址互通。操作步骤 在RDS中创建一个 database，名称为 hivemeta，同时创建一个用户，把 hivemeta 的读写权限赋给这个用户，详情请参见 配置独立RDS...
重要 E-MapReduce Serverless StarRocks实例创建时，依赖ASCM和CLB产品，开通实例会额外产生少量ASCM和CLB费用。公测限制 公测期间，您可以创建 实例系列 为 入门版 的实例，且仅能创建一个。公测期间不保障服务等级协议SLA，但服务不降级...
公测期间您可以免费试用Milvus服务，免费试用结束后，您可以续费或及时释放实例，避免产生费用。重要 E-MapReduce Serverless Milvus实例创建时，需要依赖阿里云OSS产品进行数据存储，相关费用请参见 计费概述。公测限制 公测期间，您仅...
本文介绍如何使用阿里云E-...详情请参见 E-MapReduce本地盘实例大规模数据集测试最佳实践。说明 本文的TPC-DS的实现基于TPC-DS的基准测试，并不能与已发布的TPC-DS基准测试结果相比较，本文中的测试并不符合TPC-DS的基准测试的所有要求。
本文为您介绍E-MapReduce的计费项和计费方式，以便您对支付的费用组成有所了解。计费说明 E-MapReduce的费用由E-MapReduce服务费用、ECS产品费用和Master节点的外网流量费用组成。重要 实际价格请以产品购买页面为准。计费项 计费说明及...
本文介绍E-MapReduce集群中数据存储相关的信息，包括磁盘角色、云盘与本地盘，以及OSS。背景信息 关于存储的类型、性能和相关的限制信息，请参见 什么是块存储。存储价格估算如下：本地盘实例存储为0.04 元/GB/月 OSS标准型存储为0.12 元/...
HBase、Zookeeper、JindoData E-MapReduce节点 E-MapReduce节点有主实例（Master）、核心实例（Core）和计算实例（Task）三种实例类型。详情请参见 实例类型。E-MapReduce存储可以采用高效云盘、本地盘、SSD云盘和SSD本地盘。磁盘性能为SSD...
公测限制 公测期间，有以下限制：指定地域如果创建了EMR on ECS形态下的集群或Serverless StarRocks实例，则该地域免费提供200 CU*时的机器资源。只有当机器资源总量大于0时，才能启动机器。创建集群或实例详情，请参见 创建集群 或 创建...
节点 E-MapReduce集群由多个不同类型的实例节点组成，包括主实例节点（Master）、核心实例节点（Core）和计算实例节点（Task）。详细信息，请参见 实例类型。云盘和本地盘 云盘：数据块级别的块存储产品，采用分布式三副本机制，为ECS实例...
步骤五：查看任务实例日志 在左侧导航栏，选择 实例运维>工作流实例，可以查看实例的运行状况。在左侧导航栏，选择 实例运维>任务实例。在 任务实例 页面，单击目标任务名称操作列的 图标（查看日志），可以查看任务节点的运行日志。（可选...
步骤五：查看任务实例日志 在左侧导航栏，选择 实例运维>工作流实例，可以查看实例的运行状况。在左侧导航栏，选择 实例运维>任务实例。在 任务实例 页面，单击目标任务名称操作列的 图标（查看日志），可以查看任务节点的运行日志。（可选...
（可选）步骤八：查看任务实例日志 在左侧导航栏，选择 实例运维>工作流实例，可以查看实例的运行状况。在左侧导航栏，选择 实例运维>任务实例。在 任务实例 页面，单击目标任务名称操作列的 图标（查看日志），可以查看任务节点的运行日志...
本文为您介绍E-MapReduce（简称EMR）支持的元数据类型和各元数据类型的优势。元数据类型介绍 EMR Hive元数据支持DLF统一元数据、自建RDS和内置MySQL三种类型。DLF统一元数据 元数据存储在阿里云数据湖构建（Data Lake Formation，简称DLF）...
在DataWorks实例任务中，E-MapReduce计算引擎任务会被分为若干作业有序执行。您可以使用DataWorks的引擎运维功能，查看各个E-MapReduce作业的详细信息，及时查找并清理运行有误的作业，避免该类作业阻塞下游任务，影响实例任务的正常运行。...
EMR-3.11.0及其后续版本，E-MapReduce支持Druid作为单独的一种集群类型。背景信息 E-MapReduce将Druid作为单独的集群类型，主要基于以下几方面的考虑：E-MapReduce Druid可以完全脱离Hadoop来使用。大数据量情况下，E-MapReduce Druid对...
本文介绍在同一VPC下创建的E-MapReduce集群和RDS MySQL实例，如何通过E-MapReduce集群的Presto查询RDS MySQL数据库信息。前提条件 已创建集群，并且选择了Presto服务。详情请参见 创建集群。已购买RDS，详情请参见 创建RDS MySQL实例。说明...
在E-MapReduce集群中，作业实例消耗内存计算方式如下。作业实例消耗内存=Launcher消耗内存+用户作业（Job）消耗内存 在Spark作业中，用户作业（Job）消耗内存又可以进一步细分，计算方式如下。Job消耗内存=Spark-Submit（指逻辑模块，非...
阿里云向量检索Milvus版是一款Serverless全托管服务，确保了与开源Milvus的完全兼容性，并支持无缝迁移。...产品计费 公测期间您可以免费试用Milvus，免费试用结束后，实例将开始收费。相关文档 快速创建Milvus实例 Milvus官方文档
安全组用于设置集群内ECS实例的网络访问控制，是重要的安全隔离手段。本文为您介绍如何添加安全组及安全组规则。背景信息 您在创建E-MapReduce集群时，可以使用已有的安全组或者新建安全组，对某个安全组下的所有ECS实例的出方向和入方向...
您可以在E-Mapreduce控制台创建和管理集群或实例等操作。形态 文档 EMR on ECS 创建集群 克隆集群 新增服务 管理配置项 登录集群 管理事件中心 E-MapReduce Doctor 组件操作 EMR on ACK 资源管理 服务管理 作业管理 组件操作 EMR ...
如果您使用的是2.5版本实例，并希望升级为3.1版本，请重新购买实例，详情请参见 创建实例。注意事项 版本升级后无法降级。版本升级过程中，无法进行升配、扩容、缩容、修改配置、开通公网等变更操作。版本升级期间可能会导致正在运行的导入...
存算一体版实例适用于对查询性能要求高的场景，例如OLAP多维分析、高并发查询和实时数据分析等。该实例类型将数据存储于云盘或本地盘，以确保较高的数据读写效率。本文为您介绍如何通过阿里云账号创建并快速使用EMR Serverless StarRocks存...
在 实例列表 页面，单击已创建实例操作列的 连接实例，详情请参见 通过EMR StarRocks Manager连接StarRocks实例。您可以选择相应的用户身份连接StarRocks实例。SQL Editor 界面总览 区域 描述 ① 查看Catalog及其下的数据库和表，并且通过...
创建EMR Serverless StarRocks的按量付费实例后，您可以将计费模式转为包月，提前预留资源，享受更大的价格优惠。本文介绍如何将按量付费实例转换为包月实例。前提条件 待转换的按量付费实例需要满足以下条件：归属于您的账号下。不能有未...
您可以手动或者自动续费集群，延长包年包月实例的使用时间，续费的费用和新购实例费用相同。续费功能仅适用于包年包月类型，按量付费类型不需要续费，您只需要保证账户可用额度充足即可。本文为您介绍如何手动和自动续费实例。前提条件 您...
前提条件 已创建EMR Serverless实例，详情请参见 创建实例。查询配置信息 进入EMR Serverless StarRocks实例列表页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless>StarRocks。在顶部菜单栏处，根据实际情况选择地域。在 ...
前提条件 已创建实例，详情请参见 创建实例。查看实例列表 进入EMR Serverless StarRocks实例列表页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless>StarRocks。在顶部菜单栏处，根据实际情况选择地域。在 实例列表 页面，...
前提条件 已创建StarRocks实例，详情请参见 创建实例。使用限制 实例状态为 运行中。注意事项 版本升级后无法降级。版本升级过程中，无法进行升配、扩容、缩容、修改配置、开通公网等变更操作。EMR Serverless StarRocks会在您设置的可维护...
前提条件 已创建StarRocks实例，详情请参见 创建实例。已开通OSS服务，详情请参见 开通OSS服务。操作步骤 进入EMR Serverless StarRocks实例配置页面。登录 E-MapReduce控制台。选择 EMR Serverless>StarRocks。在顶部菜单栏处，根据实际...
存算分离版实例适用于对存储成本敏感，同时对查询效率要求略低的业务场景，例如OLAP多维分析、实时数据分析以及数据仓库场景。该实例类型采用存算分离架构，将数据存储在阿里云OSS对象存储中。本文为您介绍如何通过阿里云账号创建并快速...
数据湖分析版实例适用于查询存储在Apache Hive、Apache Iceberg、Apache Hudi以及Apache Paimon等多种数据湖上的数据，并涵盖OSS、OSS-HDFS、HDFS等平台，无需数据迁移即可实现快速的数据湖查询分析，且其性能比Presto高出3到5倍。...
E-MapReduce集群由多个不同类型的实例节点组成，包括主实例节点（Master）、核心实例节点（Core）和计算实例节点（Task）。不同实例节点上部署的服务进程不同，负责完成的任务也不同。例如：主实例节点（Master）：部署Hadoop HDFS的...
创建E-MapReduce集群时，不同类型集群的实例节点上会部署不同的服务。集群创建成功并正常运行后，您可以管理集群服务，包括新增、配置、启动、停止或重启服务。本文为您介绍如何在E-MapReduce控制台重启服务。前提条件 已创建集群，详情请...
EMR Serverless StarRocks提供了告警设置功能，通过对重要的监控指标设置报警规则，可以实时了解实例的运行状况，及时处理潜在风险，保障实例稳定运行。背景信息 EMR Serverless StarRocks的监控报警是通过阿里云云监控产品实现的。通过云...
E-MapReduce（简称EMR）包括基于ECS实例、ACK集群以及Serverless架构在内的多种部署模式。每种部署形态均有其独特的计费准则。本文旨在为您提供一份EMR不同部署方式下的计费指南索引。产品计费索引 产品形态 计费文档 EMR on ECS 计费概述 ...
本文介绍E-MapReduce（简称EMR）支持的ECS实例类型，以及各实例类型适用的场景。EMR支持的ECS实例类型 通用型 vCPU:Memory=1:4。例如，8核32 GiB，使用云盘作为存储。计算型 vCPU:Memory=1:2。例如，8核16 GiB，使用云盘作为存储，提供了更...
相关文档 如果您需要快速创建实例，请参见以下文档：快速使用存算一体版实例 快速使用存算分离版实例 快速使用数据湖分析版实例 支持通过多种方式连接实例，包括Manager SQL Editor、Quick BI和DMS等方式，详情请参见 连接实例。...
在E-MapReduce集群中，不同版本的集群实例节点上会部署不同的服务角色。例如，HDFS中的NameNode会被部署在Master节点上。本文将为您介绍如何查看E-MapReduce集群中各节点上服务组件的部署信息。操作步骤 进入集群服务页面。登录 E-...
通过EMR Serverless StarRocks提供的监控报表功能，您可以实时获取并查看实例的运行状态及各项关键性能指标，从而实现快速问题定位。使用限制 仅保存最近30天内的报表数据，超出此期限的数据将不再保留。操作步骤 进入EMR Serverless ...