在EMR集群中，为了确保集群安全，Hadoop、Spark和Flink等开源组件的Web界面端口均未对外开放。如果您想直接访问开源组件的Web界面，可根据实际场景选择 原生UI地址、Knox代理地址、SSH本地端口转发 或 SSH动态端口转发 方式进行访问。快速...
调用DeleteFlowProjectClusterSetting接口，删除项目集群设置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：删除成功。false：删除失败。RequestId String 549175a-6d14-4c8a-89f9-5e28300f6d7e 请求ID。...
阿里云E-MapReduce服务（例如Hadoop和Spark），在运行时需要有访问其他阿里云资源和执行操作的权限。每个E-MapReduce集群必须有服务角色以及ECS应用角色。更多信息介绍，请参见 阿里云账号角色授权。
EMR on ECS服务角色允许E-MapReduce服务在配置资源或执行服务级别操作时调用其他阿里云服务。例如，服务角色用于在EMR集群启动时创建ECS实例。本文为您介绍EMR服务角色及其权限策略。EMR on ECS会使用到AliyunEMRDefaultRole、...
EMR-3.52.0及其后续版本，以及EMR-5.18.0及其后续版本，均在镜像内预装了阿里云CLI和ossutil 2.0，安装路径位于/usr/local/bin/目录下。工具简介如下所示。工具 简介 命令行工具ossutil 2.0（预览版）ossutil是OSS的新版命令行管理工具，...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：删除成功。false：删除失败。RequestId String 11BAFBD8-8509-4177-A26D-407505E73713 请求ID。...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。Name String 否 test 克隆的目标作业名称。返回数据 名称 类型 示例值 描述 Id String FJ-06D12BA16419*新产生的作业ID。RequestId String BCE475E4-129D-43D2-8595-C80B80CBC114 ...
关于阿里云EMR Serverless Spark产品和服务的相关问题，您可以通过以下渠道寻求支持和解决。支持范围 类别 详情 支持的服务 负责EMR Serverless Spark控制台的使用、咨询服务、稳定性问题以及产品缺陷问题处理。主要支持以下功能：工作空间...
调用ModifyFlowProjectClusterSetting接口，修改项目集群设置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。Name String 否 Test 目录名称。您可以调用 DescribeFlowCategory 查看。ParentId String 否 FC-ABCDEFGHI*上级目录ID。您可以调用 DescribeFlowCategory 查看。返回数据 名称 类型 ...
准备工作如下：请确认您已经开通了阿里云服务，并创建了AccessKey ID和AccessKey Secret。请确认您已开通OSS。您已经对Spark、Hadoop、Hive和Pig具备一定的认识。文中不对Spark、Hadoop、Hive和Pig开发实践进行额外的介绍。您已经对阿里云E...
调用CreateFlowProjectClusterSetting接口，创建项目集群设置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 ...
如果您对阿里云EMR Serverless Spark的消费情况产生疑问，可以通过费用与成本查看费用账单以及消费明细。操作步骤 登录 费用与成本 控制台。在左侧导航栏，选择。根据需要查看消费情况或导出账单。账单详细内容，可参见费用与成本的 账单...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：恢复工作流成功。false：恢复工作流失败。RequestId String B46F8A2A-B46B-415C-8A9C-B01B99B775...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：暂停工作流成功。false：暂停工作流失败。RequestId String B46F8A2A-B46B-415C-8A9C-B01B99B775...
与开源Zeppelin相比，E-MapReduce（简称EMR）数据开发集群中的Shell解释器支持在不同EMR集群环境里切换。本文通过示例为您介绍如何在Zeppelin中使用Shell。使用示例 运行hadoop命令 执行如下命令会显示当前EMR集群根目录下的所有文件，切换...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Id String F-CDFE2BF3A796*新产生的工作流ID。RequestId String 12E7685E-C7A2-4BED-878B-07AF5BAD475F 请求ID。示例 请求示例 http(s):/[Endpoint]...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：执行成功。false：执行失败。RequestId String B46F8A2A-B46B-415C-8A9C-B01B99B775A2 请求ID。...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。ReRunFail Boolean 否 true 是否只重试失败节点。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：重试工作流成功。false：重试工作流失败。...
您可以调用 DescribeRegions 查看最新的阿里云地域列表。返回数据 名称 类型 示例值 描述 Data Boolean true 返回执行结果，包含如下：true：删除成功。false：删除失败。RequestId String 243D5A48-96A5-4C0C-8966-93CBF65635ED 请求ID。...
EMR Serverless StarRocks兼容开源StarRocks的SQL语法和函数，您可以参考以下文档进行开发设计。StarRocks版本 参考文档 3.3系列 SQL参考 函数参考 3.2系列 SQL参考 函数参考 2.5系列 SQL参考 函数参考
EMR Studio上的Zeppelin与开源版本一致吗？如何设置Zeppelin Note的权限？Zeppelin执行时无法正常启动Interpreter EMR Studio上的Zeppelin与开源版本一致吗？EMR Studio上的Zeppelin是增强版的Zeppelin，与开源版本不一致。E-MapReduce的...
如果您对阿里云E-MapReduce的消费情况有疑问，可以通过费用与成本控制台查看费用账单以及消费明细。操作步骤 登录 费用与成本 控制台。在左侧导航栏，选择 账单 账单详情。相关文档 账单详细内容，请参见 账单管理。包年包月的退款规则及...
当您使用阿里云E-MapReduce（简称EMR）时，可以根据本文查找对应的问题场景和解决方案。计费常见问题 集群管理常见问题 组件常见问题：HDFS常见问题 YARN常见问题 Hudi常见问题 Hive常见问题 HBase常见问题 Kudu常见问题 Spark常见问题 ...
地域列表 说明 如果您有其他地域的需求，可以 提交工单 申请，阿里云EMR团队将评估是否增加新的地域。中国地区 地域名称 地域ID 华北2（北京）cn-beijing 华东1（杭州）cn-hangzhou 华东2（上海）cn-shanghai 华南1（深圳）cn-shenzhen ...
使用EMR Serverless Spark前，需要授予您的阿里云账号 AliyunServiceRoleForEMRServerlessSpark 和 AliyunEMRSparkJobRunDefaultRole 系统默认角色。本文为您介绍角色授权的基本操作。授权流程 通常，第一次 购买产品 时，需要您进行自动化...
考虑因素说明 考虑因素 描述 相关文档 业务场景 阿里云EMR预定义了四类业务场景，分别为数据湖集群、数据分析集群、实时数据流集群和数据服务集群。此外，系统还支持自定义集群，您可以根据具体的业务选择相应的业务场景。选择业务场景 ...
EMR on ECS的安全责任由阿里云、客户双方共同承担，本文介绍阿里云与客户在安全性方面各自应该承担的责任。阿里云安全责任 阿里云负责保障平台自身安全。责任包括：针对阿里云安全中心发现的EMR大数据服务组件安全漏洞，发布相关公告，并...
阿里云E-MapReduce将于2024年03月1日0时起，更新 E-MapReduce服务等级协议，新版SLA丰富了“1.5 有效请求”的定义，添加 CreateCluster-创建集群、IncreaseNodes-扩容、DecreaseNodes-缩容、弹性伸缩 接口请求。请您留意条款变更，如有问题...
E-MapReduce Doctor（简称EMR Doctor）是E-MapReduce产品自研的面向开源大数据集群的智能运维诊断系统。通过EMR Doctor（即 监控诊断 页面的“健康诊断”和“集群日报”功能）可以全局了解集群的健康状况和动态走势，为运维决策和资源优化...
本文介绍阿里云E-MapReduce的计费项、计费方式、计费方式转换、欠费说明、续费说明、查看消费明细、退费说明、查看账单和计费常见问题。相关项 描述 相关文档 计费项 为您介绍E-MapReduce的计费说明、计费方式概要和可能涉及到的相关产品...
为了提升阿里云EMR集群的可靠性和可用性，您可以采用两种策略：一是在集群扩容时开启尽力交付，这样即使部分节点创建失败，系统也会将所有成功创建的节点加入集群，从而最大限度地保障服务运行；二是对集群中现有的或新增的节点组开启自动...
本文为您介绍阿里云地域的概念、选择指导以及阿里云EMR Serverless Spark支持的地域列表。背景信息 地域（Region）：指数据中心所在的地理区域，通常按照数据中心所在的城市划分。例如，华北2（北京）地域表示数据中心所在的城市是北京。...
本文介绍阿里云EMR Serverless Spark在资源配额、性能等方面的限制，请您评估以下限制对您业务的影响并做出相应的调整。限制项 说明 地域 EMR Serverless Spark仅在部分地域提供服务，支持详情请参见 支持地域。资源配额 工作空间的资源...
支持的地域 说明 如果您有其他地域的需求，可以 提交工单 申请，阿里云EMR团队将评估是否增加新的地域。中国地区 地域名称 地域ID 华北2（北京）cn-beijing 华东1（杭州）cn-hangzhou 华东2（上海）cn-shanghai 华南1（深圳）cn-shenzhen ...
开源大数据平台E-MapReduce（简称EMR）的ClickHouse提供了开源OLAP分析引擎ClickHouse的云上托管服务。EMR ClickHouse完全兼容开源版本的产品特性，同时提供集群快速部署、集群管理、扩容、缩容和监控告警等云上产品功能，并且在开源的基础...
阿里云E-MapReduce(EMR)Serverless Spark 提供了配置管理功能，用于统一存储和管理Spark的全局默认配置及安全相关的信息与文件。通过集中化管理配置信息，该功能简化了任务执行过程中的配置流程，确保一致性和灵活性，同时支持动态更新以...
阿里云EMR Workbench是一个综合性的大数据分析和开发环境，作为阿里云E-MapReduce的一部分，它提供了EMR Notebook和EMR Workflow两个核心功能。通过EMR Workbench，您可以轻松进行数据开发，以及交互式数据分析，并设计复杂的数据处理工作...
EMR Workflow 新增工作空间管理 适用客户 全网用户 新增功能/规格 工作空间是EMR Workflow管理项目、工作流，分配角色和权限的基本单元。您所有的配置、任务、工作流均在具体的项目空间下进行。工作空间管理员可以添加成员至工作空间，并...