基于完备的阿里云综合安全产品体系，保障EMR产品内部使用的计算、存储、网络等基础设施的安全性。基于阿里云账号认证体系，为客户提供云上账户安全管理能力，包括但不限于支持主子账号、多因素认证、分组授权、细粒度授权及临时授权等账户...
2023年6月1日起，E-MapReduce Serverless StarRocks服务等级协议（SLA）生效。详情请参见 开源大数据平台E-MapReduce Serverless服务等级协议。
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据湖仓，并为生产任务的稳定运行提供保障。产品优势 ...
支持统一元数据之前，元数据都是在集群内部的MySQL数据库，元数据会随着集群的释放而丢失，特别是EMR提供了灵活按量模式，集群可以按需创建用完就释放。如果您需要保留现有的元数据信息，必须登录集群手动将元数据信息导出。支持统一元数据...
本文为您介绍 开源大数据平台 E-MapReduce 为 RAM 权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce 的 RAM 代码（RamCode）为 emr-serverless-spark，支持的授权粒度为 操作级。权限策略...
内置函数清单 Serverless Spark 兼容开源内置函数的使用，开源具体函数说明请参见 Spark SQL Functions。此外，Serverless Spark 还支持多个特有内置函数，以下是特有支持的内置函数及其相关说明。函数 说明 PARQUET_SCHEMA 获取Parquet...
E-Mapreduce（简称EMR）开源组件运行过程中会产生大量的日志。日志管理功能将EMR与日志服务SLS相结合，允许您在EMR控制台直接查询开源组件的日志。前提条件 已在EMR控制台上创建集群，具体操作请参见 创建集群。已 开通日志服务。使用限制 ...
EMR用户可以用于访问链接与端口，查看开源组件Web UI时的用户身份认证，也可以在开启组件LDAP认证之后进行身份认证。如果将Ranger的用户源设置为LDAP，则可以对用户管理中的用户进行权限控制。如果是高安全集群，EMR用户可以用于Kinit操作...
访问HDFS Web UI 您可以通过SSH隧道和控制台两种方式访问HDFS Web UI，具体操作请参见 通过SSH隧道方式访问开源组件Web UI 和 访问链接与端口。NameNode服务地址 版本 访问地址 说明 hadoop 3.x http://${namenode_hostname}:9870${...
JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括 JindoFS 存储系统（原JindoFS Block模式）...
EMR Serverless StarRocks介绍 EMR Serverless StarRocks是开源StarRocks在阿里云上的全托管服务，您可以通过其灵活地创建和管理实例以及数据。本文为您介绍StarRocks的核心特性，并详述EMR Serverless StarRocks在此基础之上所引入的诸多...
EMR Serverless StarRocks不仅无缝兼容开源StarRocks，并且具备自动升级软件版本的功能，可省去手动管理版本的繁琐与风险。迁移方案详情，请参见 迁移StarRocks数据至EMR Serverless StarRocks。操作步骤 重要 集群扩容操作不会重启存量...
本文为您介绍 开源大数据平台 E-MapReduce 为 RAM 权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce 的 RAM 代码（RamCode）为 emr，支持的授权粒度为 资源级。权限策略通用结构 权限策略...
EMR Workflow介绍 EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行...
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的 enableLDAP。...
从E-MapReduce集群内部拷贝配置文件/usr/lib/bigboot-current/conf/bigboot.cfg.external，到用户客户机上对应的安装目录 conf/bigboot.cfg。配置Namespace Service。client.namespace.rpc.port：配置JindoFS Namespace Service的监听端口...
为指定的EMR集群绑定标签。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名...变更历史 变更时间 变更内容概要 操作 2023-10-23 API 内部配置变更，不影响调用 查看变更详情 2021-10-12 OpenAPI 错误码发生变更 查看变更详情
调用CancelJobRun终止正在运行的Spark任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...变更历史 变更时间 变更内容概要 操作 2024-05-17 API 内部配置变更，不影响调用 查看变更详情
ISO29151 ISO29151为企业在保障个人隐私安全及降低合规风险方面提供了众多实用指南，以满足与保护个人身份信息（PII）相关的风险和影响评估所确定的要求。ISO9001 ISO9001质量管理体系是用于验证组织具备提供满足用户需求和相关法规要求的...
将一个EMR资源加入目标资源组。一个资源只能属于一个资源组。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。...变更历史 变更时间 变更内容概要 操作 2023-12-07 API 内部配置变更，不影响调用 查看变更详情
ISO29151 ISO29151为企业在保障个人隐私安全及降低合规风险方面提供了众多实用指南，以满足与保护个人身份信息（PII）相关的风险和影响评估所确定的要求。ISO9001 ISO9001质量管理体系是用于验证组织具备提供满足用户需求和相关法规要求的...
ISO29151 ISO29151为企业在保障个人隐私安全及降低合规风险方面提供了众多实用指南，以满足与保护个人身份信息（PII）相关的风险和影响评估所确定的要求。ISO9001 ISO9001质量管理体系是用于验证组织具备提供满足用户需求和相关法规要求的...
本文描述开源大数据平台 E-MapReduce支持的所有系统权限策略及其对应的权限描述，供您授权RAM身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问...
步骤四：查看数据库或数据表 通过元数据管理功能，您可以查看实例内部数据库、数据表、分区、分片以及导入任务等信息。在左侧导航栏，单击 元数据管理。该页面为您展示当前账号下所有的数据目录信息。说明 普通用户无法查看数据库大小和表...
数据湖元数据DLF是阿里云提供的统一元数据服务，具有高可用、免运维和高性能等优点，兼容Hive Metastore，无缝对接EMR上开源计算引擎，并支持多版本管理和Data Profile功能。另外，DLF还支持数据探索、湖管理和数据权限控制等功能，并与...
为指定的EMR集群列统一解绑标签。解绑后，如果该标签没有绑定其他任何资源，该标签会被自动...变更历史 变更时间 变更内容概要 操作 2024-06-18 API 内部配置变更，不影响调用 查看变更详情 2021-10-12 OpenAPI 错误码发生变更 查看变更详情
删除指定的API模板。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK...变更历史 变更时间 变更内容概要 操作 2025-03-06 API 内部配置变更，不影响调用 查看变更详情
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
Fusion引擎是EMR Serverless Spark内置的高性能向量化SQL执行引擎，相比开源Spark在TPC-DS基准测试上有3倍性能提升。Fusion引擎与开源Spark完全兼容，您无需对现有代码做任何修改。在EMR Serverless Spark中，只需在创建会话时开启 使用...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
阿里云E-MapReduce产品构建于阿里云云服务器ECS上，基于开源的Apache Hadoop和Apache Spark，做了大量优化。本文为您介绍E-MapReduce（简称EMR）Spark相对开源增强的功能。背景信息 阿里云EMR 100%采用社区开源组件，随开源版本升级迭代，...
Delta Lake是一个开源存储框架，旨在数据湖之上构建LakeHouse架构。Delta Lake提供了ACID事务支持、可扩展的元数据处理功能，并能够在现有的数据湖（如OSS、Amazon S3和HDFS）上整合流处理与批处理。此外，Delta Lake还支持多种引擎，如...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
获取一个异步操作详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰...变更历史 变更时间 变更内容概要 操作 2024-06-18 API 内部配置变更，不影响调用 查看变更详情 2022-06-10 OpenAPI 入参发生变更 查看变更详情
JindoSDK：为EMR各种开源计算引擎提供统一的SDK，支持Java、C、C++和Python语言，提供多种访问和API接口，包括HCFS文件系统接口、POSIX接口和Table表格接口。工具集：提供相关的工具集，例如Jindo tool和迁移工具Jindo DistCp。各种...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助您降低成本并提高效率。本文为您介绍倚天云服务器的特性、优势，以及在E-Mapreduce上倚天云服务器的...
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。EMR ...
内部错误。404 ResourceNotFound The resource not found by%s.请求的资源未找到。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request ...
ISO29151 ISO29151为企业在保障个人隐私安全及降低合规风险方面提供了众多实用指南，以满足与保护个人身份信息（PII）相关的风险和影响评估所确定的要求。ISO9001 ISO9001质量管理体系是用于验证组织具备提供满足用户需求和相关法规要求的...