JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括 JindoFS 存储系统（原JindoFS Block模式）...
EMR Serverless StarRocks介绍 EMR Serverless StarRocks是开源StarRocks在阿里云上的全托管服务，您可以通过其灵活地创建和管理实例以及数据。本文为您介绍StarRocks的核心特性，并详述EMR Serverless StarRocks在此基础之上所引入的诸多...
EMR Serverless StarRocks不仅无缝兼容开源StarRocks，并且具备自动升级软件版本的功能，可省去手动管理版本的繁琐与风险。迁移方案详情，请参见 迁移StarRocks数据至EMR Serverless StarRocks。操作步骤 重要 集群扩容操作不会重启存量...
本文为您介绍 开源大数据平台 E-MapReduce 为 RAM 权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。开源大数据平台 E-MapReduce 的 RAM 代码（RamCode）为 emr，支持的授权粒度为 资源级。权限策略通用结构 权限策略...
EMR Workflow介绍 EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行...
EMR-5.11.0及之前版本，EMR-3.45.0及之前版本 重要 如果您的EMR版本较低，没有相应的LDAP认证配置按钮，则需要参考开源软件的社区文档进行手动配置，以启用LDAP认证功能。在 组件列表 区域，选择 SparkThriftServer 操作列的 enableLDAP。...
从E-MapReduce集群内部拷贝配置文件/usr/lib/bigboot-current/conf/bigboot.cfg.external，到用户客户机上对应的安装目录 conf/bigboot.cfg。配置Namespace Service。client.namespace.rpc.port：配置JindoFS Namespace Service的监听端口...
为指定的EMR集群绑定标签。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名...变更历史 变更时间 变更内容概要 操作 2023-10-23 API 内部配置变更，不影响调用 查看变更详情 2021-10-12 OpenAPI 错误码发生变更 查看变更详情
调用CancelJobRun终止正在运行的Spark任务。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI ...变更历史 变更时间 变更内容概要 操作 2024-05-17 API 内部配置变更，不影响调用 查看变更详情
同时，它100%兼容开源Spark生态，能够无缝集成到客户现有的数据平台。通过使用EMR Serverless Spark，企业可以更加专注于数据处理分析及模型训练的优化，从而提升工作效率。前置概念 阅读本文前，您可能需要了解如下概念：什么是云原生？...
将一个EMR资源加入目标资源组。一个资源只能属于一个资源组。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。...变更历史 变更时间 变更内容概要 操作 2023-12-07 API 内部配置变更，不影响调用 查看变更详情
为了优化用户的账单管理体验，EMR Serverless StarRocks现调整出账粒度，满足用户企业内部管理需求。变更概览 账单详情字段 优化前 优化后 实例ID（出账粒度）RegionID+Instance/nodeGroupID+Time InstanceID/nodeGroupID 地域 RegionID ...
本文描述开源大数据平台 E-MapReduce支持的所有系统权限策略及其对应的权限描述，供您授权RAM身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问...
步骤四：查看数据库或数据表 通过元数据管理功能，您可以查看实例内部数据库、数据表、分区、分片以及导入任务等信息。在左侧导航栏，单击 元数据管理。该页面为您展示当前账号下所有的数据目录信息。说明 普通用户无法查看数据库大小和表...
数据湖元数据DLF是阿里云提供的统一元数据服务，具有高可用、免运维和高性能等优点，兼容Hive Metastore，无缝对接EMR上开源计算引擎，并支持多版本管理和Data Profile功能。另外，DLF还支持数据探索、湖管理和数据权限控制等功能，并与...
为指定的EMR集群列统一解绑标签。解绑后，如果该标签没有绑定其他任何资源，该标签会被自动...变更历史 变更时间 变更内容概要 操作 2024-06-18 API 内部配置变更，不影响调用 查看变更详情 2021-10-12 OpenAPI 错误码发生变更 查看变更详情
删除指定的API模板。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK...变更历史 变更时间 变更内容概要 操作 2025-03-06 API 内部配置变更，不影响调用 查看变更详情
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
Fusion引擎是EMR Serverless Spark内置的高性能向量化SQL执行引擎，相比开源Spark在TPC-DS基准测试上有3倍性能提升。Fusion引擎与开源Spark完全兼容，您无需对现有代码做任何修改。在EMR Serverless Spark中，只需在创建会话时开启 使用...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
阿里云E-MapReduce产品构建于阿里云云服务器ECS上，基于开源的Apache Hadoop和Apache Spark，做了大量优化。本文为您介绍E-MapReduce（简称EMR）Spark相对开源增强的功能。背景信息 阿里云EMR 100%采用社区开源组件，随开源版本升级迭代，...
Delta Lake是一个开源存储框架，旨在数据湖之上构建LakeHouse架构。Delta Lake提供了ACID事务支持、可扩展的元数据处理功能，并能够在现有的数据湖（如OSS、Amazon S3和HDFS）上整合流处理与批处理。此外，Delta Lake还支持多种引擎，如...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
获取一个异步操作详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰...变更历史 变更时间 变更内容概要 操作 2024-06-18 API 内部配置变更，不影响调用 查看变更详情 2022-06-10 OpenAPI 入参发生变更 查看变更详情
JindoSDK：为EMR各种开源计算引擎提供统一的SDK，支持Java、C、C++和Python语言，提供多种访问和API接口，包括HCFS文件系统接口、POSIX接口和Table表格接口。工具集：提供相关的工具集，例如Jindo tool和迁移工具Jindo DistCp。各种...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助您降低成本并提高效率。本文为您介绍倚天云服务器的特性、优势，以及在E-Mapreduce上倚天云服务器的...
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。EMR ...
内部错误。404 ResourceNotFound The resource not found by%s.请求的资源未找到。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request ...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
EMR Workflow是一个全托管的工作流和任务调度服务，100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务，您可以通过可视化的操作界面轻松地管理工作流和任务，高效构建数据仓库，并为生产任务的稳定运行提供保障。EMR ...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
E-MapReduce支持在集群成功创建后...相关文档 如果您需要访问服务的Web UI，详情请参见 通过控制台访问开源组件Web界面。如果您需要查看服务的状态，详情请参见 查看服务和组件健康状态。如果有服务相关的问题，详情请参见 集群管理常见问题。
功能变更 JindoFS存储优化 JindoFS缓存优化 JindoTable计算优化 JindoManager系统管理 JindoTools工具集 JindoFS生态支持 JindoFS存储优化 支持文件的checksum功能，对齐开源HDFS checksum相关接口，支持MD5MD5CRC和COMPOSITE_CRC两种算法...
内部错误。404 ResourceNotFound The resource not found by%s.请求的资源未找到。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request ...
应用场景 E-MapReduce目前提供了三种大数据存储系统，E-MapReduce OssFileSystem、E-MapReduce HDFS和E-MapReduce JindoFS，其中OssFileSystem和JindoFS都是云上存储的解决方案，下表为这三种存储系统和开源OSS各自的特点。特点 开源OSS E-...
内部错误。503 ServiceFailure The request has failed due to a temporary failure of%s service.依赖的阿里云其他服务不可用。503 ServiceUnavailable The request has failed due to a temporary failure of the server.请求超时或者...
Hive语法 EMR产品最大程度的保持了开源社区的语法以及体验，在Hive语法上保持与开源社区Hive语法100%的兼容性。关于Apache Hive的更多介绍，请参见 Apache Hive官网。相关文档 如何使用Hive客户端连接Hive，请参见 Hive连接方式。Hive服务...
以下配置项请遵循开源HDFS内容，详情请参见 core-default.xml。参数 示例 hadoop.security.group.mapping org.apache.hadoop.security.CompositeGroupsMapping hadoop.security.group.mapping.providers shell4services,ad4users hadoop....
以下配置项请遵循开源HDFS内容，详情请参见 core-default.xml。参数 示例 hadoop.security.group.mapping org.apache.hadoop.security.CompositeGroupsMapping hadoop.security.group.mapping.providers shell4services,ad4users hadoop....