您可以在EMR on ACK控制台管理您的作业，也可以通过Kubernetes工具或API直接管理您的作业。本文为您介绍如何通过kubectl管理Spark作业。前提条件 已在E-MapReduce on ACK控制台创建Spark集群，详情请参见 快速入门。操作步骤 通过kubectl...
通过安全中心的用户管理和角色管理功能，您可以对多种资源实施精细化的权限控制，以确保只有授权用户能够管理或访问相关资源。前提条件 已创建实例，详情请参见 创建实例。角色和用户介绍 角色介绍 EMR Serverless StarRocks提供了以下内置...
通过容灾计划管理功能，可一键式保存集群配置模板，在故障发生时15分钟内自动重建同规格计算集群，保障业务连续性。注意事项 容灾计划仅恢复集群的计算服务，不恢复业务数据。业务数据（例如存储在 HDFS、OSS-HDFS 中的文件，或 Ranger、...
登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击上方的 集群管理 页签。在 集群管理 页面，单击相应集群所在行的 详情。在左侧导航栏，单击 集群服务 SmartData。单击 配置 页签。根据配置方式修改或...
Delta Lake是一个开源存储框架，旨在数据湖之上构建LakeHouse架构。Delta Lake提供了ACID事务支持、可扩展的元数据处理功能，并能够在现有的数据湖（如OSS、Amazon S3和HDFS）上整合流处理与批处理。此外，Delta Lake还支持多种引擎，如...
为集群添加标签，可以方便您识别和管理拥有的集群资源。您可以在创建集群时绑定标签，也可以在集群创建完成后，在集群基础信息页面绑定标签，您最多可以给集群绑定二十个标签。本文为您介绍如何新建、查看和绑定标签等。背景信息 E-...
HBase本身并没有提供一个完整的可视化开发界面，HBase自带的Web界面主要用于监控和管理HBase集群的性能和状态，并不用于数据操作。HBase主要通过命令行工具（HBase Shell）、Java API以及其他一些接口（如REST API和Thrift）来提供数据的增...
背景信息 阿里云OSS-HDFS服务（JindoFS服务）是OSS新推出的存储空间类型，兼容HDFS接口，支持目录以及目录层级，通过JindoSDK 4.x可以兼容访问OSS-HDFS服务。OSS-HDFS服务的快照功能在使用上与HDFS的快照功能完全兼容。本文主要介绍在OSS-...
开通后，单击 查看SLB，可以跳转到阿里云负载均衡（SLB）控制台，查看与当前网关关联的SLB实例详情。公网地址 您可以通过公网访问和使用StarRocks实例。开启公网后，阿里云VPC内仍然可以访问StarRocks实例。如需从公网访问网关，请单击 ...
元数据管理功能主要展示当前实例的所有数据库、数据表、分区及各种任务等信息，同时支持创建数据库和数据表，并定义其列及相关属性。前提条件 已创建StarRocks实例，详情请参见 创建实例。使用限制 普通用户无法查看数据库大小、缓存数据...
云消息队列 RabbitMQ 版 是一款基于高可用分布式存储架构实现的AMQP 0-9-1协议的消息产品，能够兼容开源RabbitMQ客户端，与开源RabbitMQ相比，能够解决各种稳定性痛点（例如消息堆积、脑裂等问题），同时具备高并发、分布式、灵活扩缩容等...
阿里云EMR Serverless StarRocks支持筛选和导出特定时间范围内的查询信息。您可以在 SQL任务 或 慢查询 列表页面中，根据运行状态、执行时间、日期范围、耗时等条件进行筛选，然后单击 导出，以便将查询信息保存至本地。相关文档 如果您想...
本接口用于对集群安装的应用执行启动，停止等管理操作。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM...
访问Web UI的详细信息，请参见 通过控制台访问开源组件Web界面。单击Application ID。单击 Tracking URL 的链接。进入Apache Flink Dashboard页面，即可查看作业的状态。相关文档 Flink on YARN的更多信息，请参见 Apache Hadoop YARN。
开发环境/框架 qt-creator 8.0.2 开源组件 开发环境/框架 vscode 1.68.0 开源组件 数据库 阿里云PolarDB数据库管理软件 v2.0 阿里云计算有限公司 数据库 达梦数据库管理系统 V7 武汉达梦数据库有限公司 数据库 南大通用安全数据库管理系统 ...
Windows,Windows server 2012,Apache,Nginx,Windows面板/tags/productItems productItems categoryId 56014009/categoryId code Pydio 开源在线文件管理系统（构建企业网盘和云存储系统）/code code1 Pydio 开源在线文件管理系统（构建企业...
云数据库ClickHouse是开源列式数据库ClickHouse的云上托管服务，数据库内核完全兼容开源社区版本。阿里云提供了一套企业级数据库管理平台，增强了数据安全、集群动态扩容、监控运维等企业级功能，与云上其他数据产品打通，可以便捷地构建云...
集成云监控联系人和报警管理，提供比开源更强的报警监控。开源增强 以阿里云SchedulerX为内核，提供比开源更强的定时调度、限流控制、运维操作等。高可用 以SchedulerX为内核，采用高可用架构和任务多备份机制，经历阿里集团多年双十一、容...
产品架构 EMR主要由四部分组成，分别为集成的阿里云产品、开源组件、自研组件和集群管理。其中EMR提供的组件类型及使用场景，请参见 组件概览 和 应用场景。集成的阿里云产品 EMR可以部署在阿里云ECS上。数据可以存储在阿里云OSS上。EMR与...
Terraform 支持 Terraform是一种开源工具，用于安全高效地预览，配置和管理云基础架构和资源。EMR支持的资源类型为 alicloud_emrv2_cluster。若以上方案均无法满足您的业务需要，可自行封装请求调用OpenAPI（不推荐），更多信息请参见 请求...
JindoFS存储优化 JindoFS Block模式支持数据加密，加密密钥支持阿里云密钥管理服务KMS（Key Management Service）和国际AES加密算法。JindoTable计算优化 完善Native Orc Reader，Block模式支持新的免密方式。JindoFS工具集 增强...
方案对比 云消息队列 RabbitMQ 版 无需进行代码改造，即可实现开源RabbitMQ的所有延时消息方案，详情请参见下表：项目 开源RabbitMQ 云消息队列 RabbitMQ 版 死信Exchange+Queue的消息存活时间 支持 支持 死信Exchange+消息的消息存活时间 ...
Redis开源版 实例规格文档 简介 Redis开源版云原生版 标准架构：内存容量上限可达64 GB，支持约100,000 QPS。读写分离架构：内存容量上限可达64 GB，支持约600,000 QPS。集群架构：内存容量上限可达16,384 GB（64 GB*256分片数），实例整体...
使用EMR-CLI自定义部署Gateway环境 EMR on ACK 功能集 功能 功能描述 参考文档 集群管理 创建集群 可以将开源大数据服务部署在阿里云容器服务Kubernetes版（ACK）之上，利用ACK在服务部署和容器应用管理的优势，减少对底层集群资源的运维...
阿里云的 云消息队列 RabbitMQ 版 支持AMQP 0-9-1协议，兼容开源的RabbitMQ客户端，您可以使用开源的客户端SDK接入 云消息队列 RabbitMQ 版 服务端进行消息收发。前提条件 创建实例 创建Vhost 背景信息 借助访问控制RAM的RAM用户，您可以...
系统策略统一由阿里云创建，策略的版本更新由阿里云维护，用户只能使用不能修改。自定义策略由用户管理，策略的版本更新由用户维护。用户可以自主创建、更新和删除自定义策略。在产品迭代过程中，EMR Workbench会向系统策略中添加新的权限...
EMR主要由开源组件、自研组件、集成的阿里云产品和集群管理四部分组成。您可以根据产品架构图查看EMR提供的大数据组件及使用场景。数据开发 数据开发层提供可视化工具和代码管理，涵盖数据的采集、清洗、建模、分析以及任务调度等一系列...
EMR-3.52.0及其后续版本，以及EMR-5.18.0及其后续版本，...阿里云CLI 阿里云CLI（Command Line Interface）是一种命令行工具，允许用户在终端或命令行界面调用阿里云API，来创建、配置、管理阿里云云资源。更多信息，请参见 什么是阿里云CLI。
本文介绍 Redis开源版 云原生 实例的规格，包含内存容量、CPU性能、网络带宽、连接数、QPS参考值等信息。实例规格 下表为单个分片的规格，集群架构、读写分离架构实例的整体性能为：分片规格性能*分片数。说明 规格中的 ESSD云盘 仅用于...
云应用开发平台 CAP 内置丰富的 Serverless&AI 应用模板、开源的开发者工具链及企业级应用管理功能，无论您是个人开发者还是企业级开发者，都能让您聚焦于业务场景，快速构建云上应用并且持续迭代，大幅提升研发、部署和运维效能。
新建项目之后，您可以对项目进行管理，为项目关联集群资源、添加项目成员以及设置全局变量。前提条件 已创建集群，详情请参见 创建集群。使用限制 只有阿里云账号才能创建项目、添加项目成员和添加集群资源，即控制台上 新建项目、用户管理...
确保权限已经正确授予：开源身份验证和权限管理方式：自定义用户的授权操作请参见 权限管理。阿里云访问控制（RAM）：一般情况下，可以按照 步骤一：（可选）RAM用户授权，根据该文档能够针对AMQP服务进行整体的权限设置，如操作权限、只读...
产品类型简介如下表：对比项 Redis开源版 Tair（企业版）部署模式 云原生（推荐）经典 云原生 存储介质 内存 内存型 持久内存型 磁盘型 兼容Redis版本 5.0、6.0、7.0 5.0、6.0、7.0 6.0 6.0 性能 100%（基准）300%90%最高60%成本 100%...
开源客户端是否可以直接访问云上服务？云消息队列 RabbitMQ 版 完全兼容开源RabbitMQ。开源RabbitMQ可以直接访问云上服务。您需要根据实例的不同身份验证和权限模式选择不同方式创建用户名密码并进行授权，通过创建好的用户名和密码直接...
开源客户端是否可以直接访问云上服务？云消息队列 RabbitMQ 版 完全兼容开源RabbitMQ。开源RabbitMQ可以直接访问云上服务。您需要根据实例的不同身份验证和权限模式选择不同方式创建用户名密码并进行授权，通过创建好的用户名和密码直接...
与自建Hadoop集群相比，开源大数据开发平台EMR提供弹性资源管理和自动化运维，降低运维复杂度，通过用户管理、数据加密和权限管理等为数据安全保驾护航，同时EMR集成了丰富的开源组件并打通开源生态与阿里云生态，便于快速搭建大数据处理和...
管控能力 说明 实例生命周期管理 MyBase 通过标准的管控功能，支持将主流开源引擎部署在阿里云基础设施上（ECS或ACK），并以相对标准化的方式提供实例创建、启动、停止、变配、释放等功能。高可用 MyBase 提供主流高可用工具供用户选择使用...
EMR Serverless StarRocks EMR Serverless StarRocks是开源StarRocks在阿里云上的全托管服务，您可以通过其灵活地创建和管理实例以及数据。本文为您介绍StarRocks的核心特性，并详述EMR Serverless StarRocks在此基础之上所引入的诸多增强...
EMR Serverless StarRocks介绍 EMR Serverless StarRocks是开源StarRocks在阿里云上的全托管服务，您可以通过其灵活地创建和管理实例以及数据。本文为您介绍StarRocks的核心特性，并详述EMR Serverless StarRocks在此基础之上所引入的诸多...
EMR Serverless StarRocks EMR Serverless StarRocks 是一款云原生全托管的 Lakehouse 分析服务，具备 100%兼容开源 StarRocks 的特性，并提供企业级的核心产品能力。该服务适用于多种场景，包括 OLAP 分析、实时数据仓库、湖仓分析以及轻...