云消息队列 RabbitMQ 版 支持开源RabbitMQ身份验证和权限管理方式来实现对 云消息队列 RabbitMQ 版 资源的管理。使用限制 仅支持新购的Serverless系列独享实例,存量实例不支持。禁止默认账户guest的创建和权限管理。不支持User Tags 的...
云消息队列 RabbitMQ 版 开源身份验证和权限管理方式和阿里云访问控制(RAM)两种身份验证和权限模式,开源客户端访问 云消息队列 RabbitMQ 版 服务端时,根据不同身份验证和权限模式,传入用户名和密码进行权限认证,认证通过才允许访问...
进入阿里云管理控制台费用与成本的 资源实例管理 页面。资源维度 选择为 资源包,查看实例名称包含 emapreduce_srossdatastorage_dp 的资源包统计情况,包括资源包状态、剩余量及有效时间等。统计:单击 实例汇总 页签对应资源包 操作 列的...
资源组会对您拥有的云资源从用途、权限和归属等维度上进行分组,实现企业内部多用户、多项目的资源分级管理。一个云资源只能属于一个资源组,云资源之间的关联关系不会因加入资源组而发生变化。E-MapReduce目前支持资源组的云资源为集群和...
管理LDAP用户 建议您使用EMR控制台的 用户管理 功能来添加OpenLDAP用户,这样可以将与阿里云RAM用户同名的用户添加到OpenLDAP中,详情请参见 管理用户。OpenLDAP是一种开源软件,您可以使用OpenLDAP提供的命令行工具ldapadd、ldapdelete、...
根据登录EMR控制台的RAM用户权限的不同,可以将使用E-MapReduce用户管理模块的RAM用户分为两类:管理员:阿里云账号或者拥有emr:ManageUserPlatform(例如系统策略AliyunEMRFullAccess)和emr:CreateLdapUser权限的RAM用户。管理员可以查看...
RAM用户相关操作 RAM用户管理 AK安全方案 RAM用户SSO管理 RAM用户组 当您的阿里云账号下有多个RAM用户时,可以通过创建用户组对职责相同的RAM用户进行分组管理和批量授权,高效地管理RAM用户及其权限。对于RAM用户组的使用,建议您:在对...
EMR Workflow是一个全托管的工作流和任务调度服务,100%兼容开源Apache DolphinScheduler。它提供了易于使用的调度服务,您可以通过可视化的操作界面轻松地管理工作流和任务,高效构建数据湖仓,并为生产任务的稳定运行提供保障。产品优势 ...
适用客户 全网用户 新增功能/规格 集群管理新增报警管理功能,基于云监控服务,支持用户在EMR控制台创建和查看集群报警规则。如果资源的监控指标达到报警条件,云监控自动发送报警通知,帮助您及时得知异群的异常情况,并快速处理。产品...
通过对产品进行生命周期管理,有节奏地引入新产品和新发行版本,能够更好地帮助您跟上技术发展的步伐,提升您在云计算中的效能,并使云计算厂商能够更专注地为您提供服务,避免维护空洞。为了更好地提供企业级服务,加强您对产品未来演进的...
很高 低 较高 事务性 支持 不支持 支持 性能 高 低 较高 扩展性 依赖于具体实现 高 高 面向人员 管理人员 管理人员、数据科学家 管理人员、数据科学家 成本 高 低 低 适用场景 Delta适用于云上数据湖数据管理解决方案。如果您存在以下场景...
Serverless Spark提供域名管理功能。适用客户 全网用户 新增功能/规格 EMR Serverless Spark提供域名管理功能,解决云环境中的DNS解析问题,确保任务能够正确、高效地访问外部服务或资源。产品文档 管理域名
RAM用户相关操作 RAM用户管理 AK安全方案 RAM用户SSO管理 RAM用户组 当您的阿里云账号下有多个RAM用户时,可以通过创建用户组对职责相同的RAM用户进行分组管理和批量授权,高效地管理RAM用户及其权限。对于RAM用户组的使用,建议您:在对...
本文介绍如何将开源Alertmanager路由规则导入为ARMS告警管理的通知策略。背景信息 开源Alertmanager作为一款优秀的告警通知组件,在Prometheus开源监控解决方案中是必不可失的一环。它灵活的路由、静默、分组能力可以更合理地发送告警通知...
应用场景 E-MapReduce目前提供了三种大数据存储系统,E-MapReduce OssFileSystem、E-MapReduce HDFS和E-MapReduce JindoFS,其中OssFileSystem和JindoFS都是云上存储的解决方案,下表为这三种存储系统和开源OSS各自的特点。特点 开源OSS E-...
RAM用户相关操作 RAM用户管理 AK安全方案 RAM用户SSO管理 RAM用户组 当您的阿里云账号下有多个RAM用户时,可以通过创建用户组对职责相同的RAM用户进行分组管理和批量授权,高效地管理RAM用户及其权限。对于RAM用户组的使用,建议您:在对...
如果是本地的元数据库,您可以使用集群上的Hue工具来管理。E-MapReduce后台RDS统一管理元数据的方式,仅限小容量的用户使用。对于大容量场景,建议您自建RDS作为统一元数据。默认限制为:总容量:200MiB。小时query数量限制:720000/h。...
EMR AI助手(EMR Agent)是阿里云EMR推出的一款智能化工具,旨在助您更高效地管理和运维 EMR集群。通过合理利用EMR AI助手的各项功能,可以快速查询资源信息、唤起相关操作、诊断组件异常、获取技术支持等,能帮您提升运维效率和操作体验。...
本文为您介绍如何创建并管理手动任务。使用说明 手动任务能够独立创建并支持手动运行。在工作流定义中,可以在任务节点中关联已经创建的手动任务。创建并运行手动任务 说明 创建的手动任务,支持在工作流定义中进行关联,具体操作请参见 ...
RAM用户相关操作 RAM用户管理 AK安全方案 RAM用户SSO管理 RAM用户组 当您的阿里云账号下有多个RAM用户时,可以通过创建用户组对职责相同的RAM用户进行分组管理和批量授权,高效地管理RAM用户及其权限。对于RAM用户组的使用,建议您:在对...
新建库 进入元数据管理页面。登录 阿里云E-MapReduce控制台。在顶部菜单栏处,根据实际情况选择地域 和资源组。单击上方的 元数据管理 页签。在 表管理 页面,单击 新建库。在 新建库 对话框中,配置各项参数。因为EMR表管理功能仅支持基于...
目前阿里云开源大数据平台E-MapReduce常见的计算引擎(例如Flink、Spark、Hive或Trino)都与Paimon有着较为完善的集成度。您可以借助Apache Paimon快速地在HDFS或者云端OSS上构建自己的数据湖存储服务,并接入上述计算引擎实现数据湖的分析...
开源身份验证和权限管理方式 由于开源RabbitMQ和 云消息队列 RabbitMQ 版 存在一定的差异,rabbit_version、parameters、global_parameters 和 policies 元数据不支持导入 云消息队列 RabbitMQ 版 实例,在导入时会被自动忽略。禁止导入...
背景信息 数据湖构建DLF是一款全托管的快速帮助用户构建云上数据湖的服务,提供了云上数据湖统一的权限管理和元数据管理,详细信息请参见 数据湖构建产品简介。数据权限功能,请参见 数据权限。前提条件 已创建E-MapReduce集群,并选择了...
单击 报警管理 页面的 管理报警规则,可以跳转到云监控控制台查看或修改报警规则。自定义创建报警规则 进入报警管理页面。登录 E-MapReduce控制台。在顶部菜单栏处,根据实际情况选择地域 和资源组。在 EMR on ECS 页面,单击目标集群的 ...
EMR Workflow 新增工作空间管理 适用客户 全网用户 新增功能/规格 工作空间是EMR Workflow管理项目、工作流,分配角色和权限的基本单元。您所有的配置、任务、工作流均在具体的项目空间下进行。工作空间管理员可以添加成员至工作空间,并...
E-MapReduce会自动根据健康检查项对集群的节点和服务进行健康检查 适用客户 全网用户 新增功能/规格 E-MapReduce自动根据健康检查项对集群的节点和服务进行健康检查,及时对异常或风险点进行处理。...产品文档 管理健康检查项
Serverless Spark SQL开发和批任务支持自定义变量管理,可简化代码的维护和调整。适用客户 全网用户 新增功能/规格 EMR Serverless Spark 使用变量可以有效降低重复编写相同值的工作量,从而提升配置管理的效率。通过变量的复用,可以在SQL...
通过阿里云EMR控制台,您可以方便地管理资源队列,并关联不同的分区。前提条件 已创建集群,且集群状态为运行中。创建集群详情,请参见 创建集群。使用限制 YARN调度器需使用capacity scheduler。自定义分区相关功能,适用于EMR-5.11.1及...
StarRocks 支持在存算分离场景下为不同业务场景分配独立的网关,确保FE服务的稳定性。适用客户 全网用户 新增功能/规格 Serverless StarRocks支持在存算分离场景下为不同业务场景分配独立的网关,从而确保FE服务的隔离性...产品文档 管理网关
Notebook默认安装matplotlib、numpy和pandas,支持根据业务需要创建运行环境 适用客户 全网用户 新增功能/规格 Notebook当前已默认安装matplotlib、numpy和pandas。如果您需要使用其他第三方库,可以创建运行环境。...产品文档 管理运行环境
EMR on ECS 创建集群后,支持对节点组的安全组信息进行修改。适用客户 全网用户 新增功能/规格 EMR on ECS 创建集群后,支持对节点组的安全组信息进行修改。产品文档 管理安全组
阿里云E-MapReduce(EMR)Serverless Spark 提供了配置管理功能,用于统一存储和管理Spark的全局默认配置及安全相关的信息与文件。通过集中化管理配置信息,该功能简化了任务执行过程中的配置流程,确保一致性和灵活性,同时支持动态更新以...
高级设置 标签:是云资源的标识,能够帮助您从不同维度对具有相同特征的云资源进行分类、搜索和聚合,从而提升资源管理效率。每个工作空间最多支持绑定二十个标签,每个标签由自定义的标签键和标签值组成,满足您多样化的管理需求。同时,...
版本说明 MSE Nacos 版本 开源控制台默认状态 是否支持鉴权 描述 1.x及2.2.3.1之前的2.x版本 开启 不支持 默认开启开源控制台,且不支持鉴权,开源控制台的URL可被任何人访问,建议使用商业化控制台。若确实需要使用,建议 设置白名单 来...
工作空间是EMR Notebook管理数据库、外部集群和笔记本的基本单元。通过工作空间,您可以创建和编辑Notebook文件,方便地上传和下载文件,与其他用户共享Notebook和数据,并灵活地管理访问权限。前提条件 已完成系统角色授权,详情请参见 ...
您可以在已经创建好的E-MapReduce(简称EMR)集群中,使用Alluxio Admin Shell命令来对Alluxio中的文件进行管理和运维。本文为您介绍Alluxio管理员的常见命令。前提条件 已创建集群,并选择了Alluxio服务,详情请参见 创建集群。已登录集群...
在左侧导航栏,选择 身份管理 用户。在 用户 页面,单击目标RAM用户 操作 列的 添加权限。您也可以选中多个RAM用户,单击用户列表下方的 添加权限,为RAM用户批量授权。在 新增授权 面板,为RAM用户添加 AliyunEMRWorkflowAdmin 权限。参数...
本文为您介绍如何管理任务定义和任务实例。任务定义操作 在 任务定义 页面,您可以执行以下操作。操作 说明 版本 只能切换至处于下线状态的任务定义。删除 只能删除处于下线状态的任务定义。任务实例操作 在 任务实例 页面,您可以执行以下...
适用场景 企业应用需对接阿里云IDaaS实现身份认证、单点登录(SSO)或身份管理集成。开源代码库 阿里云 IDaaS 将一系列集成样例代码开源,供企业应用的开发者对接使用。如下为开源代码库。每个库中,都有完整的配置使用、开发说明,请参考...