查看文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组,用户和组映射关系需要通过 OpenAPI 进行管理。有关文件存储 HDFS 版文件系统目录和文件访问权限的信息,请参见 ...
使用说明 存储支持:支持对象存储OSS、文件存储NAS和文件存储CPFS智算版。适用资源:在PAI平台,该功能目前仅适用于灵骏智算资源,请注意,开启缓存后会占用算力节点一定的资源(CPU和内存)。加速目标:该功能核心目标是提升数据读取性能...
当您需要监控文件存储CPFS文件系统资源的使用情况时,可以创建报警规则。如果资源的监控指标达到报警条件,云监控自动发送报警通知,帮助您及时得知异常监控数据,并快速处理。前提条件 已创建文件存储CPFS文件系统。具体操作,请参见 创建...
如果您想…您可以参考…在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 CPFS数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 数据备份 配置文件系统的ACL权限 基于NFSv4...
当您需要监控文件存储CPFS文件系统资源的使用情况时,可以创建报警规则。如果资源的监控指标达到报警条件,云监控自动发送报警通知,帮助您及时得知异常监控数据,并快速处理。前提条件 已创建文件存储CPFS文件系统。具体操作,请参见 创建...
本文主要介绍如何在 文件存储 HDFS 版 上搭建及使用Presto。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已搭建Hadoop集群并且所有集群节点已安装JDK,JDK版本不低于1.8...
通过容量监控功能,您可以实时查看CPFS通用版文件系统的存储空间使用状况和文件数信息。本文介绍如何查看CPFS通用版文件系统的容量监控数据。前提条件 已创建文件系统。具体操作,请参见 创建文件系统。已开通云监控服务。您可以登录 云...
您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件...将存储在 文件存储HDFS版 上的小文件聚合成大文件会对整体的分析性能有较大帮助。
本文介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Flink。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不...
在进行大文件上传下载至OSS时,如果存在网络环境复杂多变或需要同时处理多任务等情况,您可以使用ossutil的限速功能实现对文件传输速度的有效控制,从而更好地满足数据的管理与使用需求,提升数据处理效率。说明 该限速作用于全局,而非单...
本文介绍 文件存储 NAS 与 对象存储、块存储 的区别和部署架构,帮助您更好地选用合适的阿里云存储服务。产品对照表 文件存储 NAS、对象存储 和 块存储 的主要区别如下表所示。对比项 文件存储 NAS 对象存储 块存储 特点 原有使用单机本地...
本文主要介绍如何在挂载 文件存储 HDFS 版 的Hadoop集群上安装及使用Apache Spark。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK...
2021-10-27 全部 管理Fileset CPFS数据流动 表 3.2020年 功能名称 功能概述 发布时间 发布地域 相关文档 文件存储CPFS 2.0 文件存储CPFS 2.0版本支持更高的性能,更丰富的功能,为AI训练和HPC高性能计算提供高性能的并行文件存储服务。...
创建文件存储 HDFS 版文件系统实例的用户和组的映射关系。接口说明 用户和用户组的映射功能目前还在邀测中,如需使用,请 提交工单 申请。文件存储 HDFS 版的文件系统权限管理依赖文件的用户和组,用户和组映射关系需要通过 OpenAPI 进行...
使用在线迁移服务,您可以轻松实现文件存储NAS之间的数据迁移。本文介绍如何通过在线迁移服务实现阿里云文件存储NAS之间的数据迁移。使用在线迁移服务,您只需在控制台填写源NAS数据地址和目的NAS数据地址信息,并创建迁移任务即可。启动...
文件存储 HDFS 版 为目录和文件提供了一种访问权限,该访问权限类似于POSIX文件系统的权限模型。本文简要介绍访问权限的概念、使用方式及其相关注意事项。访问权限介绍 文件存储 HDFS 版 文件系统中的每一个文件或者目录会关联到三个权限...
如果源文件的存储类型为归档类型,您还可以:先为源文件所在的存储空间开启归档直读。开启归档直读后,存储空间下的所有归档存储类型文件无需解冻,就支持CopyObject请求。具体操作,请参见 归档直读。相关文档 CopyObject RestoreObject ...
本文介绍如何配置E-MapReduce上的Hadoop-Common服务、Hive服务、Spark服务、Tez服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作,请参见 E-MapReduce数据迁移。配置Hadoop-Common服务 登录 阿里云E-MapReduce控制台。在...
您可以通过查询文件存储NAS的账单,及时了解其收费明细,更好地从费用分配角度进行业务决策。本文为您介绍查询费用账单和用量明细的操作方法。查看文件系统费用账单 进入 费用与成本 的 账单详情。在 明细账单 页签中,设置查询 账期,产品...
问题原因 OSS文件上传时会继承Bucket的存储类型,因此上传到OSS的文件存储类型为归档存储的原因如下:Bucket的存储类型为标准存储,但是需要下载的文件为归档存储,则说明上传文件时的代码中设置的存储类型为归档存储。Bucket的存储类型为...
接口说明 在修改文件系统前,请先了解文件存储 HDFS 版的 计费方式 和 HDFS 产品定价。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表...
文件存储NAS已与云监控无缝集成。通过容量监控功能,您可以实时了解文件系统的使用情况,例如查看文件系统存储空间数据量、低频读写数据量、文件数、已使用数据量等。本文介绍如何查看NAS的容量监控数据。前提条件 已创建NAS文件系统。具体...
当您对文件存储有高安全性或者合规性要求时,建议您开启服务器端加密功能。开启该功能后,NAS会对存储在文件系统中的数据进行加密,访问数据时,NAS自动将加密数据解密后返回给用户。本文介绍服务器端加密的工作原理、支持的地域及相关操作...
您可以通过阿里云云监控来监控文件系统读请求频率、读取请求大小、每秒读取字节数、存储空间等。并通过设置报警规则,及时获取异常信息。本文介绍如何查看性能监控详情及创建报警规则。前提条件 已创建 文件存储 HDFS 版 文件系统。具体...
本文档主要为您说明阿里云数据库文件存储DBFS的主要优势。数据库文件存储DBFS是阿里云推出的一款针对数据库场景的文件存储。它在性能、弹性、高可用、成本及数据安全等维度上做了诸多技术创新与优化。适合云上自建数据库使用,提供企业级...
如果您是初次使用 文件存储 HDFS 版 文件系统,可使用该API创建组并关联用户。DeleteUserGroupsMapping:删除用户和组的映射关系。ListUserGroupsMappings:查看用户和组的映射关系。使用限制 用户名和组名命名规则:必须以字母或者下划线...
支持挂载数据库文件存储(DBFS)的ECS实例规格如下:存储增强通用型g7se 存储增强计算型c7se 存储增强内存型r7se
阿里云 文件存储 NAS 和文件存储CPFS提供各种类型的文件系统,您可以根据业务负载选择其中一种或几种文件系统,为业务负载提供必要的可靠性、安全性和持续性。选型概述 在您选择阿里云文件存储时,需要考虑以下关键因素:性能 如果您的业务...
文件存储 HDFS 版 提供两种SDK,分别为管控系统SDK和文件系统SDK。仅管控系统支持Python SDK,文件系统仅支持Java SDK。更多有关管控系统支持的SDK语言,请参见 OpenAPI。
本产品(文件存储(NAS/CPFS)/2017-06-26)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
背景信息 当E-MapReduce已经成功运行在阿里云 文件存储 HDFS 版 上时,ECS挂载的云盘只用来存储运算中的临时Shuffle文件,可以选择卸载原来用于构建E-MapReduce HDFS服务的云盘,降低集群的拥有成本。重要 从数据安全性考虑,数据迁移后...
本文介绍文件存储NAS资源包的抵扣规则和抵扣顺序。生效和抵扣时间 资源包购买后立即生效,将在购买时间段的按量付费账单中体现抵扣效果。假如您在2021年08月12日10:30:30购买了有效期为1个月的1 TiB极速型NAS资源包,则实际抵扣时间需要...
本文集中解答文件存储NAS的NFS ACL权限管理问题,深入解析其核心特性与两种主流实现方式,助您实现文件级精细访问控制,保障数据安全。
使用资源编排服务ROS调用文件存储NAS。本文为您介绍如何编写一个资源编排的模板,自动化创建一个文件存储NAS的文件系统。支持的资源列表 资源编排服务ROS(Resource Orchestration Service)是阿里云提供的一项简化云计算资源管理的服务。...
尊敬的阿里云用户,阿里云将于2023年01月30日起调整数据库文件存储(公测)按量付费价格。调整时间 2023年01月30日00:00:00。调整地域 华东1(杭州)、华东2(上海)、华北2(北京)、华南1(深圳)。调整内容 版本类型 调整前单价(GB/...
您可以按照以下步骤在数据库文件存储控制台查看某一个文件系统所有快照所占的容量。登录 数据库文件存储控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,选择 快照,然后单击 快照链 页签。在 快照链 页面,搜索的下拉列表选择文件...
您可以通过查询CPFS智算版的账单,及时了解其收费明细,更好地从费用分配角度进行业务决策。本文为您介绍查询费用账单和用量明细的操作方法。您可以在费用与成本的 明细账单 ...产品名称 选择为 文件存储 NAS,其他参数根据实际情况选择即可。
本文以发布时间为顺序,介绍了文件存储CPFS文件系统版本的更新动态。2023年 版本号 发布时间 描述 发布地域 2.3.4 2023年05月 开启通用型协议服务最低容量限制更新为3600 GiB,即创建CPFS文件系统就可使用通用型协议服务。创建/扩容文件...
本产品(文件存储(NAS/CPFS)/2017-06-26)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用...
传输加速 创建存储空间 在上传文件(Object)到OSS之前,您需要创建一个用于存储文件的存储空间(Bucket)。存储空间具有各种配置属性,包括地域、访问权限、存储类型等。您可以根据实际需求,创建不同类型的存储空间来存储不同的数据。...