通过Spark实现实时数据和离线数据处理并将聚合结果保存到表格存储的数据表中。实时流计算通过Spark Structured Streaming实时统计一个窗口周期内订单数量和订单金额的聚合结果。离线批计算通过Spark SQL离线聚合原始订单数据的总金额和用户...
场景四：低成本分析和永久存储事件 使用操作审计创建跟踪时，如果选择了 创建新的日志项目，则默认创建以 actiontrail_开头的Logstore，永久保存事件。为了节省成本，推荐您手动修改SLS事件存储时长（例如：180天），再定时将SLS中的数据...
访问对象存储OSS的过程中会产生大量的访问日志，您可以通过日志转存功能将这些日志按照固定命名规则，以小时为单位生成日志文件写入您指定的Bucket。您可以通过 logging 命令开启、查询、关闭Bucket的日志转存配置。注意事项 要开启日志...
删除策略之前，如果数据已经转储到低频存储或归档存储，数据仍会继续保存在低频存储或归档存储中，并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间，请参见 创建数据...
日志服务提供分层存储功能，您可以按需将数据进行热存储、低频存储和归档存储...按写入数据量计费 30天热存储免费权益 生命周期管理 日志服务支持自定义存储生命周期，但需基于存储保存时间迁移策略，具体信息，请参见 数据存储生命周期管理。
重要 如遇各类问题，请联系 NAS技术支持 进行咨询。产品简介FAQ 什么是文件存储NAS？...文件存储在低频介质中可以正常读写吗？创建经典网络挂载点时为什么需要RAM授权？文件存储NAS是否支持inotify？更多高级管理常见问题
存储容量单位包SCU（Storage Capacity Unit）是一种预付费存储售卖形态，可同时用来抵扣多款云存储产品的按量付费账单。相比于单一产品的存储包，存储容量单位包可以与多种云产品搭配使用，兼具性价比与资源使用的灵活性。适用场景 SCU能...
为了满足同步库和存储库对存储的不同要求，也提供了一些灵活的自定义配置，主要包括：配置 说明 Time to live（数据生命周期）可自定义数据生命周期，例如永久保存，或者保存N天。Storage type（存储类型）自定义存储类型，对存储库来说，...
您可以通过基于最后一次访问时间（Last Access Time）策略的生命周期规则来自动监测数据的访问模式并识别冷数据，然后将识别出来的冷数据进行存储类型的转换，从而达到数据的冷热分层存储，最终降低存储成本。使用场景 多媒体场景 某网站的...
表格存储 有互联网应用架构（包括数据库分层架构和分布式结构化数据存储架构）、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...
数据存储：长期保存车辆轨迹信息以及车辆状态信息，需要单表规模极大以及高性价比存储。实时地理围栏：实时数据的地理围栏报警，需要支持对接实时计算进行实时数据统计分析。海量车辆管理：海量车辆的诸多状态信息的数据管理与查询分析，...
监控与日志可有效保障您表格存储资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力，持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务，例如云监控、操作审计等，帮助您实时监控云资源的使用情况和业务运行状况，...
通过云缓存模式，客户的数据全集保存在云端，本地存储空间作为热数据的缓存，提供数据的本地高效访问，保证对上层应用的快速响应。自动云数据分层模式，把客户的数据按照访问频度自动分类，经常访问的热数据保存在本地的SSD或者SAS盘上，...
并不是所有上传至OSS的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍需要继续以冷存储类型进行保存。或者基于业务使用场景，希望批量删除Bucket内不再需要保存的数据。您可以配置基于最后一次修改时间（Last Modified ...
并不是所有上传至OSS的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍需要继续以冷存储类型进行保存。或者基于业务使用场景，希望批量删除Bucket内不再需要保存的数据。您可以配置基于最后一次修改时间（Last Modified ...
并不是所有上传至OSS的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍需要继续以冷存储类型进行保存。或者基于业务使用场景，希望批量删除Bucket内不再需要保存的数据，您可以通过ossutil lifecycle命令配置基于最后一次...
并不是所有上传至OSS的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍需要继续以冷存储类型进行保存。或者基于业务使用场景，希望批量删除Bucket内不再需要保存的数据。您可以配置基于最后一次修改时间（Last Modified ...
数据存储介质 可用性说明 对象存储 OSS 数据备份和容灾 文件存储 NAS 备份和恢复文件 云原生大数据计算服务 MaxCompute 备份与恢复 同时PAI EasyCkpt是PAI为PyTorch大模型训练场景而开发的高性能Checkpoint框架，通过实现接近零开销的模型...
本文介绍如何使用阿里云NAS动态存储卷，以及如何验证NAS存储卷的持久化存储与共享存储特性。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群。ACK集群中CSI组件已升级至最新版本。更多信息，请参见 管理CSI组件。使用...
CPFS并行文件存储 提供高性能计算文件存储，支持标准的POSIX和MPI-IO协议，自带的高性能计算程序无需任何接口适配和性能优化即可高效执行，满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...
本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版，实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作，请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。说明 各存储类型的定价，请参见 OSS产品定价。各存储类型的计费方式，请参见 存储费用。标准存储（Standard）提供高可靠、高...
您可以将原始视频上传保存到阿里云对象存储OSS上，通过OSS的RESTful数据处理接口 x-oss-async-process，在任何时间、任何地点、任何互联网设备上对视频进行视频转码等处理。另外您也可以通过OSS的 x-oss-process 来对源视频上传后立即播放...
本章节主要为您介绍表格存储表设计的最佳实践。说明 关于表格存储索引选择的最佳实践，参见 存储和索引的引擎详解。主键设计——数据散列 为什么需要数据散列 数据散列是分布式数据系统中的通常要考虑的问题，散列的目的是让数据分布更均匀...
本文介绍如何使用阿里云NAS静态存储卷，及如何实现持久化存储与共享存储。前提条件 已创建Kubernetes集群。具体操作，请参见 创建Kubernetes托管版集群。已创建NAS文件系统。具体操作，请参见 创建文件系统。若需要加密NAS存储卷中的数据，...
OSS加速器 通过将数据存储在更高性能的介质上，提供高性能、高吞吐量的数据访问服务。低时延数据共享 大数据分析 模拟训练 多级加速 有效降低数据访问延迟 数据与OSS保持强一致性，无需关心缓存淘汰问题 对数据写入没有加速效果，写入量过...
重要 存储保存时间配置存在相应限制，具体信息，请参见 数据存储生命周期管理。开启智能存储分层 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，单击目标Logstore对应的 图标，然后单击 修改。在 ...
NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。本文介绍如何使用阿里云NAS静态存储卷，以及如何实现持久化存储与共享存储。前提条件 已创建 ACK Serverless集群。具体操作，请参见 创建ACK Serverless集群。已...
RecycleSecondaryAlignedSize 低频介质回收站数据量 字节 该文件系统在周期内存储于回收站的低频介质数据量。RecycleAlignedSize 通用型NAS回收站数据量（不含低频介质）字节 该文件系统在周期内存于回收站的数据量，不包含低频介质数据量...
低频介质存储容量：通用型NAS低频介质存储容量按量付费。低频存储读流量：低频介质读流量按量付费。低频存储写流量：低频介质写流量按量付费。配置容量：极速型NAS配置容量。数据流动带宽：CPFS数据流动带宽按量付费。存储容量：CPFS按量...
通用性能型 使用SSD作为存储介质，为应用工作负载提供高吞吐量与IOPS、低时延的存储性能。适用于高并发高吞吐，业务弹性扩展、对读时延有较高要求的文件共享存储服务。对于读写频繁、系统响应要求高的业务，有性能优势。通用容量型 使用...
费用说明 低频存储类型费用说明 低频存储容量费用：根据您转储至低频存储中的文件大小、时长收取一定的低频介质存储容量费用。低频存储读/写流量费用：根据您每小时访问低频存储内数据的读写流量累积值计费（不区分内网和公网）。归档存储...
当您为examplebucket配置定时备份后，HBR将按照指定的起始时间备份examplebucket内的所有Object，并按照设置的保留时间策略将备份版本永久保存在目标备份库中。有关创建定时备份的具体步骤，请参见 设置定时备份。版本控制：版本控制是针对...
同时，通过定期将数据迁移至冷存储介质，降低了查询基数，提升了热数据查询效率。本文介绍冷热分离功能的原理及相关注意事项。背景信息 在海量大数据场景下，一张表中往往存储着大量的历史数据，如订单数据或者监控数据。随着时间的推移，...
但是在实际部署场景中，服务端节点的物理存储空间有限，消息无法做到永久存储。因此，在实际使用中需要考虑以下问题，消息在服务端中的存储以什么维度为判定条件？消息存储以什么粒度进行管理？消息存储超过限制后如何处理？这些问题都是由...
本文介绍对象存储OSS的主要应用场景。图片和音视频等应用的海量存储 OSS可用于图片、音视频、日志等海量文件的存储。各种终端设备、Web网站程序、移动应用可以直接向OSS写入或读取数据。OSS支持流式写入和文件写入两种方式。网页或者移动...
消息同步库：写扩散形式同步消息，每个用户的收件箱对应一个Timeline，同步库内消息不需要永久保存，通常对消息设定一个生命周期。新消息会由端发出，通常消息体中会携带消息ID（用于去重）、逻辑时间戳（用于排序）、消息类型（控制消息、...
存储空间（Bucket）是用于存储对象（Object）的容器。在上传任意类型的Object前，您需要先创建Bucket。本文介绍如何通过 mb 命令创建Bucket。注意事项 要创建Bucket，您必须具有oss:PutBucket权限。具体操作，请参见 为RAM用户授权自定义的...
OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据，这些数据均存储于Bucket中的.dlsdata/路径下，并产生相应的OSS存储容量的计量和计费。OSS-HDFS文件数据块block OSS-HDFS文件的所有数据块block均占用OSS Bucket的存储空间。OSS-HDFS...
操作 说明 更新分析存储的生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以更新分析存储的生命周期。在 实例管理 页面的 实例详情 页签，单击 时序表列表 页签。在 时序表列表 页签，单击时序表名。在 基本详情...