JindoData是阿里云开源大数据团队自研的数据湖存储加速套件，面向大数据和AI生态，为阿里云和业界主要数据湖存储系统提供全方位访问加速解决方案。JindoData套件基于统一架构和内核实现，主要包括JindoFS存储系统（原JindoFS Block模式）、...
使用表格存储时，您需要创建数据表用于数据存储。一般情况下，创建不带二级索引的数据表即可。您也可以根据实际场景创建所需数据表。如果要使用二级索引加快数据查询效率，请创建带二级索引的数据表。更多信息，请参见 创建数据表。二级...
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。云原生大数据计算服务（MaxCompute）是一...
背景信息 阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，可提供99.9999999999%（12个9）的数据持久性，99.995%的数据可用性。多种存储类型供选择，全面优化存储成本。更多信息，请参见 什么...
客户感言 阿里 云原生多模数据库 Lindorm 相比于其他存储引擎和HBase开源版本，提供了更高效的压缩率和同规格下的更大吞吐量，能稳定的支撑高并发、海量数据存储的业务需求。同时提供了成熟的冷热分离方案，大大降低了存储和运维成本，对于...
说明 评估数据存储量资源包时，下表中的数据存储量需要转换为GB单位的相应数值进行近似评估。根据数据透视表中的各数据用量评估所需资源包规格。重要 此处地域以 全国通用（中国内地）为例介绍，实际场景中可以根据实例所属地域结合各地域...
背景信息 Sqoop 是一款开源的工具，主要用于在Hadoop和结构化数据存储（例如关系数据库）之间高效传输批量数据。既可以将一个关系型数据库（MySQL、Oracle、Postgres等）中的数据导入 文件存储 HDFS 版 中，也可以将 文件存储 HDFS 版 的...
删除OSS服务中不需要的存储空间（Bucket）时，如果存储空间不为空，则存储空间无法删除，您必须先删除存储空间中的所有文件、未完成的分片文件、存在的livechannel以及多版本数据后，才能成功删除存储空间。本文是基于OSS的Java SDK来实现...
调用UpdateTimeseriesAnalyticalStore接口更新时序分析存储配置信息，目前仅支持修改数据生命周期TTL。请求消息结构 message UpdateTimeseriesAnalyticalStoreRequest { required string table_name=1;required TimeseriesAnalyticalStore ...
本文介绍环境准备和数据准备工作。环境准备 已创建阿里云E-MapReduce的Hadoop集群。具体操作，请参见 创建集群。已下载E-MapReduce的最新 SDK，SDK包的名称格式为emr-datasources_shaded_*.jar，emr-datasources_shaded_*.jar中包含...
数据存储 功能集 功能 功能描述 参考文档 通用型NAS 容量型 通用型NAS的一个细分存储类型，适用于数据库备份、日志存储、Windows用户目录、Linux home目录等成本敏感型且对时延响应要求不高的文件共享业务。通用型NAS 性能型 通用型NAS的...
MaxCompute数据存储三个副本，但只按一个副本压缩后的大小进行按量计费。存储费用分为存储计费和备份存储计费。存储计费公式与价格说明，请参见 分层存储计费（Beta版本）。备份存储计费公式与价格说明，请参见 备份存储计费。当实例欠费后...
现有解决方案中，通常依赖自建单ElasticSearch检索引擎或OpenTSDB、Prometheus等时序引擎搭建数据存储，而采集数据类型多样化使得单模引擎存储方案技术复杂且运维成本高，市场需要新一代云原生且具备多模检索能力的存储系统。某著名IT咨询...
适用于容器数据持久化、AI训练数据存储、工业仿真、基因计算等时延敏感型且对时延响应要求较高的文件共享业务。2024-02-02 西南1（成都）马来西亚（吉隆坡）通用型NAS 2024年01月 功能名称 功能概述 发布时间 发布地域 相关文档 极速型NAS...
与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以对象（Object）的形式保存在存储空间（Bucket）中。对象（Object）是OSS存储数据的基本单元，也被称为OSS的文件。OSS通过键名（Key）唯一标识存储的Object。...
表格存储对单表数据存储量没有限制，用户可以根据自己的实际需求使用，按量付费。说明 表格存储会异步对各个数据分区过期的数据及超过最大版本号的版本数据进行清理操作，并在清理操作完成后统计该数据分区数据量。清理时长与总数据量相关...
不支持直接修改表名称。您可以通过新建一个表，然后将当前表中的数据迁移到新表中实现。请使用DataX、通道服务等工具进行数据迁移。具体操作，请参见 将表格存储数据表中数据同步到另一个数据表。
若集群中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，如果您有降本需求，可以使用 PolarDB MySQL版 提供的冷数据归档功能，将这部分数据转存至低成本的OSS上存储，以降低数据存储成本。本章节介绍了冷数据归档方法、...
DAS企业版 V3超出最近7天的数据，采用的存储方式是冷数据存储，相较DAS企业版 V1数据的存储方式，数据没有全文索引等信息，并且底层采用snappy对数据进行高效压缩，所以数据量最多可降低为旧版的30%，从而极大降低了存储成本。如何查看企业...
适用于海量账单、IM 消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。更多信息，请参见 什么是表格存储。表格存储通道服务（Tunnel Service）是...
本文介绍如何在 开源大数据平台 EMR（E-MapReduce）集群上，使用Spark3将 表格存储 中一张表的数据复制到另一张表中，全程使用SQL语句实现表的创建以及数据的复制操作。前提条件 已创建 EMR 集群。具体操作，请参见 创建EMR集群。重要 创建...
PolarDB PostgreSQL版（兼容Oracle）采用Shared Everything架构，利用分布式共享存储实现存储和计算的分离。计算节点与存储节点分离的架构设计给 PolarDB PostgreSQL版（兼容Oracle）带来了实时的水平扩展能力。由于单个数据库实例的计算...
使用流程 表格存储 提供了宽表模型、时序模型、消息模型等多种数据模型，表格存储 Node.js SDK只支持使用宽表模型的功能操作。宽表模型的一般使用流程如下：初始化客户端用于配置访问的 表格存储 实例。更多信息，请参见 初始化Client。...
术语 描述 文件系统实例 一个拥有全局命名空间，可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问目标地址。每个挂载点都对应一个域名，您需要修改 ...
AnalyticDB MySQL 的存储节点除了进行数据存储，还提供数据写入、数据查找和数据扫描等能力。如果读写性能出现瓶颈需要到控制台手动扩容弹性IO资源。弹性IO资源（Elastic IO Unit，简称EIU）是弹性模式集群版（新版）衡量实例存储性能的...
所以降低冷数据存储成本，提升热数据读取性能，对于使用时序引擎的企业用户具有现实意义。在Lindorm时序引擎中，随着时间的不断推移，数据呈现出很明显的冷温热分层。其相应的概念如下：热数据 最近写入的时序数据。这些时序数据的时间戳...
分析存储数据生命周期-1（数据永不过期）或者大于等于2592000秒（即30天）的int32正整数，单位为秒（s）。度量名称（measurement name）度量名称为UTF-8字符串，不能出现不可见字符（包括空格）和#，长度为1~128个字节。数据源（data ...
本文介绍Lindorm时序引擎数据建模的过程。创建时序数据库 Lindorm实例创建成功后，系统会默认创建default数据库，将数据默认...时序引擎底层数据存储实现了对多值模型数据的存储优化，建议您将单值模型更改为多值模型，让数据读取更加高效。
当通过 表格存储 的API对数据表进行读写操作时，会消耗对应的写服务能力单元和读服务能力单元。CU计算规则 1单位读服务能力单元表示从数据表中读一条4 KB数据。1单位写服务能力单元表示向数据表写一条4 KB数据。操作数据大小不足4 KB的部分...
多元索引会自动清理超过保存时间的数据，减少用户的数据存储空间，降低存储成本。2021-12-07 华东1（杭州）、华东1 金融云、华东2（上海）、华北2（北京）、华北3（张家口）、华南1（深圳）、中国（香港）、新加坡、澳大利亚（悉尼）、...
元数据 元数据存储管理 下表详细列举了ossfs与云存储网关软件版元数据相关的原理对比：对比项 云存储网关软件版 ossfs 元数据缓存 云存储网关软件版采用KV数据库存储数据，它会将元数据全量缓存到缓存盘里，能够处理大规模的文件数目。...
索引表数据存储量与数据表无区别，数据存储类型与实例规格绑定。更多信息，请参见 数据存储量。说明 关于实例规格和CU的更多信息，请分别参见 实例 和 读写吞吐量。相关文档 如果需要更灵活丰富的数据加速查询方式，例如多条件组合查询、...
非阿里云服务存储数据迁移至云上NAS 如果您想将线下数据、IDC数据、本地数据等非阿里云服务存储数据迁移至阿里云文件存储NAS，可参照以下方式进行迁移：配置数据传输中转节点 迁移数据至阿里云NAS OSS和NAS之间的数据迁移 对于NAS与OSS之间...
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
请先执行 flush 操作将数据刷写至磁盘上，再执行 compaction 操作，即可将数据存储至冷存储中。compaction 操作说明如下：HBase Shell使用方式，请执行 major_compact 命令。Lindorm-cli连接使用方式，使用语法请参见 ALTER TABLE。Q：为...
因此Ganos扩展了一种简单的存储策略，即Simple存储策略，它允许用户将数据采用自定义的压缩算法压缩后存储，并尽可能将压缩后的数据存储在基础表内，从而达到节约存储成本的同时又尽可能减小对查询性能的影响。使用方法 设置GUC参数，该...
因此Ganos扩展了一种简单的存储策略，即Simple存储策略，它允许用户将数据采用自定义的压缩算法压缩后存储，并尽可能将压缩后的数据存储在基础表内，从而达到节约存储成本的同时又尽可能减小对查询性能的影响。使用方法 设置GUC参数，该...
计费公式：存储空间费用=热数据存储费用+冷数据存储费用 热数据存储空间费用=热数据存储空间单价×热数据存储量×时长 冷数据存储空间费用=冷数据存储空间单价×冷数据存储量×时长 查询用量：您可以在 云原生数据仓库AnalyticDB MySQL控制...
大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三方工具对文件进行格式转换，然后将转换后的数据上传至OSS，整个过程比较繁琐。为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
大数据场景：海量数据存储与分析 Lindorm支持海量数据的低成本存储、快速批量导入和实时访问，具备高效的增量及全量数据通道，可轻松与Spark、MaxCompute等大数据平台集成，完成数据的大规模离线分析。优势 低成本：高压缩比，数据冷热分离...