云数据库SelectDB 集群（SelectDB Cluster）云数据库SelectDB版 集群支持存算分离架构，多计算集群共享存储数据。云数据库SelectDB版 集群包括计算资源（vCPU、内存）和缓存资源（Cache），以集群粒度进行算力隔离，满足各个业务的不同性能...
Format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。EventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
查询分析存储描述信息 当需要查询分析存储的数据生命周期、分析存储同步阶段、分析存储数据量大小等详细信息时，您可以查询分析存储描述信息。以下示例用于查询test_timeseries_table时序表下的test_analytical_store分析存储的描述信息。...
format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。eventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
宽表模型通过数据表存储数据，单表支持PB级数据存储和千万QPS。数据表具有Schema-Free、宽行、多版本数据以及生命周期管理特点，支持主键列自增、局部事务、原子计数器、过滤器、条件更新等功能。模型介绍 表格存储 宽表模型是类Bigtable/...
时序模型提供了数据生命周期、时间线索引、冷热存储、数据压缩等功能以满足时序数据的低成本存储以及高性能查询分析的需求。时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询和分析。说明 关于时序模型的更多信息，请参见 时序模型...
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将指定表的数据归档至其他数据库或存储服务中。同时，该功能...
系统自动执行此任务，您需要等待任务状态从 正在执行 变为 执行成功，此执行过程耗时长短与您归档数据的存储量有关。说明 文件合并任务执行完成后，系统会自动将数据源替换为合并后的文件。查询文件合并后的数据。具体操作，请参见 查询...
编码 存储数据的编码类型，当前仅⽀持⽬标存储数据编码为UTF8。参数配置完成后，单击 创建。湖仓创建成功后，湖仓列表 页签中将展示创建成功的湖仓任务。创建入湖负载。在 Lakehouse湖仓一体化 页面的 湖仓列表 中，单击 操作 列的 创建入...
具体如下：如果 写入模式 为 put，选择任意一种删除模式，当Value中存在空值时，数据均覆盖写入 表格存储 数据表。如果 写入模式 为 update，选择 none 或 row 删除模式，当Value所有字段值均为空值时，数据作为脏数据处理。当Value部分...
元数据管理是构建数据湖重要一环，通过有效集中式的元数据管理，可以提升数据资产价值。您可以使用该功能管理元数据库和元数据表。创建元数据库 登录 数据湖管理控制台，选择 元数据 目录下的 元数据管理。单击 新建数据库。配置元数据库...
数据管理 数据库管理 时序数据的存储以Database为粒度进行隔离。支持通过SQL对Database的时间分区间隔、冷热分界线、数据过期时间等属性进行设置。具体操作，请参见 数据库管理。用户和权限管理 支持对时序数据的访问进行用户认证以及存储...
Lindorm宽表引擎的冷热分离功能可以将冷热数据分别存储在不同的介质上，有效降低了数据的存储成本。同时，通过定期将数据迁移至冷存储介质，降低了查询基数，提升了热数据查询效率。本文介绍冷热分离功能的原理及相关注意事项。背景信息 在...
通过持久化存储和分析车辆元数据信息，用户可以实现复杂的业务需求，例如统计某一个区域内的车辆数量用于判断道路拥挤程度，通过监测车速、发动机转速等最新数据的实时变化用于判断车辆行为或者状态是否出现了异常等。因此车联网场景下车辆...
数据湖存储位置：数据存储的OSS路径，入湖任务会自动创建此处填写的空文件夹来存储数据。分区信息：添加需要写入的分区信息。分区表达式：填写描述分区值的获取方式，比如 MySQL 中from_unixtime(gmt_create)。分区字段：填写分区字段名称...
具体操作，请分别参见 将表格存储数据表中数据同步到另一个数据表 和 将表格存储时序表中数据同步到另一个时序表。不论当前实例规格，使用多元索引时均会产生高性能存储量、预留读吞吐量与按量读吞吐等。更多信息，请参见 多元索引计量计费...
API缓存数据存储位置 在 API缓存数据存储位置 区域，单击 修改 按钮，支持指定API缓存数据的存储位置。Dataphin系统的redis：将缓存数据存储到系统公共的Redis中，将与其他模块共享存储空间，适用于缓存数据量较小的场景。应用内存：缓存...
当使用表格存储时序模型时，您需要使用CreateTimeseriesTable接口创建时序表用于存储时序数据。创建时序表时支持配置数据生命周期、时序时间线表的配置信息 和创建分析存储。分析存储可用于快速分析时序数据。前提条件 已通过控制台创建...
简单上传 修改Object存储类型 数据无法访问、计费规则变化 对开通了OSS-HDFS服务的Bucket，建议不要修改OSS-HDFS的数据存储目录.dlsdata/下任意Object的存储类型。如果您将.dlsdata/下任意Object的存储类型修改为低频类型时，通过OSS-HDFS...
需求：存储成本可控，历史数据的存储成本是在线数据的10分之一。能够弹性的伸缩，计算和存储能力自动水平扩展，不再依赖分库分表解决运维难的痛点。修改schema成本低，支持快速修改schema或者动态schema，解决历史库schema变更时间长的问题...
需求：存储成本可控，历史数据的存储成本是在线数据的10分之一。能够弹性的伸缩，计算和存储能力自动水平扩展，不再依赖分库分表解决运维难的痛点。修改schema成本低，支持快速修改schema或者动态schema，解决历史库schema变更时间长的问题...
需求 存储成本可控，历史数据的存储成本是在线数据的十分之一。能够弹性的伸缩，计算和存储能力自动水平扩展，不再依赖分库分表解决运维难的痛点。修改schema成本低，支持快速修改schema或者动态schema，解决历史库schema变更时间长的问题...
如果加载数据之后 hot_total_size 和 cold_total_size 都为0，则表示数据还在实时中，rt_total_size 为实时数据的存储，可以通过执行build语句，将实时数据转换为分区数据，待build完成后可以查到 hot_total_size 和 cold_total_size。...
数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB，Value 最大不超过 1 MB，过大的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景 当...
DBS内置存储池无需购买，其容量会随着数据增长而在线自动扩容，存储费用按实际存储数据量大小和时长计算。费用详情如下：计算方式：每天存储费用=存储量（GB）×每天单价 说明 每天0点生成前一日的账单并扣除费用，即按天出账。存储地域 ...
大存储：以字母S开头的ECU为大存储实例，采用SSD/HDD分层存储架构，热点数据存储在SSD磁盘中，冷数据存储在HDD磁盘中。适用于并发稍低、性能要求不高（可接受数据查询响应时间受超过10秒以上）的业务场景。ECU规格 系列 型号 内存 磁盘类型...
对象 对象是OSS存储数据的基本单元，也被称为OSS的文件。和传统的文件系统不同，对象没有文件目录层级结构的关系。对象由元信息（Object Meta）、用户数据（Data）和文件名（Key）组成，并且由存储空间内部唯一的Key来标识。对象元信息是一...
充分利用本地内存+本地SSD+远程全局分布式缓存，提供湖仓数据的加速能力，同时满足从百毫秒级高性能在线分析场景到百TB级的高吞吐ETL场景。弹性能力 提供分钟级别的弹性扩缩容。全量数据在扩缩容时无需搬迁，通过元数据（Metadata）的操作...
重要特性 生命周期管理 生命周期管理是针对用户存储数据的成本优化。当文件系统中包含每月访问频率低于2次的文件时，可以开启通用型NAS生命周期管理功能，符合生命周期管理策略的文件将自动转储至低频存储或归档存储，采用低频存储或归档...
存储策略 维度表基于什么策略（即存储数据的时间周期及数据量范围）存储数据。维度 维度表关联的维度，用于配置维度表分析数据的视角。说明 创建维度，详情请参见 创建概念模型：维度。表名规则 通过已配置的检查器规范维度表的命名规则。...
编码 存储数据的编码类型，当前仅⽀持⽬标存储数据编码为UTF8。参数配置完成后，单击 创建。湖仓创建成功后，湖仓列表 页签中将展示创建成功的湖仓任务。创建入湖负载。在 Lakehouse湖仓一体化 页面的 湖仓列表 中，单击 操作 列的 创建入...
依次双击 RDS 数据存储>数据库名称（datav_test）>表名（target_table），选择右侧的 作为结果表引用，在开发作业中引用目标表。通过 INSERT INTO 语句，将实时计算后的源表数据插入目标表中。说明 如果数据格式不匹配，需要进行相应的 ...
有关示例和更多详细信息，请参见 Databricks Runtime 7.x：CACHE（Databricks上的Delta Lake）Databricks运行时5.5 LTS和6.x：CACHE（Databricks上的Delta Lake）监控Delta缓存 您可以在Spark UI的“存储”选项卡中的每个执行器上检查Delta...
本章介绍文件引擎...目录 说明/${实例ID}-global/${实例ID}_xxx 宽表引擎数据存储目录/solr 搜索引擎数据存储目录/tsdb 时序引擎数据存储目录 说明${实例ID}：lindorm实例ID。xxx：实例所在的区域，如cn-shanghai则表示为上海的实例。
满足GDPR要求 满足GDPR关于在海量数据中找到和保护敏感数据的要求，可对敏感数据的使用进行审计。数据安全合规检查 应相关监督部门的数据安全合规检查要求，可通过 DSC 提供的数据安全的分类分级、泄漏检测、数据脱敏等功能对数据进行相关...
本文介绍Lindorm时序引擎数据建模的过程。创建时序数据库 Lindorm实例创建成功后，系统会默认创建default数据库，将数据默认...时序引擎底层数据存储实现了对多值模型数据的存储优化，建议您将单值模型更改为多值模型，让数据读取更加高效。
AnalyticDB PostgreSQL版 数据库使用PostgreSQL多版本并发控制（MVCC）来管理并发事务，底层表的储存数据被划分成固定大小的Page，默认Page大小为32 KB。每个Page包含Header（数据头）、Item pointer array（指向内部数据的指针数组）、...
删除存储数据后，为什么存储容量不变，账单没有减少？账单为上一小时的账单，NAS控制台上显示的文件系统使用量是上一小时存储空间的最大值，控制台显示和实际存在延迟，请您耐心等待更新。使用文件系统上传下载数据时，是否计费？本地到线...
备份目标信息 备份目标存储类型 存放备份数据的存储类型，支持的选项：DBS内置存储（推荐）：无需创建存储空间，数据将自动存入DBS内置存储中，会根据存入DBS的数据量产生费用，计费方式请参见 存储费用。用户OSS：您需要提前在OSS中创建...
前提条件 已创建云计算资源作为存储数据源，具体操作，请参见 新建计算资源。已准备好待上传的数据表。说明 待上传数据表要求：支持上传.xls和.xlsx格式的文件，且文件大小不超过35 MB。准备数据表时，数据表填写须知：请在第一行中填写...