支持的文件格式 OSS FDW目前仅支持导出如下格式的数据文件：支持导出CSV、TEXT格式的非压缩文本文件。支持导出CSV、TEXT格式的GZIP压缩文件。支持导出ORC格式的二进制文件。关于ORC与 AnalyticDB PostgreSQL版 的数据类型的区别，请参见 ...
概述 File Cache通过缓存最近访问的远端存储系统（HDFS或对象存储）的数据文件，可加速后续访问相同数据的查询。在频繁访问相同数据的查询场景中，File Cache可以避免重复访问远端数据的开销，提升热点数据的查询分析性能和稳定性。原理 ...
总体流程如下：按照主键索引遍历并将读取到的完整数据保存至数据文件，然后将排序列添加到排序缓存区，其中每个线程使用不同的数据文件，累积达到一定数据后再写入；不断遍历并插入到排序缓存区，当排序缓存区满时，在内存中根据排序键组合...
OSS FDW支持多种格式的数据文件，适用不同的业务场景，具体文件格式如下：支持访问CSV、TEXT、JSON、JSONLINE格式的非压缩文本文件。支持访问CSV、TEXT格式的GZIP压缩、标准SNAPPY压缩文本文件。支持访问JSON、JSONLINE格式的GZIP压缩文本...
当实例系统文件（主要...MySQL数据文件导致实例空间满的解决办法 MySQL Binlog文件导致实例空间满的解决办法 MySQL临时文件导致实例空间满的解决办法 开启自治功能，避免undo文件增长过快导致实例锁定。自动SQL优化 自动SQL限流 自动空间扩展
数据文件的读请求操作主要包括查询请求产生的数据页读取和数据库备份产生的数据页读取，事务日志文件在做备份时会有较多的读I/O负载，其他情况主要是写I/O负载。当发现实例的I/O吞吐较高时，您可以在 自定义指标 中增加以下性能指标，然后...
当实例系统文件（主要...MySQL数据文件导致实例空间满的解决办法 MySQL Binlog文件导致实例空间满的解决办法 MySQL临时文件导致实例空间满的解决办法 开启自治功能，避免undo文件增长过快导致实例锁定。自动SQL优化 自动SQL限流 自动空间扩展
更多OSS存储空间、OSS目录、上传数据文件操作信息，请参见 创建存储空间、创建目录 和 上传文件。示例：通过内置文本数据解析器将数据写入OSS-非分区路径 读取 示例：通过内置文本数据解析器创建OSS外部表-非分区表 中创建的OSS外部表mc_...
启用TDE功能后，Lindorm通过密钥层级结构对数据文件进行加密，所有存储在文件系统中的数据都以密文形式存在。详细介绍及使用说明，请参见 开启透明数据加密（内测中）。数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复...
使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备好待添加的对象存储OSS数据源。添加对象存储OSS数据源操作步骤 登录 DataV控制...
在体验空间模块，单击右上角的 上传数据，打开上传数据文件窗口。在 选择文件 页签，将文件拖拽至添加处或单击 浏览 从本地文件选择需要上传的文件。说明 支持Shapefiles文件和GeoJSON文件。Shapefiles格式文件需要将.shp、.dbf、.prj、....
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
使用阿里云对象存储服务（Object Storage Service，简称OSS），您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备好待添加的对象存储OSS数据源。添加对象存储OSS数据源操作步骤 登录 DataV控制...
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
按量付费 包年包月 总计算节点价格=目录单价*节点个数/3*时长【存储】数据盘 即：购买页的“存储大小”数据盘是指数据文件、索引文件和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与集群所在的地域、部署方案、预购...
具体操作，请参见：数据文件导致实例空间满的解决办法 日志文件导致实例空间满的解决办法 临时文件导致实例空间满的解决办法 系统文件导致实例空间满的解决办法 为什么新建的数据库没有任何数据，就已经产生了磁盘使用量？数据库初始化时，...
生命周期策略仅对文件大小在64 KiB~4.88 TiB范围内的冷数据文件进行转储，超出此范围的数据将不会转储至低频存储或归档存储。单击 确定。查看生命周期策略 登录 NAS控制台。在左侧导航栏，选择 生命周期管理>生命周期策略列表。在顶部菜单...
参数 描述 上传文件 单击 选择文件，上传需导入的数据文件。仅支持.txt、.csv类型的文件，文件不超过10MB。分隔符 数据的分隔符，支持逗号（，）、水平制表符（\t）、竖划线（｜）、斜线（/）。也可以输入指定其他分隔符。字符集编码 选择...
查询Schema详情 元信息发现 元数据爬取功能可以自动为OSS上面的数据文件创建及更新数据湖元数据，方便分析和计算。具有自动探索文件数据字段及类型、自动映射目录和分区、自动感知新增列及分区、自动对文件进行分组建表的能力。OSS数据源 ...
企业的业务服务所产生的一些标准化表单、日志等数据文件，会被周期性的直接上传到OSS。但是这些存储在OSS的文件缺少元数据管理，导致难以分析和计算。元数据发现任务可以在单次运行中自动为OSS上面的数据文件创建和更新数据湖元数据（一张...
Primary即为拥有读写权限的读写库，Replica即为只读实例，仅仅拥有读取数据的权限（后台线程也不能修改数据），Primary和Replica采用Shared Everything架构，即底层共享同一份数据文件和日志文件。StandBy节点拥有一份独立的数据和日志文件...
本文介绍如何在DLA中为不同编码格式的CSV类型的数据文件创建表，以及如何通过OpenCSVSerDe处理CSV文件中特殊格式的数据。创建数据文件表之前，您需要先创建OSS Schema，本文示例中所有数据文件表均使用以下OSS Schema。CREATE SCHEMA dla_...
前提条件 已在云存储上存储了数据文件。背景信息 空间数据支持添加的 数据类型与格式有：数据类型 数据格式 矢量 Shapefile GeoJSON CSV GDB PostGIS 栅格 GeoTIFF Images NetCDF 倾斜摄影 OSGB S3M 3DTiles BIM RVT DGN IFC 点云 LAS PCD ...
数据库的计算节点（Database Engine Server）仅存储元数据，而将数据文件、Redo Log等存储于远端的存储节点（Database Storage Server）。各计算节点之间仅需同步Redo Log相关的元数据信息，极大降低了主节点和只读节点间的复制延迟，而且...
第一种方式：从OSS数据文件中获取列类型（推荐），如下所示：CREATE FOREIGN TABLE `test` FROM CONNECTION='OSS:/${oss_key}:${oss_key_secret}@${endpoint}/${bucket}/test.orc' COMMENT='columnar=1';您可以使用 SHOW create table ...
文件合并功能可实现对单次执行归档的数据文件进行重组排列（例如将两个文件合并为一个文件），合并后可以提升本次归档数据的查询性能。费用说明 该功能免费使用。注意事项 已归档数据文件合并后，会额外增加存储量（已归档数据量的0.5~1倍...
在 数据导入 页签上传并预览数据文件。您可选择仅预览DataWorks中已存在的同名字段，根据需要进行同名字段的删除、修改等处理。说明 导入模式：当DataWorks中已存在导入文件的同名对象，则导入时可选择跳过该对象，或使用此次导入的文件...
单表导入时支持导入 CSV 文件，CSV 文件是.csv 或.txt 结尾的支持自定义分割符的数据文件。注意事项 Web 版 ODC 对导入上传的文件大小有限制，最大支持导入 2GB（压缩后）的文件，超出部分无法上传。如需导入大量数据，请使用导数工具 ...
在 数据导入 页签上传并预览数据文件。您可选择仅预览DataWorks中已存在的同名字段，根据需要进行同名字段的删除、修改等处理。说明 导入模式 及 导入状态 根据所选导入类型确定。导入模式：当DataWorks中已存在导入文件的同名对象，则导入...
blk_read_time double precision 在数据库中后端花费在读取数据文件块的时间。单位：毫秒。blk_write_time double precision 在数据库中后端花费在写数据文件块的时间。单位：毫秒。stats_reset timestamp with time zone 统计信息最近一次...
blk_read_time double precision 在数据库中后端花费在读取数据文件块的时间。单位：毫秒。blk_write_time double precision 在数据库中后端花费在写数据文件块的时间。单位：毫秒。stats_reset timestamp with time zone 统计信息最近一次...
受NFS协议本身性能影响，数据和元数据的IOPS性能低于POSIX客户端，推荐访问100 KiB及以上数据文件使用。更多信息，请参见 产品规格。访问控制 NFS v4 ACL。NFS v4 ACL基于IP和IP段的只读和读写控制。推荐场景 ECS。容器（K8s/ACK/ECI）、...
数据文件以不同的格式存储在分布式文件系统或对象存储系统中。当FE将生成的查询计划分发给各个BE后，各个BE会并行扫描Hive存储系统中的目标数据，并执行计算返回查询结果。查询数据 查询内部数据 如果需要查询存储在StarRocks中的数据，请...
在安全合规或静态数据加密等场景下，推荐使用透明数据加密TDE（Transparent Data Encryption）功能，对数据文件执行实时I/O加密和解密，通过在数据库层执行静态数据加密，阻止可能的攻击者绕过数据库直接从存储中读取敏感信息，有效提高...
Delta log过期被定义为：该log文件对应的数据文件已经做过了compaction。该log文件超过了上述文件过期时间。每当Delta log进行checkpoint动作时，会检查是否有需要删除的过期文件，如果有，则删除这些过期文件以防Delta log文件无限增长。...
运行时信息 属性名称 说明 TotalDataSizeInMB 当前数据库的数据文件占用的总空间（MB）。DataUsedSizeInMB 当前数据库的数据文件已使用的空间（MB）。TotalLogSizeInMB 当前数据库的日志文件占用的总空间（MB）。LogUsedSizeInMB 当前数据...
将自定义绘制的边界数据制作成层级下钻结构数据后，您也可以将其导出成DataV专有格式，并将该导出的层级结构数据文件，应用到 基础平面地图 3.0 组件的 自定义区域下钻层 子组件中，具体生成层级结构数据及应用到DataV组件的操作方法，请...
如：AI计算、基因计算、药物计算、容器共享PV、日志数据持久化、CI/CD平台、云桌面数据文件共享等 主要应用于基于对象API开发的互联网应用程序的数据存储。如：互联网业务的音视频存储、数据湖、云相册、个人/企业网盘类应用 适用于OLTP...