是 无 table 读取数据表的表名称（大小写不敏感）。是 无 partition 读取的数据所在的分区信息。ODPS的分区配置支持linux Shell通配符，*表示0个或多个字符，?表示任意一个字符。默认情况下，读取的分区必须存在，如果分区不存在则运行的...
Inventory：获取 CPFS 上数据流动管理的文件清单，可提供文件在数据流动中的缓存状态。Import DataType string 数据流动任务操作的数据类型。包括：Metadata：文件的元数据，包括文件的 timestamp,ownership,permission 等属性信息。选择 ...
redis-cli是原生Redis的命令行工具，您可以使用redis-cli将自建Redis中已保存至AOF文件的数据迁移到 云数据库 Redis 版。本方案具有灵活、高效与自动化等特点，可保障数据的一致性与完整性，但本方案不支持实时同步，仅支持迁移离线数据。...
本文介绍如何通过Mongorestore将云数据库MongoDB实例的逻辑备份文件恢复至自建MongoDB数据库中。前提条件 实例存储类型为 SSD本地盘。为保障兼容性，自建MongoDB数据库和云数据库MongoDB实例的数据库版本相同。背景信息 MongoDB提供了一组...
本文介绍如何通过Mongorestore将云数据库MongoDB实例的逻辑备份文件恢复至自建MongoDB数据库中。前提条件 实例存储类型为 SSD本地盘。为保障兼容性，自建MongoDB数据库和云数据库MongoDB实例的数据库版本相同。背景信息 MongoDB提供了一组...
归档文件的读取 如果待导入的文件是归档类型，则需要解冻后才能被读取。一般情况下，解冻一个文件大约需要1分钟。文件大小 相同数据总量的情况下，平均文件大小越大，读取吞吐越高。反之，小文件越多，读取吞吐越低。网络 如果OSS Bucket和...
由于tempdb库总是使用简单恢复模式，因此tempdb库的日志文件通常很小，但是数据文件容易增长地很快，例如创建大量临时表、连接大表或排序等都可能导致tempdb库数据文件空间增加。解决方案 尽量从数据库应用层面规避，例如减少不必要的临时...
ListAutoSnapshotPolicyAppliedDbfs 列出该自动快照策略已设置的文件系统 查询所有已设置该自动快照策略的数据库文件系统列表。标签 API 标题 API概述 DeleteTagsBatch 批量删除标签 调用DeleteTagsBatch批量删除多个数据库文件系统实例的...
DataWorks的数据上传功能支持将本地文件、数据分析的电子表格、OSS文件等数据上传至MaxCompute、EMR Hive、Hologres等引擎进行分析及管理，为您提供便捷的数据传输服务，助力您快速实现数据驱动业务。本文为您介绍如何使用数据上传功能上传...
云原生多模数据库 Lindorm依赖于LindormDFS云原生存储系统，实现了数据存储与计算分离。存储容量独立计费，支持不停机在线扩容。Lindorm实例的存储容量在同实例内的多个引擎之间共享。存储类型说明 云原生多模数据库Lindorm支持的存储类型...
您可以基于已有的快照克隆...克隆的数据库文件系统收费与直接创建的文件系统一样，详见 产品计费。注：克隆的数据库文件系统容量不能小于快照的容量。在左侧导航栏点击 数据库文件系统列表 进入 文件系统列表 页面，可以看到克隆的文件系统。
primary key：在读取数据的时候因为有内存中的索引和delete vector，不需要做merge操作，所以count操作比uniq key和agg模型会快些。如果有更新操作，建议使用该模型。如何减少/mnt/disk1/starrocks/storage/trash/目录磁盘占用？mnt/disk1/...
系统默认的最大Stream Load导入数据量为10 GB，所以导入超过10 GB的文件需要修改BE的配置项 streaming_load_max_mb。例如，待导入文件大小为15 GB，则可以修改BE的配置项 streaming_load_max_mb 大于15 GB即可。Stream Load的默认超时为300...
什么是数据库文件系统快照 数据库文件系统快照是某一时间点文件系统状态的备份文件，文件系统部署在云盘上，因此文件系统快照服务实际上基于云盘快照，对某个文件系统打快照相当于对该文件系统所部署的所有云盘同时打快照。文件系统第一份...
系统默认的最大Stream Load导入数据量为10 GB，所以导入超过10 GB的文件需要修改BE的配置项 streaming_load_max_mb。例如，待导入文件大小约为15 GB（15360 MB），则可以修改BE的配置项 streaming_load_max_mb 大于15 GB即可。curl-...
说明 本文中Presto是通过连接Hive的元数据服务来读取文件存储HDFS上的数据，在文件引擎上使用Presto时需要额外配置一些依赖包，详细操作步骤请参见 配置Presto。准备工作 搭建和使用Presto读写文件引擎，需要先完成以下准备工作。开通文件...
slicelet_read_bytes_total_window jindodata_metrics_jindofsx_ns_slicelet_read_bytes_total_window 一段时间内读取小文件存储的数据量。单位：Byte。backend_read_bytes_total jindodata_metrics_jindofsx_ns_backend_read_bytes_total ...
在查询效率上，跟查询普通表最大的不同在于，读取源表数据文件时，可能会涉及大量 DeltaFile 的合并以及数据历史中间状态的消除，详情可参见 TimeTravel 查询设计，从而极大影响读取效率，因此对于查询频率和效率要求比较高的业务场景，...
本文为您介绍数据库文件存储DBFS支持的集成方案。OpenAPI集成 数据库文件存储DBFS提供实例、快照、标签等功能的OpenAPI，您可在业务系统中进行集成。关于如何使用阿里云OpenAPI，请参见 使用OpenAPI。版本说明 版本说明 说明 2020-04-18 ...
步骤二：导入数据 通过HDFS表引擎导入数据 ClickHouse的HDFS表引擎能够从指定HDFS地址读取特定格式的文件数据，语法如下：CREATE TABLE[IF NOT EXISTS][db.]table_name(name1[type1],name2[type2],.)Engine=HDFS(uri,format);参数 描述 db ...
建表从OSS当中读取数据 下载并上传示例数据 orders.csv 至OSS中，本文将文件上传名为test的OSS Bucket的根目录下。执行以下命令创建OSS表，设置表引擎为S3表引擎。CREATE DATABASE IF NOT EXISTS oss ON CLUSTER cluster_emr;CREATE TABLE ...
T TDE Transparent Data Encryption，RDS提供MySQL和SQL Server的透明数据加密，即对数据文件执行实时I/O加密和解密。数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据文件的大小，开发人员无需更改任何应用程序，...
T TDE Transparent Data Encryption，RDS提供MySQL和SQL Server的透明数据加密，即对数据文件执行实时I/O加密和解密。数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据文件的大小，开发人员无需更改任何应用程序，...
T TDE Transparent Data Encryption，RDS提供MySQL和SQL Server的透明数据加密，即对数据文件执行实时I/O加密和解密。数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据文件的大小，开发人员无需更改任何应用程序，...
调用DeleteDbfs释放一个按量付费的数据库文件系统。接口说明 调用该接口时，您需要注意：释放数据库文件系统时，数据库文件系统的状态必须为：待挂载（Unattached）。如果指定 ID 的数据库文件系统不存在，请求将被忽略。调试 您可以在Open...
T TDE Transparent Data Encryption，RDS提供MySQL和SQL Server的透明数据加密，即对数据文件执行实时I/O加密和解密。数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据文件的大小，开发人员无需更改任何应用程序，...
T TDE Transparent Data Encryption，RDS提供MySQL和SQL Server的透明数据加密，即对数据文件执行实时I/O加密和解密。数据在写入磁盘之前进行加密，从磁盘读入内存时进行解密。TDE不会增加数据文件的大小，开发人员无需更改任何应用程序，...
本文为您介绍阿里云数据库文件存储服务DBFS按量付费的计算详情。结算周期 数据库文件存储每一个小时整点结算一次费用，并从账户余额中扣除实际消费金额，结算完毕后进入新的结算周期。例如，当前时间是 10:30:00，结算的是 9:00:00～10:00:...
调用AttachDbfs为一台ECS实例挂载一个按量付费的数据库文件系统。ECS实例和数据库文件系统必须在同一个可用区内。接口说明 调用该接口时，您需要注意：数据库文件系统的状态必须为待挂载（Unattached）。挂载数据库文件系统时，目标 ECS ...
目录下面采样最新和最老的文件，每个文件读取前1000行 元数据发现SLS数据源发现历史投递数据 如果投递中途修改了分区格式，不会发现修改前的数据 一键建仓/多库合并支持的数据源网络类型 VPC 一键建仓/多库合并支持的数据源 PolarDB MySQL ...
删除后，已经设置了该自动快照策略的数据库文件系统将自动取消策略。前提条件 您已经创建了至少一份自动快照策略。具体操作，详见 创建自动快照策略。操作步骤 登录 数据库文件存储控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，...
② 资产详情 为您展示数据源的 读取任务 和 写入任务：在 读取任务 页签，您可以查看读取的 任务名称、任务类型、来源表、目标表、目标数据源/项目/板块、创建人 信息。在 写入任务 页签，您可以查看写入的 任务名称、任务类型、来源数据源...
② 资产详情 为您展示数据源的 读取任务 和 写入任务：在 读取任务 页签，您可以查看读取的 任务名称、任务类型、来源表、目标表、目标数据源/项目/板块、创建人 信息。在 写入任务 页签，您可以查看写入的 任务名称、任务类型、来源数据源...
MaxCompute控制台提供数据上传功能，支持您将本地文件或阿里云对象存储服务OSS中的文件数据离线（非实时）上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里云对象存储OSS 上传数据，具体如下。本地文件...
TSDB 提供时序数据的高效读写。对于百万数据点的读取，响应时间小于 5 秒，且最高可以支撑每秒千万数据点的写入。数据写入 TSDB 支持通过 HTTP 协议和 TSDB Java Client 两种方式进行数据写入。数据查询 TSDB 支持通过 HTTP 协议、TSDB ...
调用DetachDbfs从一台ECS实例上卸载一个按量付费的数据库文件系统。接口说明 调用该接口时，请注意：数据库文件系统必须已经挂载到实例上，状态为已挂载（Attached)。卸载数据库文件系统时，所挂载的 ECS 实例必须处于运行中（Running）...
Transaction Table2.0的增量存储和处理架构的特殊设计主要集中在五个模块：数据接入、计算引擎、数据优化服务、元数据管理、数据文件组织，其他部分与...数据文件组织 主要包含对全量和增量 数据文件格式 的管理以及读写相关的模块。
为一个或多个数据库文件系统设置自动快照策略。接口说明 一个文件系统只能设置一条自动快照策略。若需要更换策略，请先取消原自动快照策略。一条自动快照策略支持应用到多个文件系统。数据库文件系统快照基于云盘快照，由云盘进行快照扣费...
云原生内存数据库Tair 支持透明数据加密TDE（Transparent Data Encryption），可对RDB数据文件执行加密和解密。您可以通过控制台启用TDE功能，对RDB数据进行自动加密和解密，以满足提升数据安全性及合规需要。前提条件 实例存储介质为 内存...
云数据库Redis支持透明数据加密TDE（Transparent Data Encryption），可对RDB数据文件执行加密和解密。您可以通过控制台启用TDE功能，对RDB数据进行自动加密和解密，以满足提升数据安全性及合规需要。前提条件 实例存储介质为 Redis企业版 ...