数据文件怎么玩

_相关内容

RDS for SQL Server如何回收表空间

如果需要收缩一个SQL Server的数据文件,必须使用 DBCC SHRINKDATABASE 命令收缩指定数据库的指定数据或日志文件大小,或者使用 DBCC SHRINKFILE 命令收缩当前数据库的指定数据或日志文件大小。MySQL表的空间是独立的一个文件,所以收缩...

RDS for SQL Server如何回收表空间

如果需要收缩一个SQL Server的数据文件,必须使用 DBCC SHRINKDATABASE 命令收缩指定数据库的指定数据或日志文件大小,或者使用 DBCC SHRINKFILE 命令收缩当前数据库的指定数据或日志文件大小。MySQL表的空间是独立的一个文件,所以收缩...

CSV数据文件格式

本文介绍需要导入至图数据库GDB实例的CSV数据文件格式。背景信息 CSV数据文件遵循RFC 4180 CSV规范。更多信息,请参见 CSV文件的一般格式和MIME类型。重要 所有文件必须采用UTF-8格式编码。注意事项 必须将点和边分别放到单独的文件。说明 ...

数据归档

数据归档至OSS端时会将ESSD中的表切分为若干个数据文件块上传,每个数据文件块对应的表空间、数据范围等信息保存在归档数据控制块中。控制块保存在内存中,用于快速定位归档数据请求的数据位点,并通过LRU算法进行缓存控制。innodb_oss_...

COMPACTION

Compaction可以把所有的数据文件按照一定策略进行Merge操作,可提升查询效率。功能介绍 Transactional Table 2.0支持近实时增量写入和time travel查询特性,在数据频繁写入的场景中,必然会引入大量的小文件,需要设计合理高效的合并策略来...

使用GdbLoader脚本导入数据文件

本文介绍使用GdbLoader脚本将数据文件从对象存储OSS的Bucket中导入至图数据库GDB实例、查看导入任务和取消导入任务的方法。前提条件 已创建目标图数据库GDB实例,创建方法请参见 创建主实例。说明 如果Bucket是在对象存储控制台创建,请...

Tunnel命令

返回结果+-+-+-+-+-+|shop_name|customer_id|total_price|sale_date|region|+-+-+-+-+-+|shopx|x_id|300.0|201312|hangzhou|shopy|y_id|400.0|201312|hangzhou|+-+-+-+-+-+-rd 指定本地数据文件的行分割符。默认值为 \r。s 指定是否扫描...

导入接口介绍

您可以发送请求至<gdb-endpoint>:<port>/loader 终端,实现将数据文件从OSS的Bucket中导入至图数据库GDB实例,还可以查看任务状态和删除导入任务。本文介绍添加导入任务(POST)、查看导入任务状态(GET)和删除导入任务(DELETE)的应用...

归档为CSV或ORC格式

说明 如果OSS对象存储中存在与归档的数据文件名称冲突的数据文件,系统会报文件已经存在的错误。例如:Target file for archived table exists on oss.您可以在以上三个语法中通过添加 FORCE 关键字来覆盖OSS对象存储中已经存在的数据文件...

通过元数据发现导入至湖仓版

企业的业务服务所产生的一些标准化表单、日志等数据文件,会被周期性地上传到OSS。但是这些存储在OSS的数据文件缺少元数据管理,导致数据难以分析和计算。AnalyticDB MySQL 元数据发现任务具备自动映射OSS路径、自动对OSS文件分组、自动...

解决MySQL实例空间满自动锁定的问题

您可以参照本文清理数据文件、临时文件、Binlog文件、undo文件和general_log文件,解决存储空间问题。问题描述 阿里云RDS MySQL版实例由于慢SQL、插入数据多等原因导致实例磁盘空间满,为避免数据丢失,实例会自动锁定,且无法进行写入操作...

解决MySQL实例空间满自动锁定的问题

您可以参照本文清理数据文件、临时文件、Binlog文件、undo文件和general_log文件,解决存储空间问题。问题描述 阿里云RDS MySQL版实例由于慢SQL、插入数据多等原因导致实例磁盘空间满,为避免数据丢失,实例会自动锁定,且无法进行写入操作...

事务管理

数据文件版本管理 每次事务操作会生成一批新的数据文件,这些数据文件会绑定对应的事务版本,主要包含两个属性:时间版本:Timestamp类型,等效于事务Commit时间,只有由用户触发并且存在逻辑数据变更的操作才会产生新的时间版本,...

查询机制

INSERT 当您使用INSERT插入一条数据时,具体过程如下:从数据文件中读取一个数据块到内存中,并将这行数据写入这个数据块,系统生成一条INSERT的WAL日志。当执行COMMIT命令后,系统会产生一条COMMIT的WAL日志。INSERT WAL日志和COMMIT WAL...

企业版产品系列

集群中所有的数据文件都存放在共享存储(PolarStore)中,各个主节点通过分布式文件系统(PolarFileSystem)共享底层存储(PolarStore)中的数据文件。用户可以通过集群地址访问整个集群,数据库代理会自动转发SQL命令到正确的主节点。多主...

导出至HDFS

方式三:INSERT OVERWRITE PARTITION 与 INSERT INTO PARTITION 使用方法相同,但使用 INSERT OVERWRITE PARTITION 时,会覆盖掉本次执行中涉及到的目标分区中之前已有的数据文件,对于没有新数据写入的分区,则不会清除其中的数据文件。...

MaxCompute近实时增全量一体化架构介绍

数据文件类型主要分为Delta Data File和Compacted Data File两种:Delta Data File:每次事务写入或者小文件合并后生成的增量数据文件,会保存每行记录的中间历史状态,用于满足近实时增量读写需求。Compacted Data File:Delta Data File...

Tunnel命令

返回结果+-+-+-+-+-+|shop_name|customer_id|total_price|sale_date|region|+-+-+-+-+-+|shopx|x_id|300.0|201312|hangzhou|shopy|y_id|400.0|201312|hangzhou|+-+-+-+-+-+-rd 指定本地数据文件的行分割符。默认值为 \r。s 指定是否扫描...

什么是数据安全中心

数据安全中心(Data Security Center,简称DSC),在满足等保2.0“安全审计”及“个人信息保护”的合规要求的基础上,为您提供敏感数据识别、数据...重要 DSC 仅对数据进行敏感数据分级、打标和敏感数据检测,不会对您的数据文件进行保存。

Hudi数据

查询性能分析 SelectDB使用Parquet Native Reader读取COW表的数据文件,使用Java SDK(通过JNI调用hudi-bundle)读取MOR表的数据文件。在Upsert场景下,MOR表中依然会有数据文件没有被更新,这部分文件可以通过Parquet Native Reader读取。...

元数据抽取

解析格式 支持json、csv、parquet、orc、hudi、delta、avro中某一类格式进行抽取,或采用自动识别模式会对数据文件自动解析。目标数据库 抽取获取的元数据存储的元数据库位置。目标数据表前缀 通过元数据抽取生成跟文件一致的表名,输入...

调试实时任务

上传数据方式包括手动 上传样例数据文件、手动输入数据、自动抽样数据。手动上传样例数据文件 您可以通过上传数据的方式,手动上传本地数据。上传本地数据前需要先下载样例,样例由Dataphin自动识别读写的表和表的schema信息生成的csv格式...

使用mysqldump导入导出数据

您可以通过如下两种方式的任意一种导入数据文件到 PolarDB-X 1.0。通过 mysql-h ip-P port-u user-default-character-set=char-set 命令登录目标 PolarDB-X 1.0,执行 source/yourpath/dump.sql 命令将数据导入到目标 PolarDB-X 1.0。说明 ...

RDS空间组成说明

不过与MySQL不同,SQL Server的数据文件空间都是预分配的,所以您每建一个DATABASE都会占用近500M空间用以存储您的数据。系统文件空间:包括实例的访问日志,错误日志文件等。事务文件空间:与MySQL(每个实例一个LOG)不同,SQL Server的...

DDL差异

ALTER TABLESPACE 不支持 修改表空间,添加新数据文件或从表空间删除数据文件。ALTER VIEW 不支持 修改视图的定义。CREATE DATABASE 支持,详情请参见 CREATE DATABASE。说明 云原生数据仓库AnalyticDB MySQL中会忽略CHARACTER SET及...

数据归档OSS

云盘版本的RDS SQL Server实例数据文件通常存储在ESSD云盘中,在数据量较大时,会面临较高的存储成本。为了帮助用户实现降本增效,RDS SQL Server提供了数据库级别的数据归档至对象存储OSS的功能。该功能允许用户在控制台数据库管理页面或...

概述

技术架构 集群中所有读写节点的数据文件都存放在共享存储(PolarStore)中,全局只读节点通过分布式文件系统(PolarFileSystem)来共享底层存储(PolarStore)中已有的读写节点的数据文件。您可以通过全局只读地址连接全局只读节点,通过...

数据导入概览

从阿里云对象存储OSS导入数据至图数据库GDB实例 图数据库GDB服务端集成有数据导入模块,可以获取您提供的.csv格式的OSS数据文件,并将其解析为图中的点数据和边数据,然后将点数据和边数据导入至图数据库GDB实例。步骤 步骤说明 ① 将需要...

调试实时任务

上传数据方式包括手动 上传样例数据文件、手动输入数据、自动抽样数据。手动上传样例数据文件 您可以通过上传数据的方式,手动上传本地数据。上传本地数据前需要先下载样例,样例由Dataphin自动识别读写的表和表的schema信息生成的csv格式...

运行SQL命令并导出结果数据

数据文件的导出路径有两种选择:您可以直接将数据以文件形式导出至MaxCompute客户端的 bin 目录中,导出路径为 文件名.后缀名;也可以导出至其他路径下,例如D盘的test文件夹,导出路径为 D:\test\文件名.后缀名。假设,表result_table1的...

通过外表导入至数仓版

HDFS数据文件格式需为CSV、Parquet或ORC。已创建HDFS集群并在HDFS文件夹中准备需要导入的数据,本文示例中所用文件夹为 hdfs_import_test_data.csv。已在HDFS集群中为 AnalyticDB MySQL 集群配置如下服务访问端口:namenode:用于读写文件...

添加数据源概述

文件类 说明 DataV目前不支持从其他文件存储中读取大型的数据文件。CSV文件 无。静态JSON 无。API类 添加API数据源 您可以在组件配置页面的 数据 面板中选择一种GET或POST任意一种请求方式,并将API地址直接粘贴到 URL 字段中。添加Open ...

数据加密

当云数据库MongoDB实例开启TDE功能后,新创建的数据库或集合中的数据在写入到任何设备(例如磁盘、SSD、PCIe卡)、服务(例如对象存储OSS)前都会进行加密,因此实例中对应的数据文件和备份文件都是以密文形式存在的。TDE的设置方法请参见 ...

入门概述

通过NFSv3协议访问CPFS文件系统 协议服务 在服务器中卸载挂载的文件系统 卸载文件系统 删除文件系统 删除文件系统 与对象存储OSS之间实现数据流动 数据流动 监测文件的使用量 数据监控 备份文件系统中的数据 文件存储CPFS(NFS协议)备份 ...

建表并上传数据

如果您需要上传超过30MB的文件,则可以使用如下方式:将数据文件上传至OSS,使用MaxCompute外部表映射的方式获取OSS中相应的文件数据。上传数据至OSS,详情请参见 上传文件,MaxCompute外部表映射,详情请参见 外部表。将数据文件上传至OSS...

数据库画像

在 新建画像 面板中,输入 画像名,选择数据 类型、报告语言类型,单击 上传,上传数据文件,上传完成后单击 创建。说明 创建源库画像大约需要1~30 min,创建时间受源库采集内容的影响。画像的状态变为 完成,表明画像创建成功。查看画像...

新建离线物理表

参数 描述 上传文件 单击 选择文件,上传需导入的数据文件。仅支持.txt,.csv类型的文件,文件不超过10MB。分隔符 数据的分隔符,支持逗号(,)、水平制表符(\t)、竖划线(|)、斜线(/)。也可以输入指定其他分隔符。字符集编码 选择...

ActionTrail日志清洗

以操作DLA的账号为例,该账号下每天会产生几千个数据文件,一个月的文件数将达到几十万个,大量的数据文件对大数据分析非常不便,分析数据耗时,且需要足够大的集群资源才能进行大数据分析。前提条件 使用ActionTrail日志清洗之前,您需要...

设置透明数据加密TDE

在安全合规或静态数据加密等场景下,推荐使用透明数据加密TDE(Transparent Data Encryption)功能,对数据文件执行实时I/O加密和解密,确保敏感数据在写入磁盘之前进行加密,从磁盘读入内存时进行解密,阻止可能的攻击者绕过数据库直接从...

功能特性

透明数据加密TDE 对数据文件执行实时I/O加密和解密,数据在写入磁盘之前进行加密,从磁盘读入内存时进行解密。TDE不会增加数据文件的大小,您无需更改任何应用程序,即可使用TDE功能,详情请参见 设置透明数据加密TDE。自动备份 支持 设置...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用