数据库数据表数据清理

_相关内容

数据脱敏

用户在执行查看表数据、SQL 窗口查询、结果集导出、导出工单、数据库变更工单操作时,包含的敏感列输出为脱敏数据。前提条件 项目管理员或者 DBA 支持管理敏感列和识别规则。所有用户均可查看、测试脱敏效果,不允许新建、编辑或者删除脱敏...

基本概念

MySQL Binlog:实时数据同步模式,通过同步并解析记录所有数据库表结构变更(例如CREATE、ALTER TABLE…)以及表数据修改(INSERT、UPDATE、DELETE…)的二进制日志,实现数据的秒级同步。SQLServer CDC:实时数据同步模式,开启CDC的源表...

如何对JSON类型进行高效分析

传统数据库解决方案 传统关系型数据库(MySQL、PostgreSQL与ClickHouse等)在处理JSON数据时经常将原始JSON数据编码成二进制数据并存储到的JSON类型列中,查询时使用JSON函数对整个JSON列数据进行实时解析与计算等。JSON作为半结构化数据...

异构数据源访问

若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...

错误码表(2.0版)

18001 Not support CREATE DATABASE in db:schema 无法在该数据连接上进行CREATE DATABASE操作,请检查所用数据库连接是否正确。18002 非ADS user导致的失败信息。操作必须由ADS user进行,请确认当前使用的UMM账号是ADS用户账号。18003 NA...

恢复库表

RDS MySQL支持常规和极速级别的库恢复功能,您可以将指定的库、按备份集或时间点恢复至原实例或新实例,无需恢复全部数据,可用于误操作后的快速...手动创建逻辑备份,然后 恢复逻辑备份到自建数据库。通过mysqldump进行备份和恢复。...

数据脱敏

数据安全中心DSC(Data Security Center)支持静态脱敏和动态脱敏,可以脱敏数据库中的敏感数据。本文介绍如何使用静态脱敏和动态脱敏。脱敏方式 静态脱敏:通过新增脱敏任务,使用脱敏算法对敏感数据进行遮盖、加密或替换,并将脱敏后的...

数据库克隆

数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中,实现全部表或部分表备份,适用多环境数据库初始化,例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同,且都为MySQL。数据库实例的...

通过Hive访问云数据库HBase

如果云数据库HBase已存在,可在Hive中云数据库HBase外表进行关联,外部在删除时不影响云数据库HBase已创建。在云数据库HBase中创建HBase,并执行put命令测试数据。create 'hbase_table','f' put 'hbase_table','1122','f:col1','...

同步数据

本文介绍了多种同步数据的方式。分析型数据库MySQL版支持多种数据加载方式,包括但不限于:通过阿里云数据传输服务DTS将MySQL/DRDS中的数据导入分析型数据库...如果数据在数据库其它中已经存在,可以使用 INSERT SELECT FROM 加载数据。

从MySQL导入数据

当您需要将云数据库RDS MySQL或云原生数据库PolarDB MySQL中的数据迁移至 云数据库ClickHouse 中进行实时分析时,本文档为您提供了以RDS MySQL为参考的示例,以帮助您轻松完成数据迁移任务。前提条件 已创建目标 云数据库ClickHouse 集群,...

CREATE DATABASE

CREATE DATABASE语句用于创建数据库,并可以指定数据库的默认属性(如数据库默认字符集,校验规则等)。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...

恢复MongoDB数据库

已选择的恢复时间点 选择需要恢复的时间,设置的时间必须在可恢复的时间范围内 恢复目标数据库 数据库所在位置 选择恢复目标数据库所在位置,支持类型如下:有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的...

配置AnalyticDB MySQL 2.0数据

准备工作 在分析型数据库MySQL版中创建数据库组和。详情请参见 快速入门-开通分析型数据库MySQL版服务、创建组 和 创建。重要 分析型数据库MySQL版中的需要创建成实时(普通),通过实时导入效率高而且流程简单。操作步骤 ...

CREATE DATABASE

CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库,你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下,新数据库将通过克隆标准系统数据库 template1 被...

API概览

DescribeSynDbTables 查看同步数据库 查看同步数据库。DeleteSyndb 删除同步任务 删除同步db。DescribeTransferHistory 查看迁移记录 查看迁移记录。TransferVersion 迁移版本 迁移版本。CreateServiceLinkedRole 创建服务关联角色...

SHOW TABLES

SHOW TABLES语句用于展示数据库中满足查询条件的所有。在使用CREATE TABLE语句建前,您可以通过SHOW TABLES语句查看...展示当前Database下匹配查询条件的所有 展示当前数据库名以 sensor 开头的所有。SHOW TABLES LIKE 'sensor%';

恢复Oracle逻辑备份

支持的选项:有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 PolarDB实例 无公网IP:Port的自建数据库(通过数据库网关DG接入)数据库类型 默认为Oracle数据库。实例地区 选择恢复的目标实例的...

空间分析

您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数,以及数据库中某个的空间使用情况、空间碎片、空间异常诊断等,本文以RDS MySQL数据库为例介绍如何使用空间分析功能。前提条件 目标数据库为:RDS...

数据库管理

DMS支持PostgreSQL的数据库Database)管理与模式(Schema)管理。登录 数据管理DMS 5.0。在DMS左侧的实例列表中,右键单击目标实例,从弹出的列表中选择 数据库管理。若您需要管理模式,请在DMS左侧的实例列表中展开目标实例,右键单击...

从SLS同步

本文介绍如何使用日志投递功能从日志服务(SLS)同步数据到云数据库ClickHouse。注意事项 云数据库ClickHouse的企业版集群和在2021年12月份之后创建的社区兼容版集群不支持日志投递功能。云数据库ClickHouse目前不支持数组类型的数据。支持...

通过DTS实现数据库的垂直拆分

当RDS实例负载过大时,可以将该实例的一个数据库垂直拆分至另外一个单独的实例中。本文介绍如何通过双写方案和简易拆分方案实现垂直拆分。背景信息 假设一个RDS实例上有数据库A和B,随着业务增长实例瓶颈也日趋可见,如想要减轻该实例...

关联数据

管理对象组 对象是指数据库中特定和字段的集合。对象组功能可以帮您管理数据库和字段的集合。如果自定义规则需要对固定的数据库对象生效,您可以通过新增对象组,直接在自定义规则中使用新增对象组。以下步骤介绍如何新增对象组。...

空间分析

您可以通过DAS的空间分析功能直观地查看某个数据库实例的空间使用概况、空间剩余可用天数,以及数据库中某个的空间使用情况、空间碎片、空间异常诊断等,本文以 RDS MySQL 数据库为例介绍如何使用空间分析功能。前提条件 支持如下数据库...

恢复PolarDB分布式版数据库

本文介绍如何通过数据库备份DBS恢复 PolarDB分布式版 数据库。前提条件 已完成数据库备份,具体操作,请参见 PolarDB分布式版逻辑备份。操作步骤 登录 DBS控制台。单击左侧导航栏中的 备份计划,然后在上方选择目标地域。找到目标备份计划...

数据归档至用户OSS

清理备份临时:通过新建普通数据变更工单,清理数据库中的备份临时。新建普通数据变更工单,请参见 普通数据变更。说明 在数据归档工单详情页的最下方,单击 查看临时drop SQL,复制清理备份临时的SQL语句。如果您没有开启后置行为...

库表级恢复

数据库备份DBS 支持级别的数据恢复能力。当发生数据误删除时,您可以选择只对单个数据库进行恢复,而无需恢复全部数据,可用于误操作后的快速订正,以及分析历史数据等场景。功能介绍 数据库备份DBS 在执行逻辑备份时,以数据库对象...

库表级恢复

数据库备份DBS 支持级别的数据恢复能力。当发生数据误删除时,您可以选择只对单个数据库进行恢复,而无需恢复全部数据,可用于误操作后的快速订正,以及分析历史数据等场景。功能介绍 数据库备份DBS 在执行逻辑备份时,以数据库对象...

收缩膨胀和索引(pg_squeeze)

例如,以rds_superuser的身份(必须是高权限用户)清理数据库 database1 和 database2:说明 清理前,已分别在数据库 database1 和 database2 中创建了pg_squeeze插件,详情请参见 创建和删除插件。squeeze.worker_autostart='database1 ...

PostgreSQL逻辑备份

数据库备份DBS 可满足PostgreSQL数据库的单恢复、异地备份、长期归档等需求。本文介绍如何使用 DBS 逻辑备份 RDS PostgreSQL、PolarDB PostgreSQL版 或其他数据源类型为PostgreSQL的数据库。注意事项 对于PostgreSQL数据库的逻辑备份,...

MySQL数据库账号权限管理

功能介绍 您可以在RDS MySQL、PolarDB MySQL版 控制台上对数据库大分类组合权限(例如只读、读写、仅DML、仅DDL)进行便捷地管理与维护,但对于自定义各种权限类型组合或授予某些级别权限等场景,您可以通过DMS推出的数据库账号权限管理...

创建数据

支持的数据库类型:MySQL:RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB MySQL 3.0、其他来源MySQL SQL Server:RDS SQL Server、MyBase SQL Server、其他来源SQL Server PostgreSQL:RDS PostgreSQL、PolarDB ...

导入数据

本文以导入On Time数据集至clickhouse_demo数据库的分布式ontime_local_distributed为例,介绍如何使用客户端clickhouse-client工具导入数据到 云数据库ClickHouse。前提条件 已完成快速入门系列的如下步骤。新建集群 创建账号 设置白...

数据扫描和识别

DSC 扫描数据库类型和数据表类型数据源中的字段名称和字段值,同时根据字段名称和值综合判断该数据是否为敏感数据。例如:年龄数据。如果只通过字段值无法判断数据是否敏感,DSC 会结合数据源列中的字段名称和对应的数值来综合判断。首次...

MariaDB逻辑备份

数据库备份DBS 可满足MariaDB数据库的单恢复、异地备份、长期归档等需求。本文介绍如何使用DBS备份RDS MariaDB或自建MariaDB数据库。创建备份计划 具体操作,请参见 创建备份计划。说明 购买时,选择数据源类型为 MariaDB,选择备份方式...

管理数据目录

数据目录是数据湖构建(Data Lake Formation)的元数据最上层实体,可以包含若干个数据库。在EMR Serverless Spark中,您可以通过该功能来查看绑定的数据目录中的数据库,还可以添加已有的数据目录。该功能适用于需要实现元数据隔离的...

从自建MySQL迁移至MyBase MySQL

警告 如果源或目标数据库是阿里云数据库实例(例如 RDS MySQL、云数据库MongoDB版 等)或ECS上的自建数据库,DTS会自动将对应地区DTS服务的IP地址添加到阿里云数据库实例的白名单或ECS的安全规则中,您无需手动添加,请参见 DTS服务器的IP...

基本概念

数据库Database)数据库属于目录,内部包含、列、视图、函数和数据类型等。(Table)属于数据库。在 云数据库SelectDB版 中, 是存储结构化数据的一种特殊形式。一张由行(Row)和(Column)组成,其中行表示一行数据,列表示...

数据归档至用户OSS

清理备份临时:通过新建普通数据变更工单,清理数据库中的备份临时。新建普通数据变更工单,请参见 普通数据变更。说明 在数据归档工单详情页的最下方,单击 查看临时drop SQL,复制清理备份临时的SQL语句。如果您没有开启后置行为...

SQL窗口介绍

数据管理DMS的SQL窗口可以非常便捷地执行各类SQL语句,同时支持以可视化的方式对目标数据库进行增、删、改、查等操作,适用于数据查询、数据开发等场景。前提条件 已具备目标库或的查询权限。申请权限,请参见 通过提交工单申请资产权限...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用