精准数据收集软件

_相关内容

分类分级模板与新国标映射说明

数安侧分类 法规分类 个人信息 用户数据 公司信息 经营管理数据 技术管理 系统运维数据 业务数据 业务数据 营销服务 业务数据 综合管理 经营管理数据 法规分类说明,请参见《数据安全技术-数据分类分级规则》(GB/T 43697-2024)附录A中的 ...

产品简介

实时物化视图 差异 数据湖 Spark离线处理 查询性能的智能诊断与调优 RAG应用 时空分析 应用场景 共同点 实时数仓 实时日志分析 商业智能报表 差异 精准营销 多源联合分析 大数据存储分析 离线数据加速 其它数据湖或数据仓库业务迁移...

索引命中次数统计

PolarDB 的索引命中统计功能能够精准记录并展示每个表中索引的使用情况,为数据库性能优化提供了强有力的数据支撑。通过深入分析索引的命中率和使用频率,您可以直观评估现有索引的有效性,并准确判断是否需要调整索引策略或新增索引,从而...

管理数据库资产

添加数据库后,您需要进行以下操作:您必须在已添加的数据库服务器上部署数据库审计的Agent程序,才能使数据库审计服务收集目标数据库的访问流量信息。具体操作,请参见 安装Agent。您可以为已添加的数据库配置审计规则,使命中规则的审计...

A100使用指南

步骤5:部署Agent程序 在数据库审计系统中添加数据库实例后,您必须在数据库服务器上部署Agent程序,才能使数据库审计服务收集目标数据库的访问流量信息,并进行审计。步骤6:查看系统审计结果 完成数据库接入和Agent部署后,您可以在数据...

管理数据库资产

添加数据库后,您必须在数据库服务器上部署数据库审计的Agent程序,数据库审计服务才能收集目标数据库的访问流量信息。具体操作,请参见 安装Agent。同时,您还可以为数据库配置审计规则,使命中规则的审计记录触发告警。具体操作,请参见 ...

产品架构

数据同步包括以下两个阶段:同步初始化:DTS先开始收集增量数据,然后将源数据库的结构和存量数据加载到目标数据库。数据实时同步:DTS同步正在进行的数据变更,并保持源数据库和目标数据库的同步。为了同步正在进行的数据变更,DTS使用两...

使用数据传输迁移数据

您可以通过数据迁移功能实时迁移其他数据源的数据至 OceanBase 数据库,以及迁移 OceanBase 数据库的数据至其他数据源。本文以迁移 MySQL 数据库的数据至 OceanBase 数据库为例,介绍如何使用数据传输迁移数据。前提条件 在迁移数据之前,...

迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...

本文为您介绍如何使用数据传输迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL 租户。重要 如果数据迁移任务长期处于非活跃状态(任务状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,任务可能无法恢复。数据传输将主动释放...

基本概念

同步初始化 同步初始化 同步初始化是指在开始执行增量数据同步前,DTS先开始收集增量数据,然后将待同步对象的结构和存量数据同步到目标库。同步初始化包括增量数据采集、结构初始化和全量数据初始化。增量数据采集:采集源库中待同步对象...

迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL ...

本文为您介绍如何使用数据传输迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 兼容模式。重要 如果数据迁移任务长期处于非活跃状态(任务状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,任务可能无法恢复。数据传输将...

DataWorks On CDP/CDH使用说明

一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力,您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源,实现将其他数据源的数据同步至Hive或HBase数据源,或将Hive或HBase数据...

迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...

本文为您介绍如何使用数据传输迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移任务长期处于非活跃状态(任务状态为 失败、已暂停 或 已完成),受增量日志保留时长等影响,任务可能无法恢复。数据传输将主动...

应用场景

本文介绍 云原生数据仓库AnalyticDB MySQL版 的五个使用场景:实时数仓、精准营销、商业智能报表、多源联合分析、交互式查询。实时数仓 该场景需要在一个平台上提供统一的在线查询和离线计算的能力,简化数据架构,降低开发和运维成本。...

快速入门

作为学院派关系型数据库管理系统的鼻祖,它的优点主要集中在对SQL规范的完整实现以及丰富多样的数据类型支持,包括JSON数据、IP数据和几何数据等,而大部分商业数据库都不支持这些数据类型。RDS PostgreSQL 阿里云数据库RDS PostgreSQL不仅...

功能特性

多可用区部署 备份恢复 Lindorm宽表引擎支持数据备份恢复功能,基于数据生态服务中的数据迁移将数据存储至OSS中,定期全量备份数据,实时增量同步数据,来满足对数据备份和数据恢复的需求。备份恢复 产品生态 功能集 功能 功能描述 参考...

基本概念

本文为您介绍DataWorks中,数据集成、数据建模、数据开发、数据分析、数据服务等模块开发过程中涉及的相关基本概念。通用概念 工作空间 工作空间 是DataWorks管理任务、成员,分配角色和权限的基本单元。工作空间管理员可以为工作空间加入...

数据血缘(公测)

DataWorks的数据血缘功能支持可视化展示敏感数据的血缘关系,自动分析字段之间的异常关联关系、敏感数据识别结果异常的字段,帮助您梳理敏感数据的扩散情况及影响面,提高数据识别效率。本文为您介绍如何查看血缘关系图。背景信息 数据血缘...

技术架构选型

数据服务层 基于 ADS 层输出统一的数据服务与应用,包括:商家增长分析 行业增长洞察 精准营销与用户运营 其他 BI、数据产品、数据 API 消费场景 通过标准化指标与数据模型,帮助业务部门更快获取所需数据,提高分析效率。

数据上云工具

Fluentd(DataHub通道系列)Fluentd是一个开源的软件,用来收集各种源头日志(包括Application Log、Sys Log及Access Log),允许您选择插件对日志数据进行过滤,并存储到不同的数据处理端(包括MySQL、Oracle、MongoDB、Hadoop、Treasure ...

应用场景

本文详细介绍DataWorks 的应用场景:如何...加速业务创新:统一、实时、高性能的数据基础,为用户行为分析、精准营销、金融风控、智能供应链等多种数据驱动的业务创新提供强大的技术引擎。客户案例 新金融行业:某互联网金融公司湖仓一体案例

客户案例

友盟+客户简介 友盟+是独立的第三方全域数据智能服务商,基于技术与算法能力,结合全域数据资源,挖掘标签及分析指标,帮助企业实现深度用户洞察、实时业务决策和持续业务增长。客户诉求 帮助企业和开发者解决数据系统独立,无法融合分析的...

流利说

本文介绍数据库自治服务DAS助力流利说,实现数据库团队转型升级。客户简介 流利说是卓越的科技驱动的教育公司,于2012年9月成立。作为智能教育的倡行者,流利说经过多年积累,流利说已拥有巨型的“中国人英语语音数据库”,截至2020年12月...

API概览

外部数据管理 API 标题 API概述 异构数据源管理 异构数据源管理 外部数据服务 外部数据服务 DescribeExternalDataService 获取外部数据服务详情 获取外部数据服务详情。DeleteExternalDataService 删除外部数据服务 删除外部数据服务。...

技术原理

任意时间点的数据恢复(PITR,point-in-time recovery)中,利用分布式事务时间戳,能够精准找到相应时间的、全局一致的数据版本。集中式与分布式一体化 PolarDB-X 支持集中式和分布式一体化架构,简称集分一体化。面向集分一体化架构,...

客户案例

数据库网关提供安全、可靠、低成本的数据库接入服务。本文将例举一个客户案例为您介绍如何通过数据库网关解决自身业务上的挑战。百姓网股份有限公司 行业分类:分类信息服务商 公司网站:https://www.baixing.com/ 公司介绍 百姓网...

产品概述

阿里云流数据处理平台数据总线 DataHub 是流式数据(Streaming Data)的处理平台,提供流式数据的发布(Publish)、订阅(Subscribe)和分发功能,支持构建基于流式数据的分析和应用。产品概述 数据总线(DataHub)是阿里云提供的一款流式...

数据溯源

数据溯源功能支持提取数据泄露文件中的水印信息,以协助组织识别可能导致数据泄露的相关细节,包括责任人、泄露时间及其他关键数据。该功能旨在提供全面的追踪能力,确保在数据泄露事件发生时能够迅速采取有效措施,从而降低潜在风险,提升...

最佳实践

说明 参考文档 基于 PolarDB,使用时序数据库插件,模拟股票交易数据,执行时序查询,确保交易系统能够精准追踪价格波动并即时计算技术指标,同时也支撑高频交易算法进行历史模式匹配与实时决策。基于PolarDB的时序数据库:股票金融交易...

跨云或自建MySQL逻辑备份与恢复

数据库所在位置 根据您所需备份的源数据库类型进行如下选择:无公网IP:Port的自建数据库(通过数据库网关DG接入):可通过数据库网关备份自建数据库,您需要提前为数据库实例配置数据库网关,并在此配置步骤选择目标 网关DG实例ID。...

基本概念

数据资产:数据资源平台中存在大量的数据表、标签、API等各类数据资产,数据管理者通过数据汇聚、数据治理、数据分析后,需要对整个平台数据进行统一管控,了解平台的核心数据资产,提供对应的数据资产管理规范。统一服务 应用:是调用API...

新功能发布记录

OceanBase 数据库相同租户之间的数据同步 新功能特性 迁移 PostgreSQL 数据库的数据至 OceanBase 数据库 Oracle 租户时,新增支持动态修改迁移/同步对象,包括动态增加/减少对象和动态修改匹配规则,支持用户在一个数据迁移/同步任务中管理...

什么是原生复制实例

通过内核与管控多层能力创新,实现网络协议兼容、权限体系对接等关键技术特性,支持直接使用MySQL原生复制命令进行数据同步和节点拓扑管理,深度融合了MySQL原生复制的灵活性与云数据库的稳定可靠优势,让您能够自由掌控数据库复制拓扑,...

创建及管理动态脱敏规则

若您需要将开发的数据保持原值进行关联分析,建议通过脱敏白名单实现精准控制,仅在指定场景下支持明文写入数据表,并将脱敏方式配置为展示脱敏。脱敏方式 脱敏方式包括 底层脱敏 和 展示脱敏。底层脱敏:在数据被查询出来的时候就进行脱敏...

创建及管理动态脱敏规则

若您需要将开发的数据保持原值进行关联分析,建议通过脱敏白名单实现精准控制,仅在指定场景下支持明文写入数据表,并将脱敏方式配置为展示脱敏。脱敏方式 脱敏方式包括 底层脱敏 和 展示脱敏。底层脱敏:在数据被查询出来的时候就进行脱敏...

Trino

支持丰富的数据源:Hive Cassandra Kafka MongoDB MySQL PostgreSQL SQL Server Redis Redshift 本地文件 支持高级数据结构,具体如下:数组和Map数据 JSON数据 GIS数据 颜色数据 功能扩展能力强,提供了多种扩展机制:扩展数据连接器 ...

配置数据识别规则并执行识别任务

背景信息 DataWorks支持您按照数据的敏感级别和所属分类定义数据识别规则,帮助您识别组织内的敏感数据,对于识别结果不准确的数据,您可以通过 查看敏感数据识别结果并手动修正,并在 敏感数据概况 模块为您展示最近的通过数据识别规则...

批量或异步插入数据

本文介绍如何在云数据库ClickHouse中批量或异步插入数据。批量插入数据 默认情况下,每个发送到云数据库ClickHouse的插入操作都会导致云数据库ClickHouse立即在存储中创建一个包含插入的数据以及其他需要存储的元数据信息。因此,相比较...

概述

其中:日志数据来源可以为ECS、容器、移动端、开源软件、网站服务或JavaScript。本文为您介绍如何通过Tunnel、DataHub、LogHub以及DataWorks数据集成将日志数据迁移至MaxCompute。方案 说明 适用场景 Tunnel 通过MaxCompute的Tunnel功能,...

通过数据订阅实现缓存更新策略

DTS(Data Transmission Service)的数据订阅功能结合MongoDB或Redis,可以实现高可靠、低延迟的缓存更新策略。本文以源为 RDS MySQL、目标为 云数据库Tair(兼容Redis)为例,为您介绍缓存更新策略。前提条件 已完成数据订阅通道的配置并...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用