收集数据的方法有哪些

_相关内容

关闭敏感数据保护

本文介绍关闭敏感数据保护的方法。前提条件 您的 系统角色 为管理员、DBA或安全管理员。注意事项 敏感数据保护功能关闭后,实例上的敏感数据将不再受保护,实例上已有的数据分类分级信息(含脱敏规则配置)将会被清理,请谨慎操作。说明 ...

添加RDS for SQLServer数据

本文为您介绍在DataV-Board中通过内网和外网添加RDS for SQLServer数据的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的...

数据集使用说明

支持接入多种数据源,包括数据库、Excel表格文件等,并提供数据结构化存储及元数据统一管理功能,确保数据的高效组织和访问。应用场景 数据集深度应用于企业数据可视化分析领域,涵盖实时业务监控、经营分析看板及智能决策支持等核心场景,...

添加对象存储OSS数据

本文档为您介绍在DataV中添加对象存储OSS数据的方法,以及相关参数配置说明。使用阿里云对象存储服务(Object Storage Service,简称OSS),您可以通过网络随时存储和调用文本、图片、音频和视频等各种非结构化数据文件。前提条件 已准备...

添加RDS for SQLServer数据

本文为您介绍在DataV中通过内网和外网添加RDS for SQLServer数据的方法。前提条件 已准备好待添加的RDS for SQLServer数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型...

添加RDS for MySQL数据

本文为您介绍在DataV中添加RDS for MySQL数据的方法。前提条件 已准备好待添加的RDS for MySQL数据源。通过内网添加数据源操作步骤 登录 DataV控制台。在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 RDS for ...

区域下钻热力层(v1.x版本)

以下以浙江省为例,为您展示自定义数据的配置方法。修改默认数据的 adcode 为浙江省的adcode(330000)。修改默认全国范围的 area_tree.json 文件,提取浙江省范围的数据。区域层级关系为 省或直辖市 地市级 区县级。重要 用户如果有自定义...

添加ClickHouse数据

本文为您介绍在DataV中添加ClickHouse数据的方法,以及相关参数配置说明。前提条件 已准备好待添加的ClickHouse数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请...

添加TableStore数据

本文档介绍在DataV中添加TableStore数据的方法,以及相关参数配置说明。前提条件 已准备好待添加的TableStore数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请...

数据传输服务(上传)场景与工具

实时数据通道:DataHub是流式数据(Streaming Data)的处理平台,提供对流式数据的发布(Publish)、订阅(Subscribe)和分发功能,支持流式数据归档至MaxCompute。功能介绍 批量数据通道上传 使用批量数据通道上传数据时,可以通过单个...

从MySQL迁移至Tair

使用其它引擎的RDS数据库也可以参照本文的方法数据迁移到 云数据库 Tair(兼容 Redis)中。场景介绍 在应用与数据库之间使用Redis作为缓存层,扩展传统关系型数据库的服务能力,从而优化业务的生态体系,是Redis的经典应用场景之一。将...

添加API数据

本文档介绍在DataV-Board中添加API数据的方法,以及相关参数配置说明。前提条件 重要 请确保API地址能被 DataV 服务访问:若为本地部署,可访问本地API服务;否则,请确保API地址为公网能访问。已准备好待添加的API数据源。说明 支持...

管理数据

本文介绍创建、编辑、删除数据的方法。注意事项 数据分析后续所有的分析工作、仪表盘制作和大屏制作都是基于数据集进行的,因此在进行其他功能前,必须先创建数据集。创建数据集 方式一:通过控制台顶部菜单栏操作创建数据集 登录 数据...

功能特性

阿里云Flink(流式)DataHub(实时)DataHub是MaxCompute提供的流式数据处理(Streaming Data)服务,它提供流式数据的发布(Publish)和订阅(Subscribe)的功能构建基于流式数据的分析和应用。DataHub(实时)SLS投递 将日志服务采集的...

常见问题

同步延迟是指同步到目标数据库中的最新数据的时间戳,与源数据库的当前时间戳之间的差值。单位为毫秒。说明 正常情况的延迟在1000毫秒以内。数据同步任务是否可以修改同步对象?可以。修改同步对象的方法,请参见 新增同步对象 和 移除同步...

使用物化视图进行数据建模

背景介绍 数据建模是通过合理的方法进行数据清洗、分层、聚合和关联的过程。当原始数据质量过低,指标过多过于复杂,或未经聚合导致查询成本过高时,您可以通过对原始数据进行建模得到易于理解的、可供使用的数据结果。然而,在现实数据...

数据灾备(原DBS)常见问题

数据库RDS、云原生数据库PolarDB、云数据库MongoDB、云数据库Redis、云原生内存数据库Tair、云原生数据仓库 AnalyticDB for PostgreSQL 产品的备份恢复功能均由 数据灾备 提供,您可确认下该备份计费项是否因为您使用了上述产品的备份...

Flume

Header(Map)|Body(byte[])|-Flume Event Source 是数据源收集器,从外部数据源收集数据,并批量发送到一个或多个Channel中。常见Source如下:Avro Source:通过监听Avro端口获取Avro Client发送的事件。Avro是Hadoop提供的一种协议,用于...

确定需求

完成业务调研后,您需要进一步收集数据使用者的需求,进而对需求进行深度的思考和分析。需求分析的途径有两种:根据与分析师和业务运营人员的沟通获知需求。对报表系统中现有的报表进行研究分析。在需求分析阶段,您需要沉淀出业务分析或...

确定需求

完成业务调研后,您需要进一步收集数据使用者的需求,进而对需求进行深度的思考和分析。需求分析的途径有两种:根据与分析师和业务运营人员的沟通获知需求。对报表系统中现有的报表进行研究分析。在需求分析阶段,您需要沉淀出业务分析或...

敏感数据保护

Dataphin支持敏感数据的识别和敏感数据的脱敏保护,可以结合权限管控方案一起,构建起完善的敏感数据保护体系。数据分类分级 Dataphin支持对数据的分类分级进行管理,内置了常用的个人信息数据分类,同时支持客户自定义企业的数据分类分级...

敏感数据保护

Dataphin支持敏感数据的识别和敏感数据的脱敏保护,可以结合权限管控方案一起,构建起完善的敏感数据保护体系。数据分类分级 Dataphin支持对数据的分类分级进行管理,内置了常用的个人信息数据分类,同时支持客户自定义企业的数据分类分级...

数据上云场景

MMA利用Meta Carrier连接您的Hive Metastore服务,获取Hive Metadata,并利用这些数据生成用于创建MaxCompute表和分区的DDL语句以及用于迁移数据的Hive UDTF SQL。详细信息请参见 MMA概述。数据库数据同步 数据库的数据同步到MaxCompute...

向量分析

AnalyticDB PostgreSQL版 向量分析可以通过AI算法提取非结构化数据的特征,并利用特征向量作为非结构化数据的唯一标识,帮您快速且低成本地实现对非结构化数据检索和对结构化数据关联分析。向量数据库简介 在现实世界中,绝大多数的数据都...

数据安全概述

相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定,用于对数据的敏感等级进行区分。Dataphin内置了 L1(对外公开)-L4(绝密数据通用数据分级;同时也支持客户根据企业情况进行自定义分级。数据...

数据安全概述

相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定,用于对数据的敏感等级进行区分。Dataphin内置了 L1(对外公开)-L4(绝密数据通用数据分级;同时也支持客户根据企业情况进行自定义分级。数据...

创建元数据

如果业务数据的字段类型不在上述字段类型范围内,推荐 您选择String。Rowkey描述:填写对Rowkey字段的简单描述。列字段配置 新建列字段 列簇名称:配置为HBase业务数据源中实际的列簇名称。列字段名称:配置为HBase业务数据源中实际的列...

创建元数据

如果业务数据的字段类型不在上述字段类型范围内,推荐 您选择String。Rowkey描述:填写对Rowkey字段的简单描述。列字段配置 新建列字段 列簇名称:配置为HBase业务数据源中实际的列簇名称。列字段名称:配置为HBase业务数据源中实际的列...

数据溯源

DataWorks的数据溯源功能,支持通过提取数据泄露文件中数据的水印信息,帮助您定位到可能会泄露目标数据的责任人。本文为您介绍如何创建溯源任务,并通过该任务查找可能会泄露数据的责任人。前提条件 已创建 数据识别规则,详情请参见 配置...

外部数据

本文介绍了外部数据的相关内容。简介 本数据库实现了部分的 SQL/MED 规定,允许我们使用普通 SQL 查询来访问位于本地数据库之外的数据。这种数据被称为外部数据。说明 这种用法不要和外键混淆,后者是数据库中的一种约束 外部数据可以在...

产品概述

阿里云流数据处理平台数据总线 DataHub 是流式数据(Streaming Data)的处理平台,提供流式数据的发布(Publish)、订阅(Subscribe)和分发功能,支持构建基于流式数据的分析和应用。产品概述 数据总线(DataHub)是阿里云提供的一款流式...

数据订阅操作指导

本文介绍数据订阅功能的具体使用流程,帮助您快速掌握创建、监控、管理数据订阅通道及消费数据的操作。背景知识 订阅方案概览 介绍数据订阅功能支持的数据库和支持订阅的数据类型。功能特性 详情请参见 数据订阅。数据订阅使用流程 通常,...

数据方案概览

数据追踪/提供数据库Binlog日志的解析处理,可查找数据的变更记录、进行数据的快速恢复SQL获取。研发空间/支持将松散的工单(例如普通数据变更、无锁数据变更、数据导入等)串联到同一个流程中,实现DML、DDL任意组合、高度自定义的变更...

配置ClickHouse输出组件

同步其他数据源的数据至ClickHouse数据源的场景中,完成源数据的信息配置后,需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前,请确认您已完成ClickHouse数据源及...

什么是数据资源平台

数据资源平台覆盖数据同步、数据标准建模及数据质量检查、数据开发、数据标签体系构建,基于标签数据的群体分析、专家业务模型构建、全流程任务监控告警、数据服务化、数据资产管理等核心能力,提供标准化程度高、易用性强的一站式大数据...

我的数据

数据管理 数据管理页面支持上传和管理数据,您可以实现如下多个功能:功能 说明 上传数据 数据管理页面中支持 上传数据 类型有 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六大类,不同类型的数据可上传的数据格式互不相同。...

使用数据传输迁移数据

参数 描述 读取并发配置 该参数用于配置全量迁移阶段从源端读取数据的并发数,最大限制为 512 并发数过高可能会造成源端压力过大,影响业务。写入并发配置 该参数用于配置全量迁移阶段往目标端写入数据的并发数,最大限制为 512。并发数过...

全密态数据库(公测)

敏感数据合规:在不可信环境(如第三方平台)下,提供应用服务的安全防护,保证终端用户敏感数据的安全。在面向终端用户的应用场景中,部分数据(如健康数据、财务数据等)的拥有者为客户本人。他们希望应用服务只提供数据管理和分析的能力...

概览

暂不支持 使用COPY ON CONFLICT覆盖导入数据 使用COPY命令快速导入数据的过程中,如果数据与表的约束冲突,会导致COPY命令报错退出。AnalyticDB PostgreSQL版 提供了COPY ON CONFLICT功能,可以让数据COPY不会因为约束冲突导致失败。暂不...

全密态数据库(公测)

敏感数据合规:该场景主要针对在不可信环境(如第三方平台)下提供的应用服务的安全防护,保证终端用户敏感数据的安全。在面向终端用户的应用场景中,部分数据(如健康数据、财务数据等)的拥有者为客户本人。他们希望应用服务只提供数据...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用