数据收集的途径

_相关内容

数据安全治理的必要性

当下企业在开展数据处理相关业务时,只要存在数据收集、处理、使用等行为,就需要从以下方面保障企业的经营合法合规。重点关注及遵守相关法律法规,时刻监督自己是否存在违规行为。例如,网络安全法、数据安全法、个性信息保护法、民法典及...

组件操作

Alluxio 数据集成 数据集成层的组件提供数据批量传输、实时消息流处理和分布式日志收集的能力,提升数据传输效率和数据收集的可靠性。组件类型 组件名称 组件说明 常用文档 开源 Flume Flume是一个分布式、可靠和高可用的系统,用于收集、...

DataWorks数据服务对接DataV最佳实践

当今社会数据收集的方式不断丰富,行业数据大量积累,导致数据规模已增长到传统软件行业无法承载的海量级别。MaxCompute服务于批量结构化数据的存储和计算,已经连续多年稳定支撑阿里巴巴全部的离线分析业务。过去,如果您想要通过DataV...

单表实时同步任务

DataWorks为您提供的实时数据同步功能,方便您使用单表或整库同步方式,将源端数据库中部分或全部表的数据变化实时同步至目标数据库中,实现目标库实时保持和源库的数据对应。核心能力 实时同步支持的能力如下图所示:能力 描述 多种数据源...

合规&认证

安全合规认证 在帮助各行各业的企业实现数字化的过程中,瓴羊已经建立齐了一套科学有效的数据安全保护体系。瓴羊积极参与监管以及行业协会牵头的数据安全与合规标准,向行业输出瓴羊的最佳合规实践,得到了监管以及行业的认可与好评。目前...

数据

例如,于2023年08月28日,电商公司发现2023年08月17日收集的某个产品的报表数据有误,需要重新输出2023年08月17日的报表数据,可以使用补数据来纠正报表数据。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中,选择 Data+AI 数据开发 任务...

数据传输服务(上传)场景与工具

数据采集:MaxCompute支持将开源 Logstash 收集的日志数据流式写入MaxCompute。Flink实时写入:您可以通过 Flink 平台对流式数据进行实时写入。解决方案的可靠性 MaxCompute具有服务等级协议(SLA),因批量数据通道、流式数据通道默认使用...

功能特性

Kafka(离线与实时)Logstash(流式)支持将开源Logstash收集的日志数据写入MaxCompute。Logstash(流式)阿里云Flink(流式)支持使用Flink在高并发、高QPS场景下写入MaxCompute。阿里云Flink(流式)DataHub(实时)DataHub是MaxCompute...

索引管理

本文介绍 云原生数据仓库AnalyticDB ...索引数据收集 您可以使用 VACUUM 命令收集索引数据收集索引数据示例如下:VACUUM customer;说明 仅BRIN索引需要使用索引数据收集。更多信息 关于索引的更多信息,请参见 Pivotal Greenplum 官方文档。

Flume

Apache Flume是一个分布式、可靠和高可用的系统,可以从大量不同的数据源有效地收集、聚合和移动日志数据,从而集中式的存储数据。使用场景 Flume使用最多的场景是日志收集,也可以通过定制Source来传输其他不同类型的数据。Flume最终会将...

添加RDS for MySQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

数据源权限管理

是否支持再次分享已被分享的数据源?数据源的创建者是否有权控制该数据源?什么是私有模式的数据源?哪些用户能够收回数据源的分享权限?如何检查数据源分享关系的移除、关联情况?分享数据源后,其资源组的连通状态是否会被同步分享?分享...

添加RDS for PostgreSQL数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 RDS for PostgreSQL。在列表中选择 内网,并选择RDS实例所在的区域。选择内网数据库的网络类型(包括 专有网络 和 经典网络)。专有网络 打开 VPC 开关,进入 ...

添加RDS for PostgreSQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

创建及管理数据分级

查看数据分级 在 数据分级 页面,查看系统中的数据分级及每个数据分级的详细信息,包括数据分级的等级、名称、更新人、更新时间以及分级描述信息。您可以根据数据分级的名称关键字搜索数据分级。在目标数据分级卡片底部可进行如下操作。...

创建及管理数据分级

查看数据分级 在 数据分级 页面,查看系统中的数据分级及每个数据分级的详细信息,包括数据分级的等级、名称、更新人、更新时间以及分级描述信息。您可以根据数据分级的名称关键字搜索数据分级。在目标数据分级卡片底部可进行如下操作。...

数据订阅操作指导

数据订阅功能可以帮助您获取数据库的实时增量数据,适用于缓存更新策略、业务异步解耦、异构数据源的数据实时同步和复杂ETL的数据实时同步等多种业务场景。本文介绍数据订阅功能的具体使用流程,帮助您快速掌握创建、监控、管理数据订阅...

添加PolarDB for Oracle数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 PolarDB for Oracle。在列表中选择 外网。填写PolarDB for Oracle数据源相关信息。参数 说明 名称 数据源的显示名称,可以自由命名。域名 连接数据库的外网地址。...

添加Oracle数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持企业版及以上版本。操作步骤 登录 DataV控制台。在 工作台 页面,单击 数据准备 ...

添加PolarDB for MySQL数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 PolarDB for MySQL。在列表中选择 外网。填写PolarDB for MySQL数据源相关信息。参数 说明 名称 数据源的显示名称,可以自由命名。域名 连接数据库的外网地址。...

添加RDS for SQLServer数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 RDS for SQLServer。在列表中选择 内网,并选择RDS实例所在的区域。选择内网数据库的网络类型(包括 专有网络 和 经典网络)。专有网络 打开 VPC 开关,进入 专有...

添加兼容MySQL数据库的数据

通过兼容MySQL数据库的数据源,您可以使用旧版本的MySQL数据库作为组件的数据源。前提条件 已准备好待添加的兼容MySQL数据库数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据...

添加RDS for MySQL数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 RDS for MySQL。在列表中选择 内网,并选择RDS实例所在的区域。选择内网数据库的网络类型(包括 专有网络 和 经典网络)。专有网络 打开 VPC 开关,进入 专有网络...

添加RDS for SQLServer数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

管理数据

数据源列表 页面为您展示所有已创建的数据源及其基本信息,包括 数据源标识、数据源类型、数据源来源、用户名 和数据源的 创建时间。您可以在操作列单击 测试连接,检查数据库的网络连接情况。以及进行复制、编辑和删除数据源的操作。在 ...

添加PolarDB for Oracle数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

添加PolarDB for MySQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

添加ClickHouse数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。从 类型 列表中,选择 ClickHouse。在列表中选择 内网,并选择ClickHouse实例所在的区域。填写数据库信息。参数 说明 名称 数据源的显示名称,可以自由命名。VPC ID VPC实例的ID,此VPC...

添加AnalyticDB for MySQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

添加PolarDB for PostgreSQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

配置ClickHouse输出组件

同步其他数据源的数据至ClickHouse数据源的场景中,完成源数据的信息配置后,需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前,请确认您已完成ClickHouse数据源及...

创建元数据

后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、Elasticsearch和MongoDB数据源中数据表的元数据。背景信息 HBase、Elasticsearch和MongoDB数据源为非关系型数据源,基于这三种数据源创建服务单元时无法直接...

创建元数据

后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、Elasticsearch和MongoDB数据源中数据表的元数据。背景信息 HBase、Elasticsearch和MongoDB数据源为非关系型数据源,基于这三种数据源创建服务单元时无法直接...

添加AnalyticDB for MySQL数据

在 我的数据 页签中选择 数据源管理,单击 添加数据。在 类型 列表中,选择 AnalyticDB for MySQL。在 网络 列表中选择 内网,并选择实例所在的区域(默认为华东2)。填写数据库信息。参数 说明 名称 数据源的显示名称,可以自由命名。VPC ...

DataV

新添加的数据源会自动列在数据源列表中。通过外网添加数据源操作步骤 登录 DataV控制台。在 工作台 页面,单击 数据准备 数据源,进入 数据源 页面,单击 新建数据源。在 类型 列表中,选择 AnalyticDB for MySQL。在 网络 列表中选择 外网...

添加AnalyticDB for PostgreSQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持DataV企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,...

添加Greenplum数据

在DataV-Note(智能分析)中基于Greenplum数据制作报告前,需先将您的Greenplum实例添加为DataV-Note的数据源。添加完成后,可在DataV-Note各项目中使用该数据源,访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍...

数据集成概述

数据集成是基于Dataphin构建的简单高效的数据同步平台,致力于提供强大的数据预处理能力和丰富的异构数据源之间数据高速稳定的同步能力。5分钟快速了解 背景信息 面对各行各业对大数据的应用,数据集成会有很多的诉求,包括能够简单高效地...

添加OceanBase for MySQL数据

重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中,以确保DataV-Board能正常访问您的数据库。详情请参见 配置数据库白名单。使用限制 仅支持企业版及以上版本。通过内网添加数据源 登录 DataV控制台。在 工作台 页面,单击 ...

添加MaxCompute数据

在DataV-Note(智能分析)中基于MaxCompute数据制作报告前,需先将您的MaxCompute实例添加为DataV-Note的数据源。添加完成后,可在DataV-Note各项目中使用该数据源,访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用