大数据技术与应用 视频教程

_相关内容

使用流程

ADAM(数据与应用迁移)使用主要分为数据库评估,数据改造迁移,应用评估改造三个流程。整体迁移流程简介 数据库评估:帮助用户了解源库现状、提供目标库的选型建议,根据评估结果为用户迁移到目标库提供可行性参考。数据改造迁移:帮助...

应用评估

架构列表:ADAM通过数据与应用的关系,结合智能算法,将整体架构做了分组。迁移分组是一个迁移单位的最小子集,即迁移任何一个迁移分组不会影响到其他迁移分组外的数据依赖。说明 应用之间调用关系不在考虑范围。迁移评分:ADAM对迁移与...

添加成员并设置角色

超级管理员创建了服务项目后,如果需要添加成员协助开发,您可以将 管理中心-成员列表...后续步骤 完成服务项目成员添加并设置成员后,您就可以配置应用访问数据服务的网络,以实现应用与数据服务之间的网络互通。具体操作,请参见 网络配置。

数据总线

1.数据集成介绍 数据集成标准化的目标是规范应用之间数据的传递方式和表达方式。传递方式:即应用之间的数据如何流通。平台提供了对数据进行增删改查的4个API,以及HTTP2方式的消息订阅机制。表达方式:即应用之间如何对数据内容有一致的...

数据上云场景

使用DataWorks结合DataX进行Hadoop数据迁移的示例请参见 Hadoop数据迁移新手教程,或参见视频教程 Hadoop数据迁移到MaxCompute最佳实践。Sqoop执行时,会在原来的Hadoop集群上执行MR作业,可以分布式地将数据传输到MaxCompute上,详情请...

典型使用场景

HBase具有高吞吐,低延迟,schemaFree,水平扩展等能力,被很多大数据应用选择。而接合LindormStreams+Blink/Spark,可以构建出一套完整的实时数据系统:应用解耦-实时同步到消息队列 通常业务发生之后,应用系统产生的数据需要被其他...

通用数据开发

通常数据开发的总体流程包括数据产生、数据收集存储、数据分析处理、数据提取和数据展现分享。说明 上图中,虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的...

准备工作概述

OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...

SDK简介

通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报...

开始监控除Java之外的应用

通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过OpenTelemetry上报Node.js应用数据 通过SkyWalking上报Node.js应用数据 接入Node.js应用.NET应用 通过OpenTelemetry上报.NET应用数据 通过Jaeger上报.NET...

大数据AI公共数据集分析

教程通过DataWorks,联合云原生大数据计算服务MaxCompute,使用大数据AI公共数据集(淘宝、飞猪、阿里音乐、Github、TPC等公共数据),指导您如何快速进行大数据分析,快速熟悉DataWorks的操作界面最基础的数据分析能力。DataWorks的更...

概述

本文主要介绍需要实时获取HBase表的数据变更场景。数据写入HBase之后,很多业务场景下需要实时获取或者订阅HBase表的数据变更。当数据被更新时,触发其他应用的业务处理,如物流订单生成后触发仓库作业。对接实时计算,用于业务数据驱动的...

数据集成概述

背景信息 面对各行各业对大数据应用数据集成会有很多的诉求,包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优(例如容错,限速,并发)等。...

快速上手可观测链路 OpenTelemetry 版

OpenTelemetry 版 通过Jaeger上报Go应用数据 通过SkyWalking上报Go应用数据 通过Zipkin上报Go应用数据 Python应用 通过OpenTelemetry上报Python应用数据 通过SkyWalking上报Python应用数据 通过Jaeger上报Python应用数据 Node.js应用 通过...

时序引擎应用开发简介

使用OpenTSDB或时间序列数据库TSDB的应用开发步骤 Lindorm时序引擎兼容相关接口,对于已有使用OpenTSDB或者时间序列数据库TSDB的应用程序,您可以按照以下步骤进行应用迁移:应用适配 修改应用程序中的连接字符串,连接的目标从原有的...

Android

输出视频数据应用需要输出视频媒体数据时,需先注册AliVideoObserver回调,实现onLocalVideoSample和onRemoteVideoSample回调,用于接收本地采集视频裸数据,以及订阅到的远端视频裸数据。接收本地数据回调 void onLocalVideoSample...

数据服务

面向数据资产管理者提供服务的统计分析、服务用量统计分析,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。前提条件 已根据快速入门教程完成加载样例数据操作,具体信息请参见 样例数据。已根据快速入门教程...

数据安全治理的必要性

其中,第4条“维护数据安全,应当坚持总体国家安全观,建立健全数据安全治理体系,提高数据安全保障能力”和第7条“国家保护个人、组织与数据有关的权益,鼓励数据依法合理有效利用,保障数据依法有序自由流动,促进以数据为关键要素的数字...

MQ监控

功能介绍 在 概览 页签中以拓扑图展示应用与MQ数据源之间的消息发布和订阅关系。在 发布端统计 页签展示消息发布的统计数据,包括请求数、响应时间和错误数。在 订阅端统计 页签展示消息订阅的统计数据,包括消息请求数、响应时间和错误数...

应用防护页面看不到应用或资源?

本文介绍接入Agent后找不到应用的解决办法以及接入应用后无法看到接口数据的原因。接入Agent之后,AHAS控制台看不到应用?请参考以下步骤检查。确保选择了正确的地域(Region)。切换地域(Region)步骤请参见 如何切换地域(Region)。...

MQ监控

功能介绍 在 概览 页签中以拓扑图展示应用与MQ数据源之间的消息发布和订阅关系。在 发布端统计 页签展示消息发布的统计数据,包括请求数、响应时间和错误数。在 订阅端统计 页签展示消息订阅的统计数据,包括消息请求数、响应时间和错误数...

添加宜搭数据

宜搭是阿里巴巴自研的低代码应用构建平台,您可以通过可视化拖拽的方式,快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法,以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...

添加宜搭数据

宜搭是阿里巴巴自研的低代码应用构建平台,您可以通过可视化拖拽的方式,快速完成数据应用的搭建。本文为您介绍在DataV中添加和使用宜搭数据源的方法,以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单...

管理应用和标签

应用设置页面上,您可以控制是否显示机器名称和采集应用数据,也可以管理应用的自定义标签和删除应用。背景信息 在 可观测链路 OpenTelemetry 版 控制台上,当需要显示应用所部属的机器时,默认情况下显示的是机器的IP地址,但是您也可以...

数据资产等级定义

本文为您介绍数据资产等级的定义,以及如何定义生产链路上的相关数据的资产等级。数据资产等级定义 根据数据质量不满足完整性、准确性、一致性、及时性时,对业务的影响程度划分数据的资产等级。通常,划分为5个性质的等级:毁灭性质:数据...

功能简介

数据中台建设过程中,搭建核心处理平台,并根据相关标准要求,将源数据或治理后的数据,按照“全面、高效、统筹”的共享原则,“低延时”、“精准化”地传递给用户,方便更多应用消费数据,实现数据价值。协同管控各种组织机构,为智慧化...

数据迁移

本文为您介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大...

应用画像

对象详情 对象详情是详细展示了ADAM智能分析后的数据库对象与应用SQL以及应用代码的关系。其中左边是以SCHEMA和对象类型为纬度,通过树的形式展示应用访问的数据库对象的罗列。右边是具体对象和访问该对象的SQL。通过调用栈设置,可以配置...

架构

然后数据会被连续地使用流复制协议传输到应用工作者,应用工作者会把数据映射到本地表并且以正确的事务顺序应用它们接收到的更改。订阅者数据库上的应用进程总是将 session_replication_role 设置为 replica 运行,这会产生触发器和约束上...

功能简介

数据中台建设过程中,搭建核心处理平台,并根据相关标准要求,将源数据或治理后的数据,按照“全面、高效、统筹”的共享原则,“低延时”、“精准化”地传递给用户,方便更多应用消费数据,实现数据价值。协同管控各种组织机构,为智慧化...

统一服务

数据中台建设过程中,搭建核心处理平台,并根据相关标准要求,将源数据或治理后的数据,按照“全面、高效、统筹”的共享原则,“低延时”、“精准化”的传递给用户,方便更多应用消费数据,实现数据价值。协同管控各种组织机构,为智慧化...

功能简介

数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。数据导入 支持512 MB...

数据标准

数据标准落标说明 数据标准落标的意义在于从源头进行数据的标准化生产,加速数据的融合统一的效率,节省大量数据应用和处理的成本。完成以下操作实现数据标准落标:您可以在 字段编辑器 页面,编辑 中文名,输入拼音首字母即可快速检索出...

自建数据库RDS性能对比的注意事项

网络环境 应用和自建数据库都需要部署于ECS实例,且RDS实例位于同一地域,使得应用与RDS之间,以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例,则应用到自...

自建数据库RDS性能对比的注意事项

网络环境 应用和自建数据库都需要部署于ECS实例,且RDS实例位于同一地域,使得应用与RDS之间,以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例,则应用到自...

自建数据库RDS性能对比的注意事项

网络环境 应用和自建数据库都需要部署于ECS实例,且RDS实例位于同一地域,使得应用与RDS之间,以及应用与自建数据库之间都是通过内网进行通信。说明 应用与自建数据库需要部署于两台不同的ECS实例。如果部署于同一台ECS实例,则应用到自...

数据标准概述

通过规范约束标准代码、度量单位、字段标准、命名词典,来保障后续建模与应用过程中数据处理的一致性,从源头上保障数据的标准化生产,节约后续数据应用和处理的成本。应用场景 DataWorks的数据标准包含 字段标准、标准代码、度量单位、...

数据查询

数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。如果数据表格存储的是...

透明数据加密概述

经过数据库身份验证的应用和用户可以继续透明地访问应用数据(不需要更改应用代码或配置),而尝试读取表空间文件中的敏感数据的OS用户以及尝试读取磁盘或备份信息的未知用户将不允许访问明文数据。透明:数据在使用过程中无感知,数据在...

通过DataV展示数据

通过DataV的SQL语句功能,处理数据,并将结果展示在大屏上。添加DataV数据源。参考 配置数据库白名单,根据您数据库的网络类型,将DataV的白名单添加到您的RDS数据库中。登录 DataV控制台。选择 我的数据>添加数据。填写RDS实例的相关信息...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用