大数据学习应用

_相关内容

数仓分层

在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入层(ODS,Operation Data Store)、数据公共层(CDM,Common Data Model)和数据应用层(ADS,Application Data Service)。数据仓库的分层和各层级用途如下图所...

数仓分层

在阿里巴巴的数据体系中,我们建议将数据仓库分为三层,自下而上为:数据引入层(ODS,Operation Data Store)、数据公共层(CDM,Common Data Model)和数据应用层(ADS,Application Data Service)。数据仓库的分层和各层级用途如下图所...

功能简介

全景监控支持业务链路配置监控场景,通过自定义监控链路和告警消息配置,可快速实现从数据生产到业务应用的全链路编排及溯源,实现全局监控和问题快速锁定。全景监控提供丰富的告警信息输出方式,包括:钉钉消息、标准协议等方式,出现问题...

应用场景

大数据场景:海量数据存储与分析 Lindorm支持海量数据的低成本存储、快速批量导入和实时访问,具备高效的增量及全量数据通道,可轻松与Spark、MaxCompute等大数据平台集成,完成数据规模离线分析。优势 低成本:高压缩比,数据冷热分离...

DeltaLake

Delta Lake以数据为中心,围绕数据流走向(数据从流入数据湖、数据组织管理和数据查询到流出数据湖)推出了一系列功能特性,协助您搭配第三方上下游工具,搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...

全景监控

全景监控支持业务链路配置监控场景,通过自定义监控链路和告警消息配置,可快速实现从数据生产到业务应用的全链路编排及溯源,实现全局监控和问题快速锁定。全景监控提供丰富的告警信息输出方式,包括:钉钉消息、标准协议等方式,出现问题...

全密态PolarMySQL

例如,业务将应用数据库迁移到云上,需要应对云平台以及运维人员越权访问数据的潜在威胁;再如,数据应用需要将数据库整体线下部署到客户线下环境,需要防止数据被客户运维非授权获取。敏感数据合规:该场景主要针对在不可信环境(如第三方...

应用防护页面看不到应用或资源?

AHAS刚接入应用之后,应用防护页面各个应用数据显示为空,这是因为应用没有实时流量就不会有数据。此时您可以通过PTS发起少量压测流量或手动访问,例如通过浏览器访问应用即可看到请求,控制台中将显示对应的流量数据。在应用防护页面中,...

场景化分析

在页面右上角单击 标签筛选,选择展示指定标签下的应用数据。创建标签的操作和要求,请参见 应用列表。异常分析 在快捷筛选区域(图示①),您可以按 异常名称、接口名称、应用名称、实例 对异常进行筛选过滤。在趋势图区域(图示②),您...

数据迁移最佳实践

本文介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将MaxCompute的数据迁移至其它业务平台。背景信息 传统关系型数据库不适合处理海量数据,如果您的数据存放在传统的关系型数据库且数据量庞大时,...

PolarDB的高级脱敏

高级脱敏功能具有但不限于如下特性:统一管理敏感数据 敏感数据分类分级 周期性扫描敏感数据 主动发现敏感数据 应用场景 实时从生产环境中的数据库(即生产库)获取用户已脱敏的数据来进行报表生成、数据分析、开发测试等。前提条件 已录入...

业务规划

业务分类、数据域与数据集市构成业务驱动的管理框架,通过划分数据归属领域(业务分类)、定义核心业务活动(数据域)、组织场景化数据服务(数据集市),实现从数据生产到消费的价值闭环。本文介绍 业务分类、数据域、业务过程、数据集市 ...

数据库分析

应用数据上报至 可观测链路 OpenTelemetry 版 后,可观测链路 OpenTelemetry 版 即可开始监控应用,您可以在 数据库分析 页面查看数据库分析数据,从而了解数据库的调用详情。前提条件 已将应用数据上报至 可观测链路 OpenTelemetry 版,...

Iceberg

您可以借助Iceberg快速地在HDFS或者阿里云OSS上构建自己的数据湖存储服务,并借助开源大数据生态的Spark、Flink、Hive和Presto等计算引擎来实现数据湖的分析。核心能力 Apache Iceberg设计初衷是为了解决Hive数仓上云的问题,经过多年迭代...

应用列表

单击应用名称可以查看更多的应用数据看板。Web&H5监控详情 小程序监控详情 App监控详情 单击 标签 列的 图标可以为应用绑定标签。创建标签的操作,请参见 创建并绑定自定义标签。通过应用标签,可以实现应用筛选、应用权限管理、成本分账等...

架构

订阅者按照数据在发布者上被提交的顺序应用数据,这样任意单一订阅中的发布的事务一致性才能得到保证。逻辑复制被构建在一种类似于物理流复制的架构上。它由“walsender”和“apply”进程实现。walsender 进程开始对 WAL 的逻辑解码并且...

导出应用

应用信息 当前导入、导出应用数据时,包含的应用信息如下所示:应用名、应用描述信息、应用所处集群信息、应用实例数 应用程序包、应用镜像 CPU、内存请求与限制值 启动命令、启动参数、环境变量配置 就绪探针、存活探针、启动后脚本、停止...

应用列表

如果需要使用标签过滤其他应用数据(例如 场景化分析 数据),则创建标签时需要遵循 开源Prometheus的命名规范,仅使用字母、数字和下划线(_),且首字母需要小写。说明 语言 列的图标含义如下:接入应用监控的Java应用。接入应用监控的...

应用拓扑

应用数据上报至 可观测链路 OpenTelemetry 版 后,可观测链路 OpenTelemetry 版 即可开始监控应用,您可以在 应用拓扑 页面了解应用内部服务的调用关系。前提条件 已将应用数据上报至 可观测链路 OpenTelemetry 版,具体操作,请参见 接...

部署.NET Core应用

数据持久化 将应用数据存储到 NAS、OSS 或 数据库,避免应用变更或停止导致数据丢失。注意NAS、OSS、数据库需要额外付费。日志与监控 部署应用后即可 查看实时日志、查看资源使用情况和负载,无需额外配置。此外,还可以将日志输出到 SLS ...

部署Python应用

数据持久化 将应用数据存储到 NAS、OSS 或 数据库,避免应用变更或停止导致数据丢失。注意NAS、OSS、数据库需要额外付费。日志与监控 部署应用后即可 查看实时日志、查看资源使用情况和负载,无需额外配置。此外,还可以将日志输出到 SLS ...

部署PHP应用

数据持久化 将应用数据存储到 NAS、OSS 或 数据库,避免应用变更或停止导致数据丢失。注意NAS、OSS、数据库需要额外付费。日志与监控 部署应用后即可 查看实时日志、查看资源使用情况和负载,无需额外配置。此外,还可以将日志输出到 SLS ...

规划概述

​ 数仓分层:数据引入层ODS、公共维度层DIM、明细数据层DWD、汇总数据层DWS 及 应用数据层ADS 等分层逻辑。业务视角规划 业务分类、数据域与数据集市构成业务驱动的管理框架,通过划分数据归属领域(业务分类)、定义核心业务活动(数据域...

使用同账号ACR实例的镜像部署应用

数据持久化 将应用数据存储到 NAS、OSS 或 数据库,避免应用变更或停止导致数据丢失。注意NAS、OSS、数据库需要额外付费。日志与监控 部署应用后即可 查看实时日志、查看资源使用情况和负载,无需额外配置。此外,还可以将日志输出到 SLS ...

功能特性

分区格式化数据盘 扩容数据盘 随着业务发展和应用数据增长,数据盘的使用空间不足时,您可以扩容数据盘的存储容量。扩容数据盘 管理快照 管理快照 快照是某一时间点磁盘数据状态的备份文件,常用于日常数据备份、服务器数据误操作恢复、...

使用非ACR实例的镜像部署应用

数据持久化 将应用数据存储到 NAS、OSS 或 数据库,避免应用变更或停止导致数据丢失。注意NAS、OSS、数据库需要额外付费。日志与监控 部署应用后即可 查看实时日志、查看资源使用情况和负载,无需额外配置。此外,还可以将日志输出到 SLS ...

数据标准概述

Dataphin支持创建并管理数据标准,以保障数据的标准化生产与管理,节约数据应用和处理的成本。5分钟快速了解 背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义...

依赖服务

应用数据上报至 可观测链路 OpenTelemetry 版 后,可观测链路 OpenTelemetry 版 即可开始监控应用,您可以在 依赖服务 页面了解应用依赖服务的详情,包括外部调用、数据库调用和消息队列的详细信息。前提条件 已将应用数据上报至 可观测...

数据标准概述

Dataphin支持创建并管理数据标准,以保障数据的标准化生产与管理,节约数据应用和处理的成本。5分钟快速了解 背景信息 数据标准目标是为 业务、技术 和 管理 提供服务和支持。数据标准管理的过程就是对数据以及数据的属性信息的标准化定义...

划分数据

数据域是联系较为紧密的数据主题的集合,是业务对象高度概括的概念,目的是便于管理和应用数据。通常,您需要阅读各源系统的设计文档、数据字典和数据模型,研究逆向导出的物理数据模型。进而,可以进行跨源的主题域合并,跨源梳理出整个...

功能特性

多可用区部署 备份恢复 Lindorm宽表引擎支持数据备份恢复功能,基于数据生态服务中的数据迁移将数据存储至OSS中,定期全量备份数据,实时增量同步数据,来满足对数据备份和数据恢复的需求。备份恢复 产品生态 功能集 功能 功能描述 参考...

创建和管理轻应用

应用数据 用于统计当前版本轻应用的页面编排、服务编排、结构对象、依赖数据源的数量。单击数字跳转到对应的列表页。⑤ Serverless资源用量 显示当前版本轻应用的Serverless资源用量,包括:本月CPU资源使用量、本月Memory资源使用量、...

使用不同账号ACR实例的镜像部署应用

数据持久化 将应用数据存储到 NAS、OSS 或 数据库,避免应用变更或停止导致数据丢失。注意NAS、OSS、数据库需要额外付费。日志与监控 部署应用后即可 查看实时日志、查看资源使用情况和负载,无需额外配置。此外,还可以将日志输出到 SLS ...

创建逻辑模型:应用

应用表通常挂载于应用数据层,用于将一个统计粒度(维度或维度组合)及该粒度下的多个指标汇总输出,为后续的业务查询,数据分发等提供基础。您也可以根据业务需求,选择将应用表挂载至其他数据层。创建数据分层,详情请参见 定义数仓分层...

设置NAS存储

将NAS挂载至 SAE 应用实例,可以有效解决应用数据的持久化存储需求,并实现应用实例之间的数据共享。前提条件 开通NAS服务 通过控制台创建通用型NAS文件系统 添加挂载点 操作步骤 在创建应用过程中配置NAS存储 在 SAE应用列表 中,在顶部...

设置资产数据

说明 如果您使用的是API数据源,还可以根据需要,进行跨域数据配置以及获取用户cookie,详情请参见 跨域数据配置 和 使用cookie实现可视化应用数据隔离。在编辑框中,修改数据源脚本。单击数据源脚本编辑框右下角的 图标,全屏编辑数据源;...

提供服务

应用数据上报至 可观测链路 OpenTelemetry 版 后,可观测链路 OpenTelemetry 版 即可开始监控应用,您可以在 提供服务 页面了解应用提供的服务详情,包括接口调用、消息队列、定时任务和内部方法的详细信息。前提条件 已将应用数据上报至...

异常分析

应用数据上报至 可观测链路 OpenTelemetry 版 后,可观测链路 OpenTelemetry 版 即可开始监控应用,您可以在 异常分析 页面按照异常名称、接口名称、主机对异常次数、异常列表进行筛选分析,优化产生异常的代码。异常分析功能中,异常...

通过Jaeger上报C++应用数据

本文介绍如何使用Jaeger埋点并上报C++应用数据。重要 为获得更丰富的功能、更先进的链路追踪能力,以及最佳使用体验,建议您使用OpenTelemetry协议将应用接入 可观测链路 OpenTelemetry 版。我们为您提供了详细的OpenTelemetry接入指南和...

通过Zipkin上报Go应用数据

通过Zipkin上报数据的原理 代码埋点 要通过Zipkin将Go应用数据上报至 可观测链路 OpenTelemetry 版 控制台,首先需要完成埋点工作。添加组件依赖。[[constraint]]name="github.com/openzipkin/zipkin-go" version = "0.1.1" [[constraint]]...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用