本文为您介绍如何基于Indexing Service系列实现数据流管理以及日志场景分析。背景信息 在复杂业务场景下，海量服务器、物理机、Docker容器、移动设备和IoT传感器等设备中往往存在着结构分散、种类多样且规模庞大的各类指标和日志数据，而...
本文为您介绍EMR在数据湖、数据分析、实时数据流、数据服务四个场景的典型应用。数据湖场景 阿里云EMR 数据湖集群，包含以下核心能力：核心能力 组件 说明 统一存储层 OSS-HDFS 提供兼容HDFS协议的对象存储底座，替代传统本地HDFS，计算...
调用RolloverDataStream，手动滚动更新数据流下的匹配索引。进行此操作后，将为当前数据流创建一个新的索引，该索引将成为数据流的新写索引。仅适用于日志增强版实例。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的...
如果没有工具来分析这些海量数据，企业无法在商业智能表上留下大量有价值的数据。因此，“数据多模”需求被逐步提出。传统大数据技术可以满足此类需求，但其发散的技术栈和不统一的使用习惯，都难以在广大企业内落地使用。因此急需统一、...
本文为您介绍MaxCompute支持连接的商业智能BI工具、数据库管理工具及ETL工具。MaxCompute的生态架构如下图所示。商业智能（BI）工具 商业智能（BI）工具支持将计算引擎得到的数据通过仪表板、图表或其他图形输出实现数据可视化，以直观的...
交互式数据分析 自助式 BI 工具和交互式数据探索平台使得非技术人员也能轻松进行复杂的数据分析。这类工具通常通过一系列短查询来实现动态筛选、排序、聚合等功能，提供灵活且直观的操作体验。支持拖拽式操作，无需编写复杂的 SQL 语句。...
适用角色 数据分析师 业务分析师 数据科学家 产品价值 大模型驱动的智能分析，开启愉快的探索旅程 AI自动规划数据分析任务，一键生成分析报告，完成从取数、分析、展示到洞察的全流程工作。多元化的分析方法，满足每一位用户的需求 无论您...
MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库，支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业，推荐您使用SQL查询或DataWorks的临时查询等工具，高效便捷地完成数据分析...
OSS Foreign Table（简称OSS FDW）是基于PostgreSQL Foreign Data Wrapper（简称PG FDW）框架开发的用于访问OSS数据的数据分析方案，支持将OSS数据导入至 AnalyticDB PostgreSQL版，且提供分区表功能，在性能、功能以及稳定性上都优于OSS ...
大数据分析平台 对于MaxCompute、Hadoop和Spark中保存的海量数据，可通过采用数据集成服务（DataX）或通过对象存储服务（OSS），快速批量导入到 云原生数据仓库AnalyticDB PostgreSQL版，帮助您实现高性能分析处理和在线数据探索。数据湖...
单击左上角的，在 新增数据流 对话框中，您需在 数据流名称 配置ETL任务名称，选择 开发方式 为 DAG。单击 确认。完成数据源信息的配置，配置方法请参见 配置源库信息。重要 需要配置两个源库。在页面左侧，将 表 Join 节点拖拽至页面右侧...
离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。数据分析 数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来...
阿里云提供了非常完善的BI体系，DTS可以帮助您将自建数据库实时同步至阿里云的BI存储系统（例如MaxCompute、分析型数据库或流计算等），助力您在阿里云上快速搭建满足自身业务的定制化BI系统。数据实时分析 传输方式：数据订阅 数据分析在...
该服务通过订阅数据包返还数据到MaxCompute，预置分析模板并结合可视化分析BI工具来快速完成数据分析工作，为企业提供更加灵活的一站式数据分析能力。解决方案架构如下。详细案例信息，请参见 友盟+案例。电商案例：玩物得志 客户简介 玩物...
在DataWorks的数据开发（DataStudio）、数据分析、安全中心模块下载的CSV、XLSX格式文件数据将同步保存至数据下载功能。通过该功能，您可将所需历史下载文件重新下载至本地使用，也可追溯历史下载记录的操作详情。前提条件 已通过如下模块...
通过统一的数据流与湖仓协同机制，Fluss助力企业打破数据孤岛，加速湖上数据价值的深度挖掘与高效共享。能力特点 说明 毫秒级流读流写 Fluss 支持低延迟的流式读写能力，结合 Apache Flink 可构建高吞吐、低延迟的实时数仓，适用于各类实时...
通过阿里云MaxCompute、云数据库RDS MySQL、DataWorks等产品，可以实现互联网、电商网站的离线数据分析，且支持通过DataV大屏展示分析后的业务指标数据。概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标...
功能简介 AI指标分析方案支持多种数据源对接、智能分析工具调用（如RAG、SQL、内置异动分析函数等）、资源调度优化（CPU部署Agent，GPU部署模型和推理）以及多种使用形态（WebUI和API）。功能模块 核心能力 详细说明 多源融合与灵活交互 ...
功能简介 AI指标分析方案支持多种数据源对接、智能分析工具调用（如RAG、SQL、内置异动分析函数等）、资源调度优化（CPU部署Agent，GPU部署模型和推理）以及多种使用形态（WebUI和API）。功能模块 核心能力 详细说明 多源融合与灵活交互 ...
离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。数据分析 数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来...
作用：可以根据冷门榜进行对话流的重新设计或者对话流归档，此处支持下载后供管理员进行冷门对话流分析。对话流明细数据下载 所选机器人在所选时间段内，根据用户对对话流的会话情况，展示对话流的触发详情。并且支持有关数据导出下载。...
若您正在使用数据可视化（老）功能进行数据分析，建议在功能下线前将数据集、图表和仪表盘迁移到数据分析功能。下线时间 2024年04月01日：针对部分用户，下线访问数据可视化（老）功能。说明 部分用户指在2023年04月01日至2024年04月01日这...
本实践以电商行业为例，通过MaxCompute、DataWorks对业务数据和日志数据进行ETL处理，并同步至分析型数据库MySQL（AnalyticDB MySQL）进行实时分析，再通过Quick BI进行可视化展示。背景信息 MaxCompute：用于进行大规模数据计算，详情请...
离线集成 离线集成是一种低代码的数据开发工具，可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。数据分析 数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来...
基本流程 作为数据治理计划的负责人，在阶段工作规划和日常治理时，都离不开数据分析方法和治理工具的落地。围绕治理目标，从制定到达成的整个过程，其步骤思路可参照下图：以下为您介绍典型的存储成本优化和稳定性优化的实操案例，了解...
本文介绍访问数据分析功能的三种方式。通过顶部菜单栏直接进入数据可视化 登录 数据管理DMS 5.0。单击控制台左上角的 图标，选择 全部功能 Data+AI 数据应用 数据分析。说明 若您使用的是非极简模式的控制台，在顶部菜单栏中，选择 Data+AI...
近些年来，随着业务数据量的增多，企业需要能够对数据进行分析，助力商业决策，更好地发挥数据价值，而传统开源及商业关系型数据库通常为单机版，在海量数据分析场景下扩展能力有限，性能无法满足需求。以Teradata，Oracle Exadata为代表的...
每个流量分析器是一个单独的分析空间，可以接入不同类型的数据源，例如VPC流日志、TR流日志。流量分析器会按照指定的 采样间隔 和 聚合维度 对接入的数据源进行分析处理，并将分析结果存储，存储时长 可自定义设置。可针对不同的业务需求...
UPSERT场景：流处理的多表连接中，涉及两个不同数据流的更新操作影响同一表内的不同列。数据流 StreamA 负责更新列 ColumnX。数据流 StreamB 负责更新列 ColumnY。UPSERT形式比较：传统UPSERT：StreamB 的更新可能会覆盖 StreamA 对数据所...
本章节介绍如何通过 云数据库 SelectDB 版 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库 SelectDB 版 提供多源数据目录功能（Multi-Catalog或Catalog），...
Sugar BI是百度智能云推出的敏捷 BI 和数据可视化平台，MaxCompute支持您将MaxCompute项目数据接入Sugar BI，帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何使用Sugar BI连接MaxCompute项目，并进行可视化数据分析。前提条件 ...
说明 DMS数据分析在SQL执行成功后，会基于各个字段的SQL数据类型和执行结果数据推测出合适的数据集模型，即区分字段是维度还是度量，因此在SQL执行成功后，您可以对数据类型和可视化类型进行验证和调整（如将字段数据类型调整为国家、省份...
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
基于此，DataHub新上线的订阅服务提供了服务端保存用户消费点位的功能，用户只需要通过简单的几步配置，然后在自己的应用逻辑里添 创建订阅 删除订阅 查看订阅 数据流消息管理 数据流消息管理 对Project、Topic、shard、group的管理与操作...
DataV-Note的智能分析功能，可根据您输入的自然语言匹配相应算法，一键分析数据、输出分析思路、分析过程，并生成分析报告，大幅缩短数据分析的时间，节省人力资源。本文为您介绍智能分析的相关功能及操作。注意事项 智能分析是系统根据您...
在 DataV 添加 OceanBase for MySQL 数据源的详细操作，请参见：什么是DataV数据可视化 配置数据库白名单 添加OceanBase for MySQL数据源 Quick BI 数据分析与展现 Quick BI 是一款全场景数据消费式的BI平台，秉承全场景消费数据，让业务...
单击左上角的，在 新增数据流 对话框中，您需在 数据流名称 配置ETL任务名称，选择 开发方式 为 DAG。单击 确认。在页面左侧，将 输入/维表 MySQL 节点拖拽至页面右侧画布的空白区域。单击画布区域的 输入/维表 MySQL-1，根据页面信息配置...
洞察是一款自助式数据挖掘分析型，面向业务管理者、运营、业务分析师等人员提供低使用门槛的智能、自动化、全面、精准的数据诊断和分析能力，智能发现数据规律或异常，实现从数据到知识的提取，辅助业务决策。几乎每个业务每天都存在业务...
本文介绍DMS数据分析的基本概念、设计理念和主要应用场景。背景信息 DMS数据分析提供典型的数据集、仪表盘和大屏模型，在仪表盘或大屏中提供丰富的可视化图表和组件来展示数据。您可以将数据库中的表或单条SQL查询结果作为数据集，在仪表盘...
数据管理DMS离线集成是一种低代码的数据开发工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的。支持的数据库类型 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB...