DataWorks是一站式智能大数据开发治理平台，适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务，为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
技术原理 列存索引（IMCI）是一个高性能的列存分析引擎，相关文档请参见 PolarDB HTAP实时数据分析技术解密，ORC和Parquet也是列存格式，OSS支持高并发读取，在高并发时可以获取更高的网络吞吐。因此，IMCI的并行扫描功能可以充分利用OSS的...
基于标签数据的群体分析、专家业务模型构建、全流程任务监控告警、数据服务化、数据资产管理等核心能力，提供标准化程度高、易用性强的一站式大数据管理平台。依托数据资源平台，可设计高质量的标准化数据模型，减少重复开发工作，用户可...
解决企业复杂大数据批处理难题，支持企业精细化运营、数据营销、智能推荐等大数据业务场景。离线集成功能底层基于Spark开发，支持提升Hadoop平台运行速度的应用场景。说明 如果您在使用该功能的过程中有任何疑问或问题，请使用钉钉搜索钉钉...
了解DataWorks on EMR Serverless StarRocks DataWorks作为阿里云一站式大数据开发治理平台，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、作业周期性调度，同时结合StarRocks引擎在数据分析和数据...
阿里云开放的大数据平台 E‑MapReduce(EMR)提供了多种产品形态，以满足不同用户的业务需求。根据部署方式可分为 EMR Serverless Spark、EMR Serverless StarRocks、EMR on ECS 和 EMR on ACK。为帮助用户选择合适的产品，以下整理了各产品...
Dataphin分析平台设置为使用分析平台的前提条件。包含分析平台专用的计算源设置、临时表生命周期设置、数据结果下载及审批设置。本文将为您介绍如何进行分析平台设置。前提条件 已完成计算源创建，具体操作，请参见 计算源概述。权限说明 ...
这些分析引擎具备高效的数据压缩、列式存储及并行查询等特性，使其在大数据分析场景中表现出色。它们可广泛应用于用户画像、人群圈选、商业智能等多种业务分析场景。在数据分析场景下，以StarRocks分析引擎为例，阿里云EMR通过以下流程实现...
需分析、大数据量聚合 的数据列：创建列存索引，存储在列存引擎内。超高性能，降本增效 Lindorm的宽表引擎支持千万级并发写入与点查，有效分流搜索库负载，同时通过深度压缩算法优化实现存储成本降低。与原Elasticsearch方案相比，Lindorm...
支持用户通过SQL、PyODPS、Python等进行数据分析、探索，挖掘数据的价值，完成大数据与AI的融合应用开发。Notebook 近实时数仓 DeltaTable增量表格式 Delta Table 存储 表是MaxCompute的数据存储单元，MaxCompute中不同类型作业的操作对象...
强大的数据分析能力，支持复杂报表和仪表盘。与阿里云生态无缝集成。学习曲线较陡，新手可能需要时间适应。高级功能可能需要额外付费。Quick BI数据可视化 Grafana 监控和分析多种数据源，实现实时数据展示。支持多种数据源，灵活性高。...
包含分析平台 和资产消费 任务执行专用的计算源设置、分析平台中临时表生命周期设置及数据结果下载和审批设置。本文将为您介绍如何进行分析消费平台设置。前提条件 已完成计算源创建，具体操作，请参见 计算源概述。说明 分析平台支持...
阿里妈妈 公司介绍 阿里妈妈广告业务主要是一种 P4P（Pay for Performance）形式的广告业务系统，而报表中心作为阿里妈妈向广告主透出广告效果数据的唯一平台，在阿里巴巴大平台丰富多样的商业场景下，为客户提供优质，高效，可靠的数据...
创建并绑定MaxCompute计算资源 本教程需要创建MaxCompute项目并将其绑定为DataWorks计算资源，用于后续接收数据并进行大数据分析。前往 DataWorks工作空间列表 页，切换至 华东2（上海）地域，找到已创建的工作空间，单击工作空间名称，...
数仓/数据湖构建 周期性地将线上业务数据库（OLTP）的全量或增量数据，批量同步至数据仓库或数据湖的贴源层（ODS），作为后续数据分析的源头。数据备份与灾备 定期将生产数据库的全量数据备份到低成本的存储介质（如HDFS、OSS）。跨地域/...
常见云产品如下：大数据开发治理平台 DataWorks 实时计算 Flink 版 数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现 前提条件 已获取 OceanBase 数据库的基本连接信息，详细步骤请参见 获取连接参数。大数据开发治理平台 ...
DMS的Data+AI功能模块，针对数据全生命周期的集成、开发、服务三个阶段提供界面化的功能支持。...数据分析 DMS数据分析提供数据集、仪表盘，可以在仪表盘中可视化分析数据，并直观地呈现结果。更多信息，请参见 数据分析。
Quick BI 智能小Q是Quick BI集成多种大模型和Agent能力的增值服务模块，通过一系列AI功能如 小Q问数Agent、小Q解读Agent、小Q报告Agent、小Q搭建Agent 革新了整个BI的数据分析链路，帮助用户实现数据分析的智能化与个性化。用户能够通过...
阿里云数据湖构建（Data Lake ...传统大数据场景 适用于数据湖计算和数据湖分析场景，典型案例包括大数据离线分析、实时分析、机器学习以及日志文件分析等。通过DLF提供的统一元数据和存储服务，旨在简化和加速数据湖的构建以及数据治理过程。
DataV通过与DataWorks数据服务的对接，通过交互式分析Hologres连接DataWorks数据服务开发并生成API，快速在DataV中调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...
交互式数据分析 自助式 BI 工具和交互式数据探索平台使得非技术人员也能轻松进行复杂的数据分析。这类工具通常通过一系列短查询来实现动态筛选、排序、聚合等功能，提供灵活且直观的操作体验。支持拖拽式操作，无需编写复杂的 SQL 语句。...
关键性里程碑 2009年9月，ODPS（即现在的MaxCompute）大数据平台飞天项目正式启动。2010年10月，阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月，平台的单集群规模已达到5000台。2014年7月，平台开始对外提供服务，完全替换...
通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio还支持丰富多样的插件生态，实现实时离线一体化、湖仓一体化、大数据AI一体化，助力“Data+AI”全生命周期的数据管理。Data Studio介绍 Data Studio是智能湖仓一体...
通过个人开发环境实例支持Python开发、Notebook分析与Git集成，Data Studio还支持丰富多样的插件生态，实现实时离线一体化、湖仓一体化、大数据AI一体化，助力“Data+AI”全生命周期的数据管理。Data Studio介绍 Data Studio是智能湖仓一体...
DataWorks作为阿里云一站式大数据开发与治理平台，通常会与计算引擎产品联合使用，此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下，使用DataWorks时通常会使用到的其他云产品。计算...
查看数据分析实时大盘的步骤如下：登录控制台，单击 产品与服务 移动开发平台 mPaaS，选择应用。在导航栏左侧，单击 移动分析 数据概览。在右侧页面，单击 实时大盘 标签，进入实时大盘页面。选择平台、版本、渠道，以查看对应的细分数据。...
数据探索面向行业客户和业务人员，提供工具内容一体化的业务模型构建平台，实现低代码、可视化构建全场景专家模型，重塑大数据服务创新模式。将业务数据沉淀为智能数据或智能算子，通过可视化的拖拉拽和简单的图形化条件设定进行模型编排，...
同时，大数据系统基于“存储、用户、入口、流转、交付”等多方面的特点，存在诸多安全治理难点。数据安全治理的关键问题 数据安全治理能否清楚、准确地回答如下问题，将从侧面反映安全治理项目是否能有效地落地。哪些资产需要被保护？您有...
任务调度属性配置概述 任务调试流程 发布任务 批量操作 开发流程管控 运维中心 运维中心是一站式大数据运维、监控平台，支持实时查看任务的运行状态，并为异常任务提供智能诊断、重跑等运维操作。它提供智能基线功能，帮助您解决重要任务...
具体的业务场景如下所示：OLAP多维分析 用户行为分析 用户画像、标签分析、圈人 高维业务指标报表 自助式报表平台 业务问题探查分析 跨主题业务分析 财务报表 系统监控分析 实时数仓 电商大促数据分析 教育行业的直播质量分析 物流行业的...
背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建...
DataWorks基于 云原生大数据计算服务MaxCompute 轻松构建离线数仓分析系统。MaxCompute可通过DataWorks提供的可视化方式配置任务工作流、周期性调度执行任务及元数据管理，保障数据生产及管理的高效稳定。本文为您介绍在DataWorks上开发...
数据报告自动化 企业经常需要基于最新数据生成动态的数据分析报告，以监控业务的关键指标（KPI）。DataV-Note通过自然语言交互自动报告生成功能，能够自动将数据汇总并提取关键信息，将其转换为易于理解的图表和报告。这一过程大大减轻了...
多模型即时分析 提供常用的流量分析模型，在模型能力范围内，客户可以根据自身需求，无需数据同学开发，自助进行数据分析。支持事件分析、留存分析、漏斗分析、用户洞察等9种模型，所有分析模型都可做到秒级数据返回，大大提升数据的获取...
发布日期 2025年8月28日 重点升级概览 智能小Q 小Q超级框：智能小Q重磅升级，集问数、报告、解读、搭建、搜索、发现等多Agent于一体，让每位用户都拥有「超级数据分析师」。小Q报告 支持将小Q报告一键导出为图片、PDF 或 Word 格式，便于...
如果您的数据本身比较复杂，和趋势线中的5种数据类型差异都比较大，您可以综合使用趋势线和预测功能对数据做分析。比如以下数据，呈现出一个小的增长趋势，且波动逐渐放大，这时候趋势线只能展示大趋势情况，无法对每个点做精准的拟合。...
云原生大数据计算服务MaxCompute（原名ODPS）是阿里云自主研发的集 高性价比、多模计算、企业级安全 和 AI驱动 于一体的 企业级SaaS化智能云数据仓库（AI-Native Datawarehouse）。视频简介 产品简介 MaxCompute是面向分析的 企业级 SaaS ...
假设您是一家大型互联网新零售企业的数据分析师，您的经理刚刚拿到2019年8月份的月度运营分析数据，他发现近期企业运营状况不佳，8月份毛利额环比前几个月下滑较大，三季度毛利额存在不达标风险。因此，需要您根据 订单信息 和 流量渠道...
数据资产：数据资源平台中存在大量的数据表、标签、API等各类数据资产，数据管理者通过数据汇聚、数据治理、数据分析后，需要对整个平台数据进行统一管控，了解平台的核心数据资产，提供对应的数据资产管理规范。统一服务 应用：是调用API...
Flume最终会将数据落地到实时计算平台（例如Flink、Spark Streaming和Storm）、离线计算平台上（例如MR、Hive和Presto），也可仅落地到数据存储系统中（例如HDFS、OSS、Kafka和Elasticsearch），为后续分析数据和清洗数据做准备。...