查看会话统计详情 在 会话统计 页签：您可以从用户、访问来源和数据库维度分别查看或导出当前集群的会话活跃数和会话总数。单击右上方 10 秒 SQL 分析，您可以从 SQL 类型、用户、来源、数据库 维度查看 10 秒内租户内 SQL 执行情况。查看 ...
字段信息：为您展示字段的序号、名称、数据类型、描述/备注、业务类型/关联实体（维度逻辑表和事实逻辑表仅展示关联实体）、关联标准（需购买数据标准模块）、样例数据（仅开启 数据采样 功能时展示）、质量分（需购买数据质量模块且资产...
2022-12-05 实例画像 2022年11月 引擎 功能名称 功能描述 发布时间 相关文档 RDS MySQL、PolarDB MySQL版 自动SQL优化 新增自动SQL优化的API接口，用于获取指定时间段内自动SQL优化任务的统计数据，包括任务总数和最大收益等。2022-11-29 ...
同步对象统计 页签为您展示表级别的统计 DML 数量，在该页签上方的变更总和、Delete、Insert 和 Update 显示的数据为当前数据迁移任务中所有的 DML 数量，即增量同步对象页签统计的数量之和。如果您开启 DDL/DML 统计功能之后又关闭了该...
在写入时序数据时，您必须指定时间线元数据和时间线数据。如果时间线不存在，将根据写入的时序数据自动提取元数据，并创建相应的时间线。注意事项 在写入时序数据时，请合理评估时序表的设计并关注时间线的总条数。如果表中存在大量的短...
使用时序模型时，时间线数据占用的存储空间类型与所用实例规格（容量型存储或高性能存储）一致，时间线元数据占用的存储空间为高性能存储，查询与分析时序表中数据时会消耗计算资源。CU模式（原按量模式）：时序模型计费项包括时间线数据和...
Workflow：支持编排数十种引擎类型的实时及离线数据开发节点及AI节点的工作流研发模式。个人开发环境：支持运行Python节点开发及调试，支持Notebook交互式分析，以及集成Git代码管理与NAS/OSS存储。Notebook：智能化交互式数据开发和分析...
Workflow：支持编排数十种引擎类型的实时及离线数据开发节点及AI节点的工作流研发模式。个人开发环境：支持运行Python节点开发及调试，支持Notebook交互式分析，以及集成Git代码管理与NAS/OSS存储。Notebook：智能化交互式数据开发和分析...
查看数据预览 数据洞察 您可以为表创建数据洞察，通过深度数据分析和解读来获取数据统计及分布情况。查看数据洞察 查看表基本信息 您可以在表详情页左侧的 表基础信息 区域查看表的 浏览次数、读取次数、收藏次数 等信息。图标表示当前表为...
MaxCompute近实时架构 上图所示即为MaxCompute高效支持上述综合业务场景的全新架构，支持丰富的数据源方便地通过定制开发的接入工具实现增量和离线批量数据导入到统一的存储中，由后台数据管理服务自动优化编排数据存储结构，使用统一的...
精准营销 该场景通过实时的数据统计，监测不同渠道用户的增长、活跃、留存状况，让企业快速分析出投资回报率。提高营销效果数据时效性，便于改进产品体验和优化营销方案，提高整体收益。该场景可实现：实时多源数据同步 支持多业务数据源，...
此数据为离线统计，有 T+1延迟。存储量 当前地域下，所有表的逻辑存储大小总和，包含调度任务的临时文件、删除表后尚未释放的存储空间。此数据为离线统计，有 T+1延迟。总API数 当前地域下，已发布至API网关的MaxCompute类型的API总数。...
相比开源工具redis-rdb-tool的解析速度，离线全量Key分析 在大小Key混合（占比1：9）的场景下实现4倍速度提升，在中大Key场景下实现20倍速度提升，同时保证进程内存占用固定维持在1 GB以内，避免大Key解析可能带来内存溢出的问题。离线全量...
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务，包括MaxCompute等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、Microsoft SQL Server、...
数据集成 离线集成 离线集成是一种低代码的数据开发工具，您可以组合各类任务节点，形成数据流，通过周期调度运行达到数据加工、数据同步的目的，进而对在线数据库、数据仓库的数据进行加工处理并同步至目的端。更多信息，请参见 离线集成...
离线整库迁移可用于将本地数据中心或在ECS上自建的数据库同步数据至大数据计算服务，包括MaxCompute、Hive、TDH Inceptor 等数据源。本文为您介绍如何新建并配置整库迁移任务。前提条件 已完成所需迁移的数据源创建。整库迁移支持MySQL、...
近实时增全量一体化架构 基于上述背景，MaxCompute推出近实时增全量一体化架构，支持丰富的数据源，并通过定制开发的接入工具实现增量和离线批量数据导入到统一的存储中，由后台数据管理服务自动优化编排数据存储结构，使用统一的计算引擎...
丰富的数据导入工具：云数据库 SelectDB 版 可从多种数据源（阿里云数据源、自建数据源）进行数据导入，提供稳定、高效、简单易用的数据集成方案。具体操作，请参见 数据导入工具。丰富的数据可视化集成工具：云数据库 SelectDB 版 可与...
场景：以下SQL为Spark SQL，通过EMR Spark SQL节点创建的外部表ods_user_info_d_spark，用LOCATION来获取离线数据集成任务写入私有OSS对象存储Bucket的用户信息，并写入对应的dt分区。补充：DataWorks提供调度参数，可实现调度场景下，将...
场景：以下SQL为Spark SQL，通过EMR Spark SQL节点创建的外部表ods_user_info_d_spark，用LOCATION来获取离线数据集成任务写入私有OSS对象存储Bucket的用户信息，并写入对应的dt分区。补充：DataWorks提供调度参数，可实现调度场景下，将...
基础功能和增值功能 智能研发版 基础功能 离线数据集成 支持 离线编码研发 支持 规范建模 支持 资产清单 支持 权限管理 支持 增值功能 说明 在购买了基础功能的前提下，您可以叠加购买增值功能包。实时集成 可增购 实时研发 可增购 智能运...
数据库在存储数据时，会将同一条时间线的数据尽量聚类存储，提升时间线数据访问效率，同时更好的支持时序数据压缩。在时序表中，Tag列的值都相同的一系列数据行构成了一条时间线。时序数据库提供一系列特有的数据访问操作，包括聚合...
DescribeSqlLogStatistic 查询DAS企业版数据统计信息 调用DescribeSqlLogStatistic接口，查询DAS企业版的数据统计信息。GetDasSQLLogHotData 查询DAS企业版热存储数据明细 获取审计日志热数据。CreateSqlLogTask 创建DAS企业版离线任务 ...
背景信息 MaxCompute SQL作为分布式数据处理的主要入口，可实现EB级别离线数据的快速处理和存储。随着大数据业务的不断扩展，新的数据使用场景在不断产生，MaxCompute计算框架也在不断演化。MaxCompute原来主要面对内部特殊格式数据的强大...
Lindorm流引擎读取车辆的实时位置点数据，定期（每小时、每天）将位置点拼接为轨迹，再将聚合后的轨迹线数据写入至数据库，不仅保证了对车辆行驶轨迹数据的实时处理和分析能力，同时也减轻了数据库在处理高频率追加写入操作时的IO压力。...
核心目标：建立稳定、可靠、可追溯的离线数据仓库体系。模块组合：实现方式：数据集成：每日凌晨，将业务库（如RDS）的增量数据同步至MaxCompute的 数据引入层 ODS。智能数据建模：预先规划数仓分层，并设计好明细数据层DWD、汇总数据层DWS...
应用层：基于实际应用需求，获取公共层加工整合后的数据，面向具体应用场景或指定产品进行的个性化数据统计。该层级可以挂载应用表、维度表。数仓分层 DataWorks的 数仓分层 功能，默认为您创建了 数据引入层ODS（Operational Data Store）...
统计预估表行数 重要 要求 宽表引擎版本 为2.8.2.6及以上，Lindorm SQL版本 为2.8.2.6及以上。执行以下SQL统计预估表行数：SHOW ESTIMATED ROWS FROM table;执行结果如下：+-+|ESTIMATED_ROW_COUNT|+-+|15000|+-+通过集群管理系统粗略查看...
本文介绍了通过mysqldump工具将 PolarDB-X 数据导出的场景和详细操作步骤。工具介绍 PolarDB-X 支持MySQL官方数据导出工具mysqldump，mysqldump能够导出表结构信息和表内数据，并转化成SQL语句的格式方便用户直接导入。说明 mysqldump适合...
步骤一：快速找出大Key和热Key 阿里云控制台工具 Tair和Redis 在控制台提供了Top Key统计和离线全量Key分析功能帮助您快速找出大Key与热Key。方法 使用限制 说明 操作步骤 Top Key统计（推荐）仅 Redis开源版 5.0及以上版本和 Tair（企业版...
新榜基于微信、抖音、小红书、快手等主流内容平台，提供完善的数据工具，为用户带来实时热门素材、品牌声量、直播电商等全面的数据监测分析能力，同时提供基于多平台新媒体数据的企业级数据服务。业务要求与挑战 新榜原方案采用...
细说Dataphin概念建模 数据集成 API数据源与集成优化 数据集成最佳实践：分区表作为来源表时的处理策略 数据集成：针对离线集成任务超时的优化策略 离线整库迁移功能升级 针对OSS数据集成场景下的功能全面优化 新增离线集成任务列表，支持...
新增支持离线调度模板功能，计算任务调度、集成任务调度、逻辑表任务调度、派生指标和离线数据集对象根据引用的调度模板进行任务调度。数据库SQL新增支持DM（达梦）和openGauss数据源。元数据中心新增支持SelectDB、Doris、DM（达梦）采集...
原始数据 作用 浙江省招生一段线.csv 存放浙江省2023年普通类高校招生投档分数线数据，以及高校信息数据（例如，所在省份、城市等）。用于分析各省份的分数线及招生计划。浙江省招生二段线.csv 高校信息.csv 居民人均消费支出.csv 用于分析...
MaxCompute将GH Archive提供的海量公开事件数据进行离线处理并开发，生成以下表：dwd_github_events_odps（GitHub公开事件数据事实表）dws_overview_by_repo_month（GitHub公开事件月度指标数据聚合表）说明 表中的数据源于 GH Archive。...
标签工厂新手指引 创建行为统计标签 创建行为偏好标签 创建规则组合标签 离线数据集概述 分析平台 新增SQL查询功能，支持保存、预编译、加速查询、运行、分享、参数配置、格式化、定位SQL查询任务；支持查看SQL的查询任务结果、任务日志及...
支持JindoFS存储系统fsimage的离线导出和分析查询。支持跨集群访问JindoFS存储系统。JindoFS分层存储命令详情请参见 分层存储命令使用说明。JindoFS缓存优化 改进缓存数据磁盘组织，解除对系统盘的依赖，实现数据盘之间完全独立，增强磁盘...
V2.5.1 2019年4月26日 问题修复 put和mput在加入details或者summary时候，数据点统计错误的问题修复。写入单点数据时，空格引发的JSON解析失败问题修复。多值模型下的NullPointerException问题修复。TSDB时间线没有限制住增长的问题修复。...
2024-07-24 无 兼容Dataphin离线集成和数据服务 新增 对接了阿里云智能数据建设与治理产品Dataphin，支持用户通过Dataphin离线集成SelectDB，并提供数据服务。2024-07-08 创建SelectDB数据源 配置SelectDB输入组件 配置SelectDB输出组件 ...
本文介绍统计云数据库HBase表行数的方法。根据云数据库HBase表的服务类型使用不同的统计方法。如果云数据库HBase表为增强版，统计HBase表行数的方法具体请参见 统计表行数的方法。如果云数据库HBase表为标准版，可以通过两种方式精确的统计...