当热数据存储量达到业务使用阈值时，自动将当前热数据盘中占用空间最大的part数据文件移动到冷数据盘存储，从而释放热数据盘存储空间。TTL存储策略 在默认存储策略基础上，添加TTL语句，实现将间隔时间之前的所有数据自动转移到冷数据盘中...
当需要变更数据元所属目录时，您可以通过移动数据元，实现数据元所属目录的修改。本文介绍如何修改数据元目录。前提条件 已存在1个及以上（不包含默认类目）的数据元目录。已完成数据元创建或者导入，具体操作，请参见 新建数据元 或者 ...
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
实时数据通道 接入多种异构数据并投递到下游多种大数据系统 通过数据总线，您可以实时接入APP、WEB、IoT和数据库等产生的异构数据，统一管理，并投递到下游的分析、归档等系统，构建清晰的数据流，让您更好的释放数据的价值。收益 系统解耦...
互联网行业：快狗打车云上大数据仓库 客户简介 快狗打车则一直坚持通过“连接网络化”、“运力共享化”、“过程数据化”、“匹配智能化”等数字信息化解决方案，将闲散运力统一整合到平台上，通过大数据将运力精准匹配市场需求，实现运力的...
DataWorks是一站式智能大数据开发治理平台，适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务，为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
本文介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将...MaxCompute处理业务数据和日志数据后，可以通过Quick BI快速地以可视化方式展现数据处理结果，详情请参见 基于MaxCompute的大数据BI分析。
本文介绍数据迁移的最佳实践，包含将其他业务平台的业务数据或日志数据迁移至MaxCompute，或将...MaxCompute处理业务数据和日志数据后，可以通过Quick BI快速地以可视化方式展现数据处理结果，详情请参见 基于MaxCompute的大数据BI分析。
支持创建数据库节点数据源 数据源类型 数据源简介 MySQL MySQL是用于存储和处理数据的关系型数据库管理系统（RDBMS），是最流行的关系型数据库管理系统之一，其体积小、速度快、总体拥有成本低。更多介绍请参见 MySQL。SQL Server SQL ...
解决方案 DataWorks 联合 MaxCompute、Hologres 等云原生大数据引擎，提供一套 湖仓一体、流批融合 的一站式智能数据平台解决方案，帮助企业打破数据处理的时效壁垒。统一的数据接入与分层 通过 DataWorks 数据集成(Data Integration)，...
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
功能概述 SQL查询 SQL查询是使用标准的SQL语句，来查询和分析存储在MaxCompute中的大数据，详情请参见 SQL查询（旧版）。您可以通过编写SQL语句，对有查询权限的数据源进行快速的数据查询与分析操作，详情请参见 SQL查询（旧版）。...
阿里云EMR凭借弹性扩展的计算集群、多源异构数据融合治理以及实时流批一体处理等卓越能力，已经广泛应用于金融风控、电商精准营销、物联网时序数据处理等多个领域。本文为您介绍EMR在数据湖、数据分析、实时数据流、数据服务四个场景的典型...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
适用于数据量较大的情况，可以提高同步速度。批量写入数据量 AnalyticDB for PostgreSQL和StarRocks目标数据源支持配置批量写入数据量，即一次性写入的数据量大小，可同时设置批量写入条数，写入时按两个配置中先达到上限的量写入。批量...
EMR提供的组件包括开源和自研两大类，涵盖数据开发、计算引擎、数据服务、资源管理、数据存储、数据集成等领域，您可以按需选择和配置。说明 在创建集群时，如果没有您想使用的组件，或者想使用的开源组件仅对存量用户开放，您可以自行安装...
存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，...
本教程中使用阿里云大数据产品MaxCompute配合DataWorks，完成整体的数据建模和研发流程。整体架构图 完整的技术架构图如下图所示。其中，MaxCompute作为整个大数据开发过程中的离线计算引擎。DataWorks的数据集成负责完成数据的采集和基本...
数据开发更简单：平台提供的各种工具产品能够极大的简化数据开发过程，缩短数据治理周期，降低数据治理成本。通过标准化、精细化、规格化的智能数据生产流程，完成流水线式的数据生产作业，提升数据资源生产效率、消除数据供应品质差异。...
DataWorks 是阿里云提供的一站式大数据开发与治理平台，旨在帮助用户解决从数据接入、处理、治理到服务化的全链路数据问题。它通过一系列高度协同的功能模块，将复杂的数据工程流程化、可视化，显著降低了大数据开发的门槛。本文将为您逐一...
您可以在 云原生数据仓库 AnalyticDB MySQL 版 空间总览页面查看集群和表的总数据量、冷数据量、热数据量、索引数据量、分区数量、节点的磁盘使用率等指标。查看集群级别的数据量 通过 空间总览 可以查看当前集群的 总数据量、热数据量、冷...
当线上数据库中的历史数据（访问率很低的数据）越来越多，占用的存储越来越大，以至于会影响数据库的查询性能与业务运转，此时您可以使用 数据管理DMS 的数据归档功能，周期性地将符合筛选条件的表数据归档至其他数据库或存储服务中。...
提供 同步速率 功能控制流量，避免同步速度过快对数据来源端或者数据去向端造成太大的压力。不限流的情况下则会提供现有硬件环境下最大的传输性能。分布式执行任务 支持分布式执行的数据源可通过任务切片技术，将同步任务分发至多节点并发...
提供同步速率功能控制流量，避免同步速度过快对数据来源端或者数据去向端造成太大的压力。不限流的情况下则会提供现有硬件环境下最大的传输性能。任务运维 线上干预 支持重跑、补数据、置成功、冻结/解冻等线上干预操作。监控报警 支持配置...
MMS通过与MaxCompute Spark引擎集成，简化了从自建数据源到MaxCompute的大规模数据迁移过程，降低了配置复杂度和运维成本。功能概述 迁移架构 MaxCompute数据迁移服务MMS支持元数据和数据迁移。元数据迁移：通过元数据API（如Hive ...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
Apache Flume是一个分布式、可靠和高可用的系统，可以从大量不同的数据源有效地收集、聚合和移动日志数据，从而集中式的存储数据。使用场景 Flume使用最多的场景是日志收集，也可以通过定制Source来传输其他不同类型的数据。Flume最终会将...
也可以在 我的数据 页面内预览某个已上传的数据，并移动该数据到一个分组下，或者将该数据重新编辑名称或删除数据；还可以在页面右上角的搜索框内搜索某个数据或按不同方式对数据内容进行排序。详情请参见 数据页面管理。5 空间档案 支持...
本文介绍云数据库MongoDB支持升级的数据库大版本以及如何升级数据库大版本。注意事项 协议要求：升级分片...在 规格信息 区域，将鼠标移动至 升级数据库版本 上，单击需要升级的数据库大版本。在弹出的 升级数据库版本 对话框中，单击 确定。
95 分位值指将采集到的 100 个数据，从小到大排列，取第 95 个用户的数据做统计。因此，当数据量不足 100 时，95 分位图可能会无法显示。散点图：展示当前指标的异常数据点，方便您进行网络诊断。展示 Top 100 的异常明细数据。单击散点，...
如何检查客户端是否已正确接入 正确接入客户端之后，控制台上仍然看不到数据 在控制台创建事件后，看不到事件 PV 和 UV 数据 在控制台创建事件后，事件 UV 始终显示为 0 自定义大盘中没有数据展示 移动分析控制台上 iOS 客户端的闪退日志...
您可以先通过 mPaaS 控制台的 移动分析 日志管理 配置上传开关 页面，将 日志上报条数（本地文件中当前类型的日志到达条数触发日志上报）修改为 1，以便触发日志上报，调试完毕后，再改回原本的条数。更多关于日志上报触发的内容，参见日志...
移动数据到组内 单击数据页面中某一个数据中的 图标，然后拖动该数据至左侧数据分组列表内的某一个具体分组处，在弹出的确定移动分组对话框中，单击 OK 将数据移动到指定分组中。编辑分组 单击分组列表右侧的 图标，在左侧弹窗中修改名称后...
数据分类分级是保障数据安全的重要前提。它为各行业提供对敏感数据类型及其级别的识别与划分能力，能够有效检测组织数据资产中是否存在敏感信息，并根据其敏感程度进行等级划分。分类分级不仅有助于准确掌握数据资产中的敏感内容，还为后续...
652567824470354XXXX Path string 是 移动的目标路径，不需要带文件资源名称。例如将 math.py 文件的路径变成到 root/demo/math.py，则此参数需要填写 root/demo root/demo 返回参数 名称 类型 描述 示例值 object Schema of Response ...
查看数据分析实时大盘的步骤如下：登录控制台，单击 产品与服务 移动开发平台 mPaaS，选择应用。在导航栏左侧，单击 移动分析 数据概览。在右侧页面，单击 实时大盘 标签，进入实时大盘页面。选择平台、版本、渠道，以查看对应的细分数据。...
时空数据管理面临的挑战 Ganos 解决什么问题 Ganos 为数据库构建了面向新型时空多模多态数据的一体化表达、存储、查询、分析与渲染支撑能力，解决了以往时空大数据使用流程复杂、使用门槛高、应用效率低等问题，可广泛应用于城市管理、交通...
时空数据管理面临的挑战 Ganos 解决什么问题 Ganos 为数据库构建了面向新型时空多模多态数据的一体化表达、存储、查询、分析与渲染支撑能力，解决了以往时空大数据使用流程复杂、使用门槛高、应用效率低等问题，可广泛应用于城市管理、交通...
单击左侧导航栏的 移动分析 自定义大盘。在页面右上方，单击 创建自定义大盘。在自定义大盘创建窗口中，输入大盘名称，单击 确定。添加自定义分析报表。在新建的大盘中，单击 添加分析报表，选择报表添加方式：新建自定义分析 或 选择已有...
{/纬度 lat:38.5714/经度 lng:106.5306/缩放等级 zoom:4.3/触发移动的类型 type:"moveend_mouse"} 动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将作为参数。例如基础平面地图配置了API数据源为 ...