本文主要介绍如何使用宜搭系统，通过创建空白应用后创建模板大屏，并配置应用中模板大屏的数据源和修改大屏标题的功能。背景信息 宜搭数字化大屏视频功能讲解，请参见如下视频：登录宜搭平台 操作步骤：登录 宜搭平台，在宜搭官网首页右上...
分类分级模板从模板维度为数据提供自动分类分级能力。给实例绑定模板后，系统会根据模板内的识别规则对实例中库表的字段进行分类分级扫描，判断是否有符合该规则的敏感字段并且给字段打上分类分级的标签，还可以保护（例如：敏感列权限访问...
资源费用明细：数据服务API调用 数据质量 数据质量可对任务产出的表数据进行数据质量监控，DataWorks将根据数据质量规则实例数量计费。资源费用明细：数据质量 OpenAPI DataWorks提供OpenAPI，您可基于OpenAPI实现业务定制化开发，...
查看模板数据集和 数据源 安装模板携带的数据集和数据源区分于自建的数据集和数据源，您可以数据源和数据源管理页面找到模板携带的数据集和数据源。模板数据集 模板数据源 应用示例 下面以使用模板创建仪表板为例介绍。登录 Quick BI控制台...
启动数据迁移项目后，您可以在数据迁移项目的详情页面查看相应项目的基本信息、项目执行的进度和状态等信息。进入详情页面 您可以在数据迁移项目的详情页面，查看计划的迁移环节、各个环节的进度和状态，帮助您了解数据库迁移的整体进度，...
数据同步量 根据数据源类型展示所选业务日期内，同步数据量的拉取和写入曲线，快速查看同步数据量较大的引擎任务，后续可考虑向该类引擎任务进行资源倾斜。数据同步榜单 统计最近10个 最新失败实例 和 最新成功实例，以便您全局查看最新的...
您只需一键单击应用，即可将模板及制作模板所使用的数据集安装至您的工作空间中，助力企业一键复用行业专家经验。本文基于模板市场带您安装并体验模板。模板效果预览 请访问 产品Demo体验 并预览更多优秀的模板案例。预览后，当您有中意的...
自定义KV模板参考字段可以不配置吗 针对模板服务大部分的数据可以不配置参考字段，也可达到比较好的识别效果。如果您的模板服务识别效果不佳，您也可尝试去除参考字段配置重新评测。针对部分版式较复杂、参考字段较少、文字较多的数据类型...
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
本文介绍 AnalyticDB MySQL 统计信息的作用与分类，自动收集统计信息的机制，手动收集统计信息的方法，以及如何查看统计信息。功能介绍 查询优化器（Query Optimizer）将查询转换为执行计划，并交给执行引擎执行。执行计划的质量会影响查询...
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
GitHub十大热门编程语言 DataWorks MaxCompute 函数计算 OSS 数据集成 数据开发 基础版 基于GitHub Archive公开数据集，通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据，在DataStudio 数据开发 模块通过函数...
同Auto analyze一致 ENABLE_STATISTIC_FEEDBACK 注意事项 在表数据量比较大的情况下，存储节点可能由于执行统计信息采集任务，在凌晨出现IOPS增高的情况。在非凌晨时间出现IOPS升高，有可能是以下两种情况：表数据量过大，导致统计信息采集...
本文为您介绍如何基于已有的仪表板、数据大屏、电子表格和数据填报，创建自定义模板。新建模板 登录 Quick BI控制台。在Quick BI首页，按照下图指引，新建模板。在 新建 模板 对话框中，配置以下参数。界面参数说明 参数 说明 模板 类型 ...
云数据库Redis版 集成了DAS的Key分析功能，可展示实例当前实时和历史的大Key和热Key，包括大Key的元素个数以及热Key的访问频次。当Redis内存使用率升高或CPU使用率升高时，帮助您快速找到大Key和热Key，解决实例性能问题。前提条件 实例为...
归档统计只作数据统计，不作预警使用。支持的归档数据源类型有分钟统计/无 Key、分钟统计/多 Key、常用服务指标。常用服务指标目前仅支持总量的归档。操作步骤 登录实时监控产品控制台，从左侧导航栏选择 自定义监控>新建>新建监控产品。在...
存储 众所周知，大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，...
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
DataWorks在多个行业中均有典型的案例落地，帮助多个行业的企业解决数据痛点，挖掘数据价值，本文为您介绍典型行业中已落地的客户案例。新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，...
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
设置集群表名是否区分大小写，您可以选择 不区分大小写（默认）或当本地数据库区分大小写时，您可以选择 区分大小写，便于您迁移数据。说明 集群创建后该参数无法修改，请谨慎选择。步骤3：确认订单 请确认集群的整体配置并配置购买数量，...
如果您需要查看租户粒度下的全局异常数据统计概况，则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时，您可以选择查看最近7天内的统计数据。鼠标悬停至 图标，...
如果您需要查看租户粒度下的全局异常数据统计概况，则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时，您可以选择查看最近7天内的统计数据。鼠标悬停至 图标，...
概述 本文介绍云数据库 RDS MySQL 版如何收集表的统计信息。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改...
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有多种不同的定义方法，给后期进行数据汇集和整合带来障碍。因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在标准...
步骤四：配置案例 在 DataWorks控制台 左侧导航栏选择 大数据体验>ETL工作流模板，单击 Github十大热门编程语言 模板，单击 载入模板，配置模板参数。参数 说明 模板名称 显示当前模板名称，即“Github十大热门编程语言”。工作空间 选择 ...
您可以使用 DMS 录入云数据库 OceanBase 的数据，通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。什么是数据管理DMS 支持的数据库...
约定项 填写内容 约定项 填写内容 时间窗口（历史数据要求）*存储周期*更新频率（日、周、月、小时、分钟、其它）*期望数据更新时间*数据验收人 待验收数据样本 数据验收方式 数据提供形式 物理表 数据文件 数据查询服务或接口 备注 NO....
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
本文为您介绍使用疫情态势管控...以 疫情态势管控大屏 模板为例，在 创建数据大屏 对话框中，输入可视化应用名称，并设置应用的分组。单击 创建。应用创建成功后会跳转到画布编辑器页面，即可看到一款满足疫情态势管控功能且设计精良的模板。
本文为您介绍使用疫情态势管控...以 疫情态势管控大屏 模板为例，在 创建数据大屏 对话框中，输入可视化应用名称，并设置应用的分组。单击 创建。应用创建成功后会跳转到画布编辑器页面，即可看到一款满足疫情态势管控功能且设计精良的模板。
基于湖构建数据平台，支持BI、挖掘等业务 对象存储OSS可以作为湖存储，DLA基于OSS构建一站式的大数据平台。具体包括构建数据湖、数据ETL、交互式查询、机器学习等功能。构建数据湖 实时数据湖：支持DB的CDC与消息数据（如Kafka）入湖，构建...
使用流程概览：参考文档：数据集成概述 数据建模与开发 子模块：数据建模 功能说明：数据建模是全链路数据治理的第一步，沉淀阿里巴巴数据中台建模方法论，从数仓规划、数据标准、维度建模、数据指标四个方面，以业务视角对业务的数据进行...
在任务运行详情中，查看 窗口等待时间（5 min），该指标表示最近5分钟窗口内，同步任务读取数据或写入数据的等待时间。用于帮助您判断数据同步延迟的瓶颈方，当数据同步发生延迟时，指标数据较大的一般为瓶颈方。确认造成延迟问题的系统...
本文为您介绍可视分析创作间中数据集的探查过程。前提条件 已通过上传或者连接数据库完成数据集的创建。操作步骤 输入账户和密码，登录 可视分析创作间。在左侧导航栏，单击分析图标，进入 分析 页面。选择需要探查的数据集，单击 探索，...
数据采集 数据加工 配置数据质量监控 数据可视化展现 目标人群 开发工程师、数据分析师、产品运营等存在数仓数据获取与数据分析洞察人员。涉及产品 本案例涉及以下产品：一站式大数据开发治理DataWorks 本案例通过DataWorks实现数据采集，...
拉链表是数据仓库设计中用来处理数据变化的一种技术，它允许保存历史数据，记录一个事物从开始到当前状态的所有变化信息，可以反映任意时间点数据的状态。本文将为您介绍基于MaxCompute引擎在DataWorks上实现拉链表ETL的案例。前提条件 已...
本文介绍针对车联网大数据场景，Lindorm Ganos时空引擎基于SQL接口实现的轨迹服务。背景信息 随着车联网行业的发展，汽车管理业务受到了更加广泛的关注。汽车云平台的业务系统每天都会接收到大量的车辆信息，例如车辆的实时位置和车辆的...
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...