大数据技术中台管理

_相关内容

数据管理DMS服务器监控数据的采集频率

本文对数据管理控制台中服务器监控数据刷新频率进行说明。通过“登录服务器”,进入到服务器管理界面,“实时监控”显示的数据,是每隔5秒左右获取一次数据,如下图。关闭、退出服务器管理界面,会自动停止“实时监控”数据的采集。数据...

添加处理后数据数据管理

数据处理后,需要将处理后的数据添加到数据管理中,以便被用于数仓建设、标签管理等数据中台任务。本文以倾斜数据处理后为例,介绍如何添加处理后数据数据管理。前提条件 已新建数据处理任务,具体操作,请参见 新建数据处理任务。操作...

空间数据(邀测

数据处理 支持倾斜数据处理能力,可以将OSGD格式数据转化为S3M数据,再将处理后的数据添加到数据管理中,以便被用于数仓建设、标签管理等数据中台任务。支持对数据处理任务进行管理。支持查看数据处理任务详情,包括任务的基本信息、处理的...

功能简介

数据处理 支持倾斜数据处理能力,可以将OSGB格式数据转化为S3M数据,再将处理后的数据添加到数据管理中,以便被用于数仓建设、标签管理等数据中台任务。支持对数据处理任务进行管理。支持查看数据处理任务详情,包括任务的基本信息、处理的...

产品简介

产品功能架构 元数据管理,通过控制查看和管理数据元数据库和表的信息,通过 新增元数据库 的方式操作元数据,集成到第三方应用服务。并支持多版本管理、可通过元数据发现和入湖任务自动生成元数据。入湖基础操作,通过入湖任务的...

什么是DataWorks

典型客户 国家电网大数据中心:通过DataWorks实现总部+27家省(市)公司PB级数据的统一管理,通过全链路数据中台的治理与监测运营体系,加快电网整体数字化转型升级。世界500强亿滋中国:通过DataWorks智能数据建模进行全链路的数据模型...

什么是Dataphin

Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、用全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...

【通知】敏感数据保护功能商业化

细粒度权限管控 不支持 不支持 支持:无限制 支持:付费功能,包含在敏感数据管理中。说明 关于敏感数据保护功能的更多信息,请参见 敏感数据保护概览。计费规则 针对存量实例(2021年10月13日 功能商业化前,管控模式为安全协同且存在敏感...

客户案例

基于飞天大数据平台产品DataWorks+MaxCompute大大提高了数据业务的开发效率,构建大润发的数据中台体系。新金融行业:某互联网金融公司湖仓一体案例 客户架构如下。客户简介 公司的第一代数据湖是基于Hadoop+OSS搭建的,同时引入的数据中台...

集群性能监控概述

数据库 OceanBase 为您提供集群实例的数据库性能和主机性能监控功能,可在 OceanBase 管理控制台中查看监控数据,还支持自定义监控能力,您可按需配置常用监控指标作为自定义监控面板。查看监控数据 进入 OceanBase 管理控制。在左侧...

受众与核心能力

产品受众 从事数据开发、算法开发等岗位的技术人员 从事销售运营、商业智能分析等岗位的业务人员 从事数据安全与合规工作的管理人员 从事数据应用开发的开发人员 把控公司核心数据资产的管理人员 核心能力 基于DataWorks,您可以获得如下...

DataWorks数据服务对接DataV最佳实践

DataV通过与DataWorks数据服务的对接,通过交互式分析Hologres连接DataWorks数据服务开发并生成API,快速在DataV调用API并展现MaxCompute的数据分析结果。数据服务对接DataV产生背景 MaxCompute是阿里巴巴集团自主研究的快速、完全托管的...

大屏管理

大屏是数据管理DMS提供的两种可视化应用类型之一,提供自由布局和自定义样式能力,通过可视化组件和一系列内置辅助图形来打造视觉呈现丰富的可视化大屏。大屏的定位与仪表盘不一样,仪表盘倾向于快速打造可视化报表,而大屏通常被广泛用于...

使用流程

同时支持接入不同引擎的云数据库、自建数据库等,均可以在DBS控制数据进行管理。备份完成后,您可以按需恢复数据库。说明 DBS支持接入的数据源,请参见 数据源。大型企业级备份 操作简单 管理方便 批量创建多个备份计划 方式一:...

防泄露数字水印

在DMS数据管理中,明水印由用户名以及一个四位的随机ID组成,如下图所示。暗水印(隐形水印):阿里安全团队自研的肉眼不可见数字水印技术,将水印内容通过特殊技术隐藏在载体内部,用于数据泄露后的最终溯源或者其他业务场景。目前您可以...

Data Copilot智能助手

其结合了 DMS 熟练的数据管理数据使用能力,可帮助开发、运维、产品、运营、分析师和数据库管理员,更高效、规范地使用和管理数据。本文为您介绍如何使用DMS Data Copilot。功能特性 将自然语言生成规范的SQL,降低SQL编写门槛,提升SQL...

什么是数据管理DMS

AnalyticDB MySQL版:云原生数据仓库AnalyticDB MySQL版是融合数据库、大数据技术于一体的云原生企业级数据仓库服务。AnalyticDB MySQL版支持高吞吐的数据实时增删改、低延时地实时分析复杂ETL(Extract Transform Load),兼容上下游生态...

IoT数据自动化同步至云端解决方案

登录 DataWorks控制,单击左侧导航栏的 数据集成,在下拉框选择对应工作空间后单击 进入数据集成。新增OSS数据源和MaxCompute数据源,详情请参见 配置OSS数据源 和 配置MaxCompute数据源。单击当前页面左上角的 图标,选择 全部产品>...

新功能发布记录

概述 名词解释 访问数据可视化功能 管理数据集 仪表盘 08月 功能名称 变更类型 功能描述 相关文档 极简模式 新增 极简模式的控制界面简洁、易上手、操作空间,可以随时查找目标数据库实例,无需反复切换到控制首页标签页。...

数据建模:智能数据建模

智能数据建模是阿里云DataWorks自主研发的智能数据建模产品,沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践,包含数仓规划、数据标准、维度建模及数据指标四大模块,帮助企业在搭建数据中台数据集市建设过程中提升建模及逆向建模的...

常见问题

对运维高危操作、异常访问、拖库攻击、数据库注入、数据库外联、数据库高危操作等行为进行监控告警,覆盖传统数据库的基础上,还支持对象存储OSS、大数据平台MaxCompute以及PolarDB数据库等,实现全方位统一管理。产品使用相关问题 数据...

用自然语言实时查看BI报表

应用场景 临时性数据分析:帮助非数据技术相关人员(如管理岗、决策人员等,特指不直接参与数据库表结构、数据分布和特征设计和感知等人员)快速获取所需的统计数据。通过简单的问题或指令来获取并分析需要的数据,如“我需要最近一周的...

Doris概述

Apache Doris是一个高性能、实时的分析型数据库,能够较好的满足报表分析、即席查询、数据湖联邦查询加速等使用场景。本文为您介绍Apache Doris。背景信息 关于更多Apache Doris信息,详情请参见 Doris介绍。使用场景 数据源经过各种数据...

NL2BI:用自然语言实时查看BI报表

应用场景 临时性数据分析:帮助非数据技术相关人员(如管理岗、决策人员等,特指不直接参与数据库表结构、数据分布和特征设计和感知等人员)快速获取所需的统计数据。通过简单的问题或指令来获取并分析需要的数据,如“我需要最近一周的...

Flink VVP+DLF数据入湖与分析实践

数据湖构建(DLF)可以结合阿里云实时计算Flink版(Flink VVP),以及Flink CDC相关技术,实现灵活定制化的数据入湖。并利用DLF统一元数据管理、权限管理等能力,实现数据湖多引擎分析、数据管理等功能。本文为您介绍Flink+DLF数据湖方案...

T+1多库合并建仓

单击左侧导航栏的 数据湖管理>数据入湖,在 数据入湖 页面单击 多库合并建仓 的 进入向导。DLA首次访问RDS时,需要您将RDS的只读权限授予DLA,授权完成后单击 下一步。说明 如果您之前已经将RDS的只读权限授予DLA,可以忽略该步骤。根据...

从自建Db2迁移至RDS MySQL

说明 若数据传输控制自动跳转至数据管理DMS控制,您可以在右下角的 单击,返回至旧版数据传输控制。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...

从自建Db2迁移至RDS MySQL

说明 若数据传输控制自动跳转至数据管理DMS控制,您可以在右下角的 单击,返回至旧版数据传输控制。在左侧导航栏,单击 数据迁移。在 迁移任务列表 页面顶部,选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...

开通备份恢复

云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能,该功能基于数据生态服务数据迁移,将数据存储至阿里云对象存储服务OSS(Object Storage Service,简称OSS),定期全量备份数据,实时增量同步数据,来满足对数据备份和数据...

ETL工作流快速体验

零售电商GMV分析 DataWorks MaxCompute 数据集成 数据开发 基础版 基于DataWorks提供的 智能数据建模 产品,使用该产品内置零售电子商务数仓模型,为您介绍DataWorks在数仓搭建过程技术栈及流程实现。案例相关文档:零售电商数据建模。...

一键建仓

数据管理DMS一键建仓功能可以实现一键创建实时同步的数据仓库,数据可在秒级的延迟下,同步至AnalyticDB MySQL版数据,帮助您更实时、准确地掌握业务情况,以便更好地进行业务分析和决策,提升业务效果。本文介绍如何在数据管理DMS...

数据备份

数据备份 登录 OceanBase 管理控制。在左侧导航栏,单击 实例列表。在实例列表找到目标集群实例,单击集群实例名称,进入 集群实例工作。在左侧导航栏单击 备份恢复>数据备份,查看数据备份列表。数据备份 任务页签展示所有...

快速入门综述

存储:以字母S开头的ECU为存储集群,采用SSD或HDD分层存储架构,热点数据存储在SSD磁盘,冷数据存储在HDD磁盘。适用于并发稍低、性能要求不高(可接受数据查询响应时间受超过10秒以上)的业务场景。说明 AnalyticDB MySQL版 2.0 仅...

C100售后支持相关问题

购买数据库审计实例后,您可以通过以下操作配置数据库审计服务:启用数据库审计实例 配置数据库审计实例 登录数据库审计系统 管理数据库资产 安装Agent 如果您想配置审计规则和告警通知,更多信息,请参见 C100快速入门。如何将跨地域、跨...

冷热分层

Delta Lake是新型数据湖方案,推出了数据流入、数据组织管理数据查询和数据流出等特性,同时提供了数据的ACID和CRUD操作。通过结合Delta Lake和上下游组件,您可以搭建出一个便捷、易用、安全的数据湖架构。在数据湖架构设计,通常会...

概览

概览页面,为您提供 OceanBase 控制的操作流程引导,并可查看资源总览、容量诊断和 SQL 诊断等信息。概念介绍 云数据库 OceanBase 的数据库实例主要有集群实例和租户实例两种类型。集群实例:在云数据库 OceanBase ,一个集群实例指 ...

基本概念

DMS 数据管理(Data Management Service,简称DMS)是一种集数据管理、结构管理、用户授权、安全审计、数据趋势、数据追踪、BI图表、性能与优化和服务器管理于一体的数据管理服务。更多信息,请参见 什么是数据管理DMS。DTS 数据传输服务...

自建MySQL应急恢复

背景信息 DBS沙箱功能,尝试引入数据重删技术(重复数据删除技术)和虚拟化存储技术,来解决传统数据库备份服务的存储成本和使用成本问题。通过重删和增量合并技术,使得备份数据在服务端持续保持可用的全量状态。通过虚拟化存储技术,...

租户实例工作

租户实例是基于 OceanBase 独特的租户隔离技术,将一个大型集群按照租户进行虚拟隔离后独立呈现出来的一个计算资源,可以独立作为一个数据库实例进行应用,该租户实例下可以单独创建数据库,租户实例数据库下单独创建表,独立为上层 APP ...

创建集群

通过阿里云E-MapReduce(简称EMR),您可以轻松构建和运行Hadoop、Spark、Hive、Presto等开源大数据框架,以进行规模数据处理和分析等操作。本文为您介绍在EMR on ECS上创建集群的操作步骤和相关配置,帮助您快速搭建和管理大数据集群。...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用