大数据云计算技术

_相关内容

产品集成

常见产品如下:大数据开发治理平台 DataWorks 实时计算 Flink 版 数据库管理 DMS DataV 数据可视化 Quick BI 数据分析与展现 前提条件 已获取 OceanBase 数据库的基本连接信息,详细步骤请参见 获取连接参数。大数据开发治理平台 ...

数据分析整体趋势

存储计算分离:云计算的本质是资源高效池化,而数据库的两核心组件是存储和计算。通过存储计算分离,做到两者解耦,资源池化,独立扩展,满足业务上资源隔离,数据共享的需求,是当下的架构趋势。计算分析一体化:传统数据分析方案是定期...

操作流程

通过云计算资源 将已存在数据库中的数据表,通过云计算资源扫描方式,导入 企业数据智能平台 系统,实现逆向创建逻辑表。具体操作,请参见 通过云计算资源导入逻辑表。通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联...

常见问题

如何理解开源与原生的大数据技术与产品?MaxCompute作为大数据平台,对业务数据是否有好的监控手段?MaxCompute的项目发挥什么作用?如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret?现有账号的AccessKey被禁用,创建一个新的...

技术架构选型

本教程中使用阿里云大数据产品MaxCompute配合DataWorks,完成整体的数据建模和研发流程。完整的技术架构图如下图所示。其中,DataWorks的数据集成负责完成数据的采集和基本的ETL。MaxCompute作为整个大数据开发过程中的离线计算引擎。...

预览物理表数据

云计算资源为空间数据类型时,在 数据预览 页面左上角,打开 地图模式 开关,查看空间地图和当前加载页数据所对应的所有点、线、面图形。数据筛选:在 数据预览 页面上方,选择字段并设置字段条件,可通过条件筛选预览数据。说明 筛选...

云计算资源类型

云计算资源是 企业数据智能平台 中数据标准字段使用的基础,通过了解数据标准支持的云计算资源类型,并在系统设置模块添加数据标准需要使用的云计算资源类型对应资源,以备在物理化质量校验函数和物理化数据字典时使用。本文介绍数据标准...

典型场景

ETL离线数据处理 面对复杂SQL优化和海量数据大规模聚合分析等挑战,原生数据仓库AnalyticDB PostgreSQL版 具有如下技术优势:支持标准SQL、OLAP窗口函数和存储过程。ORCA分布式SQL优化器,复杂查询免调优。MPP多节点全并行计算,PB级数据...

新建云计算资源

支持新建多种类型的数据源,为使用 企业数据智能平台 做数据支撑。本文介绍如何新建云计算资源。...重要 删除云计算资源将造成数据无法访问,导致该云计算资源中存储的已授权物理表、标签、数据服务API等无法使用或加工任务异常,请谨慎操作。

阿里电子政务产品全家福

阿里电子政务平台提供弹性计算类、网络、数据库、存储、大数据、中间件、IoT等品类丰富的产品及高标准的安全合规服务,用以支撑多种政务类业务场景,例如:城市大脑,合规应用平台等。截至文档发布时间,阿里电子政务共计上线95款...

Tair(Redis企业版)简介

Tair将重点建设 原生 版,如软硬件技术结合、数据智能分布、数据存储和计算处理一体化等核心能力。2019年11月 发布Tair 3.0,即 Tair(Redis企业版):内存型(兼容Redis 5.0):采用多线程模型,集成多个自研Tair数据结构,提供高性能、...

新建工作组

后续操作 通过添加云计算资源,为使用 企业数据智能平台 做数据支撑。以RDS MySQL资源为例,更多信息,请参见 新建云计算资源。通过成员管理功能,对工作组实现账号和角色权限控制。更多信息,请参见 工作组成员管理。通过全局变量功能,可...

什么是原生内存数据库Tair

Tair将重点建设 原生 版,如软硬件技术结合、数据智能分布、数据存储和计算处理一体化等核心能力。2019年11月 发布Tair 3.0,即 Tair(Redis企业版):内存型(兼容Redis 5.0):采用多线程模型,集成多个自研Tair数据结构,提供高性能、...

云计算资源类型

云计算资源是 企业数据智能平台 中数据建模使用的基础,通过了解数据建模支持的云计算资源类型,并在系统设置模块添加数据建模需要使用的云计算资源类型对应资源,以备在物理化逻辑表和设置对应资源的质量规则时使用。本文介绍数据建模中...

图扑案例

业务要求与挑战 5G、云计算、边缘计算等智能、互联技术的快速发展,推动了工业物联网IIoT场景下各种软件、硬件传感器数量激增,与之对应的采集数据量和数据类型快速增长,导致数据存储、检索难度更。现有解决方案中,通常依赖自建单...

产品概述

专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里各行业客户业务的考验,助力企业加速完成业务数字化转型。PolarDB-X 1.0 核心能力采用标准关系型数据技术实现,配合完善的...

新建云计算资源

支持新建多种类型的数据源,为使用 数据资源平台 做数据支撑。本文介绍如何新建云计算资源。...重要 删除云计算资源将造成数据无法访问,导致该云计算资源中存储的已授权物理表、标签、数据服务API等无法使用或加工任务异常,请谨慎操作。

Napatech案例

解决方案 阿里 原生多模数据库 Lindorm 是一款适用于任何规模、多种模型的原生数据库服务,其基于存储计算分离、多模共享融合的原生架构设计,具备弹性、低成本、稳定可靠、简单易用、开放、生态友好等优势。Lindorm支持海量数据的低...

云计算资源类型

云计算资源是 企业数据智能平台 中通用资源使用的基础,通过了解通用资源支持的云计算资源类型,并在系统设置模块添加通用资源需要使用的云计算资源类型对应资源,以备在新建函数资源、自定义函数并物理化以及新建数据基础库并物理化时使用...

自媒体:易撰

PolarDB-X 专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍易撰如何通过 PolarDB-X 应对业务挑战。所属行业...

发展历程

2010年10月,阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月,平台的单集群规模已达到5000台。2014年7月,平台开始对外提供服务,完全替换开源体系。2015~2018年,平台开始日趋成熟,ODPS更名为MaxCompute。单集群已过万台,...

前言

数据库是企业最重要的基础技术软件,随着云计算的快速崛起以及对传统IT基础设施带来的革新,云数据库也面临着新的机遇和挑战。经过阿里巴巴集团多年双十一技术的积累与云原生环境的创新结合,2017年9月,阿里云正式对外发布了自主研发的云...

行业趋势与背景

专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里各行业客户业务的考验,助力企业加速完成业务数字化转型。PolarDB-X 核心能力通过标准关系型数据技术实现,配合完善的管控运...

2023年

2023年12月28日-MaxCompute升级公共Endpoint 尊敬的MaxCompute用户:感谢您对原生大数据计算服务MaxCompute的支持,MaxCompute将于北京时间2024年1月4日对华北2(北京)、华东2(上海)、华东1(杭州)、华南1(深圳)、华北3(张家口...

新建云计算资源

添加云计算资源为使用数据资源平台做数据支撑。以新建ApsaraDB for RDS和MaxCompute云计算资源为例,介绍如何新建云计算资源。前提条件 您已经购买ApsaraDB for RDS云计算资源,并完成RDS快速入门,具体操作,请参见 RDS快速入门。您已经...

云计算资源类型

了解数据查询支持的云计算资源类型,以便后续参考使用。本文介绍数据查询支持的云计算资源。目前支持的云计算资源类型:MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、SQLServer、Oracle、Hive、...

云计算资源类型

云计算资源是 企业数据智能平台 资产管理的基础,了解运营支持的云计算资源类型,以备在系统设置模块添加对应资源。本文介绍运营模块支持的云计算资源类型。表资产 支持的云计算资源类型:MaxCompute、DataHub、Hive、RDS MySQL、...

功能特性

通过Flink导入数据 通过Spark导入数据 数据库 SelectDB 版支持通过Spark SelectDB Connector,利用Spark的分布式计算能力导入大批量数据。本文介绍使用Spark SelectDB Connector同步数据至云数据库 SelectDB 版的基本原理和使用方式。...

产品定价

租户实例:基于 OceanBase 独特的租户隔离技术,将一个大型集群按照租户进行虚拟隔离后独立呈现出来的一个计算资源,可以独立作为一个数据库实例进行应用,该租户实例下可以单独创建数据库,租户实例数据库下单独创建表,独立为上层 APP ...

什么是物联网边缘计算

同时,物联网边缘计算可以结合阿里大数据、AI学习、语音、视频 等能力,打造出云边端三位一体的计算体系。视频介绍 物联网边缘计算的核心功能如下:边缘实例 边缘实例提供一种类似文件夹的管理功能,您可以通过实例的方式管理边缘端...

HDFS原生上云方案

Lindorm文件引擎 是面向海量非结构化数据的分布式文件存储服务,具有弹性、低成本的优势,提供100%的HDFS协议和使用体验,支持企业大数据中的HDFS无缝平滑上云,构建原生时代的存储计算分离的大数据架构。方案总览 方案优势 简单:...

概述

列存架构 架构理念 随着原生技术的不断普及,以Snowflake为代表的新一代原生数仓以及数据库HTAP架构不断创新,可见在未来一段时间后行列混存HTAP将会成为一个数据库的标配能力,需要在当前数据库列存设计中面向未来的低成本、易用性、...

输入节点

运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...

API概览

本产品(原生大数据计算服务 MaxCompute/2022-01-04)的OpenAPI采用 ROA 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK...

PolarDB Serverless实现了哪些突破

在国际数据库顶级会议2021 ACM SIGMOD上,一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文,介绍了阿里自研数据库 PolarDB 基于计算存储分离,实现的最新Serverless技术架构研究进展。...

操作审计事件数据迁移至MaxCompute

参数 描述 大数据计算服务地域 被投递数据的MaxCompute项目所在地域。说明 操作审计会将审计日志投递至MaxCompute指定地域下的actiontrail_<阿里账号ID>项目中。因为同一阿里账号下MaxCompute项目名称唯一,若账号下已有actiontrail_...

技术面临的挑战与革新

云计算下如何平衡扩展性和稳定性SLA 云计算环境下,企业和个人通过开启云服务,即可以得到所需的软件功能、计算资源、存储空间,并按实际使用量付费。在业务量逐步上涨的过程中,用户需要不断提升计算和存储资源来满足业务需要。因此,扩展...

新零售:杭州数云信息技术有限公司

PolarDB 采用存储和计算分离的架构,提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务,既融合了商业数据库稳定可靠、高性能、可扩展的特征,又具有开源云数据库简单开放、自我迭代的优势。本文介绍杭州...

云计算资源类型

通过了解数据开发支持的云计算资源类型,并在系统设置模块添加数据开发需要使用的云计算资源类型对应资源,以备在运行离线节点或者部署运行测试场景和线上场景时使用。本文介绍数据开发中支持使用的云计算资源类型。节点模式 支持的云计算...

聚合支付方案

阿里从业务扩展性、数据流动性、服务高可用三方面入手,通过多款云数据库产品为利楚扫呗制定聚合支付方案,解决利楚扫呗在业务扩展期遇到的数据存储空间不足、读写性能下降以及大数据分析空缺等问题。业务痛点 武汉利楚商务服务有限公司...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用