大数据云计算

_相关内容

新建云计算资源

支持新建多种类型的数据源,为使用 企业数据智能平台 做数据支撑。本文介绍如何新建云计算资源。...重要 删除云计算资源将造成数据无法访问,导致该云计算资源中存储的已授权物理表、标签、数据服务API等无法使用或加工任务异常,请谨慎操作。

云计算资源类型

云计算资源是 企业数据智能平台 中数据建模使用的基础,通过了解数据建模支持的云计算资源类型,并在系统设置模块添加数据建模需要使用的云计算资源类型对应资源,以备在物理化逻辑表和设置对应资源的质量规则时使用。本文介绍数据建模中...

云计算资源类型

云计算资源是 企业数据智能平台 中通用资源使用的基础,通过了解通用资源支持的云计算资源类型,并在系统设置模块添加通用资源需要使用的云计算资源类型对应资源,以备在新建函数资源、自定义函数并物理化以及新建数据基础库并物理化时使用...

新建云计算资源

支持新建多种类型的数据源,为使用 数据资源平台 做数据支撑。本文介绍如何新建云计算资源。...重要 删除云计算资源将造成数据无法访问,导致该云计算资源中存储的已授权物理表、标签、数据服务API等无法使用或加工任务异常,请谨慎操作。

输入节点

运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...

新建云计算资源

添加云计算资源为使用数据资源平台做数据支撑。以新建ApsaraDB for RDS和MaxCompute云计算资源为例,介绍如何新建云计算资源。前提条件 您已经购买ApsaraDB for RDS云计算资源,并完成RDS快速入门,具体操作,请参见 RDS快速入门。您已经...

云计算资源类型

了解数据查询支持的云计算资源类型,以便后续参考使用。本文介绍数据查询支持的云计算资源。目前支持的云计算资源类型:MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、SQLServer、Oracle、Hive、...

云计算资源类型

云计算资源是 企业数据智能平台 资产管理的基础,了解运营支持的云计算资源类型,以备在系统设置模块添加对应资源。本文介绍运营模块支持的云计算资源类型。表资产 支持的云计算资源类型:MaxCompute、DataHub、Hive、RDS MySQL、...

基于Flink的资讯场景实时数仓

实时计算 实时计算(Alibaba Cloud Realtime Compute)是阿里提供的基于Apache Flink构建的企业级大数据计算平台。在PB级别的数据集上可以支持亚秒级别的处理延时,赋能用户标准实时数据处理流程和行业解决方案;支持Datastream API作业...

操作审计事件数据迁移至MaxCompute

参数 描述 大数据计算服务地域 被投递数据的MaxCompute项目所在地域。说明 操作审计会将审计日志投递至MaxCompute指定地域下的actiontrail_<阿里账号ID>项目中。因为同一阿里账号下MaxCompute项目名称唯一,若账号下已有actiontrail_...

云计算资源类型

通过了解数据开发支持的云计算资源类型,并在系统设置模块添加数据开发需要使用的云计算资源类型对应资源,以备在运行离线节点或者部署运行测试场景和线上场景时使用。本文介绍数据开发中支持使用的云计算资源类型。节点模式 支持的云计算...

数据分析作业

MaxCompute是适用于数据分析场景的企业级SaaS模式云数据仓库,支持在多种工具上使用MaxCompute运行大数据计算分析作业。如果您需要进行简单的查询等数据分析作业,推荐您使用SQL查询或DataWorks的临时查询等工具,高效便捷地完成数据分析...

云计算资源类型

了解数据同步支持的云计算资源类型,以便后续参考使用。本文介绍数据同步支持的云计算资源。单表任务链路 目前系统支持的任务链路如下表所示。说明 对号(√)代表支持,其他则为不支持。目标端支持版本与源端一致。批量任务链路 目前系统...

数据分析整体趋势

存储计算分离:云计算的本质是资源高效池化,而数据库的两核心组件是存储和计算。通过存储计算分离,做到两者解耦,资源池化,独立扩展,满足业务上资源隔离,数据共享的需求,是当下的架构趋势。计算分析一体化:传统数据分析方案是定期...

相关的云服务

DataWorks作为阿里一站式大数据开发与治理平台,通常会与计算引擎产品联合使用,此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下,使用DataWorks时通常会使用到的其他产品。计算...

使用限制

数据库MongoDB版(副本集架构)同步至云数据库MongoDB版(副本集架构或分片集群架构)使用MongoShake实现MongoDB副本集间的单向同步 使用MongoShake实现MongoDB实例间的延迟同步 分片集群实例 功能 约束 实例部署 目前不是所有地域和可用...

什么是数据库HBase

云数据库HBase是低成本、高扩展、智能的大数据NoSQL,兼容标准HBase访问协议,提供低成本存储、高扩展吞吐、智能数据处理等核心能力,是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...

云计算资源类型

通过了解质量评估支持的云计算资源类型,并在系统设置模块添加质量评估需要使用的云计算资源类型对应资源,以备在运行质量检测计划时使用。本文介绍质量评估模块支持的云计算资源类型。质量规则 支持的云计算资源类型:MaxCompute Hive ...

物理化数据字典

通过物理化数据字典,可以将数据字典物理化到云计算资源生成物理表,保证设置的数据质量规则在云计算资源中生效。本文介绍如何物理化数据字典。前提条件 已创建或者导入数据字典,具体操作,请参见 新建数据字典 和 导入数据字典。已创建...

资源包

为了更好地帮助您节省成本,云数据库 ClickHouse 企业版 推出了计算资源包和存储资源包,用于抵扣企业版集群的资源消耗。资源包概述 项目 计算资源包 存储资源包 抵扣对象 云数据库 ClickHouse 企业版 计算资源。云数据库 ClickHouse 企业...

操作流程

数据服务API:数据API是一种由云计算资源中的数据通过参数配置生成API的API类型,生成API后可以方便后续调用,减少资源操作成本。上线API 通过上线API操作才能使API被调用。服务调用流程(工作组内)及说明 流程图 流程说明 流程 说明 API...

就绪检测节点

运行属性 运行属性 用于设置数据检测节点的云计算资源和所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...

计费项

本文介绍云数据库MongoDB的计费项。说明 具体价格信息,请参见 价格计算器。云数据库MongoDB计费组成如下。单节点实例 副本集实例 分片集群实例 Serverless实例 计费项 单节点实例 副本集实例 分片集群实例 Serverless实例 实例规格 存储...

发展历程

2010年10月,阿里巴巴集团自主研发的第一代云计算平台稳定运行。2013年8月,平台的单集群规模已达到5000台。2014年7月,平台开始对外提供服务,完全替换开源体系。2015~2018年,平台开始日趋成熟,ODPS更名为MaxCompute。单集群已过万台,...

批量或异步插入数据

异步插入数据 数据库ClickHouse适合批次的数据写入方式,这样可以节省计算周期和磁盘I/O,节省成本。在client端常用的写入方式为批量写入,如果想在ClickHouse Server侧支持批量写入,可以使用异步插入模式。启动异步写入方式需要启用 ...

Serverless Spark概述

DLA Spark基于原生架构,提供面向数据湖场景的数据分析和计算功能。开通DLA服务后,您只需简单的配置,就可以提交Spark作业,无需关心Spark集群部署。重要 原生数据湖分析(DLA)产品已退市,原生数据仓库 AnalyticDB MySQL 版 湖仓...

基于混合负载的查询优化

Batch模式:采用批计算架构,通过DAG进行任务切分,分批调度,满足有限资源下大数据计算,支持计算数据落盘,适用于计算,吞吐高的复杂分析场景。资源池混合负载隔离 AnalyticDB MySQL版弹性版本支持资源池多租户隔离。通过一个实例...

简介

系统兼容开源GeoMesa、GeoServer等生态,内置了高效的时空索引算法、空间拓扑几何算法、遥感影像处理算法等,结合云数据库HBase强大的分布式存储能力以及Spark分析平台能力,广泛应用于空间、时空、遥感大数据存储、查询、分析与数据挖掘...

规格及选型

8C32G ESSD盘 PL1 16C64G ESSD盘 PL2 表 2.Serverless 实例系列 调度模式 节点规格/计算资源阈值(ACU)存储磁盘类型 适配场景 高可用 手动调度 4C16G 共享存储 新产品形态,支持秒级变配、按需存储及数据共享。适合如下场景:业务负载...

引擎简介

与多模引擎共享存储,LindormDFS支撑,充分利用了对象存储的低成本与高可靠、块存储的高性能等优势,并通过高低速分层存储、副本共享去重、智能冷热转存等技术,面向用户提供弹性低成本、100%HDFS协议兼容的原生大数据存储能力,可使用...

计算费用(按量付费)

标准SQL作业(指使用按量付费标准版计算配额的SQL作业)SQL作业当日总费用=计算输入数据量×SQL复杂度×单价 单日计算量小于100 TB(包含)时,单价如下:公共:0.3元/GB 金融云:0.57元/GB 说明 单日计算量大小=计算输入数据量×SQL复杂...

常见术语

原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算与存储完全分离的架构,支持数据库(RDS\PolarDB)与消息实时归档建仓,提供弹性的Spark与Presto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统Hadoop方案...

什么是原生数据湖分析

原生数据湖分析(简称DLA)是新一代大数据解决方案,采取计算与存储完全分离的架构,支持数据库(RDS\PolarDB\NoSQL)与消息实时归档建仓,提供弹性的Spark与Presto,满足在线交互式查询、流处理、批处理、机器学习等诉求,也是传统...

通过实时计算Flink读写原生数据仓库AnalyticDB ...

原生数据仓库AnalyticDB PostgreSQL版 支持通过实时计算Flink读写数据。本文介绍如何通过Flink写入数据到 AnalyticDB PostgreSQL版 及读取 AnalyticDB PostgreSQL版 数据。通过实时计算Flink版写入数据到AnalyticDB PostgreSQL版 具体...

数据库RDS简介

通过数据集成服务,可将RDS数据导入MaxCompute,实现规模的数据计算 DTS 您可以使用数据传输服务DTS将本地数据库迁移到上的RDS,以及实现RDS的异地容灾。OSS 对象存储服务OSS是阿里提供的海量、安全、低成本、高可靠的存储服务。...

变更磁盘存储类型

计算节点数量 存储空间(单位:GB)数据量(单位:GB)变配耗时(单位:小时)4 50 10 1.5 4 500 3 8 5.5 4 1500 15.5 4 500 100 4.5 费用说明 阿里会根据变更后磁盘存储类型进行收费,具体费用信息,请参见 产品定价。操作步骤 不同使用...

节点类型说明

节点类型 对应的云计算资源类型 说明 MaxCompute SQL MaxCompute 离线节点,运行于MaxCompute类型的云计算资源之上,可通过输入SQL语句方式处理MaxCompute和Table Store类型的数据源。MaxCompute MR MaxCompute 离线节点,当算法脚本类型为...

自媒体:易撰

PolarDB-X 专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍易撰如何通过 PolarDB-X 应对业务挑战。所属行业...

查看云计算资源物理表

云计算资源新建完成后,可查看当前云计算资源中的物理表的基本信息和表结构;同时,可通过获取最新物理表和更新缓存表来更新物理表。本文主要介绍如何查看云计算资源的物理表。前提条件 已新建云计算资源,具体操作,请参见 新建云计算资源...

公交出行:启迪公交

PolarDB-X 专注解决海量数据存储、超高并发吞吐、表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍启迪公交如何通过 PolarDB-X 应对业务挑战。所属...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用