大数据云

_相关内容

数据库Memcache版适合存储多数据

云数据库Memcache版中,Key支持的最大长度为250字节(Byte),Key+Value的最大长度是4,194,291字节。如果Key+Value的长度大于等于4,194,292字节会提示错误:object too large for cache。使用过的对象会占用较带宽,导致QPS下降,...

限制说明

数据大小 云数据库 Memcache 版支持的单条缓存数据的 Key 最大不超过 1 KB,Value 最大不超过 1 MB,过的数据不适合存储。事务支持 云数据库 Memcache 版不支持事务,有事务性要求的数据不适合写入,而应该直接写入数据库。使用场景 当...

查看虚拟主机MySQL数据库中表的大小

当您的虚拟主机MySQL数据库剩余可用空间较小时,您可以查看数据库中所有表的大小,并删除有异常的或者无用的表,以便享有更多的可用空间。本文为您介绍查看主机MySQL数据库中表大小的方法。操作步骤 登录待查看表大小的数据库。具体操作...

发展历程

产品荣誉 年份 产品荣誉 2023年 进入Gartner云数据库、数据分析第一象限Leader象限。2022年 自研一体化数据计算平台和数据仓库产品ODPS获世界互联网领先科技成果奖。在TPCx-BB 100TB标准测试中,连续6次获得全球冠军,保持性能和性价比第...

常见问题

如何理解开源与原生的大数据技术与产品?MaxCompute作为大数据平台,对业务数据是否有好的监控手段?MaxCompute的项目发挥什么作用?如何获取MaxCompute中的Accesskey_ID和AccessKey_Secret?现有账号的AccessKey被禁用,创建一个新的...

如何查询数据库Redis中过的Key

您可通过以下方式查询 云数据库Redis版 中的Key:在Redis控制台查看Key(推荐),对性能几乎无影响,具体操作请参见 实时Top Key统计。对历史备份数据进行分析,找出Key、热Key等,对线上服务无影响,具体操作请参见 离线全量key分析...

Pandas API支持

MaxFrame提供了兼容Pandas的API接口,您可以用类似于Pandas的方式来操作MaxCompute中的数据,同时利用MaxCompute强大的分布式计算能力,简化您在大数据环境下的数据处理工作,本文为您介绍Pandas API的支持情况。当前MaxFrame支持的API详情...

相关的云服务

DataWorks作为阿里一站式大数据开发与治理平台,通常会与计算引擎产品联合使用,此外使用DataWorks进行数据集成时通常联合进行数据传输的数据源产品一起使用。本文为您介绍典型场景下,使用DataWorks时通常会使用到的其他产品。计算...

成本优化概述

由于大数据的动态性和不断变化的性质,企业用户成本优化的活动应该持续不断的进行。您可以参考以下流程进行优化:在使用MaxCompute之前,建议您详细了解付费策略以及预估自己需要使用的资源,选择适合您的付费方式。详情请参见 选择付费...

使用DataWorks连接

DataWorks基于MaxCompute等引擎,提供统一的全链路大数据开发治理平台。本文为您介绍如何通过DataWorks使用MaxCompute服务。背景信息 DataWorks支持将计算引擎绑定至DataWorks的工作空间,绑定计算引擎后,您即可在DataWorks上创建对应引擎...

外部表概述

但这两种方法都有不足之处:第一种方法需要在MaxCompute系统外部做一次中转,如果OSS数据量太,还需要考虑如何并发来加速,无法充分利用MaxCompute的规模计算能力。第二种方法通常需要申请UDF网络访问权限,还需要开发者自己控制作业...

数据迁移

本文为您介绍数据迁移的最佳实践,包含将其他业务平台的业务数据或日志数据迁移至MaxCompute,或将...MaxCompute处理业务数据和日志数据后,可以通过Quick BI快速地以可视化方式展现数据处理结果,详情请参见 基于MaxCompute的大数据BI分析。

作业优先级管理与成本优化

本文为您介绍MaxCompute作业优先级管理与成本优化。作业优先级 MaxCompute的包年包月计算资源有限,在实际数据开发过程中,系统需要优先保障...由于大数据的动态性和不断变化的性质,成本优化应该持续进行,成本优化流程请参见 成本优化概述。

数据治理能力解读

以下为您系列讲解阿里云数据治理能力解读。课程视频列表 课程简介 课程内容:数据治理的产品介绍。主要产品:DataWorks 课程时长:25分钟 课程内容:DataWorks数据治理能力的最佳实践。主要产品:DataWorks、MaxCompute 课程时长:19分钟

新功能试用申请

支持用户通过SQL、PyODPS、Python等进行数据分析、探索,挖掘数据的价值,完成大数据与AI的融合应用开发。功能说明和使用请参见(邀测)MaxCompute Notebook使用说明。2023年3月 项目开启Volume权限 External Volume是MaxCompute提供的分布...

存储加密

工作空间创建成功后,在DataWorks提供的 大数据优质数据源推荐 列表中,单击MaxCompute后的 立即绑定。在弹出的数据开发(DataStudio)数据源页面,单击 新建数据源,选择 MaxCompte,根据界面指引创建数据源。详情请参见 通过新建...

项目分配与安全

在为企业级大数据平台创建项目时,建议您对ODS层、DWD及DWS层的数据按照业务板块的粒度建立项目,对于ADS层的数据,按照应用的粒度建立项目。项目分配 在本教程中,建议参考下图建立您的MaxCompute项目,图中的每一个方块代表一个项目。...

Tunnel常见错误

DataVersionConflict The specified table has been modified since the upload or download initiated and table data is being replicated at this time.Please initiate another download or upload later 当前集群上的数据处于复制状态...

(邀测)MaxCompute Notebook使用说明

支持用户通过SQL、PyODPS、Python等进行数据分析、探索,挖掘数据的价值,完成大数据与AI的融合应用开发。本文为您介绍如何使用Notebook功能。版本说明 当前MaxCompute Notebook功能处于邀测阶段,每个租户最多可启动3个Notebook实例,每个...

数据治理能力解读

以下为您系列讲解阿里云数据治理能力解读。数据治理的产品介绍 主要产品:DataWorks 课程时长:25分钟 DataWorks数据治理能力的最佳实践 主要产品:DataWorks、MaxCompute 课程时长:19分钟

数据重排

在MaxCompute的使用过程中,如果已经积累了大量数据占用了大量存储资源,且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理,在您的存储预算有限,计算资源还有冗余的情况下,可以考虑使用数据重排方式对存储空间进行优化。...

MapReduce

自然语言处理:基于大数据的训练和预测。基于语料库构建单词同现矩阵,频繁项集数据挖掘、重复文档检测等。广告推荐:用户单击(CTR)和购买行为(CVR)预测。MapReduce流程说明 MapReduce处理数据过程主要分成Map和Reduce两个阶段。首先...

版本更新记录

Prepared Statement升级为2.0数据类型版本。v3.4.1 缺陷修复 修复SDK问题。新功能 在查询加速(MCQA)模式下,增加自动回退功能。当用户提交了MCQA不支持的SQL语句(包括Update、Drop、Create、Alter等),可自动回退到普通离线模式执行。v...

Tunnel操作

MaxCompute通过Tunnel实现上传下载数据功能。本文为您介绍如何通过Tunnel上传、下载数据。Tunnel操作详情请参见 Tunnel命令。Tunnel操作常用命令如下。类型 功能 角色 操作入口 上传数据 将本地文件的数据上传至MaxCompute的表中,以追加...

网易有数BI连接MaxCompute

MaxCompute支持您将MaxCompute项目数据接入网易有数BI,帮助您轻松完成数据分析和数据可视化工作。本文为您介绍如何使用网易有数BI连接MaxCompute项目,并进行可视化数据分析。背景信息 网易有数BI是新一代敏捷数据可视化分析平台,是包含...

创建MaxCompute项目

方式二:通过DataWorks控制台创建项目 DataWorks为阿里提供的一站式大数据开发治理平台,您可以在DataWorks上进行MaxCompute作业开发、周期性调度、作业运维、数据治理等一站式数据开发治理操作,如果您希望后续使用DataWorks一站式开发...

数据传输费用(公网下载)

承载数据的HTTP Body使用ProtoBuffer编码,因此一般比数据原始容量要小,但是比压缩后存储在MaxCompute上的数据量要。说明 跨通过专线接入阿里VPC网络,下载时不收取费用。各地域及不同网络连接方式下的Endpoint信息,详情请参见 ...

【通知】数据库 MongoDB 版部分实例规格的最大连接...

为了给您带来更优质的产品体验,云数据库 MongoDB 版 于2024年05月14日对部分实例规格的最大连接数进行了调整。新购实例默认为调整后的最大连接数,存量实例可通过重启实例享有调整后的最大连接数。最大连接数调整对MongoDB的其他服务无影...

查看虚拟主机SQL Server数据库中表的大小

当您的虚拟主机SQL Server数据库剩余可用空间较小时,您可以查看数据库中所有表的大小,并删除有异常的或者无用的表,以便享有更多的可用空间。本文为您介绍查看虚拟主机SQL Server数据库中表的大小的方法。操作步骤 登录待查看表大小...

数据库 RDS MySQL 版的decimal字段过导致查询不...

问题描述 云数据库 RDS MySQL 版的 decimal 字段过,导致查询不准确。问题原因 云数据库 RDS MySQL 版的 decimal 字段过查询不准的情况,这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决,优化SQL语句如下。create ...

数据库 RDS MySQL 版的decimal字段过导致查询不...

问题描述 云数据库 RDS MySQL 版的 decimal 字段过,导致查询不准确。问题原因 云数据库 RDS MySQL 版的 decimal 字段过查询不准的情况,这是MySQL数据库的BUG引起。解决方法 可以通过添加索引进行优化解决,优化SQL语句如下。create ...

使用MaxCompute控制台(离线)

MaxCompute控制台提供数据上传功能,支持您将本地文件或阿里对象存储服务OSS中的文件数据离线(非实时)上传至MaxCompute进行分析处理及相关管理操作。使用限制 仅支持基于 本地文件 或 阿里对象存储OSS 上传数据,具体如下。本地文件...

应用场景

云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构,具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...数据应用:使用云数据库MongoDB作为数据的云存储系统,随时进行数据提取分析,掌握行业动态。

Paimon外部表

阿里实时计算Flink版、开源大数据平台E-MapReduce 的常见计算引擎(如Spark、Hive或Trino)都与Paimon有完善的集成。借助Apache Paimon,您可以快速构建自己的数据湖存储服务在存储服务OSS上,并接入MaxCompute实现数据湖的分析。关于...

应用场景

数据场景 云数据库HBase支持海量全量数据的低成本存储、快速批量导入和实时访问,具备高效的增量及全量数据通道,可轻松与Spark、MaxCompute等数据平台集成,完成数据的规模离线分析。优势如下:低成本:高压缩比,数据冷热分离,...

支持的云服务

AnalyticDB for MySQL 原生数据仓库 AnalyticDB MySQL 版(AnalyticDB for MySQL)是海量数据实时高并发在线分析(Realtime OLAP)计算服务,与MaxCompute结合应用于大数据驱动业务系统的场景。通过MaxCompute离线计算挖掘,产出高质量...

升级数据库版本

本文介绍云数据库MongoDB支持升级的数据库版本以及如何升级数据库版本。注意事项 升级分片集群实例的数据库版本时,实例的协议类型需为 MongoDB协议。升级采用轮转升级的方式进行,升级过程中会自动对实例进行2~3次重启,请在业务低...

升级和降配

在 变配 页面,配置升级后所需的CU数量,并勾选 大数据计算服务MaxCompute服务等级协议 和 阿里产品服务协议-MaxCompute,单击 立即购买。订单价格计算规则如下:升级订单价格计算=新配置剩余时长购买金额(新配置的月单价/30/24×剩余时...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用