海量数据统计

_相关内容

HDFS概述

HDFS(Hadoop Distributed File System)是一种Hadoop分布式文件系统,具备高度容错特性,支持高吞吐量数据访问,可以在处理海量数据(TB或PB级别以上)的同时最大可能的降低成本。HDFS适用于大规模数据的分布式读写,特别是读多写少的场景...

新建Doris数据

背景信息 Doris即Apache Doris,是一个基于MPP架构的高性能、实时的分析型数据库,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,能够较好的满足报表分析、...

访问列存数据

背景信息 Lindorm列存是面向海量半结构化、结构化数据设计的列格式分布式存储服务,适用于车联网、物联网、订单、日志等大规模存储场景,核心能力包括:计算分析 Lindorm计算引擎可以访问列存数据,完成海量数据的交互式分析和离线计算。...

新建Doris数据

背景信息 Doris即Apache Doris,是一个基于MPP架构的高性能、实时的分析型数据库,仅需亚秒级响应时间即可返回海量数据下的查询结果,不仅可以支持高并发的点查询场景,也能支持高吞吐的复杂分析场景。基于此,能够较好的满足报表分析、...

应用场景

要深度并且快速的挖掘海量数据的关联特征,使用传统的方法则会面临非常大的技术挑战。通过图表示学习技术,提取知识图谱中的拓扑信息特征,作为风控模型的输入条件,参与模型训练,可以帮助金融机构构建更高精度的风控模型。商品推荐 基于...

数据建模:智能数据建模

适用场景 DataWorks智能建模可助力企业构建自身建模能力,挖掘企业的数据资产价值,例如:海量数据的标准化管理 企业业务越庞大数据结构就越复杂,企业数据量会随着企业业务的快速发展而迅速增长,如何结构化有序地管理和存储数据是每个...

创建MaxCompute数据

以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效地分析处理海量数据。更多详情请参见 什么是MaxCompute。权限说明 Dataphin仅支持 超级...

Quick BI连接MaxCompute

MaxCompute支持您将MaxCompute项目数据接入阿里云Quick BI,对海量数据进行实时在线分析服务,同时支持拖拽式操作和丰富的可视化效果,帮助您轻松自如地完成数据分析、业务数据探查、报表制作等工作。本文为您介绍如何使用Quick BI连接...

什么是云原生多模数据库Lindorm

支持海量数据的多维查询和聚合计算,同时也支持时序数据的预降采样和持续查询。搜索引擎 负责 多模数据的检索分析加速,其基于列存、倒排等核心技术,具备全文检索、聚合计算、复杂多维查询等能力,适用于日志、账单、画像等场景,兼容SQL...

什么是MaxCompute

以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效地分析处理海量数据。随着数据收集手段不断丰富,行业数据大量积累,数据规模已增长到了...

创建MaxCompute数据

以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效地分析处理海量数据。更多详情请参见 什么是MaxCompute。权限说明 Dataphin仅支持 超级...

通过SeaTunnel导入数据

概述 SeaTunnel是一款简单易用、高性能的分布式数据集成平台,支持海量数据实时同步。您可以通过SeaTunnel平台读取MySQL、Hive、Kafka等数据源中的海量数据,然后由SeaTunnel SelectDB Sink将数据写入到 云数据库 SelectDB 版 中。前提条件...

概述

您可以通过标准的JDBC接口基于MaxCompute执行海量数据的分布式计算查询。MaxCompute JDBC驱动还可以用于连接MaxCompute和支持JDBC的工具。JDBC使用说明 使用JDBC连接MaxCompute。详情请参见 使用说明。使用JDBC连接商业智能(BI)分析工具...

DescribeSqlLogStatistic-查询DAS企业版数据统计信息

调用DescribeSqlLogStatistic接口,查询DAS企业版的数据统计信息。接口说明 使用该接口需满足以下前提条件:使用阿里云或 DAS 的 SDK 时,建议使用最新版本。在使用 SDK 调用 DAS 服务时,需要将地域指定为 cn-shanghai。调试 您可以在Open...

持久内存型

适用场景 海量数据下对性能与成本要求高的场景 计算中间数据对性能的要求很高,采用Redis社区版成本较高,如果采用HBase之类的数据库存储数据则可能无法满足性能需求。采用持久存储型实例保障数据持久化的同时提供近乎Redis社区版的吞吐和...

持久内存型

适用场景 海量数据下对性能与成本要求高的场景 计算中间数据对性能的要求很高,采用Redis社区版成本较高,如果采用HBase之类的数据库存储数据则可能无法满足性能需求。采用持久存储型实例保障数据持久化的同时提供近乎Redis社区版的吞吐和...

配置MaxCompute输出

大数据计算服务MaxCompute(原名ODPS)为您提供完善的数据导入方案,能够快速解决海量数据的计算问题。前提条件 配置MaxCompute输出节点前,您需要先配置好相应的输入或转换数据源,详情请参见 实时同步能力说明。背景信息 写入数据不支持...

客户案例

庞大的运营计数会产生海量数据,需做好数据分析,为游戏运营提供更好的数据服务。客户需求 希望优化数据体系结构,解决如下难点、痛点问题:业务团队对全域数据资产无感知,且数据需求响应时间长。组件繁多,运维、开发成本高。昼夜资源...

维度层(DIM)

例如,电商公司的商品维度可能有近百个维度属性,为下游的数据统计、分析、探查提供了良好的基础。尽可能多的给出包含一些富有意义的文字性描述。属性不应该是编码,而应该是真正的文字。在阿里巴巴维度建模中,通常是编码和文字同时存在,...

时间周期

时间周期是用来明确数据统计的时间范围或者时间窗口,例如近1天,近1自然周。用于在统计派生指标时,限定业务统计的时间范围。本文为您介绍如何创建时间周期。背景信息 时间周期与原子指标、修饰词,共同构成一个派生指标,用于体现企业某...

产品优势

全文检索 智能集成搜索引擎Solr,提供面向海量数据的存储、多维查询、全文索引等统一访问的混合型能力,请参见 全文索引服务。不支持 性能 吞吐性能 单机吞吐是开源HBase的7倍,请参见 测试结果。无优化 请求毛刺 P99延迟是开源HBase的1/10...

查看异常统计

如果您需要查看租户粒度下的全局异常数据统计概况,则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时,您可以选择查看最近7天内的统计数据。鼠标悬停至 图标,...

MongoDB 分片集群介绍

MongoDB分片集群技术用于解决海量数据的存储问题,本文介绍MongoDB分片集群相关的常用知识。什么情况下使用分片集群?当您遇到如下问题时,可以使用分片集群解决:存储容量受单机限制,即磁盘资源遭遇瓶颈。读写能力受单机限制,可能是CPU...

新建AnalyticDB for MySQL 3.0数据

背景信息 云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版),是阿里巴巴自主研发的海量数据实时高并发在线分析云计算服务,使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。更多信息,请参见 云...

聚合支付:Ping+

PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍Ping+如何通过 PolarDB-X 应对业务挑战。所属行业...

DLA Lakehouse实时入湖

海量数据在事务库或传统数仓中存储成本高,需要低成本归档。源库⾏存储格式或非分析型格式,分析能力弱,需要⽀持列式存储格式。⾃建⼤数据平台运维成本高,需要产品化、云原生、⼀体化的⽅案。常见数仓的存储不开放,需要⾃建能力、开源可...

新建AnalyticDB for MySQL 3.0数据

背景信息 云原生数据仓库AnalyticDB MySQL版(简称ADB,原分析型数据库MySQL版),是阿里巴巴自主研发的海量数据实时高并发在线分析云计算服务,使得您可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。更多信息,请参见 云...

应用场景

但常常会存在恢复时间长,海量数据备份成本高,人为恢复数据操作风险高等顾虑。并且一旦出现数据安全问题,线上业务将无法进行。随着数据恢复时间的增加,造成的损失也会越大。数据库备份DBS提供的应急恢复功能,将自动获取备份集并合成...

维度建模概述

应用层:基于实际应用需求,获取公共层加工整合后的数据,面向具体应用场景或指定产品进行的个性化数据统计。该层级仅支持使用 业务分类 视角管理模型表。未分层:如果已创建的模型表未划分层级归属(即 公共层 或 应用层),则该表会被...

功能简介

面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API。支持创建、编辑和测试API,支持的API类型包括...

简介

支持数据冷热分离存储和数据高效压缩算法,海量数据存储成本低。与云上Spark无缝集成,快速搭建空间大数据仓库和空间大数据分析平台。基于OGC标准设计,便于系统间的集成与互操作。基于阿里云HBase专业运维,全托管方式,提供可靠稳定的...

技术原理

HTAP PolarDB-X 1.0 解决了OLTP数据库面对海量数据下的存储、并发方面的扩展性问题,但由于缺失多机并行查询加速能力和列存储等能力,无法满足对实时性计算和复杂查询都要求较高的在线业务场景,同时还面临着ETL(Extract-Transform-Loa)...

功能简介

面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。通用资源 提供了自定义函数和函数资源的能力,帮助用户在数据开发等过程中...

功能特性

计算 MaxCompute向用户提供了多种经典的分布式计算模型,提供TB、PB、EB级数据计算能力,能够更快速的解决用户海量数据计算问题,有效降低企业成本。功能集 功能 功能描述 参考文档 SQL开发 DDL语句 DDL语句 DDL DML操作 DML操作 DML操作 ...

2023年

云数据库MongoDB版同步至云原生多模数据库Lindorm 新增 新增支持将MySQL的数据同步或迁移到SelectDB,以满足您的海量数据分析需求。RDS MySQL同步至云数据库SelectDB版 RDS MySQL迁移至云数据库SelectDB版 优化 MySQL的数据同步或迁移至...

将云消息队列 Kafka 版的数据迁移至MaxCompute

MaxCompute和DataWorks一起向用户提供完善的数据处理和数仓管理能力,以及SQL、MR、Graph等多种经典的分布式计算模型,能够更快速地解决用户海量数据计算问题,有效降低企业成本,保障数据安全。本教程旨在帮助您使用DataWorks,将 云消息...

DRDS节点

它允许您将关系数据库水平扩展到分布式系统,支持海量数据存储和访问,同时维护关系型数据库(例如,MySQL)的原有特性。详情请参见 DRDS产品概述。前提条件 已创建业务流程。数据开发(DataStudio)基于业务流程执行不同引擎的具体开发...

新零售:特步

PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题,历经各届天猫双十一及阿里云各行业客户业务的考验,助力企业加速完成业务数字化转型。本文介绍特步(中国)有限公司如何通过 PolarDB-X 应对...

Lindorm for Cassandra应用实践

云原生多模数据库 Lindorm 简介 云原生多模数据库 Lindorm 是一款适用于任何规模、多种模型的云原生数据库服务,支持海量数据的低成本存储处理和弹性按需付费,提供宽表、时序、搜索、文件等多种数据模型,兼容HBase、Cassandra、Phoenix、...

云数据库RDS简介

MaxCompute 大数据计算服务MaxCompute(原名ODPS)是一种快速、完全托管的TB/PB级数据仓库解决方案,提供了完善的数据导入方案以及多种经典的分布式计算模型,能够快速地解决海量数据计算问题。通过数据集成服务,可将RDS数据导入...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用