搜索
相关推荐
搜索结果
阿里云
>
s
>
数据分析处理
数据分析处理_相关内容
相关搜索:
行业分析数据
数据库与数据处理
数据处理函数
数据分析主要
阿里云行业数据分析软件
通过数据分析
相关产品:
云服务器ECS
云数据库MySQL
云数据库Redis
CDN
负载均衡
容器服务ACK
企业财税
最新活动
网站
产品与方案
帮助文档
开发者文章
开发者问答
云市场
AI Earth
数
知地球
数知地球 AI Earth(Analytical Insight of Earth)基于达摩院在深度学习、计算机视觉、地理空间分析等方向上的技术积累,结合阿里云强大算力支撑,提供PB级海量遥感数据资源,以及低门槛、界面化的云GIS工作空间,同时支持开发者便捷调用,助力地球科学研究分析。
提供工具箱和开发者两种模式,对大尺度、长时序
数据
进行在线云计算
分析处理
.云GIS工作空间.
数据
检索和分析应用.AI模型工具开箱即用.海量弹性云计算资源.PB级公开
数据
在线检索,目前已上线Landsat 5/7/8/9、Sentinel-1/2/5P、MODIS、ALOS DSM等80多类公开
数据
集,更多
数据
资源持续接入中.公开
数据
检索.支持多种Landsat、...
|
云GIS工作空间
|
产品优势
|
使用场景
|
产品动态
|
文档与工具
来自:
云产品
云原生大数据计算服务MaxCompute
阿里云云原生大数据计算服务MaxCompute是面向分析的企业级云数仓,作为一体化大数据智能计算平台ODPS的大规模批量计算引擎,MaxCompute以 Serverless 架构提供快速、全托管的在线数据仓库服务,使您经济高效的分析处理海量数据,进行敏捷的业务洞察。
阿里云大数据生态满足新业务
数据分析
需求的“随机应变”能力.快速响应业务需求.推荐搭配使用.目前阿里巴巴淘系已能通过平台自助打标后,在报表中做自助即席多维分析,涵盖1000+自定义维度信息,无需开发同学额外支持,解放人力,减少沟通成本.无需更改blink作业,整体链路1小时内完成维表数据切换.更快速更精准地获取用户...
|
产品优势
|
产品功能
|
产品规格
|
产品动态
|
迁移到 MaxCompute
|
应用场景
|
更多产品与服务
|
解决方案与最佳实践
|
精选客户案例
|
刊物与直播
|
文档与工具
来自:
云产品
应用实时监控服务ARMS
作为云原生可观测平台,应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率,压降运维工作量。
预置近百种图表组件与
数
十种看板模板,支持不同
数据
类型展示与
分析
,满足不同场景需求.预置可视化插件与看板模板.可观测可视化 Grafana 版.应用实时监控服务 ARMS.统一监控大盘.针对多告警源进行统一管理,实现跨平台、跨团队的应急协同.丰富的预置集成组件,覆盖阿里云日志服务SLS、Prometheus、ARMS、开源主流监控系统。...
|
能力矩阵
|
产品优势
|
产品功能
|
应用场景
|
产品规格
|
客户案例
|
产品动态
|
文档与工具
来自:
云产品
智能开放搜索 OpenSearch
阿里云智能开放搜索 OpenSearch是阿里自主研发的大规模分布式搜索引擎搭建的一站式智能搜索业务开发平台,内置全链路搜索功能,提供一站式、场景化的行业大数据解决方案。
企业专属对话式搜索.pdf、doc、excel、网页、表格等多样化
数据
格式支持.多
数据
格式支持.支持对话结果、参考链接、参考图片等多种结果形式.检索增强生成.一站式端到端检索增强生成(RAG)服务.体验电商行业算法版demo.电商/O2O场景对搜索结果的召回和排序有极高的要求。海量业务
数据
需要实时更新,满足商品进行多维度比较,...
|
产品优势
|
产品版本
|
产品功能
|
应用场景
|
产品规格
|
客户案例
|
产品动态
|
文档与视频
来自:
云产品
Spark on ECI大
数据分析
场景描述 方案优势 1.计算引擎弹性扩缩容,兼顾资源弹性与计 算资源成本优化。 2.计算与存储分离架构,结合阿里云原生云 存储产品,海量数据湖优势。 3.Kubernetes原生的调度性能优势,提升在 大规模分析作业时的分析性能优势分。 4.集群资源隔离和按需分配。 解决问题 1.计算资源弹性能力不足,计算资源成本管 控能力欠缺. 2.集群资源调度能力和隔离能力不足。 3.计算与存储无法分离,大数据量分析时出 现数据存储资源瓶颈。 4.Spark submit方式提交分析作业参数支持 有限等缺点。 产品列表 容器服务Kubernetes版(ACK) 弹性容器实例(ECI) 文件存储HDFS 对象存储OSS 专有网络VPC 容器镜像服务ACR
总结.27 文档版本:20200409 IV Spark on ECI大数据分析 最佳实践概述 最佳实践概述 概述 Spark作为主流的快速大
数据分析处理
平台技术,用户对其底层实际资源的管理和调 度有更多灵活的需求,Kubernetes解决方案利用 Kubernetes原生的资源弹性、应用 隔离与限制等特性结合 Spark提供了 Spark on Kubernetes解决方案,本实践...
来自:
最佳实践
|
相关产品:专有网络 VPC,对象存储 OSS,容器服务 ACK,弹性容器实例 ECI,文件存储HDFS
智能媒体管理IMM
阿里云智能媒体管理IMM是一款场景化封装数据智能分析检索管理工具。为云上的视频、文档、图片等非结构化数据提供一站式数据处理、分析、检索等管理能力,让数据更有价值。
根据图片
分析
、
数据
存储等不同应用场景,封装整合完整的
处理
能力,让
数据
快速流转.智能媒体管理 IMM.文档格式转换、预览.智能媒体管理IMM支持共48种文件类型不同办公文档的格式转换与预览,帮助用户搭建文档内容中心.图片内容识别.智能媒体管理IMM支持25个主标签,上千个子标签,图片场景快速添加标签,帮助图片内容管理....
|
产品优势
|
产品功能
|
应用场景
|
产品动态
|
文档与工具
来自:
云产品
数据
湖构建 Data Lake Formation
数据湖构建服务是阿里云上数据湖架构中的核心部分,助力用户构建数据湖系统。支持多数据源实时入湖,实现湖上元数据统一管理,提供企业级权限控制,无缝对接多种计算引擎,打破孤岛,洞察业务价值
用户
数
过亿的某在线教育平台.用户希望课件素材、应用日志、学习采样等
数据
能够集中...提供快速、完全托管的PB级
数据
仓库解决方案,经济并高效的
分析处理
海量
数据
.大数据计算服务·MaxCompute.兼容PostgreSQL协议的实时交互式分析产品.海量、安全、低成本、高可靠的云存储服务,提供99.9999999999%的
数据
可靠性.对象存储 OSS.
|
产品优势
|
应用场景
|
客户案例
|
产品动态
|
更多产品与服务
来自:
云产品
云原生可观测运维解决方案
阿里云云原生可观测运维解决方案基于SLS云原生可观测平台实现,以大数据源为支撑,兼容开源标准,可实现多场景适配AI算法,进行大规模数据处理分析。是阿里云针对企业级大数据运维场景推出的解决方案,帮助企业在日常运维工作中轻松实现异常检测、根因分析、秒级响应以及实时预测。
该方案基于 SLS 云原生可观测平台实现,以大
数据
源为支撑,兼容开源标准,可实现多场景适配 AI 算法,进行大规模
数据处理分析
。是阿里云针对企业级大数据运维场景推出的解决方案,帮助企业在日常运维工作中轻松实现异常检测、根因
分析
、秒级响应以及实时预测.云原生可观测运维解决方案.根据您提交的需求,将有售前专家免费...
|
方案架构
|
方案优势
|
客户案例
来自:
解决方案
智慧景区解决方案
阿里云以高德一键游为游客入口,建设景区数字化基础设施、通过实时边缘AI分析能力、物联网+互联网数字应用实现客流、事件的实时监测,为景区管理降本增效,为游客端提供实时导览服务。
支持全协议系统/设备接入,加载视频AI实时计算能力,本地快速处理及云边端协同计算,实现客流分析,轨迹跟踪,越界告警等实时
数据分析处理
与告警.实时边缘AI分析能力.游客画像、停车调度、景区NPS、运营等级.基于物联网感知数据,结合互联网数据,实现游客、事件实时分析预测,为景区管理运营提供数据支持,为游客提供实时...
|
立即咨询
|
方案架构
|
方案优势
|
客户案例
|
使用流程
来自:
解决方案
基于函数计算FC实现物联网音视频
处理
在物联网场景中,智能设备会产生大量的非结构化数据,并且采集量和频率都很高。比如各类摄像头(家用摄像头、车载摄像头、工业监控摄像头等)采集的数据。企业需要对这些非结构化数据做快速的分析和处理,然后应用到下游业务中,所以需要一套高并发、低成本、自动化的方案。该最佳实践就适用于这类场景。
企业需要对这些非结构 化数据做快速的分析和
处理
,然后应用到下游业务中,可能存到OSS,然后被客户端拉流观看,或者其他
数据分析
的业务中。所以需要一套高并发、低成本、自动化的方案。该最佳实践就适 用于这类场景。方案优势 在高并发场景下,基于Serverless技术架构,整个流程有更好的并发
处理
能力。 基于CloudFlow...
来自:
最佳实践
|
相关产品:对象存储 OSS,函数计算
基于函数计算FC实现阿里云Kafka消息轻量级ETL
处理
在大数据ETL场景,Kafka是数据的流转中心,Kafka中的数据一般是原始数据,可能存在多种数据混杂的情况,需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC,可以快速高效的搭建数据处理链路,用户只需要关注数据处理的逻辑,数据的触发,弹性伸缩,运维监控等阿里云函数计算都已经做了集成,函数计算FC也支持多种下游,OSS/数据库/消息队列/ES等都可以自定义的对接
对象存储 OSS:对象存储 OSS 是一款具有行业领先的安全、稳定、高性价比、高性能的 云存储服务,可以帮助各行业的客户在互联网应用、大
数据分析
、机器学习、数据归档等 各种使用场景存储任意数量的数据,以及进行任意位置的访问,同时通过丰富的数据
处理
能力更便捷地使用数据。云速搭 CADT(Cloud Architect Design Tools...
来自:
最佳实践
|
相关产品:对象存储 OSS,函数计算,消息队列 Kafka 版
云上 AI
依托大模型与云计算的协同发展,阿里云帮助企业和开发者以最快速度实现生成式和判别式的创新应用,拥抱 AI 时代
数据分析
阶段 1.借助 通义千问 Audio 大模型 API,您可以在识别通话记录中的文字的同时,识别双方沟通的语气、情绪等信息。2.你也可以借助 通义千问大语言模型 对文字记录做进一步更详尽的分析,如分析客服回答的正确性和可改进空间。参考架构图生成商品图为了吸引消费者,提供精美的商品主图、商品海报以及商品模特图显得...
来自:
解决方案
SLS
数据
入湖Kafka最佳实践
应用和数据分散在多云或混合云,在面对多云/混合云这样大的趋势下,数据无法进行统一的聚合、分析处理和导出等,本方案给出了在多云/混合云场景下,构建通过标准的Kafka协议和托管服务,SLS可以连接Kafka数据入湖导入,然后进行统一的海量数据的集中存储、智能转储、聚合分析查询等。
SLS
数据
入湖 Kafka 最佳实践 业务架构 场景描述 应用和
数据
分散在多云或混合云,在面对多云/混合云这样大的趋势下,
数据
无法进行统一的 聚合、
分析处理
和导出等,本方案给出了在多 云/混合云场景下,构建通过标准的Kafka协议 和托管服务,SLS可以连接Kafka
数据
入湖导 入,然后进行统一的海量
数据
的集中存储、智 能转储、...
来自:
最佳实践
|
相关产品:云服务器ECS,日志服务(SLS),Serverless 应用引擎,消息队列 Kafka 版
基于OSS Object FC实现非结构化文件实时
处理
最佳实践
现在绝大多数客户都有很多非结构化的数据存在OSS中,以图片,视频,音频居多。举一个图片处理的场景,现在各种终端种类繁多,不同的终端对图片的格式、分辨率要求也不同,所以一张图片往往会有很多张衍生图,那如果所有的衍生图都存在OSS中,那存储的成本会增加,所以就可以通过OSS Object FC的方案,在不同的终端请求时,对OSS中的原图基于终端的要求做实时处理,然后响应返回,这样OSS中只需要存储原图即可。音视频也有类似的场景。
基于OSSObjectFC实现非结构化文件实时
处理
最佳实践 业务架构 场景描述 基于阿里云OSS和函数计算共同实现的产品化 集成解决方案OSSObjectFC,实现可以OSS 中的非结构化
数据
在读取时插入自定义业务逻 辑,对非结构化
数据
做实时
处理
后再返回。应用场景 现在绝大多数客户都有很多非结构化的
数据
存 在OSS中,以图片,视频,音频...
来自:
最佳实践
|
相关产品:对象存储 OSS,函数计算
数据湖-在线学习场景
数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例,使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer,模拟应用中的关键页面,比如登 录、课程内容等,之后构造若干用户使用的模拟 日志数据,投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖(EMR+OSS)搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
数据湖-在线学习场景
数据分析
最佳实践 场景描述 业务架构 本场景以在线教育中一个答题闯关类的应用为例,使用WebServer来模拟演示这类日志数据的
分析
处理
。通过Nginx和Python flask搭建Web Server,模拟应用中的关键页面,比如登录、课程 内容等,之后构造若干用户使用的模拟日志数据,投递到数据湖进行分析后获取应用PV...
来自:
最佳实践
|
相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,访问控制,E-MapReduce
游戏
数据
运营融合
分析
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户,无法 接受T+1延迟。 3.对数据成本有一定诉求的客户,希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析:依托ADB计算密集型实例, 秒级监控DAU等数据,为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析:打通结构化和非结构化 数据,支撑产品体验分析;广告买量投放效 果实时(分钟级)分析,渠道的评估更准确。 3.低成本:DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析,在满足各种分析场景需求的同时,有效 地降低的客户的总体使用成本。 4.学习成本低:DLA和ADB兼容标准SQL语 法,无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
本例通过 DLA统一
处
理
(ETL)结构化和非结构化数据,之后转存 ADB存储密集型实例,用比 ADB 计算密集型实例更低的成本进行近实时的统计分析。4.冷
数据分析
阶段:对于年维度时间跨度的离线
数据分析
场景,可以通过 DLA调 取保存在 OSS上的全量数据进行低频次的
数据分析
,查询的结果集可以视后 续查询频度返存到 OSS或者 ADB...
来自:
最佳实践
|
相关产品:云数据库RDS MySQL 版,对象存储 OSS,云原生数据仓库AnalyticDB My,数据湖分析,Quick BI
互联网电商行业离线大
数据分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示,如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示,效果震撼,触控大屏支持用户自助查询数据,极大地增强数据的可读性。
互联网电商行业离线大
数据分析
最佳实践 业务架构 场景描述 本实践介绍了使用阿里云MaxCompute、数据库(RDS)、DataWorks等产品实现电商网站离线数据
分
析
,分析后的业务指标数据实时在大屏展示。通过完整 的实践Demo为例,提供从电商网站搭建,数据从RDS 同步到MaxCompute、再到DataWorks进行
数据分析
,最后在大屏上展示...
来自:
最佳实践
|
相关产品:云服务器ECS,云数据库RDS MySQL 版,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,API网关,云速搭CADT
基于Flink+ClickHouse构建实时游戏
数据分析
在互联网、游戏行业中,常常需要对用户行为日志进行分析,通过数据挖掘,来更好地支持业务运营,比如用户轨迹,热力图,登录行为分析,实时业务大屏等。当业务数据量达到千亿规模时,常常导致分析不实时,平均响应时间长达10分钟,影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据,实现秒级响应的实时用户行为分析,并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析,得到用户特征和画像,实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓,对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能,千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高,支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用,免运维,全球多Region部署,快速支持新游戏开服。 Flink+ClickHouse+QuickBI
结论:云数据库 ClickHouse更加适合海量
数据分析
型业务、大宽表聚合查询分析、
数
据
Hash对齐 Join场景、实时日志分析场景等等 文档版本:20201224 6 基于 Flink+ClickHouse构建实时游戏
数据分析
架构设计 2.架构设计 2.1.架构图 本实践主要以流
处理
为主线,搭建实验环境,构建在线用户行为分析平台:2.2.核心模块 游戏服...
来自:
最佳实践
|
相关产品:云服务器ECS,弹性公网IP,实时计算,Quick BI,消息队列 Kafka 版,云数据库 ClickHouse
车辆
数据
安全稳定上云和
分析
阿里云物联网平台提供全托管的企业级实例服务,无需自建物联网基础设施即可实现车辆数据的安全稳定上云。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台车辆数据安全...提供了多种类型设备的稳定接入、安全防护、实时监控,满足企业一站式管理设备、
处理数据
的需求。具有高可用、高并发、低成本的优势。查看详情技术解决方案咨询我们将根据您提交的需求,安排技术解决方案专家为您服务!立即咨询
来自:
解决方案
可观测链路 OpenTelemetry版结合日志服务SLS关联
分析
最佳实践
可观测链路 OpenTelemetry 版为分布式应用的开发者提供了完整的调用链路还原、调用请求量统计、链路拓扑、应用依赖分析等工具,可以帮助开发者快速分析和诊断分布式应用架构下的性能瓶颈,当应用出现业务异常问题时,您可以在可观测链路 OpenTelemetry 版控制台关联查看日志进行分析,精准定位业务异常。
可观测链路 OpenTelemetry 版结合日志服务 SLS关联
分析
最佳实践 场景描述 业务架构 可观测链路 OpenTelemetry 版为分布式应用的 开发者提供了完整的调用链路还原、调用请求量 统计、链路拓扑、应用依赖
分析
等工具,可以帮 助开发者快速
分析
和诊断分布式应用架构下的 性能瓶颈,当应用出现业务异常问题时,您可以 在可观测...
来自:
最佳实践
|
相关产品:日志服务(SLS),云速搭
<
1
2
3
4
...
17
>
共有17页
跳转至:
GO
产品推荐
云服务器
安全管家服务
安全中心
这些文档可能帮助您
数据库备份
云数据库 RDS
云数据库 Redis 版
云原生数据湖分析 (文档停止维护)
弹性公网IP
短信服务
新品推荐
新人特惠
爆款特惠
最新活动
免费试用
切换为电脑版
新人特惠
爆款特惠
最新活动
免费试用