Function Compute构建高弹性大数据采集系统
Function Compute构建高弹性大数据采集<em>系统</em>
当前互联网很多场景都存在需要将大量的数据信息采集起来然后传输到后端的各类系统服务中,对数据进行处理、分析,形成业务闭环。比如游戏行业中的游戏发行、游戏运营,产互行业中的数字营销,物联网、车联网行业中的硬件、车辆信息上报等等。这些场景普遍存在数据采集量大、数据传输需要稳定且吞吐量大的特点,给整个数据采集传输系统带来很大的挑战。在这个场景中,有三个关键的环节,数据采集、数据传输、数据处理。该最佳实践主要涉
性能压测.51 文档版本:20210806(发布日期)1 Function Compute构建高弹性大数据采集系统 最佳实践概述 最佳实践概述 概述 当前互联网很多场景都存在需要将大量的数据信息采集起来然后传输到后端的各类 服务中,对数据进行处理、分析,形成业务闭环。比如游戏行业中的游戏发行、游 戏运营,产互行业中的数字营销,...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,日志服务(SLS),函数计算,消息队列 Kafka 版,云速搭CADT
云数据库RDS PostgreSQL
云数据库RDS PostgreSQL 版完全兼容开源PostgreSQL,基于云原生架构,软硬协同优化,提供稳定可靠、高性价比的数据库服务。通过丰富的插件拓展,支撑各领域场景化业务,如自研Ganos多维多模时空引擎及开源PostGIS地理信息引擎、向量引擎、时序引擎等百余款插件。
而在云数据库RDS PostgreSQL中所有这些操作都可以在SQL中完成,无需来回进行数据导入,提高开发效率.SQL中直接实现关联查询降低开发成本.传感器JSON数据.原生轨迹模型支持,精准定位,支持2D、3D、路径、范围分析简单易用.GIS地理信息数据.timescaledb实现物联网高并发数据采集与存储.时序数据采集存储.云原生数据仓库 ADB....
来自: 云产品
蚂蚁链摩斯多方安全计算平台解决方案
蚂蚁链摩斯多方安全计算平台解决方案利用多方安全计算、隐私保护、区块链技术,打造数据安全共享的基础设施。解决企业之间数据合作过程中的数据安全和隐私保护问题,打通数据孤岛,将计算移动到数据端,达成数据可用不可见,安全促进业务创新。
图形化界面:操作门槛更低.Docker化部署,支持多种操作系统,支持主流数据源和数据服务,支持云及本地部署,机构可灵活投入硬件与计算资源.多样化部署:部署更轻量便捷.安全认证&行业标准.保护数据安全和模型安全,较单方数据建模预测能力提升20%~50%.远程测试、部署分布式策略,保证数据安全,提升风控能力.实现分布式安全...
来自: 解决方案
云消息队列 RocketMQ 版
云消息队列 RocketMQ 版是基于 Apache RocketMQ 构建的分布式消息中间件,广泛用于异步解耦、削峰填谷等场景。可支撑千万级并发、万亿级数据洪峰,更稳定,更安全。
支持箱即用的消息清洗、转化等后处理操作,可以实现消息导出存储到数据库、大数据、分析计算等下游产品.支持消息服务和数据同城多机房容灾,灾难场景自动切换,并保障状态一致.支持异地多机房消息容灾,支持按业务自定义标签进行收发流量调度.多样的企业级增强特性,从消息治理、流量调度、企业级容灾特性多方面提供箱...
来自: 云产品
云原生数据仓库AnalyticDB PostgreSQL版
阿里云MPP架构的云原生数据仓库,可提供PB级海量数据在线/离线分析服务,是面向各行各业的有竞争力的数仓方案,真正做到“人人可用的数据分析服务”。
得益于云原生数据仓库AnalyticDB PostgreSQL版的OLAP数据综合分析能力,用户更可以实现基于地理信息的海量数据分析工作,为物联网、移动互联网、物流配送、智慧出行(智慧城市)、LBS位置服务、O2O业务系统等提供强大的决策分析支持.基于PostGIS,支持地理信息数据存储分析.地理信息数据分析.使用Ganos对时空数据进行管理和...
来自: 云产品
全球加速 GA
阿里云全球加速GA(Global Accelerator)是一款覆盖全球的互联网加速服务,实现网络服务全球范围就近接入和跨地域部署。依托阿里云优质的全球网络大幅减少网络延迟、丢包,传输效率提升10+倍。在跨境加速/游戏加速/应用加速等场景中为用户构建一个高性能、高可靠、高安全、易部署的加速网络。
云企业将提供一种能够快速构建混合云和分布式业务系统的全球网络,帮助用户打造一张具有企业级规模和通信能力的云上网络.云企业CEN.私连接帮助您在阿里云VPC中通过私有网络安全稳定的访问部署在其它VPC中的服务,大幅简化网络架构,避免公网安全风险.私连接PrivateLink.某企业Web服务部署在美国地域的阿里云上,...
来自: 云产品
云消息队列 Kafka 版
云消息队列 Kafka 版是阿里云基于Apache Kafka构建的大数据消息中间件,广泛用于日志收集和分析、数据处理等场景。可提供全托管服务,用户无需部署运维,更专业、更可靠、更安全。
淘宝、天猫平台等公司每天都会产生大量的日志。Kafka 性能高效,采集日志时业务无感知以及Hadoop/ODPS 等离线仓库存储和 Storm/Spark 等实时在线分析对接的特性决定它非常适合作为\\.构建应用系统和分析系统的桥梁,并将它们之间的关联解耦;应用与分析解耦.支持实时在线分析系统和类似于Hadoop之类的离线分析系统;在线/...
来自: 云产品
云数据库Redis
云数据库 Redis 版是一种全托管、兼容Redis协议的内存数据库服务,包含社区版Redis和企业版Tair,支持主从、集群和读写分离架构,具备低延迟、大吞吐、弹性扩缩容的特点。Tair提供多种系列满足不同场景的性价比要求,更有全球多活、数据闪回、大热Key探测与优化、丰富的数据结构,赋能大规模高性能要求的在线数据业务。
游戏公司为了快速抢占市场,需要快速的开发出新产品吸引玩家,云数据库Redis版能减少系统开发复杂度,业务爆发时可轻松弹性扩容,满足高性能业务要求.满足游戏分服类应用的分服、滚服弹性扩展需求;数据持久化能力可减轻业务的数据库引擎负担,降低开发复杂度.解决游戏分服类应用一天多次的服需求,根据备份文件可直接...
来自: 云产品
数据库自治服务DAS
阿里云数据库自治服务(Database Autonomy Service,简称DAS)是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务,帮助用户消除数据库管理的复杂性及人工操作引发的服务故障,有效保障数据库服务的稳定、安全及高效。
如果数据库遇到缓存穿透、烂SQL不断出现、异常流量等问题,传统的解决方案中没有好的解决方案,只能接受业务崩溃或者寄希望于开发进行处理,自动SQL限流可以直接快速的发现异常并识别到异常SQL,自动触发限流操作,5分钟内帮助业务恢复正常.自动SQL Review和优化.有别于传统单SQL的诊断优化,以负载为优化单位,综合考虑...
来自: 云产品
云数据库产品总览(瑶池)
阿里云提供完善的数据库解决方案,多款数据库产品,满足99%的业务场景,荣获Gartner、信通院等国内外多项认证。轻松满足高可靠、高可用性、高性能等数据库需求;运维工作量大幅减少,让企业一站式享受数据上云及分布式架构的技术红利!
构建用户标签系统开发用户画像分析业务;基于PolarDB 5分钟内最高可弹性出百倍资源,应对业务峰值.利用云原生数据湖分析DLA+OSS极致分析能力来应对业务波峰波谷。一方面轻松应对来自品牌客户的临时分析。另一方面利用DLA的强大计算能力,细致分析活动投放效果,进一步增强了加和智能流量平台为品牌营销带来的销售转化率....
来自: 云产品
新零售商超基于Serverless服务化改造
新零售商超基于Serverless服务化改造
某零售商超行业龙头企业,主要业务涵盖购物中心、大卖场、综合超市、标准超市、精品超市、便利店、无人值守智慧商店等零售业态,涉及全渠道零售、仓储物流、餐饮、消费服务、数据服务、金融业务、跨境贸易等领域。为了持续支持业务高速且稳定地发展,其在快速上云后,将核心业务改造为全Serverless架构的中台模式,采用函数计算 + API网关 + 表格存储OTS 作为计算网络存储核心,弹性支撑日常和大促峰谷所需资源,轻松支撑618/双11/双12大促。 核心价值 l 全 Serverless 架构:FC + API 网关 + OTS Serverless 解决方案。 l 弹性高可用:毫秒级弹性扩容、充足的资源池水位、跨可用区高可用。 l 敏捷开发免运维:函数式极简编程可专注于业务创新,无采购和部署成本、提供监控报警等完备的可观测能力。
系统全面迁移上云后一些改进和不足:改进 ᅳ 不再需要关心网络、操作系统的硬件细节 比如阿里云的 ECS 会提前做调度和预警,把用户数据转移并做多份数据的备 灾,防止磁盘坏掉的情况发生。ᅳ 硬件升级快捷简单 比如用户使用的是 4 核的机器,当发现业务增长迅速需要做硬件升级时,就 只需要做一个镜像。比如在夜间做一个...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,数据传输,函数计算,API网关,表格存储
SLS多云日志采集、处理及分析
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务,通过日志服务 进行数据分析,帮助提升运维、运营效率, 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户,推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输;针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况,可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
首先购买一台 ECS服务器作为日志服务器,以规格为 2核 4G,实例规格为计算网络 增强型、操作系统为 CentOS 7.6 64位为例;开放 22端口远程控制访问服务器;创 建 ECS实例过程不再赘述 步骤2 创建弹性公网 IP 在购买的 ECS服务器同一 Region创建购买弹性公网 IP(EIP),创建过程不再赘述。注:EIP的作用是为了方便绑定 ECS...
来自: 最佳实践 | 相关产品:云服务器ECS,日志服务(SLS),NAT网关,E-MapReduce,全站加速 DCDN,云速搭CADT
阿里云DNS
阿里云DNS覆盖了公网权威域名解析、内网域名解析、移动解析以及专有云的域名解析场景。为广大用户提供稳定、安全、快速、智能的域名解析服务,助力网站快速实现域名迁移及网站搭建,企业上云就来阿里云。
央视的DNS环境复杂,通过阿里云的一体化DNS融合方案,对DNS业务进行集中管理,建立了统一的容灾调度系统,简化运维工作的同时提高了业务稳定性.多云、自建IDC融合场景一体化DNS方案,实现吉利业务全场景统一解析管理,达到简化业务流、更快容灾响应和更低故障恢复时长,夯实了应用入口的访问效能.海尔集团是全球领先的...
来自: 云产品
函数计算FC
阿里云函数计算(Function Compute)是一个事件驱动的全托管计算服务。通过函数计算,您无需管理服务器等基础设施,只需编写代码并上传。函数计算会为您准备好计算资源,以弹性、可靠的方式运行您的代码。更棒的是,您只需要为代码实际运行消耗的资源付费,代码未运行则不产生费用。
聚焦业务逻辑开发,无需关心服务器购买、自动伸缩等运维操作.预留实例系统不自动回收,可长驻不销毁,消除冷启动带来的延时毛刺.按量付费模型按实际使用计算资源计费,资源利用率高.函数计算分布式集群化部署,支持多可用区.购买新用户专享套餐.函数计算3.0全新发布,降价幅度最高达93%.函数计算3.0全新发布,降价幅度最高...
来自: 云产品
全站加速DCDN
阿里云全站加速旨在提升动静态资源混合站点的访问体验,支持静态资源边缘缓存,动态内容最优路由回源传输,同时满足整体站点的全网访问速度及稳定性需求。全站加速构建于阿里云CDN平台之上,适用于动静混合型、纯动态型站点或应用的内容分发加速服务。
无需关心底层服务器的CPU、内存、操作系统等基础设施,只需将代码通过控制台或OpenAPI上传即可完成应用部署,有效降低开发运维成本.支持把数据写到边缘存储,边缘存储的数据会在几秒~十几秒内自动同步到全球的边缘节点,ER可以快速读取同节点的边缘存储数据.边缘存储EdgeKV.提高应用程序和API的访问速度、提供高可用服务,...
来自: 云产品
新零售行业解决方案
基于业务中台和数据中台的双中台驱动层,重构了前端业务、全域营销和数据智能等多个业务应用场景,为客户提供全渠道销售、全域会员管理等多个行业解决方案
阿里云智能新零售联合天猫/躺平设计平台/IOT等集团多BU,合力为美家行业客户提供从设计平台,全域营销,门店智能场景等,输出最佳实践的“新零售”数字化解决方案,助力企业快速转型.大促营销数据库解决方案.新零售智能客服解决方案.零售云业务中台解决方案.围绕底层的基础设施,打造与客户交互的触点数字化服务层,完整地...
来自: 解决方案
RPA
RPA(Robotic Process Automation)是阿里云出品的企业自动化流程数字员工,也可以称之为机器人流程自动化。阿里云RPA易于部署及其低代码开发特性,为企业带来速度和敏捷性提升。比如将企业内部工作流程自动化,打通系统间的数据孤岛,能显著提高生产效率。
北京融智国创科技有限公司面向企事业单位内外部信息系统,提供机器人平台产品及解决方案.北京融智国创科技有限公司.南京德塔金一直专注于金融行业的科技发展,通过大数据、AI智能、IoT等产品和技术为金融行业客户提供金融科技解决方案和服务.南京德塔金数据科技有限公司.天津云顶云致力于为企业客户提供优质的转型上云咨询...
来自: 云产品
房地产数字化营销售楼解决方案
阿里云联合支付宝以及生态合作伙伴,整合阿里体系内的广告资源实现精准引流,给房地产企业提供的一个端到端的轻量级线上售楼处,帮助客户实现精准圈客、线上转化和快速锁客的解决方案,同时也可实现应对疫情对行业的影响,为复工复产提供充足蓄客能力。
线上快速获客.IoT边缘计算集成楼宇5A系统,统一管理设备、应用和数据,实现建筑的智慧化响应与决策.智慧建筑解决方案.线上提交需求申请表.工作人员会在1-2个工作日内与您联系,确认方案.客户开通阿里云账户,云码投放平台充值.远程开通在线售楼处SaaS功能,客户配置项目.制作投放素材,产品上线.阿里巴巴流量加持的24小时...
来自: 解决方案
数据可视化DataV
数据可视化DataV是阿里云一款数据可视化应用搭建工具,旨让更多的人看到数据可视化的魅力,帮助非专业的工程师通过图形化的界面轻松搭建专业水准的可视化应用,满足您会议展览、业务监控、风险预警、地理信息分析等多种业务的展示需求。
人人可用的低代码系统,提供低代码蓝图编辑器,让初级开发人员也能快速上手交互开发,不仅降低可视化应用的构建门槛,并且便于业务理解,降低项目交接和维护成本;DataV-数据看板.RDS MySQL 版.大数据开发治理平台 DataWorks.AnalyticDB MySQL版.实时数仓 Hologres.业务监控看板.跨系统数据一屏统管.DataV在数字孪生城市...
来自: 云产品
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用