基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数<em>计算</em>FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
整体方案通过 CADT 可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数 和 MongoDB 控制台做少量配置即可。方案优势 l 可以实现根据 Kafka 消息的具体内容判断,该对 MongoDB 做哪种 DML 操作,灵活性和可 扩展性极高。l 函数计算具有完善的日志系统、容错机制。可以清晰的看到对每条消息的处理日志,...
来自: 最佳实践 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
基于云速搭CADT快速构建药物筛选批量计算环境-serverless版
基于云速搭CADT快速构建药物筛选批量<em>计算</em>环境-serverless版
本方案基于云速搭 CADT提供一个快速构建云上Serverless版HPC批量计算环境的模板,针对生物制药领域的药物筛选场景,提供开箱即用的整套解决方案工具包,整个云上环境仅需1个小时即可完成自动化部署搭建。
基于云速搭 CADT快速部署药物筛选批量计算环境-Serverless版 场景描述 部署架构 本方案基于云速搭 CADT 提供一个快速构建云上 Serverless版 HPC批量计算环境的模板,针对生物 制药领域的药物筛选场景,提供开箱即用的整套解 决方案工具包,整个云上环境仅需 1个小时即可完 成自动化部署搭建。解决问题 快速构建适用于药物...
来自: 最佳实践 | 相关产品:弹性公网IP,文件存储NAS,日志服务(SLS),容器镜像服务 ACR,操作审计,密钥管理服务,云防火墙,弹性高性能计算E-HPC,云速搭
基于FC实现的Web端视频录制最佳实践
基于FC实现的Web端视频录制最佳实践
场景描述在很多互娱场景,在线教育领域会有直播视频录制的需求,但是往往一个页面上的内容是多种多样的,不止有直播流,可能还有白板,评论等其他元素,如果只是录直播流,那内容是不完整的,所以需要将整个屏幕的内容录制为视频。该最佳实践可以有效解决这个场景。
审阅人 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2024-03-25 缘 增加了停止任务需要配置 V1.1 2024-04-03 缘 权限的步骤 更新了停止任务章节截图 文档版本:20240325 I 基于 FC实现的 Web端视频录制最佳实践 前言 前言 名词解释 函数计算 FC(Function Compute):函数计算是事件驱动的全托管计算服务。...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算
基于OSS Object FC实现非结构化文件实时处理最佳实践
基于OSS Object FC实现非结构化文件实时处理最佳实践
现在绝大多数客户都有很多非结构化的数据存在OSS中,以图片,视频,音频居多。举一个图片处理的场景,现在各种终端种类繁多,不同的终端对图片的格式、分辨率要求也不同,所以一张图片往往会有很多张衍生图,那如果所有的衍生图都存在OSS中,那存储的成本会增加,所以就可以通过OSS Object FC的方案,在不同的终端请求时,对OSS中的原图基于终端的要求做实时处理,然后响应返回,这样OSS中只需要存储原图即可。音视频也有类似的场景。
使用函数 ,您无需采购与管理服务器等基础设施,只需编写并上传代码或镜像。函数计算为您准 备好计算资源,弹性地、可靠地运行任务,并提供日志查询、性能监控和报警等功能。 内容分发网络(ContentDeliveryNetwork,CDN):是建立并覆盖在承载网上,由不同区 域的服务器组成的分布式网络。将源站资源缓存到全国各地...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算
容器计算服务 ACS
容器计算服务 ACS 是以 K8s 为使用界面供给容器算力资源的云计算服务,提供符合容器规范的算力资源。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台 容器计算服务 ACS产品简介产品优势产品功能入门与试用产品定价安全合规常见问题容器计算服务 ACS以 K8s 为使用界面供给容器力资源的云计算服务,提供符合容器规范的力资源。公测试用快捷入口文档01:23新一代容器产品产品动态内容甄选...
来自: 云产品
函数计算实现弹性音视频处理系统
函数<em>计算</em>实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用,每天 有大量的上传视频,需要及时转码处理以适配各 种终端及网络条件,要求短时间内准备大量的计 算资源进行大规模并行转码处理,同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
Function Compute 实现弹性音视频处理系统 最佳实践 架构 场景描述 本示例通过 Function Compute 部署一个高弹 性高可用的音视频处理系统。尤其适合视频网站 使用,每天有大量的上传视频,需要及时转码处 理以适配各种终端及网络条件,要求短时间内准 备大量的计算资源进行大规模并行转码处理,同 时希望基于 FFmpeg自建...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,文件存储NAS,日志服务(SLS),Serverless 工作流
函数计算FC
阿里云函数计算(Function Compute)是一个事件驱动的全托管计算服务。通过函数计算,您无需管理服务器等基础设施,只需编写代码并上传。函数计算会为您准备好计算资源,以弹性、可靠的方式运行您的代码。更棒的是,您只需要为代码实际运行消耗的资源付费,代码未运行则不产生费用。
新浪微博使用函数计算-无服务器计算,处理每日数十亿次个性化图片处理,综合成本下降 35%.世纪联华使用函数计算+表格存储的方式,平滑支撑双 11 大促等突发业务.函数计算FC这种无服务器计算的模式帮助石墨文档有效解决了性能瓶颈,并节省了 58%的服务器成本.语雀使用函数计算处理 CPU 密集型任务,免去了搭建集群的代价....
来自: 云产品
弹性计算
阿里云弹性计算提供弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。经十年深厚技术积淀,阿里云弹性计算技术先进、性能优异、 稳如磐石,致力于提供永不停机的计算服务。
全称全球健康药物研发中心在阿里云上搭建了开放共享平台,通过使用E-HPC搭建高性能计算集群,用于药物研发的分子对接、分子动力学模拟、深度学习模型训练,把需要几天的计算工作缩短到几小时,速度提升8到20倍.全球健康药物研发中心.通过阿里云弹性高性能计算(E-HPC)一键部署超算集群环境,根据需求动态增减集群节点,...
来自: 云产品
视觉AI计算和训练
视觉计算服务VCS是阿里云推出的按实际算力计费的产品,AI计算成本节省可达30%。内置20+常用视觉AI算法,也可运行您指定的视觉AI算法,应用支撑达百万级QPS,体验毫秒级响应。
通过合理的算子编排、力调配与策略选择,极大降低分析成本,让客户用最低的成本计算最有价值的视频和图片.视觉计算服务VCS兼容主流算法框架,支持AI能力快速集成,弹性调度确保资源用在刀刃上.弹性AI计算.训练数据上传及标注.支持自助上传待AI训练的图片数据,并提供便捷的打标工具,以便进行算法自助训练.测试数据上传及...
来自: 云产品
批量计算BCS
阿里云批量计算(BatchCompute)是一种适用于大规模并行批处理作业的分布式云服务。支持海量作业并发规模,系统自动完成资源管理,作业调度和数据加载,并按实际使用量计费。可广泛应用于电影动画渲染、生物数据分析、多媒体转码、金融保险分析、科学计算等领域。
批量计算的高效集群管理可以帮助您轻松调度十万核以上的计算资源进行渲染,并且通过独有分布式缓存技术大幅提升共享场景文件的加载性能。同时提供简单易用的渲染管理系统,无需编程实现云上渲染.无论使用OSS还是NAS,通过简单的配置指定数据源就可以启动分布式缓存功能。缓存加速能力随着集群规模线性扩展,解决大规模渲染...
来自: 云产品
实时计算Flink版
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,具备实时应用的作业开发、数据调试、运行与监控、自动调优、智能诊断等全生命周期能力。内核引擎100%兼容Apache Flink,2倍性能提升,拥有FlinkCDC、动态CEP等企业级增值功能,内置丰富上下游连接器,助力企业构建高效、稳定和强大的实时数据应用。
使用实时计算Flink版产品之后,每一次报税、结转都在内存中完成预先计算,查询结果得以实时展现在用户面前,响应速度大幅提升的同时极大地提升了用户体验.查看案例详情.二维火专注于云计算餐饮软件系统研发和应用。其大数据团队通过阿里云实时计算Flink+Hologres实现百亿级数据高并发、秒级分析处理,并向客户提供80多种...
来自: 云产品
边缘计算与云通信
边缘计算与云通信作为阿里云产品六大版块之一,主要包含边缘计算服务、CDN、云通信等产品,可提供以PaaS或SaaS云化的网络连接能力、互联网通信能力、通信类应用能力的产品族,为客户提供快捷、高效的用户触达能力。
阿里云在全球100多个主要国家和区域提供低时延、高带宽的网络接入、多态计算和分发服务,帮助客户便捷地使用云边协同能力,优化业务访问速度,提升终端用户体验。可提供以PaaS或SaaS云化的网络连接能力、互联网通信能力、通信类应用能力的产品族,为客户提供快捷、高效的用户触达能力。边缘计算与云通信包含边缘计算服务、...
来自: 云产品
超级计算集群实现自然语言处理训练
超级<em>计算</em>集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
超级计算集群实现自然语言处理训练 最佳实践 部署架构 场景描述 本方案适用于自然语言训练场景,使用神 龙GPU云服务器(SCCGN6)+CPFS进 行NLP的训练,采用Bert模型。这里不使 用容器,直接使用裸机进行NLP的Bert训 练,使用AIACC可以有效提升多机多卡的 训练效率。解决问题  使用神龙GPU云服务器搭建NLP训练 环境  ...
来自: 最佳实践 | 相关产品:文件存储NAS,超级计算集群
云原生大数据计算服务MaxCompute
阿里云云原生大数据计算服务MaxCompute是面向分析的企业级云数仓,作为一体化大数据智能计算平台ODPS的大规模批量计算引擎,MaxCompute以 Serverless 架构提供快速、全托管的在线数据仓库服务,使您经济高效的分析处理海量数据,进行敏捷的业务洞察。
分布式计算框架MaxFrame发布,高效、一站式完成Data+AI开发.MaxCompute发布按量付费闲时版,计算成本至高节省66.66%.MaxCompute 物化视图智能推荐发布,CU力节省14%.MaxCompute 跨地域灾备邀测发布,提升数据安全性.MaxCompute 架构升级及开放性解读.阿里云大数据智能计算平台ODPS入选2022世界互联网领先科技成果.TPCx-BB...
来自: 云产品
弹性加速计算
Alibaba Elastic Accelerated Computing Instances (EAIS)是一款弹性加速计算实例,可在Alibaba ECS实例中灵活添加GPU加速资源。您可以针对您的应用程序的整体计算和内存需求在 Alibaba Cloud 中选择最适用的ECS实例,然后再配置所需量级的 GPU 驱动推理加速,有效利用资源,同时火速节约成本。相比运行AI推理、渲染、编解码的GPU实例,使用EAIS实例的成本可以降低超过 50%。EAIS支持 TensorFlow、PyTorch 和 ONNX 模型。
满足您选择最合适应用的总体计算和内存需求的实例类型。您可以单独指定所需的GPU推理加速量级,将推理成本降低多达50%.将推理成本降低多达50%.可以为您提供灵活的CPU与GPU配比,准确获取您所需的资源.准确为您提供您所需的资源.您可以使用EAIS轻松扩展和缩减推理加速量级,以满足应用程序的需求,这有助于您仅为所需资源...
来自: 云产品
基于弹性计算的AI推理
基于弹性<em>计算</em>的AI推理
场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前,模型已经训练完成。例如,刷脸 支付中,我们在刷脸的时候,就是推理的一个过 程。再比如图像分类,目标检测,语音识别,语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
基于弹性计算的 AI推理 最佳实践 部署架构:场景描述 本方案适用于使用 GPU进行 AI在线推理的场景。在推理之前,模型已经训练完成。例如,刷脸支付 中,我们在刷脸的时候,就是推理的一个过程。再 比如图像分类,目标检测,语音识别,语义分析等 返回结果的过程。解决问题 使用 GPU云服务器搭建推理环境 使用容器服务 ...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,容器服务 ACK
计算巢服务
阿里云计算巢服务是一个面向ISV、SI、MSP和开发者的云集成PaaS平台,方便服务商更好的将产品、服务集成,借助云原生的能力提升软件服务交付、部署及后续管理。
立即创建数据库服务:TuGraph高性能数据库服务介绍TuGraph(tugraph.org)是蚂蚁集团的高性能数据库(Graph Database)及数据管理平台,具有万亿数据的处理能力,计算性能去取得国际数据库性能基准测试第一名。产品特点高性能数据库,支持实时和离线的毫秒级复杂查询,有可视化交互控制台,丰富的API接口等。立即...
来自: 云产品
图像搜索
图像搜索是阿里云自研的一款用于图片间相似性检索的平台型产品。通过输入图片,可高精度、高效率的在图库网站中检索到与输入图片相似的图片集合,并支持定制化服务。以图搜图可广泛的应用于拍照购物、 商品推荐、版权保护、图片相似推荐等场景。
图片分享和社交类网站通常有大量通用图片供用户搜索使用,利用图片搜索服务,可在云端快速构建百亿级图像搜索引擎,提供以搜图功能,提升用户体验.深度学习算法训练,满足搜索精度要求.大规模检索引擎可支持百亿级别数据.支持实时更新维护数据.API调用便捷,满足服务快速搭建的需求.快速搭建服务.对象存储 OSS.推荐搭配...
来自: 云产品
< 1 2 3 4 5 >
共有5页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用