基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka消息<em>内容</em>控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作 最佳实践 场景描述 业务架构 基于阿里云 Kafka 消息的 Key 或者消息体里的 做判断,然后对 MongoDB 做增,删,改的操 作。在传统 ETL 流程的基础上进一步增加了灵活 性和可扩展性。应用场景 在大数据 ETL 场景,将 Kafka 中的消息流转到其 他下游服务...
来自: 最佳实践 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
基于函数计算FC实现阿里云Kafka消息轻量级ETL处理
基于函数计算FC实现阿里云Kafka消息轻量级ETL处理
在大数据ETL场景,Kafka是数据的流转中心,Kafka中的数据一般是原始数据,可能存在多种数据混杂的情况,需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC,可以快速高效的搭建数据处理链路,用户只需要关注数据处理的逻辑,数据的触发,弹性伸缩,运维监控等阿里云函数计算都已经做了集成,函数计算FC也支持多种下游,OSS/数据库/消息队列/ES等都可以自定义的对接
(可以选择开启,然后可以设置批量推送的条数,批量推送 间隔,根据需求选择是否批量推送推送格式:RawData(也可以选择标准的 CloudEvents格式,但函数中的代码需要 适配解析 CloudEvents格式的逻辑)重试策略:指数衰减重试。(也可以选择退避重试)容错策略:允许容错。(允许异常容错,当异常发生时不会阻塞执行,...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算,消息队列 Kafka 版
基于函数计算FC镜像部署Stable Diffusion大模型
基于函数计算FC镜像部署Stable Diffusion大模型
在现代AI应用中, Stable Diffusion等模型因其强大的功能而受到关注。然而,这些模型对计算资源的高需求和复杂的运维管理成为部署时的挑战。基于函数计算FC的无服务器计算模式为这类模型的部署提供了全新的解决方案。用户只需关注模型的部署和调用逻辑,而无需关心底层的服务器配置、资源分配和扩展性等问题。函数计算FC能够自动处理函数的执行环境,包括冷启动、弹性伸缩等,确保模型能够在大规模的请求下稳定运行。
文档版本:20240426 5 基于函数计算 FC镜像部署 SD大模型 场景验证 步骤3 用Docker tag命令为想要上传到 ACR的镜像打上新的标签 步骤4 在ECS上将输入下图对应的命令将本地镜像推送到 ACR 文档版本:20240426 6 基于函数计算 FC镜像部署 SD大模型 场景验证 在阿里云 ACR打开应用的镜像仓库,点击镜像版本,可以看到刚刚推送...
来自: 最佳实践 | 相关产品:函数计算
基于FC实现的Web端视频录制最佳实践
基于FC实现的Web端视频录制最佳实践
场景描述在很多互娱场景,在线教育领域会有直播视频录制的需求,但是往往一个页面上的内容是多种多样的,不止有直播流,可能还有白板,评论等其他元素,如果只是录直播流,那内容是不完整的,所以需要将整个屏幕的内容录制为视频。该最佳实践可以有效解决这个场景。
自动通知下游服务执行结果 ◼ 请求执行成功后,如果您配置了成功目标,函数计算系统会自动将成功请求的上下文 信息推送到下游目标服务。例如,您配置了使用函数计算实现自动解压上传到 OSS的 ZIP文件,解压完成后想要接收消息通知,可采用为目标函数配置异步调用结果回调目 标服务。3.4.该最佳实践的 Callback 在 Web端视频...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算
高效防护 Web 应用
随着网络技术的不断发展,您的Web应用如果没有流量入口的防护,会面临诸多风险。本方案以ECS实例接入WAF为例,推荐您使用Web应用防火墙(WAF)开启应用防护,避免网站服务器被恶意入侵导致性能异常等问题,保障网站的业务安全和数据安全。同时,为您节约开发成本,满足行业合规要求。
6.配置全球自动实时同步、实现全球多机、多集群、多中心容灾、一键回源Bypass、SLA 全年99.95%、高危风险指标钉钉群推送预警。6.配置全球自动实时同步、实现全球多机、多集群、多中心容灾、一键回源Bypass、SLA 全年99.95%、高危风险指标钉钉群推送预警。详细了解WAF与传统方案对比对比项传统硬件WAF或自建WAF方案阿里云WAF...
来自: 解决方案
智能商业分析 Quick BI
瓴羊智能商业分析 Quick BI 是阿里云用户臻选的数据可视化工具,大幅提升数据分析和报表开发效率,一站式满足企业各种场景的数据分析和决策的诉求。
产品功能个人版高级版专业版数据分析仪表板支持支持支持即席分析不支持不支持支持模板市场支持查看所有模块支持查看所有模块,应用已购模块支持查看及应用所有模块电子表格不支持单独购买支持数据大屏不支持单独购买赠送基础容量,可按需增购数据应用企业门户不支持支持支持订阅推送(邮件)不支持支持支持自助取数不支持...
来自: 云产品
用户内容智能推荐解决方案
用户内容智能推荐解决方案通过云上构建实时智能商品和内容推荐平台,帮助企业客户快速建立用户画像和推荐算法模型,提供个性化商品推荐,大幅提高销售效率。
针对长视频、短视频、在线阅读小说平台内容实时推荐场景,推荐的内容带有分享属性(点赞、转发等),可以是较短文本、文章、图片等,智能推荐方案实现分享平台内容的千人千面,根据用户的多个标签为用户推荐相关的内容.内容分享平台实时推荐.内容分享平台实时推荐.通过云上构建实时智能商品和内容推荐平台,帮助企业客户...
来自: 解决方案
基因分析平台
阿里云基因分析平台可以提供端到端的基因计算PaaS服务。支持GA4GH行业标准,集成生信分析应用,大幅优化成本效率,快速处理海量基因数据。
为任意规模的用户,提供开箱即用的基因分析服务,效率高,成本低,灵活可靠,最快30分钟即可获取海量数据的计算结果。提供常用的生信流程和最佳参数配置,直接读写对象存储OSS数据,使用简单方便.使用GPU/FPGA等多种加速工具,结合阿里云海量计算资源和调度优化,大大降低成本,提高...平台内容对外开放,方便下游生态聚合.
来自: 云产品
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
行业物联网城市物联网平台城市数字化、智能化的底座、“新基建”的必备基础设施,智能化每一个城市数字空间,助力打造“善政、惠民、兴业”的新型智慧城市生活物联网平台(飞燕平台)为解决设备快速智能化中常遇到的设备连接、App端控制、设备消息推送、语音控制、设备管理、数据统计等问题,提供了一整套配置化方案。...
来自: 云产品
视频直播
阿里云视频直播服务(ApsaraVideo Live)是基于领先的内容接入与分发网络和大规模分布式实时流媒体转码技术打造的直播平台,提供便捷接入、高清流畅、低延迟、高并发的音视频云高清直播直播服务。
内容安全全方位内容审核:阿里云视频直播基于强大的视频AI能力,提供了智能审核功能,支持视频、音频、图片等全方位的媒体审核,并支持禁止推送违规的直播流。客户案例“本次S12英雄联盟赛事直播,阿里云为虎牙提供了流畅的观看体验,保障S12最终零故障落幕,支撑了千万观众在线,阿里云成为虎牙在S12英雄联盟赛事直播的...
来自: 云产品
利用交互式分析(Hologres)进行数据查询
利用交互式分析(Hologres)进行数据查询
场景描述:随着收集数据的方式不断丰富,企业信息化 程度越来越高,企业掌握的数据量呈TB、 PB或EB级别增长。同时,数据中台的快 速推进,使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力,为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
收集统计信息 SELECTa.rmid,count(*),b.os fromlog_pvasajoinpush_historyasb ona.rmid=b.rmid groupbya.rmid,b.os从该例子中,我们可以利用模拟数据进行推送效果在两大收集操作系统间的曝光比例 来进行后续相同内容推送时,针对手机系统做一定的倾斜。最后我们就可以看到当实时广告的曝光数据命中了推送的时候,我们所...
来自: 最佳实践 | 相关产品:大数据计算服务 MaxCompute,DataV数据可视化,实时计算,Hologres,云速搭CADT
阿里云最佳实践容器workshop
阿里云最佳实践容器workshop
通过本篇最佳实践,可以熟悉容器及k8s的基本操作。基于eci的高弹性架构,能有效的应对业务流量洪峰,同时提升资源使用效率。
文档版本:20220301(发布日期)24 阿里云ACK容器服务workshop Docker实践 步骤6 记录推送镜像命令备用。2.7.2.给镜像打 Tag并推送到阿里云 现在,我们将镜像上传到上一章节创建的镜像仓库中。步骤1 先登录 docker镜像仓库,用户名和镜像仓库按照实际替换。docker login –username=registry.cn-hangzhou.aliyuncs.com 步骤...
来自: 最佳实践 | 相关产品:容器服务 ACK,日志服务(SLS),访问控制,容器镜像服务 ACR,云效,云速搭
基于ALB的统一流量调度和监控
基于ALB的统一流量调度和监控
企业在走向容器化过渡阶段,内部同时存在ECS应用和容器应用的情况,在多域名业务场景下,为了对应用的入方向流量进行统一的调度和监控,可通过ALB快速完成内部应用统一流量的管控。 典型场景 多域名转发到混合应用类型场景。 方案优势 1、 高弹性,高并发 2、 减少SLB+EIP数量 3、 一键WAF透明接入 4、 配置简单易上手 5、 统一流量运营分析
步骤12 Java 代码扫描和 Maven单元测试(无需配置)步骤13 Java构建环节添加任务步骤:上传->构建物上传 文档版本:20210915 22 环境准备 基于 ALB统一流量调度和监控 步骤14 调整 3个步骤的顺序如下,“Java构建”,“构建物上传”,“镜像推送至个人版”。文档版本:20210915 23 环境准备 基于 ALB统一流量调度和监控 ...
来自: 最佳实践 | 相关产品:云服务器ECS,负载均衡 SLB,容器服务 ACK,云效
Spark on ECI大数据分析
Spark on ECI大数据分析
场景描述 方案优势 1.计算引擎弹性扩缩容,兼顾资源弹性与计 算资源成本优化。 2.计算与存储分离架构,结合阿里云原生云 存储产品,海量数据湖优势。 3.Kubernetes原生的调度性能优势,提升在 大规模分析作业时的分析性能优势分。 4.集群资源隔离和按需分配。 解决问题 1.计算资源弹性能力不足,计算资源成本管 控能力欠缺. 2.集群资源调度能力和隔离能力不足。 3.计算与存储无法分离,大数据量分析时出 现数据存储资源瓶颈。 4.Spark submit方式提交分析作业参数支持 有限等缺点。 产品列表 容器服务Kubernetes版(ACK) 弹性容器实例(ECI) 文件存储HDFS 对象存储OSS 专有网络VPC 容器镜像服务ACR
2.在容器镜像服务 ACR控制上可以看到镜像已经推送到了私像仓库。2.4.准备 Spark应用镜像 步骤1 编写示例 WordCount函数并打包。本地开发环境使用 IntelliJ IDEA,创建 Maven工程,创建的 Maven工程结构如下图 所示,并将修改后的 core-site.xml文件放入应用项目的 resources目录,这里以编写 一个常见的 WordCount函数...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,容器服务 ACK,弹性容器实例 ECI,文件存储HDFS
基于ECI+FaaS构建游戏战斗结算服
基于ECI+FaaS构建游戏战斗结算服
在游戏行业的很多SLG游戏作品中,为了防止客户端作弊,在每局战斗之后,在客户端预判玩家胜利的情况下,需要服务端来进行战斗数据的结算,从而确定玩家是不是真正的胜利。战斗结算是强CPU密集型,结算系统每日需要大量的计算力,尤其是开服或者活动期间忽然涌入的大量玩家,导致需要的计算量瞬间几倍增长,同时需要结算系统保持稳定的延时来保证玩家的用户体验。 1. ECI支持500台实例30S弹出,快速解决业务模块扩容压力。FaaS毫秒级伸缩扩容,化解算力瓶颈,平滑解决暴增调用请求。 2. 降低成本:ECI每天弹性运行8小时,与6代同规格包月相比节省成本40%+,FaaS按需付费,即开即用,节省预留资源消耗。 3. 免运维:FaaS和ECI都是全托管免运维的服务,客户专注业务开发即可。 4. 模块公共化:减轻游戏逻辑服的压力,结算需求复用到类似需求的游戏。
步骤11 单击镜像仓库名称,在基本信息页可查看到将镜像推送到 Registry的命令,请根据实 际镜像信息替换示例中的【ImageId】和【镜像版本号】等参数。文档版本:20201127 33 基于ECI+FaaS构建游戏战斗结算服 游戏架构搭建篇 步骤12 网关服镜像,成功推送到镜像仓库后。3.4.游戏服 步骤1 下载网关服代码,地址:...
来自: 最佳实践 | 相关产品:容器服务 ACK,函数计算,弹性容器实例 ECI
自建K8S集群迁移ACK弹性裸金属集群
自建K8S集群迁移ACK弹性裸金属集群
场景描述 在微服务化改造之后,企业在享受K8S带来应 用管理的便利的同时,存在硬件性能不足,本 地扩展性差,容器容灾难,K8S管理复杂等问 题。 解决问题 1.增强K8S扩展性:如何通过弹性裸金属服务 器的强劲硬件性能,实现云端资源急速扩 展,从容应对应用访问压力大的问题。 2.如何简化云端K8S运维:通过阿里云容器服 务(ACK)实现敏捷开发和部署落地,加速 企业业务迭代。 3.如何综合考虑迁移和容灾:如何整合云上和 云下容器资源实现遇到故障时可以通过健 康检查实现自动容灾。 4.如何不改应用上云:如何实现应用上云数据 库连接零修改。 5.数据库上云及回退:如何实现上云回退; 产品列表 ACK/ECS/SLB/NAT网关/弹性裸金属服务器/DTS/RDS MySQL
2.查看镜像推送方式 文档版本:20220128 39 自建 K8S集群迁移 ACK弹性裸金属集群 部署云上环境 说明:采用公网地址推送镜像 3.通过公网推送自定义镜像【脚本】sudo docker tag b93eb642046e registry.cn-hangzhou.aliyuncs.com/bp_30/magento:v1.1 sudo docker push registry.cn-hangzhou.aliyuncs.com/bp_30/magento:v1.1 ...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,负载均衡 SLB,容器服务 ACK,NAT网关,弹性裸金属服务器(神龙),云速搭
数智化营销解决方案
数智化营销解决方案通过成熟的数据分析服务,与丰富的AI能力,解决品牌营销过程中遇到的资金效率提升瓶颈,帮助您通过更丰富的通道,将信息准确投放到目标客群。
提供移动消息推送、短信推送、邮件推送等丰富的信息推送通道,通过人工智能的方式提升信息投递的效率与准确率.借助精准目标用户营销管理平台实现智能输出人群策略和媒体策略,并基于智能投放系统做实时优化,完成投放效果分析评估.通过数据赋能,为企业提供从潜客挖掘、媒体智选、预算分配、智能监播到效果评估的全链路服务...
来自: 解决方案
智慧银行解决方案
智慧银行解决方案基于阿里云数据中台,建设智能化的客户服务体系、营销体系、大数据风控体系、产品与渠道运营体系,实现一切业务数据化,一切数据业务化,全面提升用户体验和运营效率,降低经营成本。
为金融机构搭建在线灵活的营销管理平台,包括客户洞察、活动管理、渠道推送、定向投放、流程自动化、营销效果分析、营销实验、事件式营销、创意中心等组件.阿里巴巴在智能客服领域拥有丰富的经验,作为全球头部的电子商务平台,阿里巴巴在自身平台研发了淘小蜜、小蚂答等多个机器人客服系统。阿里巴巴希望该产品和方案能够...
来自: 解决方案
小程序
mPaaS 小程序,源自于支付宝小程序框架,亿级线上业务体量的锤炼,安全性媲美支付宝原生能力。不仅面向自有 App 投放小程序,更可快速构建打包,覆盖支付宝、淘宝、钉钉等应用。
提供专业的移动端消息推送方案,快速集成移动终端推送功能,与用户保持互动,从而有效地提高用户留存率,提升用户体验。提供 App 的个性化广告、活动投放,自定义投放人群,帮助 App 精准、及时触达用户,实现促活促留存促进业务增长的目的.小程序接入问题咨询>>.发布包大小极致优化,节省流量和存储。服务迭代不再受发版...
来自: 云产品
音视频终端 SDK
音视频终端 SDK集成了阿里云视频直播和视频点播业务中拍摄、编辑、上传、推流和播放的核心能力,同时融合视频特效、音频特效等音视频AI能力,为用户提供一体化SDK,支持多终端接入,搭配产品级Demo,支持用户根据业务需求快速集成所需
阿里云推流 SDK 是基于阿里云强大内容分发网络和音视频实时通讯技术的客户端推流开发工具,支持 Android、iOS、Flutter 多端多平台推流,为用户提供简单易用的开放接口、网络自适应的流畅体验、多节点的低延迟优化、功能强大的实时美颜等服务.推流 SDK.自定义 UI.提供完整的 UI 交互源码,用户可自定义 UI 界面或者默认 UI ...
来自: 云产品
< 1 2 3 4 ... 6 >
共有6页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用