基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景,企业的Kafka实例可能存在多种情况,比如使用阿里云Kafka服务,可能是自建开源Kafka,或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例,在这个前提下Kafka实例之间可能会需要消息同步的情况: 同帐号容灾场景:比如Kafka实例都是阿里云Kafka,但是Kafka实例会有主备之分,需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾:这类场景比如主Kafka是阿里云Kafka,备Kafka是IDC开源自建Kafka,或者是其他云上的Kafka。 不同业务之间消息同步:因为现在的业务通常不会是信息孤岛,都需要消息互通,所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例,并且这两个Kafka实例归属不同的RAM角色,有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题(重试机制,容错机制,死信队列等)。 大幅提升构建消息同步架构的效率,降低构建复杂度问题。
文档版本:20240330 21基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步 部署基础环境 步骤25当出现校验成功时,可以查看一下界面中相关的信息,确认一下是否是和自己的设计 相符,如果相符单击下一步:价格清单。步骤26进入核算价格阶段,计价为实时询价,请耐心等待。这里会将应用中的云资源按照免 费、按量付费...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,函数计算,消息队列 Kafka 版
基于OSS Object FC实现非结构化文件实时处理最佳实践
基于OSS Object FC实现非结构化文件实时处理最佳实践
现在绝大多数客户都有很多非结构化的数据存在OSS中,以图片,视频,音频居多。举一个图片处理的场景,现在各种终端种类繁多,不同的终端对图片的格式、分辨率要求也不同,所以一张图片往往会有很多张衍生图,那如果所有的衍生图都存在OSS中,那存储的成本会增加,所以就可以通过OSS Object FC的方案,在不同的终端请求时,对OSS中的原图基于终端的要求做实时处理,然后响应返回,这样OSS中只需要存储原图即可。音视频也有类似的场景。
步骤11当出现校验成功时,可以查看一下界面中相关的信息,确认一下是否是和自己的设计 相符,如果相符单击下一步:价格清单。步骤12进入核算价格阶段,计价为实时询价,请耐心等待。这里会将应用中的云资源按照免 费、按量付费和包年包月进行分类显示,如果产品享受折扣这里会自动将账号对应的 优惠显示出来。价格清单中的...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算
SAE-ACK应用双跑最佳实践
SAE-ACK应用双跑最佳实践
场景描述 实现ACK、SAE中部署的应用在东西向和南北向互通,实现SAE-ACK应用双跑。 应用场景 该最佳实践应用于两类场景: l 因为SAE支持更丰富自动扩缩指标(比如QPS,RT,TCP连接数等),所以将相对稳态的应用部署在ACK中,将相对弹性波动大的应用部署在SAE,借助SAE更强大的自动扩缩应对流量洪峰。 l 将K8s架构迁移到Serverless架构时,需要平滑过渡,所以该最佳实践中的双跑架构可以有效帮用户平滑的完成迁移。
文档信息 属性 内容 文档名称 SAE-ACK应用双跑最佳实践 文档编号 364 文档版本 V1.0 版本日期 2024-03-11 文档状态 制作人 缘 审阅人 变更记录 版本编号 日期 作者 审阅人 说明 V1.0 2024-03-11 缘 文档版本:2024031 ISAE-ACK应用双跑 目录 目录 文档版本信息.I 法律声明.II 目录.III 最佳实践概述.4 前置条件.1 1....
来自: 最佳实践 | 相关产品:容器服务 ACK,Serverless 应用引擎,微服务引擎
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
授权后,回到 CADT 页面点击返回 17 文档版本:20240304 基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作 部署基础环境 校验成功 再次进行应用部署,当出现 时,可以查看一下界面中相关的信息,确认一下是 否是和自己的设计相符,如果相符单击下一步:价格清单。进入核算价格阶段,计价为实时询价,请耐心...
来自: 最佳实践 | 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
基于MSE和SAE的微服务部署与压测
基于MSE和SAE的微服务部署与压测
通过云原生微服务引擎MSE、SAE、PTS、ARMS产品,为spring cloud微服务应用提供部署和测试能力,提供一个经典微服务应用上云的典型架构,实现微服务应用的快速落地。
文档版本:20240415 8基于MSE和SAE的微服务部署与压测 部署基础环境 应用计价成功后,CADT会实时生成一个应用架构成本分析报告,可以单击查看报告。步骤10如果确认价格符合预期,可以单击下一步:确认订单。确认订单阶段会列出架构中所有的产品及其价格,需要用户确认无误后勾选接受《云 速搭服务条款》,此时下一步:支付...
来自: 最佳实践 | 相关产品:负载均衡 SLB,弹性公网IP,性能测试 PTS,应用实时监控服务 ARMS ,Serverless 应用引擎,微服务引擎,云速搭
云消息队列 Confluent 版
云消息队列 Confluent 版是阿里云与 Apache Kafka 项目创始团队所创立的 Confluent 公司合作,基于 Apache Kafka 核心能力提供的企业级全托管消息队列服务,旨在为企业提供集成消息流式处理与大数据系统的一站式解决方案。
实时响应客户互动行为,构建一个全面详尽的数据视图,去标识化地分析客户,以高效的方式实现与客户的互动——实时跨所有数据孤岛和系统,提供个性化的体验.通过采用松耦合的微服务架构设计,能够实现更高的敏捷性和更快的创新。使用 Confluent 将微服务彻底解耦,统一服务间的通信标准,并且有效消除维护独立数据状态的繁琐...
来自: 云产品
飞天企业版
阿里云飞天企业版是基于阿里云飞天云计算操作系统,为政企客户专属构建的资源和云管完全独立的企业级云平台,阿里云专有云与公共云同根同源,支持私有化部署。
服务介绍咨询及交付上云及应用容灾运维及管理一朵云及资源运营培训及认证云平台咨询规划服务基于阿里云专有云的最佳实践和经验总结,提供包括云平台咨询规划、云内云外场景化技术集成和高阶交付架构设计等覆盖“建、管、用”的全生命周期的规划设计服务,为客户云平台的技术选型、演进规划和架构规划提供全流程的平台架构...
来自: 云产品
基于MSE云原生网关同城多活
基于MSE云原生网关同城多活
借助云原生微服务MSE网关,MSE配置注册中心的同城容灾多活微服务应用。构建一个经典的微服务场景,实现同城容灾的步骤,体现云原生相关产品在用户上云,高可用同城容灾多活场景下的能力。
文档版本:20240423 10 基于MSE云原生网关同城多活最佳实践 部署基础环境 应用计价成功后,CADT会实时生成一个应用架构成本分析报告,可以单击查看报告。步骤16 如果确认价格符合预期,可以单击下一步:确认订单。确认订单阶段会列出架构中所有的产品及其价格,需要用户确认无误后勾选接受《云 速搭服务条款》,此时下一步...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,NAT网关,微服务引擎
大模型RAG对话系统部署
大模型RAG对话系统部署
大模型RAG对话系统最佳实践,旨在指引AI开发人员如何有效地结合LLM大语言模型的推理能力和外部知识库检索增强技术,从而显著提升对话系统的性能,使其能更加灵活地返回用户查询的内容。适用于问答、摘要生成和其他依赖外部知识的自然语言处理任务。通过该实践,您可以掌握构建一个大模型RAG对话系统的完整开发链路。
Hologres是一站式实时数据仓库引擎,支持海量数据实时写入、实时更新、实时 分析,支持标准 SQL(兼容 PostgreSQL协议),支持 PB级数据多维分析(OLAP)与即席分析(Ad Hoc),支持高并发低延迟的在线数据服务(Serving),与 MaxCompute、Flink、DataWorks深度融合,提供离在线一体化全栈数仓解决方 案。云速搭 CADT...
来自: 最佳实践 | 相关产品:Elasticsearch,机器学习PAI-EAS,机器学习平台,云速搭
IPv4网关实现流量统一出入口
IPv4网关实现流量统一出入口
对公网流量出入有严格的限制,禁止ECS直接通过挂载公网IP访问互联网带来安全隐患
当出现校验成功时,可以查看一下相关的信息,确认一下是否是和自己的设计相符,如果相符单击下一步:价格清单。步骤7 进入核算价格阶段,这里会将应用中的云资源按照免费、按量付费和包年包月进行 类显示,如果产品享受折扣这里会自动将账号对应的优惠显示出来。文档版本:20240131 5 大模型 RAG对话系统部署 部署基础...
来自: 最佳实践 | 相关产品:云服务器ECS,负载均衡 SLB,云速搭
通过云速搭创建具有IPv6地址的ECS
通过云速搭创建具有IPv6地址的ECS
随着国家推进 IPv6 规模部署行动计划的贯彻落实,以及工业互联网、物联网、5G 等前沿技术的快速发展,各行业用户 IPv6 改造诉求愈发强烈。 阿里云 IPv6 在互联网、金融、政企、传媒等各行业,提供了丰富的产品选择和可靠安全的服务体验。本文针对希望部署具有IPv6地址的ECS场景,提供一键部署模版,进行部署和效果验证。 应用场景 l 针对具备IPv6地址的ECS提供可视化架构 l 支持方案的批量部署和效果验证
步骤10 进入价格清单阶段,这里将应用中的云产品按照免费、按量付费和包年包月进行 类显示(本方案云产品均采用按量付费),如果产品享受折扣这里会自动将账号对 应的优惠显示出来。文档版本:20240821 14 通过云速搭创建具有 IPv6地址的ECS实践 价格清单中的价格信息为当时的实时价格,具体产品价格信息请以页面显示为准...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,弹性公网IP,NAT网关
密评合规解决方案
阿里云安全依托云平台密评经验和云密码产品优势,联合第三方测评机构等合作资源,提供一条龙密评合规解决方案。
02 省心的一站式服务 02 省心的一站式服务 阿里云联合三方测评机构,结合阿里云云上应用密评最佳实践,为客户提供一站式、全流程密评合规服务,覆盖差距分析、方案设计、建设整改、密码测评、密评备案等各个阶段,协助客户便捷、低成本完成密评工作。03 合规的平台资质 03 合规的平台资质 阿里云已经于2023年10月,以公共云...
来自: 解决方案
表格存储Tablestore
表格存储Tablestore是阿里云自研的面向海量结构化数据存储的Serverless分布式数据库,它可提供低成本、高性能的存储方案,同时也可提供稳定与极致的数据服务。
百亿级全网舆情分析系统存储设计.基于Tablestore实现海量运动轨迹数据存储.表格存储Tablestore-新手入门攻略.表格存储Tablestore权威指南.47A_标题-copy-copy-copy-copy.唐家哲,靖鑫,也树.查看各个计费项各个区域定价.了解产品付费模式与计费规则.了解表格存储计费案例.了解表格存储常见计费问题.47A_通用引导卡片-copy.47A...
来自: 云产品
阿里云最佳实践离线大数据workshop
阿里云最佳实践离线大数据workshop
本最佳实践,首先搭建一个简化的电商 demo 系统,然后为此 demo 系统构建一套离 线大数据分析系统。 实践目标 1. 学习搭建一个离线大数据分析系统,学习从数据采集到数据存储和业务分析的业 务流程。 2. 整个离线大数据分析系统全部基于阿里云产品进行搭建,学习掌运用各个服务组 件及各个组件之间如何联动。 背景知识要求 熟练掌握 SQL 语法 对大数据体系系统知识有一定的了解
阿里云 最佳实践 离线大数据分析WorkShop 文档版本:20210802(发布日期)离线大数据分析WorkShop 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 离线大数据分析WorkShop 文档版本 V1.1 版本日期 2021-08-02 文档状态 对外发布 制作人 敬海 审阅人 游士 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2021-...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),大数据计算服务 MaxCompute,DataV数据可视化,数据总线,Quick BI,云速搭
云原生多模数据库Lindorm
云原生多模数据库Lindorm提供各规模、多模型的云原生数据库服务。可兼容HBase/Cassandra、OpenTSDB、Solr、SQL、HDFS等多种开源标准接口。支持海量数据的低成本存储处理和弹性按需付费,是互联网、IoT、车联网、广告、社交等场景首选数据库,也是为阿里核心业务提供支撑的数据库之一。
借助于自带的LDInsight工具,用户可以自动诊断使用过程中的常见问题,比如慢请求、热点、性能诊断、容量分析、Schema设计等,并提供处理建议和自动解决能力.可轻松与Spark、Flink、MySQL、DLA、MaxCompute等存储计算系统无缝对接,享受简单易用的产品体验.通过BDS/DTS等链路服务,可以实现Lindorm与常见存储系统(HBase、...
来自: 云产品
阿里云安全
面向全球用户提供安全防护的云计算安全-阿里云安全
本方案基于零信任安全框架的指导思想和原则进行设计,通过零信任架构对访问主体向企业资源的请求进行安全验证,使得默认不可信的访问请求在经过身份、设备、网络和应用权限的验证后能够安全的访问企业资源.通过轻量化 Agent 仅将访问内部应用的流量代理到网关.通过阿里云全球 POP 接入点就近转发企业流量至公有云或 IDC....
来自: 云产品
视频直播
阿里云视频直播服务(ApsaraVideo Live)是基于领先的内容接入与分发网络和大规模分布式实时流媒体转码技术打造的直播平台,提供便捷接入、高清流畅、低延迟、高并发的音视频云高清直播直播服务。
统计分析提供全景数据统计(带宽流量、访问质量、各功能用量等)和多角度数据分析分析独立访客、用户分布、域名排行等);同时提供推流质量监控、多维度访客数据、实时日志等功能。云导播台搭载云导播台,支持视频内容的素材管理、媒体处理、导播包装、导播输出等,对传统视频生产工具进行云端再造,无需采购硬件,...
来自: 云产品
云消息队列 ApsaraMQ
云消息队列 ApsaraMQ 是阿里云自主研发的消息队列服务系列产品的总称,旨在为开发者和企业的不同业务场景提供强大、可靠、低成本、高弹性且易于管理的消息服务。云消息队列 ApsaraMQ 全系列产品提供 Serverless 化的消息服务,按实际使用量付费,自适应弹性,跨可用区容灾,帮助客户降低使用和维护成本,专注业务创新。
消息队列(Message Queue,简称 MQ)是构建分布式互联网应用的基础设施,通过 MQ 实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的最佳设计方案。MQ 产品生态丰富,多个子产品线联合打造金融级高可用消息服务以及对物联网的原生支持,覆盖金融保险、(新)零售、物联网、移动互联网、传媒泛娱乐、...
来自: 云产品
云数据库RDS PostgreSQL
云数据库RDS PostgreSQL 版完全兼容开源PostgreSQL,基于云原生架构,软硬协同优化,提供稳定可靠、高性价比的数据库服务。通过丰富的插件拓展,支撑各领域场景化业务,如自研Ganos多维多模时空引擎及开源PostGIS地理信息引擎、向量引擎、时序引擎等百余款插件。
2024-08-27 功能优化 RDS PostgreSQL支持插件市场 查看详情 2024-09-29 新功能/规格 RDS PostgreSQL 支持PG 17大版本 查看详情 查看全部日志更多产品与服务数据管理 DMS 数据管理服务 DMS 是一款支撑数据全生命周期的一站式数据管理平台,提供全域数据资产管理、数据治理、数据库设计开发、数据集成(上云迁移、容灾、多活...
来自: 云产品
云网络
阿里云云网络为企业提供了完善的云上网络、跨地域网络、混合云网络产品体系和可满足不同场景的网络解决方案。经过多年的自主研发,洛神云网络平台,具备了超大规模、超高性能、弹性开放能力,服务百万用户,连续多年支撑双11。
洛神·云网络基于用户体验,将云数据中心的公网质量从理论上拆解为多个可量化的维度进行分析,结合具体的实践,发布业界首本《公网质量白皮书》,旨在为国内企业出海提供理论和实践参考.负载均衡SLB首月免费.天猫双11同款负载均衡.NAT网关资源包新品试用.全球加速免费体验7天.实现不同业务场景加速效果.共享流量包1钱起....
来自: 云产品
< 1 2 3 4 ... 13 >
共有13页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用