阿里云日志服务SLS多云统一日志方案之腾讯云日志采集最佳实践
使用日志服务SLS统一采集、存储、查询和分析阿里云、腾讯云等不同云厂商上的业务日志、系统日志和云产品日志，实现在一个平台上管理多云架构下的所有日志。
一键释放阿里云资源.23 文档版本：20240422 III 阿里云SLS多云统一日志方案之腾讯云日志采集最佳实践 最佳实践概述 最佳实践概述 方案概述 本方案介绍如何将IDC、阿里云和其他云上产生的应用日志、云产品日志都在阿里云日志服务SLS中进行统 一管理。应用场景 使用日志服务 SLS统一采集、存储、查询和分析阿里云、腾讯云等...
基于SAE的一站式Web服务托管方案
通过SAE提供的内置CICD能力，代码提交后可以触发自动构建，并部署应用到SAE，部署完成后，应用自动产生访问域名，外部请求通过域名可以直接访问应用。SAE提供了内置的可观测，灰度，回滚能力，通过控制台可以白屏化完成整个操作。SAE适合应用容器化快速上云，客户只需要提供代码仓库，后续的CICD，应用访问，弹性管理，运维监控，SAE都提供了内置的集成能力
登录SAE控制台 步骤1 CADT架构图中双击 sae-demo服务，点击前往控制台 点击函数计算 FC，进入函数计算 FC控制台 文档版本：20240430 13 基于SAE 2.0的一站式 Web服务托管方案 场景验证 点击公网访问地址，访问部署的 Web应用，特别注意的是，公网访问地址对 ip来源进 行了限制，需要添加白名单，第一次访问会自动添加 ip，...
MSE云原生网关解析body内容进行路由转发
MSE云原生网关中通过自定义插件transformer解析body内容，并用以路由转发规则判断
步骤3 同样的过程，我们再创建另外一个路由 springbootdemo-gray灰度服务路由，注意灰 文档版本：20240426 19 MSE云原生网关解析 body内容进行路由转发 方案验证 度路由的匹配规则选择从请求头（header）中读取 version字段，内容匹配为“gray”可以看到两条路由完成了发布 文档版本：20240426 20 MSE云原生网关解析 body...
RocketMQ性能压测快速方案
在客户对产品性能存疑或者给客户进行POC验证时可以用本实践来快速完成性能测试。
RocketMQ性能压测快速方案 最佳实践 业务架构 场景描述 在一些产品选型场景客户需要产品的详细压测 数据，本方案可以快速构建测试客户端（RocketMQ官方的压测客户端）和服务端（RocketMQ5.0实例），方便客户自测或者给客 户做POC验证性能。应用场景 在客户对产品性能存疑或者给客户进行POC验 证时可以用本实践来快速完成...
可观测链路 OpenTelemetry版结合日志服务SLS关联分析最佳实践
可观测链路 OpenTelemetry 版为分布式应用的开发者提供了完整的调用链路还原、调用请求量统计、链路拓扑、应用依赖分析等工具，可以帮助开发者快速分析和诊断分布式应用架构下的性能瓶颈，当应用出现业务异常问题时，您可以在可观测链路 OpenTelemetry 版控制台关联查看日志进行分析，精准定位业务异常。
日志服务 Project：参考本章节 3.3-步骤一 中所使用的 Project•日志服务 Logstore：参考本章节 3.3-步骤二 中所使用的 Logstore 文档版本：20240428 16 可观测链路 OpenTelemetry 版结合日志服务 SLS最佳实践 OpenTelemetry Demo接入 文档版本：20240428 17 可观测链路 OpenTelemetry 版结合日志服务 SLS最佳实践 ...
基于函数计算FC实现物联网音视频处理
在物联网场景中，智能设备会产生大量的非结构化数据，并且采集量和频率都很高。比如各类摄像头（家用摄像头、车载摄像头、工业监控摄像头等）采集的数据。企业需要对这些非结构化数据做快速的分析和处理，然后应用到下游业务中，所以需要一套高并发、低成本、自动化的方案。该最佳实践就适用于这类场景。
登 录 CDT 控 制 台（https://cdt.console.aliyun.com/cdt/cn-beijing/list）界面中包含VPCPeering-按流量计费，执行完步骤2后请跳过步骤3，执行步骤4。界面中包含VPC对等连接，请跳过步骤2，执行步骤3。文档版本：20240502 24基于函数计算FC实现物联网音视频处理最佳实践 场景验证 步骤2（CDT配置界面为VPCPeering-按流量...
基于函数计算FC实现阿里云Kafka消息轻量级ETL处理
在大数据ETL场景，Kafka是数据的流转中心，Kafka中的数据一般是原始数据，可能存在多种数据混杂的情况，需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC，可以快速高效的搭建数据处理链路，用户只需要关注数据处理的逻辑，数据的触发，弹性伸缩，运维监控等阿里云函数计算都已经做了集成，函数计算FC也支持多种下游，OSS/数据库/消息队列/ES等都可以自定义的对接
文档版本：20240408 23 基于函数计算 FC实现阿里云 Kafka消息轻量级 ETL处理 场景验证 根据上述函数实现，value中如果有 error关键字，就会被过滤掉，如果没有 error关 键字，会原样保留，并存储到 oss上。本次在共发送了三条数据，消息内容分别为“value1”，“value2”，“error”。3.2.查询效果 步骤1 通过CADT控制台...
通过ES兼容接口方式使用Kibana访问SLS数据
自建ELK日志系统的客户迁移到阿里云日志服务SLS后，对SLS查询分析语法不太熟悉的客户，可以继续沿用原有的查询分析习惯，在不改变使用方式习惯的情况下，通过Elasticsearch兼容接口的方式使用Kibana访问SLS。
工作原理 Kibana：用于查询、分析和可视化展示数据 Elasticsearch：用于存储Kibana的Meta数据，主要为配置信息，由于Kibana的Meta 信息经常需要更新，而SLS不支持更新操作，因此需要部署一个Elasticsearch专门 用于存储kibana的Meta数据 Proxy：用于区分Kibana对Meta数据和日志服务Elasticsearch兼容接口的API请求，需要...
基于MSE云原生网关实现全链路灰度
在微服务场景中，应用间的调用是随机的。当您部署的Spring Cloud应用或Dubbo应用存在升级版本时，可能会导致无法将具有一定特征的流量路由到应用的目标版本。通过MSE提供的全链路灰度能力，您无需修改业务代码，就可以实现端到端的全链路流量控制。泳道可以将应用的相关版本隔离成一个独立的运行环境。通过设置泳道规则，可以将满足规则的请求流量路由到目标版本的应用。
方案优势 本实践通过云速搭CADT，一键完成基础环境搭建和部署，提供可视化部署方案和step bystep实操指导：1.助力敏捷开发：传统的多套开发环境，需要使用多套的物理环境，才能实现多套 环境各自互不干扰，但是多套物理环境的隔离的机器成本高。通过全链路灰度这种逻 辑隔离方式，可以实现开发环境隔离，在不增加成本的情况...
基于Fortinet的出海业务访问加速方案
本方案基于CADT提供一个一键交付零配置的部署模板，帮助企业快速构建出海业务访问加速的环境。方案结合了Fortinet产品以及阿里云的ECS，BGP公网精品IP等产品，实现低成本的出海业务加速。
基于 Fortinet的出海业务访问加速方案 业务架构 场景描述 本方案基于 CADT提供一个一键交付零配置 的部署模板，帮助企业快速构建出海业务访 问加速的环境。方案结合了 Fortinet产品以 及阿里云的 ECS，BGP公网精品 IP等产 品，实现低成本的出海业务加速。应用场景 出海业务访问加速,SD-WAN组网等 解决问题 1、一键交付零...
基于函数计算实现直播流录制-存储-通知
在互娱、教育、电商等行业都会有直播相关的业务，大部分场合都需要对直播相关的业务做安全审核，或者对直播的课程进行录制和转码。该方案实现了一种完全按需拉起、按量弹性、按实际使用付费的录制方案。基于本方案还可以扩展实现直播流截帧、自动化安全审核等能力
发起测试 在本机电脑上打开终端或者 CMD，复制 4.2 中构造好的参数命令，回车。回到函数计算控制台，查看请求执行情况。点击 TAB 页中的“异步任务列表”，可以看 到请求已经在运行。在该页面，如果想要提前结束录制，还可以手动或者调用 API终止 请求（本次实操不做该操作）。本次录制运行了 2 分 33 秒，可以看到任务的...
容器多云统一监控日志
多云、混合云成为常态，Forrester 报告中指出，未来 89% 的企业至少使用两个云，74% 的企业至少使用三个甚至更多公有云，在面对多云/混合云这样大的趋势下，Gartner报告指出，安全、运维复杂性、财务复杂性是多云架构的主要挑战，本方案给出了在多云/混合云场景下，构建基于容器环境下的统一管理、统一监控和统一日志方案，解决多云、混合云场景下，运维复杂性问题。 应用场景 客户在阿里云以外的其他云服务商（AWS、Azure、GCP、TencentCloud、HuaweiCloud等）或者IDC基于容器（Kubernetes）运行业务系统，希望构建容器场景下的统一监控日志系统，方便做不同大屏和问题分析定位。 解决问题 •构建容器多云统一监控和日志系统，在一个平台可以看到不同环境系统的运行情况。
容器多云统一监控日志 最佳实践 业务架构 场景描述 多云、混合云成为常态，Forrester报告中指出，未来89%的企业至少使用两个云，74%的企业 至少使用三个甚至更多公有云，在面对多云/混 合云这样大的趋势下，Gartner报告指出，安全、运维复杂性、财务复杂性是多云架构的主要挑 战，本方案给出了在多云/混合云场景下，构建 ...
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景，企业的Kafka实例可能存在多种情况，比如使用阿里云Kafka服务，可能是自建开源Kafka，或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例，在这个前提下Kafka实例之间可能会需要消息同步的情况： 同帐号容灾场景：比如Kafka实例都是阿里云Kafka，但是Kafka实例会有主备之分，需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾：这类场景比如主Kafka是阿里云Kafka，备Kafka是IDC开源自建Kafka，或者是其他云上的Kafka。 不同业务之间消息同步：因为现在的业务通常不会是信息孤岛，都需要消息互通，所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例，并且这两个Kafka实例归属不同的RAM角色，有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题（重试机制，容错机制，死信队列等）。 大幅提升构建消息同步架构的效率，降低构建复杂度问题。
文档版本：20240330 14基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步 部署基础环境 函数服务：一个函数所属一个函数服务，这里默认选中架构中的函数服务。 函数名称：根据实际业务自行填写。 创建函数的方式：选择使用内置运行时创建。（函数的运行时详情参见：...
容器场景下的应用性能监控、调用链拓扑、内存剖析
场景描述 随着云原生及微服务技术的普及，越来越多的系统已经通过云原生和微服务技术实现企业的降本增效，同时因微服务及云原生的复杂性给系统运维带来非常大的挑战，云原生应用监控arms通过全链路应用监控，从端到端及代码级别的链路下钻能力、CPU、内存持续剖析及诊断能力，帮助客户降低系统故障定位难度，此demo，您将体验arms的链路监控、内存剖析等能力 应用场景 微服务+容器场景下链路调用拓扑，调用链可以显示出服务之间的调用顺序和层次关系，帮助开发人员理解和追踪代码的执行流程 在分布式系统中，一个请求往往需要通过多个服务来完成。当出现问题时，如请求超时、错误或异常，很难快速定位问题所在。 解决问题 调用链可以帮助运维人员解决以下问题： · 故障排查：当请求失败或出现错误时，调用链可以显示整个请求的路径和每个服务的执行情况，从而帮助运维人员快速定位问题所在。 · 性能优化：通过调用链，运维人员可以了解请求在系统中的执行时间和瓶颈所在，从而进行优化。 · 系统监测：调用链可以提供实时的系统监测和分析，帮助运维人员了解系统的健康状况和资源利用情况。
容器场景下的应用性能监控、调用链拓扑、内存剖析 最佳实践 场景描述 业务架构 随着云原生及微服务技术的普及，越来越多的系 统已经通过云原生和微服务技术实现企业的降 本增效，同时因微服务及云原生的复杂性给系统 运维带来非常大的挑战，云原生应用监控arms 通过全链路应用监控，从端到端及代码级别的链 路下钻能力、CPU...
基于OSS Object FC实现非结构化文件实时处理最佳实践
现在绝大多数客户都有很多非结构化的数据存在OSS中，以图片，视频，音频居多。举一个图片处理的场景，现在各种终端种类繁多，不同的终端对图片的格式、分辨率要求也不同，所以一张图片往往会有很多张衍生图，那如果所有的衍生图都存在OSS中，那存储的成本会增加，所以就可以通过OSS Object FC的方案，在不同的终端请求时，对OSS中的原图基于终端的要求做实时处理，然后响应返回，这样OSS中只需要存储原图即可。音视频也有类似的场景。
举一个 产品列表 图片处理的场景，现在各种终端种类繁多，不同 专有网络VPC 的终端对图片的格式、分辨率要求也不同，所以 阿里云函数计算(FC)一张图片往往会有很多张衍生图，那如果所有的 阿里云对象存储（OSS）衍生图都存在OSS中，那存储的成本会增加， 内容分发网络（ContentDeliveryNetwork，CDN） 云速搭...
SAE-ACK应用双跑最佳实践
场景描述 实现ACK、SAE中部署的应用在东西向和南北向互通，实现SAE-ACK应用双跑。 应用场景 该最佳实践应用于两类场景： l 因为SAE支持更丰富自动扩缩指标（比如QPS，RT，TCP连接数等），所以将相对稳态的应用部署在ACK中，将相对弹性波动大的应用部署在SAE，借助SAE更强大的自动扩缩应对流量洪峰。 l 将K8s架构迁移到Serverless架构时，需要平滑过渡，所以该最佳实践中的双跑架构可以有效帮用户平滑的完成迁移。
网络架构： 整个方案会在某个Region下，该示例使用的是北京Region 在Region下会创建一个VPC 在该VPC下会创建一个某可用区的交换机，该示例使用的H可用区 在该VPC下会创建一个安全组，该安全组会给SAE使用。ACK会自己创建一个 独立的安全组（在架构图中没有显式的显示）。 SAE、MSE、ACK的Worker节点（ECS）...
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景，将Kafka中的消息流转到其他下游服务是很常见的场景，除了常规的消息流转外，很多场景还需要基于消息体内容做判断，然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后，会自动触发函数计算中的函数，接收到消息，对消息内容做判断，然后再操作MongoDB。用户可以对提供的默认函数代码做修改，来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品，并完成了大多数的配置，用户只需要到函数计算和MongoDB控制台做少量配置即可。
l 网络架构：n 整个方案会在某个 Region 下，该示例使用的是北京 Region n 在 Region 下会创建一个 VPC u 在该 VPC 下会创建一个某可用区的交换机，该示例使用的是 G 可用区 u 在该 VPC 下会创建一个安全组 n Kafka，FC，MongoDB 都在该 VPC 的 G 可用区的交换机下 n FC 在与 VPC 其他资源互通时会使用到 VPC 下的安全组 ...
MSE网关使用JWT进行认证鉴权
MSE网关中调用外部的认证鉴权服务，通过JWT的方式进行全局认证鉴权。 对网关有认证鉴权安全需求的场景，对于敏感的服务路由（可通过黑白名单方式配置）在网关层进行认证鉴权。
JWT实现认证鉴权 方案验证 按上述配置 MSE网关默认会拦截所有的路由请求做认证鉴权，但实际上我们访问登 录/login路由时，还没有认证信息，因此需要把/login路由添加到白名单中，该路由不 做鉴权。同样的，如果还有其他需要例外放行的路由，我们也可以在这里添加。点击【确定】后全局认证鉴权即可创建完成，但默认下该规则...
Kafka性能压测快速方案
产品性能基线测试场景需要对产品进行性能测试得到详细的压测数据，本方案可以快速构建测试的客户端（kafka官方的压测客户端）和不同的Kafka服务端（ SSD云盘版、高效云盘、Serverless版三种实例），方便客户进行POC完成性能验证。
Kafka性能压测快速方案 最佳实践 业务架构 场景描述 产品性能基线测试场景需要对产品进行性能测 试得到详细的压测数据，本方案可以快速构建测 试的客户端（kafka官方的压测客户端）和不同 的Kafka服务端（SSD云盘版、高效云盘、Serverless版三种实例），方便客户进行POC完成 性能验证。应用场景 有需要通过PoC得到Kafka产品...
基于MSE和SAE的微服务部署与压测
通过云原生微服务引擎MSE、SAE、PTS、ARMS产品，为spring cloud微服务应用提供部署和测试能力，提供一个经典微服务应用上云的典型架构，实现微服务应用的快速落地。
本应用有2个实例，第一个实例修改并部署成功后，开始下一批：两次变更全部成功后，执行状态为执行成功。文档版本：20240415 17基于MSE和SAE的微服务部署与压测 场景验证 步骤6 通过CADT画布双击MSE-Nacos图标前往控制台，在MSE控制台中检查部署结果。文档版本：20240415 18基于MSE和SAE的微服务部署与压测 场景验证 2.3....
- 产品推荐
- 这些文档可能帮助您