SLS数据入湖Kafka最佳实践
应用和数据分散在多云或混合云，在面对多云/混合云这样大的趋势下，数据无法进行统一的聚合、分析处理和导出等，本方案给出了在多云/混合云场景下，构建通过标准的Kafka协议和托管服务，SLS可以连接Kafka数据入湖导入，然后进行统一的海量数据的集中存储、智能转储、聚合分析查询等。
这里需要注意，如果通过CADT创建的VPC、vswitch中人工通过其他方式添加了 资源，如通过控制台或者API等购买了ECS，释放时因为这些非CADT部署的资 源会依赖VSW和VPC，会出现释放失败。遇到这类问题请先去控制台人工进行资 源清理后，在CADT中再次释放资源即可。步骤1对等连接路由策略释放，其中 步骤2打开云速搭 CADT管理...
通过ES兼容接口方式使用Kibana访问SLS数据
自建ELK日志系统的客户迁移到阿里云日志服务SLS后，对SLS查询分析语法不太熟悉的客户，可以继续沿用原有的查询分析习惯，在不改变使用方式习惯的情况下，通过Elasticsearch兼容接口的方式使用Kibana访问SLS。
遇到这类问题请先去控制台人工进行资 源清理后，在CADT中再次释放资源即可。步骤3 打开需要释放的应用，点击画布下方的资源清单。步骤4 点击释放全部资源。文档版本：20240418 42基于MSE云原生网关同城多活最佳实践 释放环境 步骤5 确认后，需要点击确定按钮。步骤6 需要用户再次确认，点击确定后，如果是主账号会触发风控...
通义灵码助力函数计算FC实现函数编写
现在社会软件开发的复杂性不断增加，服务器配置和运维管理更复杂、开发效率变低。函数计算FC采用无服务器计算模式，用户只需要关注业务逻辑的实现，无需关心底层的服务器配置和运维管理，从而大大降低了运维成本和复杂性，而且具有弹性伸缩、快速部署、按需使用按量付费的特点。通义灵码是阿里云出品的一款基于通义大模型的智能编码辅助工具，可以帮助开发者快速编写高质量的代码，为开发者提供了强大的编程辅助功能。两者的结合让开发者可以更高效地编写函数代码，简化部署流程，提高开发效率。
外部发布 制作人 寰奕 审阅人 变更记录 版本编号 日期 作者 审阅人 说明 V1.0 2024-05-13 寰奕 初始版本 文档版本：20240512 I通义灵码助力函数计算FC实现函数编写 法律声明 目录 文档版本信息.I 法律声明.II 目录.III 最佳实践概述.4 前置条件.1 1.通义灵码助力函数计算FC实现函数编写.2 1.1.获取AccessKeyID、...
RocketMQ性能压测快速方案
在客户对产品性能存疑或者给客户进行POC验证时可以用本实践来快速完成性能测试。
这里需要注意，如果通过CADT创建的VPC、vswitch中人工通过其他方式添加了资 源，如通过控制台或者API等购买了ECS，释放时因为这些非CADT部署的资源会 依赖VSW和VPC，会出现释放失败。遇到这类问题请先去控制台人工进行资源清理 后，在CADT中再次释放资源即可。步骤1 打开需要释放的应用 步骤2 打开资源清单，点击释放全部...
MSE云原生网关解析body内容进行路由转发
MSE云原生网关中通过自定义插件transformer解析body内容，并用以路由转发规则判断
这里需要注意，如果通过 CADT创建的 VPC、VSwitch中人工通过其他方式添加了资 源，如通过控制台或者 API等购买了 ECS，释放时因为这些非 CADT部署的资源会 依赖 VSwitch和 VPC，会出现释放失败。遇到这类问题请先去控制台人工进行资源清 理后，在 CADT中再次释放资源即可。步骤1 打开需要释放的应用 步骤2 打开资源清单，...
可观测链路 OpenTelemetry版结合日志服务SLS关联分析最佳实践
可观测链路 OpenTelemetry 版为分布式应用的开发者提供了完整的调用链路还原、调用请求量统计、链路拓扑、应用依赖分析等工具，可以帮助开发者快速分析和诊断分布式应用架构下的性能瓶颈，当应用出现业务异常问题时，您可以在可观测链路 OpenTelemetry 版控制台关联查看日志进行分析，精准定位业务异常。
遇到这类问题请先去控制台人工进行资 源清理后，在 CADT中再次释放资源即可。步骤1 打开需要释放的应用，点击画布下方的资源清单。点击释放全部资源。步骤2 确认后，需要点击确定按钮。步骤3 需要用户再次确认，点击确定后，如果是主账号会触发风控（手机校验等），请按照提 示进行操作。文档版本：20240428 22 可观测链路 ...
阿里云日志服务SLS多云统一日志方案之腾讯云日志采集最佳实践
使用日志服务SLS统一采集、存储、查询和分析阿里云、腾讯云等不同云厂商上的业务日志、系统日志和云产品日志，实现在一个平台上管理多云架构下的所有日志。
这里需要注意，如果通过 CADT创建的 VPC、VSWITCH中人工通过其他方式添加了资 源，如通过控制台或者 API等购买了 ECS，释放时因为这些非 CADT部署的资源会依赖 VSWITCH和 VPC，会出现释放失败。遇到这类问题请先去控制台人工进行资源清理后，在 CADT中再次释放资源即可。步骤1 打开需要释放的应用，点击画布下方的资源清单...
基于函数计算FC实现物联网音视频处理
在物联网场景中，智能设备会产生大量的非结构化数据，并且采集量和频率都很高。比如各类摄像头（家用摄像头、车载摄像头、工业监控摄像头等）采集的数据。企业需要对这些非结构化数据做快速的分析和处理，然后应用到下游业务中，所以需要一套高并发、低成本、自动化的方案。该最佳实践就适用于这类场景。
应用场景 在物联网场景中，智能设备会产生大量的非结构化数 据，并且采集量和频率都很高。比如各类摄像头（家 用摄像头、车载摄像头、工业监控摄像头等）采集的 数据。企业需要对这些非结构化数据做快速的分析和 处理，然后应用到下游业务中，所以需要一套高并发、低成本、自动化的方案。该最佳实践就适用于这类场 景。解决...
基于MSE云原生网关实现全链路灰度
在微服务场景中，应用间的调用是随机的。当您部署的Spring Cloud应用或Dubbo应用存在升级版本时，可能会导致无法将具有一定特征的流量路由到应用的目标版本。通过MSE提供的全链路灰度能力，您无需修改业务代码，就可以实现端到端的全链路流量控制。泳道可以将应用的相关版本隔离成一个独立的运行环境。通过设置泳道规则，可以将满足规则的请求流量路由到目标版本的应用。
文档编号 379 文档版本 V1.0 版本日期 2024-04-29 文档状态 外部发布 制作人 弑魔 审阅人 嘉辽 变更记录 版本编号 日期 作者 审阅人 说明 V1.0 2024-04-29 弑魔 嘉辽 创建 文档版本：20240429 I基于MSE云原生网关实现全链路灰度最佳实践 目录 目录 文档版本信息.I 法律声明.II 目录.III 最佳实践概述.4 前置条件.8 1....
基于函数计算FC镜像部署Stable Diffusion大模型
在现代AI应用中， Stable Diffusion等模型因其强大的功能而受到关注。然而，这些模型对计算资源的高需求和复杂的运维管理成为部署时的挑战。基于函数计算FC的无服务器计算模式为这类模型的部署提供了全新的解决方案。用户只需关注模型的部署和调用逻辑，而无需关心底层的服务器配置、资源分配和扩展性等问题。函数计算FC能够自动处理函数的执行环境，包括冷启动、弹性伸缩等，确保模型能够在大规模的请求下稳定运行。
然而，这些模型对计算资 源的高需求和复杂的运维管理成为部署时的挑战。基于函数计算 FC的无服务器计算模式为这类模型的 部署提供了全新的解决方案。用户只需关注模型的 部署和调用逻辑，而无需关心底层的服务器配置、资源分配和扩展性等问题。函数计算 FC能够自动处 理函数的执行环境，包括冷启动、弹性伸缩等，确 保模型...
基于函数计算FC实现大语言模型部署
在现代AI应用中， Qwen /chatglm2-6b 和Stable Diffusion等模型因其强大的功能而受到关注。然而，这些模型对计算资源的高需求和复杂的运维管理成为部署时的挑战。基于函数计算FC的无服务器计算模式为这类模型的部署提供了全新的解决方案。用户只需关注模型的部署和调用逻辑，而无需关心底层的服务器配置、资源分配和扩展性等问题。函数计算FC能够自动处理函数的执行环境，包括冷启动、弹性伸缩等，确保模型能够在大规模的请求下稳定运行。
用户只需关注模型的部署和调用逻辑，而无需关心底层的服务器配置、资 源分配和扩展性等问题。函数计算 FC能够自动处理函数的执行环境，包括冷启动、弹性伸缩等，确保模 型能够在大规模的请求下稳定运行。应用场景 在文本理解与创作、智能客服、情感分析等领域，Qwen/chatglm2-6b等模型的部署至关重要。这些场景 通常需要...
基于函数计算实现直播流录制-存储-通知
在互娱、教育、电商等行业都会有直播相关的业务，大部分场合都需要对直播相关的业务做安全审核，或者对直播的课程进行录制和转码。该方案实现了一种完全按需拉起、按量弹性、按实际使用付费的录制方案。基于本方案还可以扩展实现直播流截帧、自动化安全审核等能力
特别强调：因需要和代码保持一致，该目 录需要确保填入的是/data/video/➢ 最后点击保存，完成服务配置。文档版本：20240422 21 基于函数计算实现自定义直播-拉流-录制-存储-通知 环境搭建 3.3.修改函数计算 FC函数代码及配置 点击函数管理，并点击函数名，进入函数详情页。函数计算支持 WEB IDE 在线编辑代码。在控制台右...
基于函数计算FC实现阿里云Kafka消息轻量级ETL处理
在大数据ETL场景，Kafka是数据的流转中心，Kafka中的数据一般是原始数据，可能存在多种数据混杂的情况，需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC，可以快速高效的搭建数据处理链路，用户只需要关注数据处理的逻辑，数据的触发，弹性伸缩，运维监控等阿里云函数计算都已经做了集成，函数计算FC也支持多种下游，OSS/数据库/消息队列/ES等都可以自定义的对接
利用函数计算 FC，可以快速高效的搭建数据处理链路，用户只需要 关注数据处理的逻辑，数据的触发，弹性伸缩，运维监控等阿里云函数计算都已经做了集成，函 产品列表 数计算 FC也支持多种下游，OSS/数据库/消息队 列/ES等都可以自定义的对接。专有网络 VPC 阿里云交换机 解决问题 阿里云安全组•快速搭建起数据处理全链路 ...
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景，企业的Kafka实例可能存在多种情况，比如使用阿里云Kafka服务，可能是自建开源Kafka，或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例，在这个前提下Kafka实例之间可能会需要消息同步的情况： 同帐号容灾场景：比如Kafka实例都是阿里云Kafka，但是Kafka实例会有主备之分，需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾：这类场景比如主Kafka是阿里云Kafka，备Kafka是IDC开源自建Kafka，或者是其他云上的Kafka。 不同业务之间消息同步：因为现在的业务通常不会是信息孤岛，都需要消息互通，所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例，并且这两个Kafka实例归属不同的RAM角色，有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题（重试机制，容错机制，死信队列等）。 大幅提升构建消息同步架构的效率，降低构建复杂度问题。
kafka-message-sync.py：同步消息的示例代码 metadata_cloud_kafka_to_idc_kafka.py：阿里云Kafka向自建IDCKafka同步元数 据的示例代码。 metadata_cloud_kafka_to_cloud_kafka.py：阿里云Kafka向阿里云Kafka同步元数 据的示例代码。以上三份Python代码在文档后续内容中会替换到函数计算的函数中。文档版本：...
容器场景下的应用性能监控、调用链拓扑、内存剖析
场景描述 随着云原生及微服务技术的普及，越来越多的系统已经通过云原生和微服务技术实现企业的降本增效，同时因微服务及云原生的复杂性给系统运维带来非常大的挑战，云原生应用监控arms通过全链路应用监控，从端到端及代码级别的链路下钻能力、CPU、内存持续剖析及诊断能力，帮助客户降低系统故障定位难度，此demo，您将体验arms的链路监控、内存剖析等能力 应用场景 微服务+容器场景下链路调用拓扑，调用链可以显示出服务之间的调用顺序和层次关系，帮助开发人员理解和追踪代码的执行流程 在分布式系统中，一个请求往往需要通过多个服务来完成。当出现问题时，如请求超时、错误或异常，很难快速定位问题所在。 解决问题 调用链可以帮助运维人员解决以下问题： · 故障排查：当请求失败或出现错误时，调用链可以显示整个请求的路径和每个服务的执行情况，从而帮助运维人员快速定位问题所在。 · 性能优化：通过调用链，运维人员可以了解请求在系统中的执行时间和瓶颈所在，从而进行优化。 · 系统监测：调用链可以提供实时的系统监测和分析，帮助运维人员了解系统的健康状况和资源利用情况。
遇到这类问题请先去控制台人工进行资 源清理后，在CADT中再次释放资源即可。步骤1 打开需要释放的应用，点击下方的资源清单。步骤2 打开资源清单，点击释放全部资源。文档版本：20240329 41容器场景下的应用性能监控、调用链拓扑、内存剖析 场景验证 步骤6 确认后，需要点击确定按钮。步骤7 需要用户再次确认，点击确定后，...
容器多云统一监控日志
多云、混合云成为常态，Forrester 报告中指出，未来 89% 的企业至少使用两个云，74% 的企业至少使用三个甚至更多公有云，在面对多云/混合云这样大的趋势下，Gartner报告指出，安全、运维复杂性、财务复杂性是多云架构的主要挑战，本方案给出了在多云/混合云场景下，构建基于容器环境下的统一管理、统一监控和统一日志方案，解决多云、混合云场景下，运维复杂性问题。 应用场景 客户在阿里云以外的其他云服务商（AWS、Azure、GCP、TencentCloud、HuaweiCloud等）或者IDC基于容器（Kubernetes）运行业务系统，希望构建容器场景下的统一监控日志系统，方便做不同大屏和问题分析定位。 解决问题 •构建容器多云统一监控和日志系统，在一个平台可以看到不同环境系统的运行情况。
这里需要注意，如果通过CADT创建的VPC、vswitch中人工通过其他方式添加了资 源，如通过控制台或者API等购买了ECS，释放时因为这些非CADT部署的资源会 依赖VSW和VPC，会出现释放失败。遇到这类问题请先去控制台人工进行资源清理 后，在CADT中再次释放资源即可。步骤1 对等连接路由策略释放，其中 步骤2 打开需要释放的应用 ...
- 产品推荐
- 这些文档可能帮助您