基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
l 云消息队列 Kafka 版:云消息队列 Kafka 版是阿里云提供的分布式、高吞吐、可扩展的消 队列服务。云消息队列 Kafka 版广泛用于日志收集、监控数据聚合、流式数据处理、在 线和离线分析等大数据领域,已成为大数据生态中不可或缺的部分。l 云数据库 MongoDB 版(ApsaraDB for MongoDB):完全兼容 MongoDB 协议,基于...
来自: 最佳实践 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
基于MSE云原生网关同城多活
基于MSE云原生网关同城多活
借助云原生微服务MSE网关,MSE配置注册中心的同城容灾多活微服务应用。构建一个经典的微服务场景,实现同城容灾的步骤,体现云原生相关产品在用户上云,高可用同城容灾多活场景下的能力。
文档版本:20240423 42 基于MSE云原生网关同城多活最佳实践 场景验证 步骤10 查看日志可以看到所有的异常时间是步骤 6有损切换的时间。文档版本:20240423 43 基于MSE云原生网关同城多活最佳实践 释放环境 6.一键释放资源 可以将验证通过的环境直接用于生产。如果不再使用该架构,也可以通过 CADT释放 全部按量付费资源...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,NAT网关,微服务引擎
基于SpringCloud应用玩转MSE实践
基于SpringCloud应用玩转MSE实践
随着业务不断创新,大型的单个应用和服务会被拆分为数个甚至数十个微服务,微服务架构已经被广泛应用。 微服务的好处在于快速迭代,如何在迭代过程中保障线上流量不受损。依赖开源产品缺少无运维工具,常常需要投入较大的运维人力和成本。 本实践提供基于云原生应用产品提供微服务注册配置中心、微服务治理和云原生网关等一系列高性能和高可用的企业级云服务能力。
并记录接入和网络信息,后续使用:文档版本:20240229基于SpringCloud玩转MSE 4.2.基础环境访问验证 通过上一步骤,登录阿里云ACK控制台,查看ACK的pod和外网访问能力 方式1:直接通过Cloudshell 管理集群(模版中已经为APIserver绑定了公网EIP)如下图,可以通过NAT直接访问外网(模版中已经开通了VPC内的NAT网关):操作...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,日志服务(SLS),NAT网关,微服务引擎,消息队列 RocketMQ 版,云速搭
Oracle RAC 12C云上部署
Oracle RAC 12C云上部署
Oracle RAC架构迁移上云,提供高并发,高吞吐,高安全等特性,适用于金融,电力,电信,制造业等传统客户的核心交易系统。
(rac1,rac2)cd/tmp/oraclemedia/database/sshsetup/shsshUserSetup.sh-usergrid-hosts"rac1rac2"-advanced-noPromptPassphrase shsshUserSetup.sh-useroracle-hosts"rac1rac2"-advanced-noPromptPassphrase 确认互,每个节点的grid,oracle用户创建ip.sh并执行:cd~cat>ip.sh sshgrid@rac2date sshoracle@rac2date ...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,弹性公网IP,云企业网
基于云速搭CADT快速构建药物筛选批量计算环境-serverless版
基于云速搭CADT快速构建药物筛选批量计算环境-serverless版
本方案基于云速搭 CADT提供一个快速构建云上Serverless版HPC批量计算环境的模板,针对生物制药领域的药物筛选场景,提供开箱即用的整套解决方案工具包,整个云上环境仅需1个小时即可完成自动化部署搭建。
Serverless版 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 基于云速搭 CADT快速部署药物筛选批量计算环境-Serverless版 文档编号 354 文档版本 v1.1 版本日期 2024-02-04 文档状态 外部发布 制作人 厉博 审阅人 石益,潇凡,瑜姝,游圣 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2024-01-22 厉博 石益,...
来自: 最佳实践 | 相关产品:弹性公网IP,文件存储NAS,日志服务(SLS),容器镜像服务 ACR,操作审计,密钥管理服务,云防火墙,弹性高性能计算E-HPC,云速搭
系统运维管理 OOS
阿里云系统运维管理(简称OOS)提供的云上自动化运维服务,通过执行模板来完成任务的自动化运行,可以使用OOS管理ECS、RDS、SLB、VPC等云产品,提升日常运维管理效率
参数管理,中心化的运维数据管理OOS 的参数管理支持各种参数的统一管理,同时可以被自动化任务、计算节点等使用,实现数据的统一管理。自动化任务,实现高效的批量管理OOS 的自动化任务为执行批量任务提供实时的进度管理、错误跳转、执行详情、参数和输出,从而提高整体的任务透明度和运维效率。查看更多登录 OOS 控制台,...
来自: 云产品
向量检索 Milvus 版
阿里云向量检索 Milvus 版 是阿里云提供的 Serverless Milvus 全托管服务,100% 兼容开源 Milvus,提供高性能、可扩展、大规模 AI 向量数据库相似性检索服务。
结合 AI 推理、训练等工程平台和 Embedding 模型的能力,Milvus 可高效索引和检索不同类型的数据,如:图片、视频、声纹、办公文档和一些半结构化文档,支持快速精准地跨媒体类型进行信息检索,并提供强大的扩展性和灵活的接口.图向量相似度查询.关键帧相似度查询.音频向量相似度查询.开源大数据平台 E-MapReduce.人工智能...
来自: 云产品
Alibaba Cloud Linux
Alibaba Cloud Linux 是阿里云打造的 Linux 服务器操作系统发行版。为云上应用程序提供 Linux 社区的增强功能,同时通过引入更完善的发行版质量体系,确保产品品质,提供云上最佳用户体验。
2023-10-18Alibaba Cloud Linux 为倚天实例打造最佳 OS 体验2023年8月31日,系列课程第四《Alibaba Cloud Linux:为倚天实例打造最佳 OS 体验》正式上线,由阿里云操作系统产品专家贾正华主讲。2023-11-15Alibaba Cloud Linux 的多个镜像之间有何不同?Alibaba Cloud Linux 的镜像发布记录请参见 Alibaba Cloud Linux 2 ...
来自: 云产品
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
功能优化查看全部动态产品可用区30个全球公共云地域89个全球公共云可用区3200+边缘节点180+Tbps全网输出带宽了解更多全球基础设施更多产品信息帮助中心进入帮助中心了解最新产品功能开发者社区与千万开发者共同探索云上创新培训与认证提高个人技能和知识,在阿里云上构建未来立即体验,在阿里云上创造未来免费试用
来自: 云产品
在线业务一站式性能优化
使用DCDN来同时加速源站的动态资源和静态资源,一方面通过全球分布式缓存来提高静态内容分发速度,另一方面通过动态选路技术来提高动态内容全链路传输速度。
应用场景访问电商网站访问电商网站需保障两类页面的访问性能,第一类是商品详情页,能快速加载商品图片信息,第二类是订单交易页面,需要能够流畅地走完订单交易流程,要实现这两个目标需要同时对网站的静态资源(例如商品图片)和动态资源(例如订单交易信息)进行访问性能优化,DCDN同时提供了对静态资源和动态资源的加速...
来自: 解决方案
云数据库 RDS MySQL 版
阿里云云数据库RDS MySQL是一种稳定可靠、可弹性伸缩的在线MySQL数据库服务, 提供了高可用、高可靠、高安全、易运维等一站式的数据库解决方案,帮助您免除MySQL运维的烦恼。
备份回档:RDS 提供数据备份和日志备份两种功能按备份集恢复和按时间恢复,以及按备份集恢复和按时间恢复两种恢复功能。容灾安全多可用区实例容灾:通过异步或半同步的数据复制方式和高效的主备切换机制,提供高于物理服务器极限的数据库可用性灾备实例:通过数据传输服务(DTS)实现主实例和异地灾备实例之间的实时...
来自: 云产品
RDS MySQL迁移至PolarDB MySQL版
RDS MySQL的数据可在线实时同步到PolarDB MySQL版,并且升级切换后的PolarDB集群包含源RDS实例的账号信息、数据库、IP白名单和必要的参数。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台RDS MySQL迁移至PolarDB MySQL版方案介绍方案优势应用场景方案部署方案权益RDS MySQL迁移至PolarDB MySQL版通过本方案,RDS MySQL的数据可在线实时同步到PolarDB MySQL版,并且升级切换后的PolarDB集群包含源RDS实例的账号信息、数据库、IP...
来自: 解决方案
在线教育流量洪峰
在线教育流量洪峰
1. 通过Tair缓存的性能增强型解决高并发读的性能问题,通过持久内存型解决大并发写性能及数据可靠性问题。 2. PolarDB作为主数据库保存业务的交易数据,通过弹性能力和并发SQL解决性能瓶颈。 3. ADB+QuickBI提供的数据仓库方案通过分时弹性能力和实时业务展现能力。
启动 redis-server redis-server/root/redis-5.0.5/redis.conf 步骤5 可以看到如下主节点连接信息:从节点连接信息:7.3.Redis-benmark6安装 对 Redis压测采用开源 redis-benchmark来实现,需要在 ecs上安装该客户端。为了 使用—thread参数,建议安装 Redisv 6.0以上版本。步骤1 下载 redis 6软件。wget ...
来自: 最佳实践 | 相关产品:云数据库 Redis 版,云数据库PolarDB,云原生数据仓库AnalyticDB My,Quick BI
基于弹性计算的AI推理
基于弹性计算的AI推理
场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前,模型已经训练完成。例如,刷脸 支付中,我们在刷脸的时候,就是推理的一个过 程。再比如图像分类,目标检测,语音识别,语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
NONE(无特 定格式)、NCHW(channel first格式)、NHWC(channel last格式)shape:输入 tensor的维度信息 output 模型输出节点信息,结构如下:name:名称 data_type:数据类型,可选值包括:DT_FP32、DT_UINT8、DT_UINT16、DT_UINT32、DT_UINT64、DT_INT8、DT_INT16、DT_INT32、DT_INT64、DT_FP16 shape:输出 tensor...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,容器服务 ACK
视频直播
阿里云视频直播服务(ApsaraVideo Live)是基于领先的内容接入与分发网络和大规模分布式实时流媒体转码技术打造的直播平台,提供便捷接入、高清流畅、低延迟、高并发的音视频云高清直播直播服务。
直点播联动直播授课内容及时生成点播文件,对直转内容进行二次加工,精剪粗剪智能媒体生产。对媒资内容进行有序管理及内容安全加密。相关产品云服务器ECS负载均衡SLB云数据库RDS视频点播媒体处理音视频终端 SDK在线咨询手淘电商直播低延时直播流与IM消息强互动,秒杀抽奖红包玩法、丰富的商品信息展示、宝贝信息精彩看点...
来自: 云产品
Spark on ECI大数据分析
Spark on ECI大数据分析
场景描述 方案优势 1.计算引擎弹性扩缩容,兼顾资源弹性与计 算资源成本优化。 2.计算与存储分离架构,结合阿里云原生云 存储产品,海量数据湖优势。 3.Kubernetes原生的调度性能优势,提升在 大规模分析作业时的分析性能优势分。 4.集群资源隔离和按需分配。 解决问题 1.计算资源弹性能力不足,计算资源成本管 控能力欠缺. 2.集群资源调度能力和隔离能力不足。 3.计算与存储无法分离,大数据量分析时出 现数据存储资源瓶颈。 4.Spark submit方式提交分析作业参数支持 有限等缺点。 产品列表 容器服务Kubernetes版(ACK) 弹性容器实例(ECI) 文件存储HDFS 对象存储OSS 专有网络VPC 容器镜像服务ACR
2.创建成功以后,可以在集群的节点列表信息里看到了新增一个名为 virtual-node-eci-0的节点,并且是可以调度的。文档版本:20200409 23 Spark on ECI大数据分析 Spark on Kubernetes实践方案对比 步骤3 编辑 SparkApplication作业的 yaml文件。如下图所示,是 SparkApplication的作业 yaml文件示例和必要的参数配置说明,...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,容器服务 ACK,弹性容器实例 ECI,文件存储HDFS
云数据库 SelectDB 版
阿里云数据库 SelectDB 是现代化实时数据仓库 SelectDB 在阿里云上的全托管服务,内核基于业界领先的开源分析型数据库 Apache Doris 研发,由阿里云和飞轮科技联合打造。阿里云数据库 SelectDB 聚焦于满足企业级大数据分析需求,广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景,致力于为客户提供极致性能、简单易用的数据分析服务。
A:一个 SelectDB 实例可包含多个计算集群,每个集群包含一组 BE 节点,类似于大数据系统中的计算资源组、计算队列类概念。同一个实例下的多计算集群,可实现数据共享,支持计算负载的物理隔离.查看详情Q:阿里云数据库 SelectDB 版 与自建 Apache Doris 数据库对比,有哪些优势?A:1)云数据库 SelectDB 版支持存算分离,...
来自: 云产品
通过私网访问云服务
通过私网访问云服务
使用PrivateLink就可以通过私网访问其他VPC提供的服务,无需创建NAT网关或EIP等公网出口,更好的保障安全性和网络质量。支持同账号和跨账号的VPC间私网访问。另外 私网调用阿里云OpenAPI也有两种可选方案
3.终端节点服务位于服务端 VPC,终端节点位于客户端 VPC,但前提要求是终端 和终端节点服务位于同一可用区。VPC2和 VPC1可以是同一个账号的,也可 以是跨账号的。1.1.使用限制 阿里云在部分地域的部分可用区支持 PrivateLink 服务,参考 https://help.aliyun.com/document_detail/193819.html 相关配额限制请参考 ...
来自: 最佳实践 | 相关产品:云解析 PrivateZone,私网连接
MRACC加速倚天ECS实例Flink集群性能
MRACC加速倚天ECS实例Flink集群性能
希望了解Flink集群on倚天的部署架构。 通过神龙大数据加速引擎 Mracc 提升Flink集群性能。 希望实测了解倚天ECS实例运行Flink集群的性能 架构设计:利用阿里云官方架构设计模版,在此基础上二次定制(调整规格、资源数量、配置调整)。 快速完成PoC和生产环境的设计和部署
EIP弹性公网 IP NAT网关 最佳实践频道 阿里云最佳实践分享 群 钉钉扫描二维码 或搜索钉群号 31852400入群 MRACC加速倚天 ECS Flink集 群性能 最佳实践 文档版本:20230801(发布日期)倚天ECS实例加速Flink运行 文档版本信息 文档版本信息 文档信息 属性 内容 文档名称 MRACC加速倚天 ECS实例 Flink集群性能 文档编号 347 ...
来自: 最佳实践 | 相关产品:云服务器ECS,云速搭
超级计算集群实现自然语言处理训练
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
挂载文件系统 参考 https://help.aliyun.com/document_detail/185156.html 步骤1 查询挂载对应的管理节点安全组信息  登录云服务器ECS控制台。 在左侧导航栏,单击网络与安全>安全组。 在安全组列表页面,在顶部下拉列表选中安全组名称并输入文件系统ID/名称,单击搜索。 记录目标安全组信息。 管理节点安全组...
来自: 最佳实践 | 相关产品:文件存储NAS,超级计算集群
< 1 2 3 4 ... 11 >
共有11页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用