基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现<em>阿里云</em>Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作 最佳实践 场景描述 业务架构 基于阿里云 Kafka 消息的 Key 或者消息体的内 容做判断,然后对 MongoDB 做增,删,改的操 作。在传统 ETL 流程的基础上进一步增加了灵活 性和可扩展性。应用场景 在大数据 ETL 场景,将 Kafka 中的消息流转到其 他下游服务...
来自: 最佳实践 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
云效应用交付平台AppStack
阿里云云效AppStack是以应用为核心的云原生应用交付平台,提供一站式应用交付能力,帮助企业建立应用持续交付整体解决方案,加速企业云原生与DevOps转型,提升团队研发效能。
云效测试管理.通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,由此提升企业的创造力.专业的交付过程监控和研发效能度量、分析平台.云效效能洞察.提供灵活易用的持续集成、持续验证、持续发布功能,帮助企业高质量、高效率的交付业务.云效AppStack提供从应用定义、应用构建、环境管理、测试执行、应用...
来自: 云产品
云效流水线
云效流水线是一款企业级、自动化的研发交付流水线, 提供灵活易用的持续集成、持续验证、持续发布功能,帮助企业高质量、高效率的交付业务。
云效测试管理.通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,由此提升企业的创造力.专业的交付过程监控和研发效能度量、分析平台.云效效能洞察.提供行级/函数级实时续写、自然语言生成代码、单元测试生成、代码注释生成、代码解释、研发智能问答、异常报错排查等能力.智能编码助手通义灵码.了解云效...
来自: 云产品
云效制品仓库 Packages
云效制品仓库 Packages提供Maven私有仓库、Npm私有仓库、通用制品仓库等企业级私有制品仓库服务,用于maven、npm等软件包和依赖管理。
云效测试管理.通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,由此提升企业的创造力.专业的交付过程监控和研发效能度量、分析平台.云效效能洞察.应用为核心的云原生应用交付平台,提供对开发者友好的应用编排、环境管理、部署运维、资源管理、应用发布等一站式应用交付能力.云效应用交付.云效获得三级...
来自: 云产品
云效代码管理 Codeup
云效代码管理 Codeup,10万企业都在用的代码管理平台,提供代码托管、代码评审、代码扫描、质量检测、持续集成等功能,全方位保护企业代码资产,帮助企业实现安全、稳定、高效的研发管理。
云效测试管理.通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,由此提升企业的创造力.专业的交付过程监控和研发效能度量、分析平台.云效效能洞察.应用为核心的云原生应用交付平台,提供对开发者友好的应用编排、环境管理、部署运维、资源管理、应用发布等一站式应用交付能力.云效应用交付.提供行级/...
来自: 云产品
云效效能洞察Insight
云效效能洞察Insight是阿里云旗下专业的交付过程监控和研发效能度量、分析平台。提供场景化的效能度量模版和丰富的效能指标,可视化研发效能状态,指导研发效能改进。
云效测试管理.通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,由此提升企业的创造力.云效一站式 DevOps.云效公共云产品矩阵.了解云效 Insight 产品基本功能.云效 DevOps 快速进阶.了解免费试用服务条款.度量项目的交付过程,跟进计划和执行,及时发现问题和偏差.帮助管理者保障项目交付的规范、效率和...
来自: 云产品
云效测试管理
云效测试管理是针对研发过程中测试用例库管理而提供的工具,支持用例库分组的创建、编辑、批量导入等功能,方便测试人员对用例进行标准化管理和沉淀,告别传统项目管理中测试用例重复撰写、用例信息共享不易的问题,成为测试人员专属的“武器库”。
云效测试管理Testhub是针对研发过程中测试用例库管理而提供的工具,支持用例库分组的创建、编辑、批量导入等功能,方便测试人员对用例进行标准化管理和沉淀,告别传统项目管理中测试用例重复撰写、用例信息共享不易的问题,成为测试人员专属的「武器库」.了解更多:云效产品安全白皮书.云效为企业研发资产安全保驾护航.通义...
来自: 云产品
云效知识库
云效知识库是一款企业知识管理应用,成员在这里沉淀和共享知识。通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,企业的创造力由此提升。
提供专业的产品研发解决方案,从产品经理撰写需求、会议纪要,到绘制思维导图、产品路线图、流程图、对外发布产品帮助文档,全部可以在「知识库」中完成.一站搞定研发文档....云效测试管理.专业的交付过程监控和研发效能度量、分析平台.云效效能洞察.企业级研发知识管理应用,沉淀和共享知识.云效知识库Thoughts.
来自: 云产品
云效项目协作Projex
阿里云云效项目协作 Projex提供项目管理、迭代规划、需求管理、缺陷管理、任务管理等项目管理功能及效能数据统计,支持单项目管理、跨项目协作等丰富的协作场景
云效测试管理.通过可协作的结构化文档,将知识积累和沉淀下来,并在团队中有效流动,由此提升企业的创造力.专业的交付过程监控和研发效能度量、分析平台.云效效能洞察.管理需求从提出、设计、开发、测试、发布的完整流程.管理缺陷从提出、修复、验证、关闭的完整流程.管理研发过程中不同角色的工作任务.支持列表、看板、...
来自: 云产品
阿里云最佳实践容器workshop
<em>阿里云</em>最佳实践容器workshop
通过本篇最佳实践,可以熟悉容器及k8s的基本操作。基于eci的高弹性架构,能有效的应对业务流量洪峰,同时提升资源使用效率。
本例使用 里云提供的容器镜像服务。文档版本:20220301(发布日期)21 阿里云ACK容器服务workshop Docker实践 2.7.1.创建命名空间 步骤1 登录阿里云容器镜像服务控制台。(https://cr.console.aliyun.com/)步骤2 设置 Registry登录密码。文档版本:20220301(发布日期)22 阿里云ACK容器服务workshop Docker实践 步骤3 ...
来自: 最佳实践 | 相关产品:容器服务 ACK,日志服务(SLS),访问控制,容器镜像服务 ACR,云效,云速搭
阿里云盘企业版
阿里云盘企业版(Cloud Drive Enterprise Edition, 简称 CDE)是基于阿里云存储高可用及高安全能力提供的一项企业级云存储服务
阿里云盘企业版(Cloud Drive for Enterprises,简称CDE,原网盘与相册服务企业版)是基于阿里云存储高可用及高安全能力提供的一项企业级云存储服务,帮助企业轻松实现数据的存储、共享、管理和备份,解决办公文件的搜索、共享、审计等管理难题,助力企业实现数据存储到商业价值变现的一站式文件管理和存储解决方案....
来自: 云产品
Cloud Toolkit阿里云开发者插件工具
Cloud Toolkit - 阿里云集开发、测试、诊断、部署为一体的免费本地多IDE插件,帮助开发者真正实现任意服务器或 ECS、EDAS、Kubernetes、SAE、函数计算等一键式研发部署,支持Java规约、高效执行终端命令和 SQL等常见工具,研发速度提升8倍以上,大幅降低研发成本。
可以在 IDE 中便捷的管理本地与远端的阿里云 ROS 模板,提供新建、删除、上传、下载等功能.管理阿里云 ROS 模板及资源栈.在 IDE 内,开发者可以浏览阿里云的 RDS 资源;同时,在配置好用户名密码之后,即可通过内置的 SQL Console 连接上 RDS 实例,并快速执行 SQL 语句.使用阿里云 RDS.Cloud Toolkit 帮助开发者将本地应用...
来自: 云产品
跨境电商AI一体化解决方案-阿里云
跨境电商AI一体化解决方案基于阿里巴巴多年跨境行业实践经验,基于阿里云业界领先的大数据及人工智能的能力,为跨境行业客户提供图像搜索、素材变换、视频生产、语言翻译、商品推荐搜索等一站式解决方案,帮助跨境业务降本增效,助力跨境电商扬帆远航。
阿里巴巴多年跨境行业实践经验,基于阿里云大数据和人工智能的产品能力,为跨境行业客户提供图像搜索、素材变换、视频生产、语言翻译、商品推荐搜索等一站式解决方案,帮助跨境业务降本增效,助力跨境电商扬帆远航.跨境电商AI一体化解决方案.通过商品素材变换 AI 能力,可快速将原商品图变换成适合不同国家风格的多套跨境...
来自: 解决方案
阿里云最佳实践离线大数据workshop
<em>阿里云</em>最佳实践离线大数据workshop
本最佳实践,首先搭建一个简化的电商 demo 系统,然后为此 demo 系统构建一套离 线大数据分析系统。 实践目标 1. 学习搭建一个离线大数据分析系统,学习从数据采集到数据存储和业务分析的业 务流程。 2. 整个离线大数据分析系统全部基于阿里云产品进行搭建,学习掌运用各个服务组 件及各个组件之间如何联动。 背景知识要求 熟练掌握 SQL 语法 对大数据体系系统知识有一定的了解
开通产品及服务 步骤1 登录阿里云官网(www.aliyun.com),单击右上角的控制台。步骤2 单击左上角的图标。步骤3 在弹出的页面中,输入产品名称,如ECS,单击对应的链接。文档版本:20210802(发布日期)10阿里云最佳实践金融大数据WorkShop 基础环境构建 步骤4 进入对应产品的控制台,然后根据提示开通产品和服务。步骤5 ...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),大数据计算服务 MaxCompute,DataV数据可视化,数据总线,Quick BI,云速搭
阿里云数据库快速搭建疫情分析系统最佳实践
疫情态势分析和防控任务迫在眉睫,如果快速搭建高效的疫情态势分析系统是众多部门和单位的难题,阿里云polardb for PG+Ganos解决方案可在极短时间内完成分析系统搭建,有效助力疫情防。 方案优势: 1、性能优越:Ganos作为自研的时空数据库引擎,相比postgis性能更优秀。 2、安全稳定:故障自动切换自愈,资源隔离,多副本存储。 3、简单易用:开箱即用,兼容postgresql,打通quickbi快速搭建数据分析展示。 4、功能强大:相比postgis在时空模型上做了较多扩充,支持几何模型,栅格模型,网络模型,时空轨迹模型,点云模型,拓扑网络模型。
您可以登录阿里云控制台,并前往实名认证页 面(account.console.aliyun.com/v2/#/authc/home)查看是否已经完成实名认证。阿里云账户余额大于 100 元。您可以登录阿里云控制台,并前往账户总览页面(expense.console.aliyun.com/#/account/home)查看账户余额。本最佳实践中涉及的全部代码,请从 ...
来自: 最佳实践 | 相关产品:云服务器ECS,访问控制,云数据库PolarDB,Quick BI
自建K8S迁移镜像、应用至阿里云ACK最佳实践
自建K8S迁移镜像、应用至<em>阿里云</em>ACK最佳实践
云原生技术K8S以其易管控,自动化操作,自修复等特点充分满足了企业的需求,越来越多的企业都加入容器化这个队伍中。但随着技术的更新迭代,自建的K8S相关的容器镜像服务、集群管理、稳定性保障也让企业IT人员感觉到压力,所以上云成了一些企业的选择,将底层的IAAS基础设施和K8S的基础PASS能力交给阿里云来管理,企业本身抽出更多精力聚焦业务的创新。针对以上需求通过使用image-syncer、velero来介绍如何平滑、便捷的迁移自建的K8S镜像和应用至阿里云容器镜像服务和ACK。 针对以上需求场景通过使用image-syncer、velero来介绍如何平滑、便捷的迁移自建的K8S镜像和应用至阿里云容器镜像服务和ACK;本文通过使用河源的ECS自建K8S集群和Harbor镜像仓库来模拟IDC环境
您可以登录阿里云控制台,并前往实名认证 页面(https://account.console.aliyun.com/v2/#/authc/home)查看是否已经完成 实名认证。 阿里云账户余额大于 100 元。您可以登录阿里云控制台,并前往账户总览页面(https://expense.console.aliyun.com/#/account/home)查看账户余额。 开通如下服务: 对象存储 OSS  ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,容器服务 ACK,容器镜像服务 ACR
自建ELK迁移阿里云日志服务
自建ELK迁移<em>阿里云</em>日志服务
场景描述 ELK Stack(Elastic/Logstash/Kibana) 通常 被用于日志实时分析, 在开源社区中有大量 的内容和使用案例。 本文介绍如何将自建的 ELK 系统迁移到阿里云 SLS 日志服务。 解决问题 1. 自建 ELK 如何迁移到阿里云日志服务。 2. 如何使用 Logtail 采集日志。 3. 如何使用阿里云日志服务对日志进行查 询、 分析。 产品列表  阿里云日志服务(SLS)  VPN 网关  IPSec VPN  云服务器
您可以登录阿里云控制台,并前往实名认证 页面(https://account.console.aliyun.com/v2/#/authc/home)查看是否完成实名 认证。 购买按量付费资源,阿里云账户余额需要大于100元。考虑到部署后每小时会产 生费用,建议账号内余额或者代金卷金额大于200元。您可以登录阿里云控制台,前往账户总览页面...
来自: 最佳实践 | 相关产品:云服务器ECS,日志服务(SLS)
自建Hadoop迁移到阿里云EMR
自建Hadoop迁移到<em>阿里云</em>EMR
场景描述 场景1:自建Hadoop集群数据(HDFS)迁移到 阿里云EMR集群的HDFS文件系统; 场景2:自建Hadoop集群数据(HDFS)迁移到 计算存储分离架构的阿里云EMR集群,以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案; 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
自建 Hadoop数据迁移到阿里云 EMR 场景描述 解决的问题 场景1:自建 Hadoop集群数据(HDFS)迁移到 客户自建 Hadoop迁移到阿里云 EMR集群的技 里云EMR集群的 HDFS文件系统;术方案;场景2:自建 Hadoop集群数据(HDFS)迁移到计 基于 IPSec VPN隧道构建安全和低成本数据 算存储分离架构的阿里云 EMR集群,以 OSS 和 传输...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
小型互联网迁移阿里云
小型互联网迁移<em>阿里云</em>
场景描述 本方案主要适用于中小型互联网企业,从他云 迁移到阿里云的最佳实践。方案中会概述网络 规划、服务器、数据库、存储数据、Kafka和 镜像数据的迁移方案描述。同时在实践环节, 增加服务器和RDS的迁移操作演练和验证。 解决问题 提供服务器、数据库等关键环节的平滑迁移方 案 提供云上高可用架构参考 提供模拟简单的演练回归流程机制 产品列表 云服务器(ECS)、迁云工具(SMC)、数据库 (RDS)、数据库(Redis)、数据传输(DTS)、 负载均衡(SLB)、专有络(VPC)等
后,打 开 https://expense.console.aliyun.com/#/account/home,查看余额。提前根据业务发展情况,规划资源。本实践的示例脚本可以从如下方式去获取进行参考,不需要直接从文档里进行拷 贝:git clone https://code.aliyun.com/best-practice/097.git 遇到文意或使用建议和意见,请扫钉钉二维码联系我们...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS
自建ElasticSearch迁移阿里云
自建ElasticSearch迁移<em>阿里云</em>
场景描述 以ElasticSearch为例,演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道,介绍如何通过快照 的方式,将ElasticSearch索引数据安全备份到 阿里云OSS存储空间,以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例,进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC,ECS,VPN网关,OSS,阿里云ElasticSearch,云速搭CADT
步骤1 通过 https://elasticsearch-cn-hangzhou.console.aliyun.com/ 登录阿里云 点击截图中的实例 ID链接,进入到实例详情页面。步骤2 登录到 Kibana控制台 文档版本:20210802 31 自建 ElasticSearch快照备份 OSS 快照恢复到 ElasticSearch·登陆前先修改配置,添加操作机器的公网 IP到 Kibana公网访问白名单 输入用户名 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,Elasticsearch,云速搭
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用