基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
应用场景 在大数据 ETL 场景,将 Kafka 中的消息流转到其 他下游服务是很常见的场景,除了常规的消息流 转外,很场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。该方案实现了通过 Kafka 中消息 Key 的内容来判 断应该对 MongoDB做增、删、改的哪种 DML 操 作。当 Kafka 收到消息后,会自动触发函数计算中...
来自: 最佳实践 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
云Clickhouse冷热数据分层存储
云Clickhouse冷热数据分层存储
基于云ClickHouse可以给电商、游戏、互联网以及其他行业提供高性能、高稳定性、低维护成本、高性价比的实时数据分析、精准营销、业务运营、业务分析、业务预警、业务营销、数仓加速等场景化方案,本实践会向客户提供数据库低维护成本、数据库链路构建、冷热分层存储、快熟分析等操作实践。 解决问题 1. 维护成本低不用建设维护体系,稳定性高,数据倾斜自动均衡。 2. 完善的数据同步链路,可以平滑将业务库、大数据、日志服务的数据同步到Clickhouse,降低研发成本。 3. 平滑升级版本,业务中断小。 冷热分层后透明读取,帮客户节约整体数据存储成本。
水平缩容 后 将 会 发 生 变 化, 变 化 参 考:https://help.aliyun.com/document_detail/156078.html 操作须知 如果云 ClickHouse集群扩容到了较节点,节点资源利用率低,有一定的 IT成本浪 费,可以考虑水平缩容云 Clickhouse,降低 IT成本。正常情况下 20-25分钟可以完成水平缩容和数据均衡,水平缩容期间...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,数据传输,日志服务(SLS),云数据库 ClickHouse
阿里云最佳实践离线大数据workshop
阿里云最佳实践离线大数据workshop
本最佳实践,首先搭建一个简化的电商 demo 系统,然后为此 demo 系统构建一套离 线大数据分析系统。 实践目标 1. 学习搭建一个离线大数据分析系统,学习从数据采集到数据存储和业务分析的业 务流程。 2. 整个离线大数据分析系统全部基于阿里云产品进行搭建,学习掌运用各个服务组 件及各个组件之间如何联动。 背景知识要求 熟练掌握 SQL 语法 对大数据体系系统知识有一定的了解
游士 创建 V1.1 2021-08-02 敬海 更新细节 文档版本:20210802(发布日期)I离线大数据分析WorkShop 产品介绍 产品介绍  云速搭CADT:是一款为上云应用提供自助式云架构管理的产品,显著地降低应 云上管理的难度和时间成本。本产品提供丰富的预制应用架构模板,同时也支 持自助拖拽方式定义应用云上架构;支持较阿里...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),大数据计算服务 MaxCompute,DataV数据可视化,数据总线,Quick BI,云速搭
云数据库RDS SQL Server版
阿里云SQL Server数据库已含微软License,支持复杂的SQL查询,性能优秀,对基于Windows平台.NET架构的应用程序具有完美的支持,广泛应用于新零售、医疗、房地产等行业。
微软SQL Server 企业版授权许可,无需单独支付版权费用,提供全方位的硬件和软件支持,提供高性价比的企业级服务.95A_优势 板式二.95A_精心打造的功能标题.孙慧颖,靖鑫,也树.三种产品形态自由选择.支持基础版、高可用版、集群版三种产品形态,用户根据业务实际需求自由选择.单机实例同时具备故障转移能力,可保障您的业务...
来自: 云产品
智能接入网关SAG
智能接入网关(Smart Access Gateway,简称SAG)是阿里云提供的一站式快速上云接入产品,企业可通过智能接入网关SDWAN技术实现Internet就近加密上云,适用于中小数据中心、分支互联、移动办公、应用加速及混合云等场景。阿里云SAG产品配置高度自动化,即插即用,网络拓扑变化自适应快速收敛,自动探测最优链路,故障时主动实时切换,高质量、高安全、高效率的帮助用户解决网络接入最后一公里难题。
配置高度自动化,即插即,网络拓扑变化自适应快速收敛.Internet就近接入,可通过设备及链路级主备实现线下机构高可靠上云.混合云私网加密互连,Internet传输过程中加密认证.通过阿里云控制台统一配置管理线下智能接入网关的硬件设备.孙慧颖,靖鑫,也树.数据经过加密内网传输,保证数据传输过程中的安全性.使用IKE(秘钥...
来自: 云产品
云服务器 ECS
阿里云服务器ECS是一种处理能力可弹性伸缩的云主机虚拟服务器,它使服务器托管更安全稳定,可降低开发运维成本,支持包年包月、按量付费等模式,方便财务更好管理
容灾安全多可区部署:将应用程序部署在个可用区,从而保证应用程序的高可用性和容灾性。安全加固:对云服务器进行安全加固,包括关闭不必要的服务端口、限制远程访问等。客户案例“利用弹性容器实例快速启动的特性,大大缩短业务扩容时间,突发时期支撑新浪用户近200亿次的阅读量。—— 新浪微博“使用倚天最新ARM矢量...
来自: 云产品
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
加密服务基于硬件加密机提供云上数据解密服务,满足国内监管要求,提供国密算法能力,并且满足国际FIPS 140-2/3的安全合规监管要求。密钥管理服务一站式密钥管理和数据加密服务平台、一站式凭据安全管理平台,提供简单、可靠、安全、合规的数据加密保护和凭据管理能力。数据安全中心(敏感数据保护)提供敏感数据自动识别...
来自: 云产品
实时数仓Hologres
Hologres(原交互式分析)是一站式实时数据仓库引擎,支持海量数据实时写入、实时更新、实时分析,支持标准SQL(兼容PostgreSQL协议),支持PB级数据多维分析(OLAP)与自助分析(Ad Hoc),支持高并发低延迟的在线数据服务(Serving),与MaxCompute、Flink、DataWorks深度融合,提供离在线一体化全栈数仓解决方案。
诺亚面向高净值客户提供复杂资产配置服务,高端金融服务的业务属性天然带有“行”的数据特点,需求极为复杂,是数据服务的深水区,如果不是抱着数据改变行业的决心和过硬的技术,是很难服务好金融行业客户的。Hologres的小伙伴不仅亲自来诺亚为我们提供了高水平的培训,还不厌其烦地解答我们的各类问题,甚至我们...
来自: 云产品
无影云电脑
无影云电脑(Elastic Desktop Service),是阿里云推出的一种易用、安全、高效的云上电脑,被广泛应用在安全办公、教育、分支门店、营销、电脑短期使用等众多场景。现推出免费试用及新购特惠,云电脑企业版低至59元/3个月。
无影云电脑(Elastic Desktop Service)是一种安全、高效的云上电脑,易于创建、部署和统一管理,自带多重安全管控,访问灵活,资源调整弹性,广泛应用于办公、教育、协作等场景。产品分为企业版和个人版,企业版适用于企业和组织,个人版适合家庭和个人.无影云电脑个人版电竞模式,畅玩《黑神话·悟空》,现低至2.3元/小时...
来自: 云产品
云行情
阿里云云行情系列产品是为了增加全球资本市场透明度,满足不同层次的客户信息需求。为金融机构、互联网公司、科技公司等行情客户提供端到端的一站式云行情产品服务,有效改进用户体验、降低技术和成本门槛、提升整体效率,助力行业数字化运营、仿真、实盘、高频、投研等方面转型能力提升,协助企业快速搭建稳定高质量的交易所行情基础服务。
全程加密脱敏,根据用量进行申报,即开即按需弹性收费,行情统一结算、按交易所分别清算,更灵活、更便捷.场景串流快照服务使用,形态部署,云上弹性服务接入,确保安全合规.孙慧颖,靖鑫,也树.提供开盘价,最新价,收盘价,成交量,全美综合成交量。提供美股的实时成交价信息,包括所有在纳斯达克及FINRA交易申报系统上...
来自: 云产品
中小企业基于SAG APP实现云上移动办公
中小企业基于SAG APP实现云上移动办公
1. 客户端一键接入上云,配置自动化 2. 城域内 Internet 就近接入,快速高效 3. 数据加密传输,满足安全性要求 4. 阿里云控制台统一配置管理
中小企业基于 SAG APP实现云上移动办公 最佳实践 业务架构 场景描述 公司已在阿里云上部署了应用服务,如 OA系统、办公管理后台等,公司员工日常通过办公网络访 问云上资源。随着公司的不断发展,移动办公的场 景越来越,如出差、在家办公等。公司运维人员 也要求在任何时间和任何地方都能安全访问云资 源。解决问题 1....
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,云企业网,云解析 PrivateZone,智能接入网关,云速搭
混合云存储
阿里云混合云存储包括混合云存储阵列、混合云CPFS存储、混合云分布式存储等多种产品类型。本地存储可以通过云缓存、云同步、云备份等方式无缝连通云存储,轻松实现云端一体。
需要软件定义的能力,快速满足应用的多元化需求.通用存储协议全支持,一个产品满足多种存储类型需求.3节点起步,线性横向扩容,最高支持4096节点.统一资源池,支持盘级粒度定义存储服务类型.可实现一套产品统一数据中心多样化的存储需求.可实现敏捷部署和按需灵活扩容.海量非结构化数据存储.混合云分布式存储应用场景.在...
来自: 云产品
阿里云解决方案基因专题
阿里云解决方案包括通用解决方案, 行业解决方案和生态解决方案,沉淀阿里云十年、百万用户最全面的业务场景,结合阿里巴巴集团技术创新能力,提供云原生、数据智能、零售、金融、制造等多个领域的解决方案。
与本地HPC集群环境完全一致,应用程序无需任何改造直接在阿里云环境运行,使用NAS,CPFS等文件系统进行任务监控,最大化保障分析性能.基因行业容器混合云.资源、服务、数据应用统一管理,线上线下跨地域融合,阿里云ACK服务提供弹性计算能力和资源调度优化,提供工作流支持,可以完成大批量基因数据分析工作.基因分析应用...
来自: 解决方案
基于DDH+MyBase降本合规
基于DDH+MyBase降本合规
出版、金融、保险等传统行业一方面希望能借助云计算以更好地适应业务发展需求(政策上云),另一方面出于对降低单实例部署成本(CPU 超分超配)以及满足更严格合规和监管要求的考虑,希望能对云上资源有更多的自主控制权(监管合规)。从业务系统架构云上部署的角度,基于专有宿主机DDH 和云数据库专属集群MyBase 的解决方案,可以很好地满足这两方面的需求。 解决问题: 1. 国家政策上云趋势和需求 2. 更严格的云上安全合规要求 3. 对云上资源有更灵活的管控权 4. 有效降低企业上云的整体拥有成本(TCO) 方案优势: 1、单租户隔离 DDH和 MyBase都可以提供宿主机级别物理隔离,可以独占资源,可以开放更多接口 , 同时杜绝 多租户间 干扰 。 2、安全合规:在完备的隔离基础之上,开放更多数据库权限和 OS权限 。 3、资源灵活部署和调度 创建 ECS实例、从共享宿主机迁移 ECS实例至专有宿主机或在专有宿主机之间迁移 ECS实例时,若您不指定专有宿主机,系统将自动帮您选择专有宿主机部署实例。 针对于初始部署数据库实例时,提 供紧凑型和均衡型两种方式将数据库实例分不到不同的主机上。 4、超配 降本 DDH和 MyBase组合的方式可以实现资源自定义 CPU内存 配比以及CPU超分 ,可以降低单 ECS实例以及云数据库实例的部署成本。
基于 DDH+MyBase降本合规 最佳实践 部署架构图 场景描述 出版、金融、保险等传统行业一方面希望能借助 云计算以更好地适应业务发展需求(政策上云),另一方面出于对降低单实例部署成本(CPU超 分超配)以及满足更严格合规和监管要求的考 虑,希望能对云上资源有更的自主控制权(监 管合规)。从业务系统架构云上部署的...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,弹性公网IP,专有宿主机,云数据库专属集群MyBase,云速搭
云端影视渲染
云端影视渲染
场景描述 本文介绍如何搭建一个完整的混合云渲染服务架构,本地与云端的网络以SSL-VPN方式进行互联。 解决问题 1、使用SSL-VPN构建本地网络与云上VPC环境的安全互联。 2、使用批量计算服务管理渲染计算集群,集群计算节点自动加入Deadline资源池。 3、使用Deadline做渲染任务管理。 4、批量计算集群计算节点根据Deadline渲染任务自动扩容和收缩,资源管理自动化。 产品列表 1、云服务器ECS 2、GPU云服务器GPU 3、批量计算BCS 4、专有网络VPC 5、弹性公网IP 6、文件存储NAS
文档版本:20200220 40 云端影视渲染 基于 ECS部署Deadline Server 步骤7 设置 Mongo安全设定:内网使用,不设置加密认证,单击 Next。步骤8 开始安装,单击 Next。文档版本:20200220 41 云端影视渲染 基于 ECS部署Deadline Server 步骤9 Deadline Repository安装完成。步骤10 程序自动发起 Deadline Client安装,单击 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,文件存储NAS,VPN网关,批量计算
基于MyBase构建自主可控数据库和高弹性应用实践
基于MyBase构建自主可控数据库和高弹性<em>应用</em>实践
一些企业级客户上云前,会重点关心数据库是否自主可控,包括云资源独享、自主可运维、获取OS 权限等特点,同时又要兼顾数据库合规性、安全性和高性能的要求;并力求在业务弹性下合理利用云产品降低数据和应用成本,弹性地支持业务。本实践为此类用户提供相关实践参考。
弹性伸缩不仅适合业务量不断波动的应用程序,同时也适合业 务量稳定的应用程序。详见:https://www.aliyun.com/product/ecs/ess 传统型负载均衡 SLB:主要面向 TCP/UDP等网络层负载场景,具备超强 4层分 发性能,单实例达数百万并发连接,扩展系统服务、提升可用性。支持 TCP、UDP、HTTP和 HTTPS,具备强大的 4层处理能力,...
来自: 最佳实践 | 相关产品:负载均衡 SLB,堡垒机,弹性伸缩,云数据库专属集群MyBase,云速搭CADT
云消息队列 RocketMQ 版
云消息队列 RocketMQ 版是基于 Apache RocketMQ 构建的分布式消息中间件,广泛用于异步解耦、削峰填谷等场景。可支撑千万级并发、万亿级数据洪峰,更稳定,更安全。
多样的企业级增强特性,从消息治理、流量调度、企业级容灾特性方面提供开箱即的高级能力,助力企业大规模生产应用.通过动态路由规则配置,解决消息的跨地域、远距离、毫秒级实时同步难题,确保地域之间的数据一致性与完整性.支持开箱即的消息清洗、转化等后处理操作,可以实现消息导出存储到数据库、大数据、分析计算...
来自: 云产品
< 1 2 >
共有2页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用