ECS 数据备份与保护
随着企业核心业务规模不断扩大,需要根据业务需求对生产环境中的关键数据进行定期备份。
解决问题:备份成本高阿里云提供了存储容量单位包 SCU 用于抵扣快照的使用费用,相比按付费,使用存储容量包可以享受更优惠的价格,从而节约成本。解决问题:数据单点风险 将主数据中心的 ECS 实例快照复制到另一个地域或可用区,实现异地容灾。一旦主数据中心发生不可预知的灾难性事件,可以从备用地区的快照快速重建...
来自: 解决方案
存储容量单位包SCU
阿里云存储容量单位包SCU是一种预付费存储售卖形态,可以用来抵扣多种不同类型云存储产品的按量付费账单。支持与多种云产品搭配使用,兼具性价比与资源使用的灵活性。可满足业务对存储灵活购买的需求,最多可节省67%的成本。
通过存储容量单位包统一抵扣,帮助该客户解决了弹性扩、海量存储的需求,同时也帮助客户降低了云存储成本和管理成本.某美图社交软件.“存”享优惠火热来袭,存储全系产品百元包年.“存”享优惠火热来袭,存储全系产品百元包年.存储容量单位包(Storage Capacity Unit,简称 SCU)是一种预付费存储售卖形态,可以用来抵扣...
来自: 云产品
基于函数计算FC实现阿里云Kafka消息轻级ETL处理
基于函数计算FC实现阿里云Kafka消息轻<em>量</em>级ETL处理
在大数据ETL场景,Kafka是数据的流转中心,Kafka中的数据一般是原始数据,可能存在多种数据混杂的情况,需要进一步做数据清洗后才能进行下一步的处理或者保存。利用函数计算FC,可以快速高效的搭建数据处理链路,用户只需要关注数据处理的逻辑,数据的触发,弹性伸缩,运维监控等阿里云函数计算都已经做了集成,函数计算FC也支持多种下游,OSS/数据库/消息队列/ES等都可以自定义的对接
基于函数计算 FC实现阿里云 Kafka消息轻级ETL处理 最佳实践 业务架构 场景描述 基于函数计算 FC处理消息队列 Kafka中的数据,进行 ETL处理后,将清洗归档后的数据上传到 OSS存储。应用场景 在大数据 ETL场景,Kafka是数据的流转中心,Kafka 中的数据一般是原始数据,可能存在多种 数据混杂的情况,需要进一步做数据清洗后...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算,消息队列 Kafka 版
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景,企业的Kafka实例可能存在多种情况,比如使用阿里云Kafka服务,可能是自建开源Kafka,或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例,在这个前提下Kafka实例之间可能会需要消息同步的情况: 同帐号容灾场景:比如Kafka实例都是阿里云Kafka,但是Kafka实例会有主备之分,需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾:这类场景比如主Kafka是阿里云Kafka,备Kafka是IDC开源自建Kafka,或者是其他云上的Kafka。 不同业务之间消息同步:因为现在的业务通常不会是信息孤岛,都需要消息互通,所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例,并且这两个Kafka实例归属不同的RAM角色,有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题(重试机制,容错机制,死信队列等)。 大幅提升构建消息同步架构的效率,降低构建复杂度问题。
 kafka-message-sync.py:同步消息的示例代码  metadata_cloud_kafka_to_idc_kafka.py:阿里云Kafka向自建IDCKafka同步元 的示例代码。 metadata_cloud_kafka_to_cloud_kafka.py:阿里云Kafka向阿里云Kafka同步元 的示例代码。以上三份Python代码在文档后续内容中会替换到函数计算的函数中。文档版本:...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,函数计算,消息队列 Kafka 版
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作 最佳实践 场景描述 业务架构 基于阿里云 Kafka 消息的 Key 或者消息体里的内 做判断,然后对 MongoDB 做增,删,改的操 作。在传统 ETL 流程的基础上进一步增加了灵活 性和可扩展性。应用场景 在大数据 ETL 场景,将 Kafka 中的消息流转到其 他下游服务...
来自: 最佳实践 | 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
云原生数据仓库AnalyticDB MySQL数据仓库
阿里云云原生数据仓库AnalyticDB MySQL版(简称AnalyticDB)是融合数据库、大数据技术于一体的云原生企业级数据仓库平台。云原生数据仓库AnalyticDB MySQL版支持数据实时写入和同步更新、实时计算和实时服务,可用于构建企业级报表系统、数据仓库和数据服务引擎。
统一的计费单位数据管道、数据管理、数据访问,提升开发效率30%.流量成本的升高,用户更加成熟,迫使客户需进行更加精细化的市场营销,提供更高品质的产品。ADB MySQL提供统一的在线查询和离线计算的能力,简化数据架构,海量数据复杂查询秒级响应,为营销决策,产品优化提供数据支撑.支持分析用户行为、渠道转化、产品...
来自: 云产品
基于弹性供应组构建大数据分析集群
基于弹性供应组构建大<em>数据</em>分析集群
场景描述 基于弹性供应组(APG)搭建spark计算集 群,提供一键开启跨售卖方式、跨可用区、 跨实例规格的计算集群交付模式的实践。 方案优势 1.超低成本:跨售卖方式提供计算实 例,按秒计费,可全部使用spot实例 交付,最高可省90%成本。 2.稳定可靠:跨可用域、跨实例规格, 降低spot被集体释放的风险;自动托 管,分钟级巡检,动态保证集群的算 力。 3.快速交付:单次可在5分钟内交付 2000个实例。 4.多策略组合:可分别指定spot和按量 实例的交付策略,以及差额补足的策 略,包括成本最低、打散和折中。 解决问题 1.大规模计算集群成本高。 2.创建ECS实例方式单一,无法跨计费 方式、可用区及规格等核心参数。 3.当可用区资源紧张,无法自动保证基于 spot类型的稳定算力。 产品列表 专有网络VPC 云服务器ECS
实例规格权重,容量等于供应组内每种实例规格对应的实例与该实例规格的 权重的乘积之和。优先级,选择您定义的扩展配置进行扩容按量实例时。当优先级较高的扩展配置 无法创建 ECS 实例时,自动使用下一优先级的扩展配置创建 ECS 实例。文档版本:20200619 35 基于弹性供应组构建大数据集群分析 Spark集群搭建 步骤5 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,弹性公网IP
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
存储容量单位包 SCU一种预付费存储售卖形态,可以用来抵扣多种不同类型云存储产品的按付费账单。存储数据服务日志服务 SLS行业领先的日志大数据解决方案,一站式提供数据收集、清洗、分析、可视化和告警功能。云备份 Cloud Backup简单易用、敏捷高效、安全可靠的公共云数据管理服务,可为阿里云、本地机房内的多种数据...
来自: 云产品
对象存储 OSS
阿里云对象存储 OSS(Object Storage Service)是一款海量、安全、低成本、高可靠的云备份服务,提供最高可达 99.995 % 的服务可用性。多种存储类型供选择,全面优化存储成本。
存储容量单位包 SCU:针对存储费用支持 SCU。SCU 除了用于抵扣 OSS 的存储费用,还可用于抵扣多种云存储产品存储容量费用。查看详情查看更多了解对象存储 OSS 计费项安全合规对象存储 OSS 具有完善的权限控制与多种加密算法,满足企业数据安全与合规要求。安全可靠同城冗余:采用多可用区(AZ)内的数据冗余存储机制,将...
来自: 云产品
云存储解决方案
云存储解决方案面向大数据存储、多媒体存储(视频存储)、视频监控、基因生命科学、数据迁移、自动驾驶、在线教育、混合云存储、数据迁移、数据容灾备份等多个行业用户的多元化场景,提供更安全稳定、更优化、无缝上云的智能数据存储服务,为企业上云、实现数字化转型奠定数据基础。
存储容量单位包.主要满足海量结构化数据的存储需求.为企业关键业务提供容灾服务,保障业务连性.提供实时数据的采集/清洗/分析/可视化服务.OSS 海量存储空间和高并发吞吐能力支撑字节跳动下多个短视频数据的高速增长和峰值时段的请求访问压力.阿里云为小鹏汽车打造首个定制车载闪电立方+深度学习解决方案,使其整体自动驾驶...
来自: 解决方案
多账号下企业分账
多账号下企业分账
场景描述 财务分账,是根据企业的成本中心,将云上资源的成本划分到给各个项目组/业务部门;助力企业快速梳理云上成本结构,搭建复杂组织架构下的成本关系,便捷地进行财务和云上成本的管理。 大型企业或集团公司,由于组织架构复杂,业务复杂等原因,通常拥有多个阿里云账号来管理规模庞大的云上资源。针对云上资源,如何建立有效的分账方案,是财务关注的重要问题。 解决问题 解决CIO/CTO最关心的云上IT治理,IT成本核算等问题。 弄清楚企业内各部门成本及云上IT成本结构。 让CIO/CTO准确地掌握云上资源成本情况,清楚业务与成本的关系。 让采购/运维轻松搞定每月的IT成本汇报。
主机名 prod1,prod2-支付方式 后付费 按付费 实例规格 2 核 CPU,4GB 内存-文档版本:20210128 33 多账号下企业分账最佳实践 资源规划清单(ecs.c6e.large)镜像 Alibaba Cloud Linux-镜像版本 Alibaba Cloud Linux-2.1903 LTS 64 系统盘 cloud_essd ESSD云盘 硬盘容量 40GiB-公网带宽 按流量付费-出网带宽 0 不分配...
来自: 最佳实践 | 相关产品:资源管理,配置审计,云速搭CADT
金融专属大数据workshop
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库,掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建,用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
在HoloWeb控制台,选择SQL编辑器,然后点击新增SQL窗口,选择对应的 库,编辑填写相应的DDL建表语句(默认数据表的属性是列存模式,列存模式更 适合OLAP数据分析,数据表的行存模式更适合高QPS点查询场景)。1.首先创建ads_province_info表。文档版本:20210803(发布日期)39阿里云最佳实践金融大数据WorkShop 最佳...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
云基础产品与基础设施
云基础产品与基础设施作为阿里云产品六大版块之一,主要包含弹性计算、存储、网络、安全、云原生应用平台以及无影和基础设施类产品,向客户提供高度自动化的标准化产品对网络功能、计算机(虚拟或专用硬件)和数据存储空间进行访问,同时支持灵活扩展,可以直接使用自助服务界面。
存储容量单位包 SCU.负载均衡 SLB.专有网络 VPC.弹性公网 IP.NAT 网关.VPN 网关.智能接入网关.网络智能服务.DDoS 防护.Web 应用防火墙.数字证书管理服务.密钥管理服务.运维安全中心.办公安全平台 SASE.数据安全中心.应用身份服务.终端访问控制 UEM.容器服务 ACK.容器服务 Serverless 版 ASK.Serverless 应用引擎 SAE.函数...
来自: 云产品
CDH迁移升级CDP最佳实践
CDH迁移升级CDP最佳实践
当前 CDH 免费版停止下载,终止服务,针对需要企业版服务能力并且CDH 升级过程对业务影响较小的客户,通过安装新的 CDP 集群,将现有数据拷贝至新集群,然后将新集群切换为生产集群,升级过程没有数据丢失风险,停机时间较短,适合大部分互联网客户升级使用。
抢占 属性 描述 转换信息 yarn.scheduler 抢占开始后的利用 调 度 程 序 中 有 一 个 等 效 的 功.fair.preempti 率阈值。能:yarn.resourcemanager.monitor.ca on.cluster-pacity.preemption.max_ignored_over utilization-_capacity.它指定超过其配置容量的资源使用 threshold 阈值,队列在有资格被抢占之前必须...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云速搭
云上成本优化workshop
云上成本优化workshop
某金融科技公司,它主要提供信贷,理财,电商等 服务,目前已经拥有千万级注册用户。该公司在将 在线业务系统和大数据业务从自建 IDC 机房迁移 到阿里云后,今年大数据集群经历过多次因为资 源不足导致弹性扩容失败的故障,运维负责人非 常苦恼。由于该公司从事互联网金融的借贷业务, 白天的催收非常依赖晚上大数据计算的结果,若 因为资源不足导致计算结果失败则意味着白天催 收业务员无事可做,会对公司业务造成严重影响。 后来,通过阿里云解决方案架构师建议的方案,将 大数据集群迁移到资源较充足的可用区以及配置 弹性伸缩多规格 ECS 选型增加交付成功率等方 法,目前已阶段性的解决因资源不足导致弹性扩 容失败的问题,但该方案在 Spot 计算资源不足 时,启用大量按量收费算力,带来了较高的成本, 并且抢占式实例和按量付费实例都不保证资源 100%交付,还是存在交付失败的可能性,特别是 在双 11 期间由于其他客户的资源需求上升带来 的资源挤兑客观上存在,就进一步增加了弹性扩 容失败的风险,从而影响业务正常运行。
存储容量单位包(SCU)什么是存储容量单位包 SCU 存储容量单位包 SCU(Storage Capacity Unit)是一种预付费的存储容量资源包,可 以抵扣多种不同类型云存储产品的按付费账单。相比于随包年包月 ECS实例购买的 云盘或者其他单一产品流量包,SCU可以与多种云产品搭配使用,兼具了性价比与资 文档版本:20210329 22 云上...
来自: 最佳实践 | 相关产品:云服务器ECS,负载均衡 SLB,弹性公网IP,容器服务 ACK,日志服务(SLS),NAT网关,函数计算,E-MapReduce,云数据库PolarDB,弹性容器实例 ECI,存储容量单位包,预留实例券,Hologres
数据库自治服务DAS
阿里云数据库自治服务(Database Autonomy Service,简称DAS)是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务,帮助用户消除数据库管理的复杂性及人工操作引发的服务故障,有效保障数据库服务的稳定、安全及高效。
有别于传统SQL的诊断优化,以负载为优化单位,综合考虑负载中影响整体性能的特征,如SQL执行消耗资源占比、读写比等,进行整体优化,实现负载整体性能最大化提升,避免局部优化但是全局变慢的问题.外置式Cost-based SQL诊断引擎.实现了可以支持各种数据库引擎的外置式Cost-based SQL诊断引擎,相比引擎内部的SQL优化器,...
来自: 云产品
RI和SCU全链路使用实践
RI和SCU全链路使用实践
场景描述 随着云计算的不断发展,更多的企业会使用云计算,且会有越来 越多的企业和用户开始重视云上使用成本。 其中计算和存储是云资源使用的主要服务之一。采用预留实例券 业务架构(RI)和存储容量单位包(SCU)可以帮助客户灵活的节省成本。 本文提供全链路使用实践,帮助客户快速验证云上服务,更合理 的使用RI/SCU。借助覆盖率指标和智能推荐,有效管理云上资 源成本。 用户价值 使用RI 和SCU,可以灵活抵扣相关资源。随时创建释放, 稳态业务资源效率提高。 一份RI 可以抵扣ECS+ACK+EMR+ECI 等服务,跨服务高 度灵活,无需再分开购买。 SCU可以跨可用区抵扣某个地域下所有类型的按量付费云 盘,简化购买与管理复杂度。 RI+SCU 大幅降低按量场景的计算和存储成本。 产品列表 专有网络VPC、容器服务Kubernetes 版ACK 云服务器ECS、预留实例券RI、存储容量单位包SCU
使用说明 序号 事项说明 预留实例券(RI)存储容量单位包(SCU)无法单独使用,需要匹配按付 无法单独使用,需要匹配按 1 使用形式 费实例,抵扣按付费实例账 付费云盘。不具备存储能力,。只抵扣按付费云盘的账单。支持全预付、部分预付(50%首 目前仅支持全预付 2 付费类型 付+小时出账)和 0预付(0首付 到期...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,容器服务 ACK,存储容量单位包,预留实例券
函数计算实现弹性音视频处理系统
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用,每天 有大量的上传视频,需要及时转码处理以适配各 种终端及网络条件,要求短时间内准备大量的计 算资源进行大规模并行转码处理,同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
配置项 说明 付费模式 按付费 地域及可用区 华北 2(北京)可用区 G 实例 筛选:2核 8G,ecs.t6-c1m4.large 购买实例数量 1 台 文档版本:20201228(发布日期)29 Function Compute 实现弹性音视频处理系统 应用测试 镜像 公共镜像 CentOS 7.6 64 存储 系统盘 高效云盘 40 GiB 配置完成,单击下一步:网络和安全组。...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,文件存储NAS,日志服务(SLS),Serverless 工作流
三个课堂解决方案
三个课堂解决方案通过构建三个课堂云平台,实现统一购买、按需付费、集约管理的新型教育信息化服务模式,为区域构建新一代互联网+教育大平台奠定基础,也为实现教育均衡从技术角度开辟了一种新途径。
具备标准的开放接入能力,提供开放数据对接标准协议,支持应用数据统一汇集,既发挥下属单位的平台特色,也能实现全省业务数据的统一管理、统一呈现。对于终端层采用国际标准协议接入,实现录播终端的音视频信号的互通互联.开放共享,标准接口加速平台成长.根据您提交的需求,将有售前专家免费服务!根据您提交的需求,将有...
来自: 解决方案
GPU云服务器
阿里云GPU云服务器(GPU Cloud Computing,GPU)是提供 GPU 算力的弹性计算服务,具有超强的计算能力,服务于深度学习、科学计算、图形可视化、视频处理多种应用场景。阿里云作为亚洲第一的云服务提供商,随时为您提供触手可得的算力,有效缓解计算压力,提升您的业务效率,助您提高企业竞争力。
支持灵活的资源付费模式,包括包年包月、按付费、抢占式实例、预留实例券、存储容量单位包。您可以按需要购买,避免资源浪费.购买方式灵活.提供8块NVIDIA Tesla NVLink A100 GPU,5 petaFLOPS的FP16深度学习计算性能,为AI和高性能计算打造功能强大的可扩展GPU加速服务平台.超强的计算能力.GPU云服务器实例最大支持2,000,...
来自: 云产品
< 1 2 3 4 ... 6 >
共有6页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用