数据管理与服务
数据管理与服务作为阿里云产品六大版块之一,面向不同业务场景,阿里云提供数据存储、分析、应用等全链路能力,满足企业客户全方位的数据处理需求,实现计算和存储分离、资源解耦、数据移动减化,用以满足行业快速发展的需求和趋势,利用数据重塑其业务。
通过引入Hologres搭建的实时数仓,支撑了百亿级的业务数据复杂多维分析秒级响应,提升了数据的查询和写入时效性,并通过Hologres读写分离实例部署增强了系统高可用能力,助力业务快速发展.实时数仓 Hologres.查看阿里云所有产品.面向不同业务场景,阿里云提供数据存储、分析、应用等全链路能力,满足企业客户全方位的数据...
来自: 云产品
办公安全平台SASE
阿里云办公安全平台(Security Access Service Edge)依托阿里云海量的边缘节点,将安全能力延伸至用户边缘,为企业分支机构/门店、远程移动办公场景的访问互联网及云上服务流量提供就近接入的安全防护能力。
基于飞天大规模分布式计算和存储能力,提供超高性价比的单机版实例,同时利用读写分离横向扩展能力,满足网站类的业务需求.医疗:高可用,高安全场景.高可用,高安全的云数据库.跨数据库查询为不同环境下的在线、异构数据源,提供及时的关联查询服务。不论数据库是MySQL、SQLServer、PostgreSQL还是Redis,不论数据库实例...
来自: 云产品
极致弹性的云原生架构解决方案
极致弹性的云原生架构解决方案使用容器服务ACK实现业务应用层面的弹性,数据库PolarDB随需弹性扩缩容, 以云原生的方式达到低成本的快速扩展。轻松搞定大促弹性,做到自动部署、自动扩容、自动缩容、高可靠性保障、低运维工作量、低成本。
当业务峰值结束后,k8s会根据hpa(horizontal pod autoscaler)的能力将业务进行自动缩容,业务缩容后,集群自动伸缩规则会缩容释放工作节点.\\u00A0生产监控.PolarDB实现纵向伸缩、读写分离、弹性升级.ACK技术圈:实战总结及技术问答.ACK弹性伸缩5min概述「视频」.Kubernetes 弹性伸缩全场景解析.关于阿里云容器服务 ACK....
来自: 解决方案
基于Flink+ClickHouse构建实时游戏数据分析
基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中,常常需要对用户行为日志进行分析,通过数据挖掘,来更好地支持业务运营,比如用户轨迹,热力图,登录行为分析,实时业务大屏等。当业务数据量达到千亿规模时,常常导致分析不实时,平均响应时间长达10分钟,影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据,实现秒级响应的实时用户行为分析,并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析,得到用户特征和画像,实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓,对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能,千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高,支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用,免运维,全球多Region部署,快速支持新游戏开服。 Flink+ClickHouse+QuickBI
关键技术选型 1.1.ClickHouse vs Presto 面对海量的数据,我们如何进行数据库的选项,这里对比了开源的两种常见分析性 据库。ClickHouse对数据采用有序存储的方式,其核心思想是充分利用了磁盘批量顺序读写 的性能要远远高于随机读写的特征,并且结合 LSM tree的设计进一步进行优化,使得 性能达到最优(可达到 200MB/S...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,实时计算,Quick BI,消息队列 Kafka 版,云数据库 ClickHouse
互联网业务全球化互通组网
互联网业务全球化互通组网
场景描述 本方案适用从事全球化业务的客户,希望借助全球 互通的网络,实现多地域的互通。 同时在全球互联的网络下,搭建应用多地部署。如果 业务中涉及到高速通道,提供高速通道迁移云企业网 的操作演练;涉及到跨账号多VPC下的数据迁移和 同步,本方案提供详细的操作步骤,帮助客户快速完 成演练。 解决问题 借助云企业网解决网络互通 高速通道到云企业网的平滑迁移 RDS的数据互通,特别是跨账号多VPC的数据同步 应用的快速部署 产品列表 云企业网(CEN)、云服务器(ECS)、数据库(RDS)、 数据库(Redis)、数据传输(DTS)、负载均衡(SLB) 块存储、专有网络(VPC)
版本类型 Redis 4.0 架构类型 标准版 说明:测试选择标准版,根据业务可以平滑升级到集群版或 写分离版。性能类型 标准性能 存储类型 高性能内存型 节点类型 双副本 套餐类型 标准套餐 实例规格 2G主从版 说明:支持变配规格,变配过程会有 30秒内连接闪断及 1 钟内的实例只读。密码设置 立即设置 输入密码 设置符合...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,云数据库RDS MySQL 版,数据传输,云企业网
数据传输服务DTS
阿里云数据传输服务集数据迁移、订阅及实时同步功能于一体,能够解决公共云、混合云场景下,远距离、毫秒级异步数据传输难题,支持关系型数据库、NoSQL、大数据(OLAP)等数据源,其底层基础设施采用阿里双11异地多活架构,为数千下游应用提供实时数据流,已在线上稳定运行7年之久。
云原生数据库 PolarDB 是阿里云自研产品,在存储计算分离架构下,利用了软硬件结合的优势,为用户提供秒级弹性、高性能、海量存储、安全可靠的数据库服务.云原生数据库 PolarDB.图片56*56(不可与icon共存).图片logo.icon名称(不可与图片logo共存).icon名称.不填写不展示.查看数据传输服务使用文档.了解Open API和SDK使用....
来自: 云产品
云速搭部署Redis应用
云速搭部署Redis应用
通过云速搭实现一个云数据库Redis的产品实例
详见:https://www.aliyun.com/product/vpc 云数据库 Redis:云数据库 Redis 版是一种全托管、兼容 Redis协议的内存数据 服务,包含社区版 Redis和企业版 Tair,支持主从、集群和读写分离架构,具备 低延迟、大吞吐、弹性扩缩容的特点。Tair提供多种系列满足不同场景的性价比要 求,更有全球多活、数据闪回、大热 Key探测...
来自: 最佳实践 | 相关产品:专有网络 VPC,云数据库 Redis 版
云原生数据仓库AnalyticDB MySQL数据仓库
阿里云云原生数据仓库AnalyticDB MySQL版(简称AnalyticDB)是融合数据库、大数据技术于一体的云原生企业级数据仓库平台。云原生数据仓库AnalyticDB MySQL版支持数据实时写入和同步更新、实时计算和实时服务,可用于构建企业级报表系统、数据仓库和数据服务引擎。
支持将MySQL分库分表的数据聚合到同一张表中,提供全局数据分析能力.云服务器ECS.云数据库RDS MySQL版.推荐搭配产品.通用:BI报表分析加速.与多种BI工具高度兼容,开箱即用.开放下载!AnalyticDB MySQL版《技术白皮书》.开放下载!AnalyticDB MySQL版《性能白皮书》.互联网电商与游戏行业实时BI分析.游戏数据运营融合分析....
来自: 云产品
自建Hive数据仓库跨版本迁移到阿里云Databricks数据洞察
自建Hive数据仓库跨版本迁移到阿里云Databricks数据洞察
场景描述 客户在IDC或者公有云环境自建Hadoop集群构建数据仓库和分析系统,购买阿里云Databricks数据洞察集群之后,涉及到数仓数据和元数据的迁移以及Hive版本的订正更新。 方案优势 1. 全托管Spark集群免运维,节省人力成本。 2. Databricks数据洞察与阿里云其他产品(OSS、RDS、MaxCompute、EMR)进行深度整合,支持以这些产品为数据源的输入和输出。 3. 使用Databricks Runtime商业版引擎相比开源Spark性能有3-5倍的提升。 解决问题 1. Hive数仓数据迁移OSS方案。 2. Hive元数据库迁移阿里云RDS方案。 3. Hive跨版本迁移到Databricks数据洞察使用Delta表查询以提高查询效率。
自建 Hive数据仓库跨版本迁移到阿里云 Databricks数据洞察 业务架构 场景描述 客户在 IDC或者公有云环境自建 Hadoop集群 构建数据仓库和分析系统,购买阿里云 Databricks数据洞察集群之后,涉及到数仓 和元数据的迁移以及 Hive版本的订正更新。方案优势 1.全托管 Spark集群免运维,节省人力成 本。2.Databricks数据洞察...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,文件存储HDFS,spark
在线教育流量洪峰
在线教育流量洪峰
1. 通过Tair缓存的性能增强型解决高并发读的性能问题,通过持久内存型解决大并发写性能及数据可靠性问题。 2. PolarDB作为主数据库保存业务的交易数据,通过弹性能力和并发SQL解决性能瓶颈。 3. ADB+QuickBI提供的数据仓库方案通过分时弹性能力和实时业务展现能力。
PolarDB采用存储和计算 的架构,所有计算节点共享一份数据,提供分钟级的配置升降级、秒级的故障恢复、全局数据一致性和免费的数据备份容灾服务。针对流量洪峰场景,可以通过如下两个 特性分别解决数据库性能瓶颈和复杂 SQL查询问题:弹性伸缩:通过动态增减节点提升性能或节省成本。通过使用集群地址,可屏蔽底 层的...
来自: 最佳实践 | 相关产品:云数据库 Redis 版,云数据库PolarDB,云原生数据仓库AnalyticDB My,Quick BI
文件存储NAS
文件存储(Network Attached Storage,简称NAS),是阿里云对外提供的兼容POSXI接口的分布式文件存储,容量和处理能力的弹性扩展,按实际容量付费真正使您专注于核心业务。
参与产品评测,下你心中的文件存储.Stable Diffusion 模型,AIGC 画风任你选.通用型 NAS 发布高级型新规格.极速型 NAS 高级型性能升级.通用型 NAS 支持一键挂载至 ECS.通用型 NAS 支持回收站能力.生命周期管理支持数据查看和取回.阿里云存储产品手册全新发布.文件存储 NAS 产品文档.如何选用 NAS、OSS 和 EBS.文件存储 ...
来自: 云产品
大数据系统基准性能测试最佳实践
大数据系统基准性能测试最佳实践
本方案适用于在阿里云上进行大数据基准性能测试的场景,包括 Teragen和Terasort测试,TestDFSIO测试。本文采用CADT工具结合阿里云的E-MapReduce服务快速构建测试集群,并提供了Teragen和Terasort测试,TestDFSIO测试的测试脚本,便于迅速开展测试。
d.DFSIO测试/均使用 5个文件,每个文件大小 100G,副本为 3,块大小 256MB。文档版本:20210301 5 大数据系统基准性能测试最佳实践 运行 Bert Finetune demo程序 1.2.2.测试方法 连续运行 3次 TestDFSIO测试,收集测试结果。1.2.3.写指标 a.应至少有一次测试 Throughput>=xxxMB/s;b.不应有一次测试 Throughput=xxxMB...
来自: 最佳实践 | 相关产品:专有网络 VPC,E-MapReduce,云速搭CADT
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景,将Kafka中的消息流转到其他下游服务是很常见的场景,除了常规的消息流转外,很多场景还需要基于消息体内容做判断,然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后,会自动触发函数计算中的函数,接收到消息,对消息内容做判断,然后再操作MongoDB。用户可以对提供的默认函数代码做修改,来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品,并完成了大多数的配置,用户只需要到函数计算和MongoDB控制台做少量配置即可。
创建一个新以及集合(如果不填 集合,新默认会有一个名为 test 的集合),用于测试。25 文档版本:20240304 基于函数计算 FC 实现阿里云 Kafka 消息内容控制 MongoDB DML 操作 场景验证 这里数据库名 kafkaToMongoDB 查询 中的数据 2.4.MongoDB 步骤1 双击新建的,可以看到默认的 test 集合,通过 db.test.find()....
来自: 最佳实践 | 相关产品:函数计算,消息队列 Kafka 版,云数据库 MongoDB版
大促营销数据库解决方案
根据多年沉淀经验,阿里云提供基于MySQL产品系列(RDS MySQL、PolarDB MySQL)的大促营销解决方案,帮助企业客户轻松应对大促,实现消费者、平台、商家、供应商、物流等大促链路上的所有角色共赢。
涉及商家数据一致性读取,希望读写数据库节点延迟小,有较大的读写比,希望能够快速增加节点。单机存储瓶颈,传统数据库单个实例只能存3T数据,单实例业务数据量大,维护成本高。对高并发状态下的能力有较高要求.PolarDB在大促期间可以在20分钟内完成10TB级数据的集群升配,快速弹升IOPS的能力。PolarDB主节点和...
来自: 解决方案
数据库异地灾备
<em>数据库</em>异地灾备
场景描述 适用于不满足于单地域,对数据可靠性 (RPO)和服务可用性(RTO)要求更高 的,希望防范断电、断网等机房故障,抵 御地震、台风等自然灾害,具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份,RPO达到秒级 2.表级恢复,故障恢复时间大大缩短 3.长期归档,自动管理备份生命周期 4.异地灾备,构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP(EIP) 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
步骤7 完成数据库恢复配置之后,预检查将会检查所有前面的配置选项、数据库连通性、 据库权限等内容。预检查完成后,单击立即启动。步骤8 在恢复任务列表,可以看到该恢复任务状态从初始化中,运行中,变到完成,单击管 理,可查看恢复任务详情。文档版本:20220207 84 数据库异地灾备 容灾演练 步骤9 恢复完成后,点击 ...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,数据管理,数据湖分析,数据库备份DBS,云速搭CADT
构建云上OLTP+OLAP数据库服务解决方案
HTAP是OLTP和OLAP的组合数据库技术,既能保证事务,满足线上业务高效数据读写需求,同时还能兼顾海量数据实时分析查询需求。
通过DTS实时数据库同步,将RDS、POLARDB等OLTP数据库和分析性数据库(OLAP)的数据连接起来,前者保证事务,高效数据库读写;后者满足复杂的实时分析查询需求。OLTP、OLAP数据库可灵活组合,形成云数据库通用HTAP组合方案.构建简单,同时满足业务中OLTP和OLAP需求,无技术折衷.数据同步延迟低,链路高可用,OLAP查询实时性...
来自: 解决方案
数据库自动扩缩容和自动SQL优化
方案使用数据库自治服务DAS实现RDS MySQL数据库的自动扩缩容和自动SQL优化,将基于人工的手动式运维转变为基于智能的主动式持续优化,具有数据库运维成本低,服务稳定性高的优势。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台数据库自动扩缩容和自动SQL优化方案介绍方案优势应用场景方案部署方案权益数据库自动扩缩容和自动SQL优化方案使用数据库自治服务DAS实现RDS MySQL数据库的自动扩缩容和自动SQL优化,将基于人工的手动式运维转变为基于智能的主动式持续优化...
来自: 解决方案
数据库MongoDB版
阿里云云数据库MongoDB版是完全兼容MongoDB协议、高度兼容DynamoDB协议的在线文档型数据库服务。支持单节点、双节点、副本集和分片集群四种部署架构,能够满足不同的业务场景需要。
代理服务(mongos)和片服务(shard)支持灵活配置个,线性扩展数据库系统的存储空间及读写性能。单片(shard)支持最大72000的IOPS,最大3TB存储空间,单片最大可承载15万QPS的应用压力(读写比95:5);Sharding模式支持水平弹性扩展.单节点高性价比;多节点副本集保障业务高可用;片集群自由配置弹性扩展.架构...
来自: 云产品
数据库专家服务
阿里云数据库专家服务以工具与数据库专业技能结合的方式,给客户提供云数据库产品本身能力范围之外的专业服务。主要包括:紧急救援,健康诊断、性能调优、护航保障、Oracle迁移、技术培训、顾问咨询等服务,同时给出专业的报告与建议。
SQL Server是发行最早的商用数据库产品之一,支持复杂的SQL查询,性能优秀,对基于Windows平台.NET架构的应用程序具有完美的支持.云数据库RDS SQL Server 版.高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求.云数据库 Redis 版.云数据库MongoDB版支持ReplicaSet和Sharding两种...
来自: 云产品
数据库自治服务DAS
阿里云数据库自治服务(Database Autonomy Service,简称DAS)是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务,帮助用户消除数据库管理的复杂性及人工操作引发的服务故障,有效保障数据库服务的稳定、安全及高效。
数据库自治服务(Database Autonomy Service,简称DAS)是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务,帮助用户消除数据库管理的复杂性及人工操作引发的服务故障,有效保障数据库服务的稳定、安全及高效.查看产品文档.数据库自治服务 DAS.使用一个平台管理企业内所有数据库,...
来自: 云产品
< 1 2 3 4 ... 7 >
共有7页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用