国际中台架构设计存储

_相关内容

快速玩转Tablestore入门与实战

通道服务:表格存储全增量一体消费通道 Tablestore表设计最佳实践 Tablestore+DeltaLake(快速开始)架构原理-架构设计思想 数据中台之结构化大数据存储设计 结构化大数据分析平台设计 云上应用系统数据存储架构演进 Lambda plus:云上大...

前言

对云上应用来说,稳定、安全、性能、成本是架构设计中最通用领域的抽象,也是组织层面最需要关注的几个维度。基于多年服务各行各业客户的经验总结,我们将阿里云上的架构设计最佳实践总结为一系列的方法论和设计原则,形成阿里云卓越架构...

身份和访问控制

在整体的云上安全架构设计中,用户的账户安全是贯穿始终的一个重要维度。其中,身份和访问控制是云计算环境下非常重要的安全措施,良好的身份和权限的设计,能够确保只有授权的身份才能够在指定的条件下访问对应的云资源。它涉及到识别用户...

新功能发布记录

它基于共享存储架构设计,通过文件协议提供数据库定制功能,具备企业级存储特性。主要服务于云上自建数据库、基于传统存储区域网络(SAN)的应用等,为用户提供低成本、高性能、高可用的存储服务。2020-06-29 华东1(杭州)产品简介

什么是数据库存储DBFS

它基于共享存储架构设计,通过文件协议提供数据库定制功能,具备企业级存储特性。主要服务于云上自建数据库,基于传统SAN的应用等,为用户提供高IO性能和高可用性。同时减少数据库直接基于块的架构复杂度和成本(例如数据库做主备容灾的...

挑战和注意事项

介绍在高性能架构设计过程会遇到的一些挑战以及注意事项。业务优先 架构的性能规划始终是为业务服务的,需要依赖真实的业务需求展开,严谨的业务评估和预测是十分必要的,不能一味追求高性能。性能的权衡 设计业务系统时,平衡性能优化与...

迁云服务内容说明

完工标准 迁云实施服务基础包完工标准 云上架构设计方案设计完成并经过甲方确认 迁移技术方案设计完成并经过甲方确认 产出交付物《云上架构设计方案》《迁移技术方案》迁云服务标准包完工标准 云上架构设计方案设计完成并经过甲方确认 迁移...

使用函数计算清洗数据

步骤一:为数据表开启Stream功能 使用触发器功能需要先在表格存储控制开启数据表的Stream功能,才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

产品架构

数据湖架构 数据湖架构主要用于数据中台、推荐系统、风控系统等场景。在数据湖架构中,表格存储 作为源表、结果表或者维表对接流批计算引擎实现大数据计算与分析。物联网架构 物联网架构主要用于车联网、智能家电、工业物联网、物流等场景...

使用函数计算

步骤一:为数据表开启Stream功能 使用触发器功能需要先在表格存储控制开启数据表的Stream功能,才能在函数计算中处理写入表格存储中的增量数据。登录 表格存储控制。在页面上方,选择地域。在 概览 页面,单击实例名称或在实例 操作 列...

产品架构

如下图所示,与传统方案相比,Lindorm系统极大地简化数据存储技术架构设计,大幅度提升系统稳定性,降低建设成本投入。总体架构 Lindorm创新性地使用存储计算分离、多模共享融合的云原生架构,以适应云计算时代资源解耦和弹性伸缩的诉求。...

评估合适的云服务

在进行高性能架构设计时,首先需要关注的是计算、存储、网络等基础云服务的选择。充分了解自身业务特征及指标,熟悉架构主要组件所涉及云产品方案类型,有利于业务和工作负载在不同的产品方案受益,并使系统架构得以持续优化。数据库的...

产品优势

OSS的多重冗余架构设计,为数据持久存储提供可靠保障。同时,OSS基于高可用架构设计,消除单点故障,确保数据业务的持续性。服务可用性最高可达99.995%。数据设计持久性最高可达99.9999999999%(12个9)。规模自动扩展,不影响对外服务。...

应用场景

基于蚂蚁集团中台战略及架构的最佳实践,将企业级公共能力进行抽象,形成以客户服务、运营服务、分布式架构为基础的业务中台体系,实现开放、可扩展、组件化、分布式的业务架构,支持业务快速、高效、低成本创新,满足互联网场景化快速多变...

PolarDB Serverless实现了哪些突破

国际数据库顶级会议2021 ACM SIGMOD上,一篇标题为《PolarDB Serverless:A Cloud Native Database for Disaggregated Data Centers》的论文,介绍了阿里云自研数据库 PolarDB 基于计算存储分离,实现的最新Serverless技术架构研究进展。...

设计

实际上,单分区也可以达到几万行/秒的写入,但是架构设计上不要依赖单分区能力,尽量控制在很安全的水平内。常见热点问题 下表一个常见的热点案例。这是一个简单的监控场景数据表,每次存储某个机器某个时间的一些指标值。这个表主键有两...

持续架构优化

同时也需要注意,今天Serverless化架构并没有达到任何类型的应用都可以最优适用的地步,因此架构决策者需要关心应用的具体类型来进行架构设计。如应对有状态的应用,调度时如何保障上下文信息和应用的状态同步;又比如应用是否是长时间后台...

将表格存储数据下载到本地文件

表格存储支持通过命令行工具或者DataX工具直接...通过DataWorks控制将表格存储中的全量数据或者增量数据同步到OSS。具体操作,请参见 全量导出(脚本模式)和 增量同步(脚本模式)。在OSS侧下载文件到本地。具体操作,请参见 简单下载。

四川农信

移动互联网快速普及,客户行为与喜好发生巨大变化,银行业务的发展也在与时俱进,业务部门越来越专业,平台经济与共享经济等新模式也推动着金融服务模式的创新,对于核心系统的支撑能力与应变速度提出了新的要求,传统核心的架构设计与技术...

现代IM系统的消息系统—架构

典型架构设计 上图是一个典型的消息系统架构,架构包含几个重要组件。端:作为消息的发送和接收端,通过连接消息服务器来发送和接收消息。消息服务器:一组无状态的服务器,可水平扩展,处理消息的发送和接收请求,连接后端消息系统。...

典型客户案例

随着移动互联网快速普及,客户行为与喜好发生巨大变化,银行业务的发展也在与时俱进,业务部门越来越专业,平台经济与共享经济等新模式也推动着金融服务模式的创新,对于核心系统的支撑能力与应变速度提出了新的要求,传统核心的架构设计与...

方案背景

实时计算Flink通过与表格存储对接,进行数据的实时分析,然后将计算结果写回到表格存储中存储。实时计算Flink主要用于对设备元数据进行流计算作业或者对接Kafka等消息队列订阅消息。方案优势 数据自动分区和负载均衡。采用存储计算分离架构...

资源使用优化

冷数据存储空间带来的成本不可控影响不容忽视外,在存储生命周期管理的架构设计上也需要为访问频繁的热数据留出性能优化空间。通过不同组合,冷数据的长期存储成本需要低于热数据存储成本,并且冷数据要能便于读取分析被访问的文件资源创建...

准备工作

说明 在表格存储中通过控制或者SDK创建存储电商数据的原始订单表OrderSource,OrderSource表有两个主键UserId(用户ID)和OrderId(订单ID)和两个属性列price(价格)和timestamp(订单时间)。DataV数据可视化 登录DataV的用户名和密码...

资源管理

存储资源管理 采用存储和计算分离的架构设计更容易对计算资源和存储资源进行管理,按照不同存储类型的产品,对资源的存储方案进行管理。比如 对象存储 OSS(Object Storage Service)产品,可以按照标准型存储量,低频型计费存储量,归档型...

方案背景

本文以车联网场景车辆轨迹数据为例介绍基于设备接入平台与表格存储Tablestore搭建车辆轨迹数据平台的场景需求以及方案架构。场景需求 在车联网场景,车辆通过传感器上报时序数据到云端。通过存储、查询和分析这些时序数据,用户可以...

宽表模型介绍

如何理解主键、数据分区和数据分区键 表格存储中表、行、列、值和电子表格的类比 相关文档 您可以通过控制、命令行工具快速体验宽表模型。具体操作,请参见 使用宽表模型。如果要实现实例数据的机房级容灾,您可以通过创建同城冗余类型的...

Transaction Table2.0概述

增全量数据存储和处理一体化架构 上图所示即为MaxCompute高效支持上述综合业务场景的全新架构,支持丰富的数据源方便地通过定制开发的接入工具实现增量和离线批量数据导入到统一的存储中,由后台数据管理服务自动优化编排数据存储结构,...

应用架构管理

我的应用 在CADT控制 我的应用 页面,您可以对应用架构进行以下操作:复制架构图:复制一份新的架构图到CADT画布页面进行架构设计,新架构图保留了原架构图的全部资源及配置。查看架构图:打开本架构图到CADT画布。另存为模板:将...

时序模型介绍

如果要以更低成本备份表格存储中的时序数据或者以文件形式导出时序数据到本地,您可以通过DataWorks数据集成服务将表格存储中的时序数据导出到OSS后进行存储或者下载。更多信息,请参见 将表格存储数据同步到OSS。如果要可视化展示时序数据...

方案实现

在前文的方案与架构基础上,本文介绍如何使用表格存储的Timeline模型实现Feed流系统的存储与同步功能。模型介绍 本文使用表格存储作为存储和同步系统,并主要使用Timeline模型、基于推模式进行同步。表格存储消息(Timeline)模型是针对...

多元索引介绍

说明 您也可以通过MaxCompute、Spark、Hive或者HadoopMR、函数计算、Flink等计算引擎分析 表格存储 的数据。更多信息,请参见 计算与分析概述。基于多元索引可以实现 搭建亿量级店铺搜索系统 等方案。更多方案介绍,请参见 多元索引实践...

设计准则

基于云的特点,云架构有关性能设计的方面,有以下注意事项和基本原则:有效的云资源选型 作为一个软件系统,应用层面有很多性能优化和架构设计的考虑点,但是一个系统的性能基石其实是底层计算和存储资源的性能,这个是原子能力。...

文件存储NAS

文件存储NAS 目前提供极速型、通用性能型、通用容量型三种规格:规格 说明 极速型 基于阿里云最新一代网络架构和全闪存储打造的高性能共享文件存储。最大容量256 TiB,起步带宽150 MB/s,可扩展到1200 MB/s。稳定百微秒级时延。适合海量小...

技术架构

本文介绍了 ACM 的技术架构。迁移到MSE Nacos ACM进入下线状态,所有配置管理相关的需求由MSE的Nacos承接(ACM独享版,更好的安全和稳定性)。您需要在ACM控制导出配置,然后在MSE控制导入之前导出的配置即可完成迁移。具体操作,请...

存储网关利用MQTT服务实现统一管控

通过 云消息队列 MQTT 版 所提供的服务,可采用统一的框架,即云控制,来管理不同部署模式的云存储网关CSG(Cloud Storage Gateway),并实现安全合规的公网和私网穿透,以此提供一致的用户体验。名词解释 MQTT 一种物联网和移动互联网...

附录:SOFAStack 产品目录

SOFAStack 源于自蚂蚁内部沉淀十多年的金融级分布式中间件技术体系,吸收了支付宝自创立以来在关键金融交易系统锤炼出来的架构实践。SOFAStack 所有的产品技术均经过蚂蚁集团自身严苛的金融场景验证,为金融交易技术保证风险安全的同时,...

索引介绍

使用宽表模型的表引擎查询数据时存在依赖主键以及根据属性查询效率低的问题,表格存储提供了二级索引和多元索引用于解决宽表模型的数据查询问题。您也可以为数据表创建映射关系后,像使用传统数据库一样使用SQL查询表数据。表引擎 宽表...

方案背景

介绍表格存储结合Spark流批处理实现一体化存储和计算的背景、适用场景、样例场景和架构设计。背景 电子商务模式是指在网络环境和大数据环境下基于一定技术基础的商务运作方式和盈利模式。在电商运营数据的分析和可视化是最重要的部分之一...

应用场景

表格存储 有互联网应用架构(包括数据库分层架构和分布式结构化数据存储架构)、数据湖架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活广泛应用...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用