本文介绍E-MapReduce（简称EMR）的产品架构，以便您直观的了解EMR的产品组成。EMR的产品架构如下图所示。从上图可以看出EMR由四部分组成：社区开源产品 集成Apache社区开源大数据组件，例如Hadoop、Hive和HBase，随着EMR版本更新，开源软件...
良好的设计弹性架构：在做架构设计时要根据应用的生命周期制定可以弹性伸缩的架构，在业务高峰期通过计算资源的弹性机制增加部署节点，在业务低峰期缩减云资源，能极大提升资源利用率和成本利用最大化。4.通过调研业务部门未来一段时间的...
部署单元（Cell）定义了一个服务通信的边界，用以规整通信的链路，为发布部署时切流做无损发布、高可用应用架构（包括同城双活、异地多活），以及容灾切换和恢复打下基础。部署域（Deployment Zone）对可用区（Available Zone）进行了划分...
同城应用多活的架构如下图所示：同城应用多活对应用系统的代码侵入较小，基于灵活的流量调度和单元格间的流量路由，能做到故障场景下的业务快速恢复，实现业务恢复与故障恢复的解耦。异地场景的应用多活 同城近距离的容灾建设难以抵御地域...
为什么要做单元化，单元化架构能给系统带来什么样的能力。本文结合蚂蚁集团支付宝系统的单元化架构建设实践，阐释单元化的原理与实现。单点瓶颈 任何一个互联网系统，不论是支付宝、淘宝，还是 Google、Facebook，当发展到一定规模时，都会...
当金融用户需要更好的私密性和专属性，或者有定制化安全策略，内网访问的安全需求时，可采用专有云架构。专有云有四类：Apsara Stack Enterprise、Apsara Stack Insight、ZStack for Alibaba Cloud和Apsara Stack Agility。Apsara Stack ...
例如，I/O密集型业务（中大型OLTP类核心数据库、中大型NoSQL数据库、实时日志分析、大型企业级商用软件等）应选择存储增强型实例，实现更好地存储性能与能力；网络密集型业务（NFV/SD-WAN、音视频、电信业务转发、缓存、大数据以及机器学习...
基于云的特点，云架构中有关性能设计的方面，有以下注意事项和基本原则：有效的云资源选型 作为一个软件系统，应用层面有很多性能优化和架构设计的考虑点，但是一个系统的性能基石其实是底层计算和存储资源的性能，这个是原子能力。...
从技术发展的视角来看，近年来以基于容器、面向微服务、动态编排为主要特性的云原生技术在Kubernetes的平台化势能下加速发展并趋向成熟，不仅重塑了云计算厂商的产品架构设计与市场格局，而且在应用基础设施、应用软件架构、开发模式与部署...
项目协作是一款专为软件研发项目团队打造的简洁、易用、整合的一站式协作平台，以项目为切入点，多维度集成管理需求、任务、缺陷、冲刺、看板，提供轻量级支持敏捷开发等多种项目管理的实践方法。项目协作贯穿软件研发全生命周期，如需求...
选择容灾方案 图 3.Tair容灾架构演进 灾备方案 灾备级别 说明 单可用区高可用方案★主从节点部署在同一可用区中的不同机器上，当任一节点发生故障时，由高可用HA（High Availability）系统自动执行故障切换，避免单点故障引起的服务中断。...
按照传统测试的定义，软件测试是指在规定的条件下对程序进行操作，以发现程序错误，衡量软件质量，并对其是否能满足设计要求进行评估的过程。测试场景大体可以分为功能、易用性、性能、兼容性、自动化、可靠性。单元测试 单元测试就是为了...
对于很多大型企业（如阿里巴巴）来说，经过多年的技术演进，系统工具和架构已经高度垂直化，服务器规模也达到了比较大的体量。当服务规模大于一定量（如10000台）时，小概率的硬件故障每天都会发生。这时如果需要人的干预，系统就无法可靠...
什么是 Pipeline 研发效能平台通过 Pipeline 来编排持续集成。例如，研发人员提交了一次代码后，一条典型的 Pipeline 会帮助开发人员完成以下任务：代码扫描（PMD/FindBugs/STC）编译 部署 集成测试 以上的这些任务按照一定顺序执行，并且...
跨云上报比较适合一主多从架构，绝大部分节点部署在一个云环境内，其他云/自建机房仅占少量业务流量，比如某企业 toC 业务部署在阿里云，企业内部应用部署在自建机房，就比较适合跨云上报的方式，如下图所示。跨云查询 跨云查询是指原始...
做好IT能力和业务需求的平衡 首先，企业需要了解自己的IT架构和技术能力，以确保选择的服务能够与现有应用兼容，并能够顺利集成。如果企业在IT技术方面比较薄弱，建议选择管理服务提供商来提供技术支持和培训服务。其次，企业在进行设计时...
镜像 Image 镜像是应用包，将配置和相关软件等打在一起的二进制包，并且符合 Docker Image 规范。镜像可以来自任何可被 AKS 网络访问到的镜像中心，对于私有镜像中心，需要在 AKS 中配置相应的访问信息。构建 Build 构建用于描述从应用源...
应用层流控 单元化架构下应用层流控规则主要涉及两块内容：UID 分配和部署单元的流量比。UID 分配指各个本地域逻辑单元组（RZoneGroup）所对应的 UID 分片（00-99）；部署单元流量比指各个部署单元所占对应的逻辑单元组（GZoneGroup、...
云计算下如何平衡扩展性和稳定性SLA 云计算环境下，企业和个人通过开启云服务，即可以得到所需的软件功能、计算资源、存储空间，并按实际使用量付费。在业务量逐步上涨的过程中，用户需要不断提升计算和存储资源来满足业务需要。因此，扩展...
架构图如下所示。云端：通过边缘计算控制台集成开发边缘一体机相关的资源，管理接入的终端设备、应用、算法等，实时监控边缘一体机及其软硬件资源。边缘端：终端设备接入边缘一体机后，边缘一体机可以实现终端设备数据的采集、流转、存储、...
部署架构 说明 标准架构 图 2.标准版-双副本高可用架构 标准架构（双副本）实例采用双机主从（Master-Replica）架构，高可用HA模块侦测到主节点故障时，会自动进行主从切换，将Replica提升为Master，而原来的Master恢复连接后会成为新的...
产品架构图如下图所示：网关SDK具有以下特性：网关监测：支持实时监控网关健康状况，包括CPU、内存、传输等状态实时监测。网关OTA：支持OTA签名校验、断电恢复等功能。安全存储：支持保护网关中已下载的密钥安全，防止密钥被异常窃取。节点...
DataWorks智能数据建模的关系图，帮助您快速构建数据仓库模型架构图，直观展示数据仓库中维度、维度表、明细表、汇总表、应用表等各模型之间的关系。一个关系图承载一个数据仓库模型，一个账号支持创建多个关系图。本文为您介绍关系图的...
技术架构 ACM 的架构图如下。图 1.ACM 技术架构 ACM 服务端 即 ACM 分布式服务节点，每一个节点包括以下部分：服务层：用于转换协议和鉴权验证等。一致性协议层：用于管理配置的一致性和推送配置。缓存层：通过分布式缓存提高查询和推送...
系统架构 数据同步服务的逻辑架构图：全量同步：负责将表数据从源端数据库同步到目的端数据库，支持异构数据库间同步。增量同步：负责将源端的增量数据同步到目的端，主要包含 Store 和 JDBCWriter 两个组件。存储：采集源端 DB 的变更到...
读写分离架构 图 4.读写分离版高可用架构 自动监控各节点的健康状态，异常时发起主备切换或重搭只读节点，并更新相应的路由及权重信息。Proxy会实时探测只读节点的状态，当出现下述情况时，Proxy会执行流量管控动作：只读节点处于异常状态...
综合各个资源支持的可用区，从 可选择的可用区 下选择一个共同支持的可用区，单击 生成架构图。生成了一个如下图所示的应用架构。情况二：选择同地域双AZ。按照标签顺序勾选同地域双AZ，完成资源及其规格配置，单击 计算可用区。根据计算...
Tair 标准架构具有数据高度一致、架构简单、性价比高等特点，可满足多种场景下的需求，但标准架构不支持增加数据分片或只读节点，仅提供高可用（双副本）与单副本实例类型。说明 如需增加数据分片或实现读写分离，请选择 集群架构 或 读写...
产品架构图 内核架构 PolarDB-X 1.0 由计算层实例与存储层私有定制RDS实例组成，通过挂载多个MySQL进行分库分表水平拆分。如同大多数传统单机关系型数据库，PolarDB-X 1.0 分为网络层、协议层、SQL解析层、优化层和执行层，其中优化层包含...
为了让用户能够用好云、上好云、SOFAStack 在提供优秀分布式架构、技术风险防控产品体系的同时，还为用户提供包含架构咨询、质量提升、运维架构升级、重保护航等全方位的服务体系。产品服务 SOFAStack 拥有一站式全流程的完善服务体系，...
SessionServer 接收到 dataPub 数据后，进行下述操作：首先写入内存：用于后续可以跟 DataServer 做定期检查。然后将数据 dataPub 发送给 DataServer。DataServer 接收到 dataPub 数据后，进行下述操作：将数据写入内存：DataServer 将从 ...
组件介绍 读写分离架构主要由主节点、只读节点、代理节点（Proxy）和高可用系统等组成，架构图如下。图 1.云原生（原云盘）读写分离架构 图 2.经典（原本地盘）读写分离架构 组件 云原生读写分离架构（推荐）经典读写分离架构 主节点...
组件介绍 读写分离架构主要由主节点、只读节点、代理节点（Proxy）和高可用系统等组成，架构图如下。图 1.云原生（原云盘）读写分离架构 图 2.经典（原本地盘）读写分离架构 组件 云原生读写分离架构（推荐）经典读写分离架构 主节点...
代理模式的服务架构图和组件说明如下。图 1.集群架构代理模式服务架构 表 1.集群架构代理模式组件说明 组件 说明 代理服务器（proxy servers）单节点配置，集群架构中会有多个Proxy组成。数据分片（data shards）每个数据分片均为双副本...
代理模式的服务架构图和组件说明如下。图 1.集群版代理模式服务架构 表 1.集群版代理模式组件说明 组件 说明 代理服务器（proxy servers）单节点配置，集群版结构中会有多个Proxy组成。数据分片（data shards）每个数据分片均为双副本...
本文介绍 SOFAStack 消息队列的系统部署架构，方便您更好地理解消息队列的高可用性。消息队列在任何一个环境都是可扩展的，生产者必须是一个集群，消息服务器必须是一个集群，消费者也同样。集群级别的高可用，是消息队列跟其他的消息...
部署单元（Cell）定义了一个服务通信的边界，用以规范通信的链路，为发布部署时切流做无损发布、高可用应用架构，以及容灾切换和恢复打下基础。部署单元（Cell）也是实现单元化的基础。双机房双活场景下，一个应用的应用服务可以跨部署单元...
适用场景 您可能会有这样的疑问：到底什么时候该用 Topic，什么时候该用 Tag？建议您从以下几个方面进行判断：消息类型是否一致：如普通消息、事务消息、定时或延时消息、顺序消息，不同的消息类型使用不同的 Topic。创建 Topic 时需要指定...
相比于传统IDC环境，云计算的基础设施和服务在不断快速迭代和演进，对云用户而言，在上云、用云、管云过程中持续维持良好的云上架构变得极具挑战。对云上应用来说，稳定、安全、性能、成本是架构设计中最通用领域的抽象，也是组织层面最...