大数据 架构设计

_相关内容

增量导出发布包

支持 规划、数据架构、研发、标签架构、标签、数据标准、数据质量、数据安全 对象类型。规划:包括公共定义、数据板块、计算源、项目、数据源。数据架构:包括主题域、业务对象、业务活动。研发:包括离线管道、事实逻辑表、维度逻辑表、...

安全风险识别和检测

基础架构的风险识别和检测:云上基础架构包含了网络架构和身份体系,要评估和识别当前网络的架构设计方法,是否符合安全最小化原则和纵深防御原则;云平台配置风险识别和检测:企业使用云产品创建的配置文件是否符合安全原则,需要进行识别...

增量导出发布包

支持 全局、数据架构、研发、标签架构、标签、数据标准、数据质量、数据安全 对象类型。全局:包括统计周期、全局变量、公共日历、数据板块、计算源、项目、数据源、对象属性、识别特征。数据架构:包括主题域、业务对象、业务活动。研发:...

迁云服务

安全设计:基于阿里云安全产品进行安全架构设计,主要包含安全组规范、堡垒机接入、数据库审计、高防和WAF接入等必备的安全设计。账户体系设计:包含云上组织关系管理、RAM账户使用规范等。云产品选型设计:基于技术栈的调研结果,结合上云...

应用场景

本地IDC/跨云数据库上云迁移 数据传输服务 DTS 支持RDBMS、NoSQL、OLAP等数据源间的数据交互,集数据迁移/订阅/同步于一体,助您构建安全、可扩展、高可用的数据架构。通过数据库网关,可将本地或第三方云的数据库低成本地接入至阿里云。...

健康检查服务内容说明

应用程序改造、应用程序设计数据库逻辑结构设计;迁移未明确认定为“范围内”的应用系统;迁移未明确认定为“范围内”的数据;云平台基础架构设施及环境的设计与搭建;实施所需的通信基础架构和组件;安装或配置电气、电子通信、布线基础...

应用场景

本地IDC/跨云数据库上云迁移 数据传输服务 DTS 支持RDBMS、NoSQL、OLAP等数据源间的数据交互,集数据迁移/订阅/同步于一体,助您构建安全、可扩展、高可用的数据架构。通过数据库网关,可将本地或第三方云的数据库低成本地接入至阿里云。...

资产全景

数据架构 包含 业务对象、业务活动、业务限定、原子指标、指标 五种指标数量,其中,指标 包括派生指标、衍生指标和自定义指标三类指标。数据模型 包含 维度逻辑表、事实逻辑表、汇总逻辑表 三种指标数量,而维度逻辑表数+事实逻辑表数+...

产品概述

产品简介 PolarDB-X 1.0 是由阿里巴巴自主研发的PolarDB分布式版数据库,融合分布式SQL引擎与分布式自研存储X-DB,基于云原生一体化架构设计,可支撑千万级并发规模及百PB级海量存储。专注解决海量数据存储、超高并发吞吐、表瓶颈以及...

设计原则

面向失败的架构设计原则 众所周知,系统异常事件是不可避免的,如网络延迟、硬件故障、软件错误、突峰流量等,建议在系统设计阶段就要从这些异常事件引起的系统执行“失败”出发,提供冗余、隔离、降级、弹性等能力,旨在确保系统的高可用...

库表结构优化

要做好库表结构设计和优化,用户通常需要关注以下信息:数据库引擎架构 用户需要了解数据库引擎的存储和计算架构特点,才能结合业务的数据分布特征与业务场景特征,进行数据建模,从而设计出符合引擎架构特点的数据表结构。SQL特征差异 ...

产品简介

阿里云数据湖构建(Data Lake Formation,简称 DLF)是一款全托管的快速帮助用户构建云上数据湖及Lakehouse的服务,为客户提供了统一的元数据管理、统一的权限与安全管理、...结合 Databricks、OSS 产品,构建云上全托管Lakehouse数据架构

管理标签架构待发布对象

标签实体 待发布对象 标签实体待发布对象页面主要由搜索与筛选区、数据架构对象列表、批量操作组成。各区域及操作说明如下。区域 描述 ① 搜索与筛选区 搜索及筛选区支持根据发布对象变更类型、当前环境是否变更、发布状态或输入对象名称...

跨租户发布概述

Dataphin支持跨租户的发布对象包括规划类对象、数据架构的相关对象、研发的对象、资产相关的对象。租户发布规划类对象:包括公共定义、数据板块、计算源、项目和数据源。跨租户发布数据架构的相关对象:包括主题域、业务对和业务活动。跨...

跨租户发布概述

Dataphin支持跨租户的发布对象包括规划类对象、数据架构的相关对象、研发的对象、资产相关的对象。租户发布全局类对象:包括统计周期、全局变量、公共日历、数据板块、计算源、项目、数据源、对象属性、识别特征。跨租户发布数据架构的相关...

管理标签架构待发布对象

标签实体 待发布对象 标签实体待发布对象页面主要由搜索与筛选区、数据架构对象列表、批量操作组成。各区域及操作说明如下。通用说明 如果您有明确的需要发布的对象,您可以单击 批量搜索,在 批量搜索 对话框中通过批量输入对象支持的搜索...

产品优势

数据共享 Databricks数据洞察采用数据湖分析的架构设计,使用阿里云对象存储服务(OSS)为核心存储,直接读取分析OSS的数据,无需对数据做二次迁移,实现数据在多引擎之间的共享。icmsDocProps={'productMethod':'created','language':'zh-...

Napatech案例

解决方案 阿里 云原生多模数据库 Lindorm 是一款适用于任何规模、多种模型的云原生数据库服务,其基于存储计算分离、多模共享融合的云原生架构设计,具备弹性、低成本、稳定可靠、简单易用、开放、生态友好等优势。Lindorm支持海量数据的低...

行业趋势与背景

PolarDB-X 技术发展 产品前言 PolarDB-X 是由阿里巴巴自主研发的云原生分布式数据库,融合分布式SQL引擎DRDS与分布式自研存储X-DB,基于云原生一体化架构设计,可支撑千万级并发规模及百PB级海量存储。专注解决海量数据存储、超高并发吞吐...

互联网金融:上海富友支付服务股份有限公司

支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,助力用户构建安全、可扩展、高可用的数据架构。DTS支持源为传统商业数据库的迁移,如Db2 ...

什么是数据传输服务DTS

支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,助您构建安全、可扩展、高可用的数据架构。DTS视频简介 为什么选择DTS 相对于传统数据迁移...

简介

典型案例&架构 航海船舶大数据平台 场景:全球AIS船舶实时位置数据,每天上亿条轨迹写入,要求轨迹时空/时序查询秒级响应,具体包括:监管区域实时地理围栏判断。轨迹区域回放(指定区域+指定时间段)。轨迹回放(指定时间段查询)。架构...

前言

对云上应用来说,稳定、安全、性能、成本是架构设计中最通用领域的抽象,也是组织层面最需要关注的几个维度。基于多年服务各行各业客户的经验总结,我们将阿里云上的架构设计最佳实践总结为一系列的方法论和设计原则,形成阿里云卓越架构...

数据中台建设架构咨询服务内容说明

2.服务范围 通过阿里云数据中台产品和建设实施方法论,建设【XXX】集团数据中台数据资产目录,基于资产盘点设计数据中台技术规范及总体架构,指导客户构建数据中台建设框架,并按需完成数据中台详细设计数据中台建设咨询内容包括【业务...

数据库上云咨询服务

阿里云数据库交付与架构团队提供的Oracle数据库上云咨询服务,为客户提供数据库系统上云方案咨询,包括云上数据库选型与架构设计数据库兼容性评估分析、数据库改造建议、应用改造建议、数据库迁移方案制定,结合客户需求进行方案验证,并...

应用场景

表格存储 有互联网应用架构(包括数据库分层架构和分布式结构化数据存储架构)、数据架构和物联网架构三种典型应用架构。本文结合 表格存储 的典型应用架构介绍了不同应用架构下的应用场景。互联网应用 目前互联网已在日常生活中广泛应用...

资源使用优化

数据存储空间带来的成本不可控影响不容忽视外,在存储生命周期管理的架构设计上也需要为访问频繁的热数据留出性能优化空间。通过不同组合,冷数据的长期存储成本需要低于热数据存储成本,并且冷数据要能便于读取分析被访问的文件资源创建...

产品架构

数据库分层架构数据库分层架构中,使用 Tablestore 配合MySQL来完成应用系统的业务需求,利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作,利用 Tablestore 的数据检索能力和大数据存储来实现数据存储、查询与分析。...

概述

本章节会全面描述基于云基础设施的高性能系统设计、实施和优化等环节,包括如下主要内容:高性能架构设计:包括高性能架构常见设计准则、业务适应规格和类型、可伸缩和可扩展、性能层面部分架构设计最佳实践和挑战和注意事项等内容。...

基础术语

OceanBase OceanBase 是阿里巴巴与蚂蚁科技独立自主研发的一款分布式关系数据库产品,融合传统关系数据库和分布式系统的优势,具备高可用、高性能、高可扩展性,在功能上兼容 MySQL 等特点,在通用硬件上提供金融级高可用的数据库服务。...

互联网金融

架构优势:便捷的架构部署 云产品弹性升级扩容 完善的同城高可用设计 强大抗DDoS攻击能力 互联网金融安全方案 搭建成熟稳定的安全体系适用于发展中的互联网金融公司,可保障网络安全、主机安全、移动安全,并结合安全大数据分析技术对未知...

数据服务:低成本快速发布API

DataWorks的数据服务功能模块是灵活轻量、安全稳定的数据API构建平台,旨在为企业提供全面的数据共享能力,帮助用户从发布审批、授权管控、调用计量、资源隔离等方面实现数据价值输出及共享开放。功能概述 作为数据仓库与上层应用系统间的...

技术面临的挑战与革新

在Proxy的协同下,甚至可以做到节点切换对应用无感知 传统分布式架构与存储计算分离架构对比 分布式数据库其实已经有了不短的历史,早期的分布式数据库,在整体架构上可以分为share nothing和share disk两类。share disk通过扩展底层的...

升级数据库版本

支持升级的数据版本 云数据库 MongoDB 版 控制台可以直接升级数据版本,但不同产品架构、不同版本的实例支持升级的版本不同,具体情况如下:产品架构 规格类型 实例的数据版本 可升级到的数据版本 单节点架构 通用型云盘版...

引擎简介

企业级稳定性 基于高可用架构设计,历经十余年阿里巴巴集团生产环境严苛考验,提供稳如磐石的企业级稳定性。丰富生态 兼容HBase、Cassandra(CQL)等多种开源标准接口,与Spark、Flink等多种计算引擎互联互通,无缝对接主流数据生态。关于...

弹性伸缩

在Job类任务、CI/CD、Spark大数据计算、在线应用弹性等场景中可以显著提升应用部署的弹性效率,也可以降低应用的计算成本。传统的HPA(Horizontal Pod Autoscaler)策略在业务量上涨之后开始扩容,会存在滞后的资源供给不能及时补充业务的...

流利说

DBA团队的工作核心从之前的运维转变为面向业务的数据架构设计。客户价值 DBA团队从繁重的运维工作中得以解脱。生产故障平均恢复时间大幅缩短。智能化压测,让容量评估有的放矢。客户感言 数据库自治服务DAS帮助流利说更专业、更高效地使用...

评估合适的云服务

数据库的选型是一项专业性很强的工作,通常除了性能外还有很多考虑方面,此处不进行展开阐述,需要关注的是数据库产品组合在高性能架构设计上的合理使用,如很多业务场景利用Redis这类缓存数据库实现性能的显著提升。计算 计算服务 熟悉...

集群架构

云原生内存数据库Tair 提供双副本集群架构实例,可轻松突破Redis自身单线程瓶颈,满足容量、高性能的业务需求。集群架构支持代理和直连两种连接模式,您可以根据本章节的说明,选择适合业务需求的连接模式。注意事项 云原生 版集群架构不...

冷热分层

数据架构设计中,通常会应用HTAP(Hybrid Transaction and Analytical Process)体系结构,通过合理地选择分层存储组件和计算引擎,既能支持海量数据分析和快速的事务更新写入,又能有效地降低冷热数据分离的成本。更多介绍请参见 结构...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用