结构化大数据分析平台设计

宇珩 2019-09-25

云栖社区 编程语言 数据存储与数据库 分布式 大数据 Java核心技术 架构 开发框架与中间件 分布式系统与计算 hbase hdfs 数据库 big data 大数据分析

前言 

任何线上系统都离不开数据,有些数据是业务系统自身需要的,例如系统的账号,密码,页面展示的内容等。有些数据是业务系统或者用户实时产生的,例如业务系统的日志,用户浏览访问的记录,系统的购买订单,支付信息,会员的个人资料等。大多数企业对内,对外有很多这样的线上系统,这些数据是驱动业务发展,决策和创新最核心的东西。让这些数据更好的支撑线上系统的是数据库和数据分析平台。
数据库主要承担的是线上系统的实时数据写入和根据预定好的需求进行查询,严格说就是数据库中的OLTP类型数据库。这类数据库中最为大家所熟知的就是Oracle和MySQL。业务系统对数据库的要求可能是多样的,近些年也由传统的关系型数据库融入了NoSQL数据库和NewSQL。业务系统中除了和业务直接相关的数据存储在数据库中并累积起来外,还有海量的系统监控数据,系统业务日志产生。

登录 后评论
下一篇
云攻略小攻
896人浏览
2019-10-11
相关推荐
2011年系统架构师考试题详解
624人浏览
2017-11-03 16:07:32
监控平台架构设计
670人浏览
2014-05-29 23:31:56
2
5
2
11800