创新业务 银联海量数据分析平台案例

简介:

本文讲的是创新业务 银联海量数据分析平台案例,为了创新业务的需求,更好地服务银行业,中国银联积极探索新的技术,进军大数据领域。

  ? 作为首期应用示范,需要用hadoop构建字段合规性分析系统,商户推荐系统,数据规模是,数据导入性能每小时80GB,全年数据30TB左右,每条记录模式是刷卡交易信息,每条大小200~500字节不等。

  解决方案

  曙光公司给上海银联提供的整个方案采用14台曙光高性能A620服务器构建Hadoop海量数据分析平台,交换环境千兆以太网,整个集群平均导入速度为10W/s,随机单条记录查询时间少于3s。完全达到首期平台建设要求。

创新业务 银联海量数据分析平台案例

作者: 曾智强  

来源: IT168

原文标题:创新业务 银联海量数据分析平台案例

相关文章
|
NoSQL 大数据 分布式数据库
|
2月前
|
数据采集 数据可视化 数据挖掘
知识分享-商业数据分析业务全流程
知识分享-商业数据分析业务全流程
56 1
|
4月前
|
监控 数据挖掘 API
阿里巴巴API接口技术揭秘:轻松驾驭电商数据,提升业务效率
阿里巴巴API接口技术揭秘:轻松驾驭电商数据,提升业务效率
|
8月前
|
SQL 安全 搜索推荐
瓴羊Dataphin升级V3.11,新上线数据分析、隐私计算平台促进数据流通消费
瓴羊旗下开发云核心产品Dataphin(智能数据建设与治理)近期升级到V3.11版本,全新上线Notebook数据分析空间,以及Dataphin隐私计算平台,在数据采、建、管、用的基础上,进一步强化数据消费和数据流通能力,帮助企业用标准化的产品能力,在大数据时代构建起生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产,促进数据价值释放。
14339 3
|
存储 SQL 消息中间件
中原银行对金融行业实时数仓的现状与发展趋势思考
本文内容介绍了银行业常见的实时场景和解决方案,然后针对银行业报表依赖维度表计算的特点,提出了基于 Flink Table Store 作为数据存储,进而构建流式数仓的解决方案。
中原银行对金融行业实时数仓的现状与发展趋势思考
|
数据管理
《金融行业高频交易数据管理解决方案》电子版地址
金融行业高频交易数据管理解决方案
69 0
《金融行业高频交易数据管理解决方案》电子版地址
|
SQL 存储 弹性计算
互联网、游戏等行业实时数仓构建最佳实践
互联网、游戏等行业客户基于Flink构建实时数仓,通过Logtail采集日志,使用Flink实现对日志的拆分、处理。
543 0
互联网、游戏等行业实时数仓构建最佳实践
|
存储 Cloud Native 关系型数据库
金融数据智能峰会 | 数据规模爆炸性增长,企业如何进行精准决策?云原生数据仓库数据化运营实战分享
在日前的2021阿里云金融数据智能峰会——《云原生驱动数智化运营的“增长黑马”》专场上,阿里云数据库资深技术专家魏闯先 从数据价值链路角度切入,为大家解读云原生数据仓库如何支撑数据化运营、全链路营销和阿里集团双11业务,并展示金融客户最佳实践案例和应用场景。本文内容根据演讲录音及PPT整理而成。
598 0
金融数据智能峰会 | 数据规模爆炸性增长,企业如何进行精准决策?云原生数据仓库数据化运营实战分享
|
存储 分布式计算 运维
阿里云实时大数据解决方案,助力企业实时分析与决策
简介: 2020年双11,云原生实时数仓首次在阿里巴巴双11核心数据场景落地,实现商业全链路实时化,毫秒级海量数据处理能力。搜索推荐业务数据开发效率提升4倍,菜鸟物流包裹数据链路从小时级优化到3分钟,考拉分钟及小时业务1分钟内完成,大数据的实时分析与决策在瞬息万变的市场竞争中成为了标品!今天,我们将向大家分享阿里云实时大数据解决方案,助力企业实时决策。
3798 1
阿里云实时大数据解决方案,助力企业实时分析与决策
|
存储 弹性计算 关系型数据库
互联网、游戏等行业实时数仓构建
基于Flink构建实时数仓,包含采集日志,Flink对日志的拆分、处理写入ADB存储和HDFS。
互联网、游戏等行业实时数仓构建