news 2026/6/13 1:20:30

为什么银行放着好好的Oracle不用，要建设Hadoop数仓？银行建设Hadoop数仓的核心需求分析。

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
为什么银行放着好好的Oracle不用，要建设Hadoop数仓？银行建设Hadoop数仓的核心需求分析。

存储的数据量更大

价格更便宜，成本更低

"招行数据总量已突破50PB，日增数据量300TB+，传统数据仓库无法承载如此规模的数据增长。我们构建了基于Hadoop的混合架构，其中：

  • 热数据（近3个月）：存储在Greenplum，约5PB

  • 温数据（3-24个月）：存储在Hadoop，约30PB

  • 冷数据（24个月以上）：存储在对象存储，约15PB

仅数据存储成本，Hadoop方案比纯Oracle方案降低65%。"

2023年平安银行数据平台数据： - 总数据量: 40PB+ - 日处理数据: 200TB - 集群规模: 3000+节点(LS银行的集群规模多少个节点？) - 最大单表: 客户行为表，8.7万亿行 - 查询性能: （查询速度变快）复杂查询从小时级降到分钟级

参考信息：

招商银行- 公开信息最多

  • 公开分享平台：招行技术开放日、DTCC数据库大会、ArchSummit架构师峰会

  • 关键技术人：招行信息技术部总经理周天虹、数据仓库团队负责人

  • 典型分享主题：

    • 《招商银行数据湖仓一体建设实践》

    • 《招行基于Hadoop的金融级数据中台》

    • 《PB级数据平台在招行的应用》

平安银行 - 技术激进派
公开活动：平安科技Open Day、QCon全球软件开发大会

版权声明: 本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若内容造成侵权/违法违规/事实不符，请联系邮箱：809451989@qq.com进行投诉反馈，一经查实，立即删除！
网站建设 2026/6/11 16:40:18

Go进阶之尽量定义小接口

接口越大.抽象程度越低. 1.Go推荐定义小接口: 接口就是将对象的行为进行抽象形成的契约.契约有繁有简.Go选择了去繁就简. 1).契约的自动遵守: Go语言中接口与其实现者之间的关系是隐式的.无须像其他语言(如java)那样要求实 现者显示放置implents声明.实现者仅需实现接口方…

作者头像 李华
网站建设 2026/6/12 6:28:23

格式工厂：老牌格式转换神器依旧能打！

下载链接 https://pan.freedw.com/s/lr763C 今天给大家推荐一款经典老牌软件格式工厂，虽然已经很多年了，但功能依旧强大到爆！支持视频、音频、图片、文档等各种格式转换，一个软件搞定所有需求，关键是还完全免费。 软…

作者头像 李华
网站建设 2026/6/12 2:21:19

写论文省心了!千笔AI，专科生论文写作神器

写论文省心了!千笔AI，专科生论文写作神器你是否曾为论文选题发愁，反复修改却总对内容不满意？是否在查重和格式上花费大量时间却收效甚微？专科生的论文之路本就充满挑战，而千笔AI正是为解决这些痛点而生。它以强大的AI技…

作者头像 李华
网站建设 2026/6/11 19:00:11

直接上结论：千笔ai写作，本科生论文救星！

直接上结论：千笔ai写作，本科生论文救星！你是否曾在论文写作中感到力不从心？选题无头绪、资料难查找、逻辑不清晰、查重率高得让人崩溃……这些看似“正常”的学术难题，其实早已被千笔AI破解。作为一款专为本科生量身打…

作者头像 李华
网站建设 2026/6/10 10:56:01

函数指针实战：冒泡排序与四则运算

函数指针的练习函数指针实现冒泡排序的升序和降序#include <stdio.h> #include <stdlib.h> #include <time.h> //正常升序 int shengxu(int* a,int len) {int i0;int j0;for(jlen-1;j>0;j--){for(i0;i<j;i){if(a[i]>a[i1]){int ta[i];a[i]a[i1];a[i…

作者头像 李华