中兴通讯大数据平台在中国农业银行的应用
项目背景及挑战
当今时代,利率市场化,同业竞争加剧,迫使金融企业要尽快引入新技术,完善移动渠道的访问能力,增加服务渗透力,加快新业务部署上线速度。残酷的竞争导致利润空间下降,IT 成本压缩。传统银行IT架构采购和维护成本过高,更低成本优势的IT 技术成为了金融企业的需求。同时,“IOE”对金融业形成事实垄断,产品闭源不可控,IT系统依赖性过大,导致金融企业失去议价能力,安全风险越来越大。种种问题都使金融企业更加关注新技术的发展,更加急切的探寻可行的解决之道。
大数据技术在时代的招呼下应运而生,自诞生之日起,就成为了金融行业关注的目标,其海量数据处理能力、低廉的架构成本、开源的风险可控性都满足了金融企业的需求,各大金融企业纷纷投入资源开展研究与应用。
中国农业银行(Agricultural Bank of China,简称ABC,农行)是中国大型上市银行,中国五大银行之一。数年来,中国农行一直位居世界五百强企业之列,在“全球银行1000强”中排名前7位,穆迪信用评级为A1,在国际、国内都极具影响力。
中国农业银行从2011年开始,投入大量资源进行大数据技术研究。目前已有多个基于开源大数据组件的业务系统研发投产。但随着的大数据技术的深入应用,大数据技术的复杂性、不规范、缺乏有效技术支持等问题越来越成为大步前进的障碍。一方面随着数据的爆炸性增长,传统架构已经无法满足金融行业的实际需求,在信用风险、合规审计、柜面改造等多个业务领域都急切需要大数据技术的支撑。另一方面Apache Hadoop、CDH、IDH等大数据技术及开源平台,在规划架构、技术支持、故障恢复、生产运维等方面缺少技术支持,导致应用产品开发成本难以控制,投产应用产品稳定性欠佳,研发运维严重脱节。
大数据技术方案
2015年4月初,中国农业银行完成对多个厂商大数据产品的完备性测试,中兴通讯GoldenData HD大数据平台产品顺利入围,双方确定了正式合作的意向,将合作建设国内金融行业规模最大、能力最强的大数据平台,目标支持500节点以上集群,满足行内各部门的大数据应用需求。
GoldenData HD是基于开源技术成熟的大数据商用平台,整合了中兴通讯在近10年大数据项目实践中的技术沉淀。平台涵盖了数据的采集、存储计算、分析挖掘、应用建模、可视化展现以及运维管理等全部能力。
GoldenData HD产品架构如下: