前言
基础部分
章什么是大数据/2
1.1数据及大数据发展史/2
1.2大数据的概念/3
1.2.1大数据的特征/4
1.2.2大数据类型/5
1.2.3银行业大数据/5
第2章大数据成为银行业核心竞争力/7
2.1银行业IT建设发展历程/7
2.1.1电算化阶段/8
2.1.2信息化阶段/8
2.1.3网络移动化阶段/9
2.1.4数字智能化阶段/11
2.2银行业创新转型的突破口/14
2.2.1大数据给银行业带来服务模式变革/15
2.2.2大数据思维助力银行业从创新中挖掘效益/15
2.2.3大数据推进数字化转型/17
2.3大数据思维/20
2.4数据挖掘能力/22
2.5业界的关键观点/24
2.5.1IBM的观点/24
2.5.2普华永道的观点/24
技术部分
第3章大数据技术概述/28
3.1数据采集相关概念介绍/28
3.2大数据的数据源与数据类型/29
3.2.1大数据的数据源/29
3.2.2传统的数据类型/31
3.2.3大数据时代创新的数据类型/32
3.3大数据的采集方法和工具/33
3.3.1大数据采集方法/33
3.3.2常用的大数据采集工具/34
第4章大数据平台/36
4.1MPP/37
4.1.1Teradata数据仓库/39
4.1.2IBM Netezza/42
4.1.3Pivotal Greenplum/43
4.1.4GBase 8a Cluster/44
4.2Hadoop/45
4.2.1Hadoop是什么/45
4.2.2Hadoop和大数据/46
4.2.3Hadoop的发展历程/47
4.2.4Hadoop生态圈/49
4.2.5Hadoop核心组件/50
4.2.6Hadoop其他组件/54
4.3NoSQL/55
4.3.1概述/55
4.3.2典型NoSQL简介/57
4.4国内银行大数据平台的应用/61
4.4.1概述/61
4.4.2国内银行大数据平台介绍/61
4.5大数据技术的云平台化/63
4.6数据湖的介绍/64
4.6.1数据湖的概念/64
4.6.2数据湖的架构/64
4.6.3数据湖与数据仓库的区别/66
第5章大数据科学技术/68
5.1相关概念介绍/68
5.1.1数据挖掘/69
5.1.2机器学习/70
5.2数据挖掘算法/71
5.2.1朴素贝叶斯分类模型/72
5.2.2决策树模型/72
5.2.3K最近邻分类算法/72
5.2.4神经网络/73
5.2.5支持向量机算法/73
5.2.6集成学习/74
5.2.7聚类分析/75
5.2.8关联分析算法/76
5.2.9优选期望算法/76
5.2.10网页排名算法/76
5.2.11其他常用算法/77
5.3数据科学工具/78
5.3.1SAS/78
5.3.2PASW/78
5.3.3R语言/79
5.3.4Python/79
5.3.5MATLAB/80
5.3.6Stata/80
5.3.7Splunk/80
5.3.8Spark/81
5.4数据可视化技术/81
5.4.1Tableau Desktop/82
5.4.2QlikView/83
5.4.3D3.js/83
5.5数据挖掘的应用/83
治理与实践部分
第6章数据治理概述与理论研究/88
6.1银行业数据治理的发展/88
6.1.1数据大集中和数据仓库建设时期的数据治理/89
6.1.2精细化管理和外部监管驱动下的数据治理/89
6.1.3以企业级视角为重要标志的新时期大数据治理/89
6.2监管数据治理体系及要求/89
6.2.1《良好标准》与《指引》的制定/90
6.2.2监管数据治理要求的目的和意义/91
6.2.3《良好标准》的主要内容/91
6.2.4《指引》的主要内容/92
6.3银行业标准体系/92
6.3.1制定背景/92
6.3.2框架简介/93
6.3.3作用/94
6.4大数据时代的数据治理/94
6.4.1大数据的特征/94
6.4.2大数据时代给数据治理提出新的要求/95
6.4.3大数据生命周期/97
6.4.4大数据治理方法概述/97
6.5数据治理理论研究/99
6.5.1国际数据管理协会数据治理/100
6.5.2国际治理协会数据治理/103
6.5.3IBM数据治理/105
6.5.4MIKE2.0数据治理/107
6.5.5普华永道数据治理/109
6.5.6理论总结/111
第7章银行大数据治理实践/113
7.1银行大数据治理体系框架/113
7.2银行大数据治理实施策略与推进模式/115
7.2.1大数据治理实施策略/115
7.2.2大数据治理推进模式/118
7.2.3三位一体的大数据治理能力建设/121
7.3银行提升大数据应用能力的关键举措/122
7.4大数据治理组织机制/124
7.4.1大数据治理组织/124
7.4.2首席数据官/125
7.4.3数据认责机制/126
7.5数据资产管理/129
7.5.1数据资产管理的意义/130
7.5.2数据资产特征与分类/130
7.5.3数据架构与模型管理/131
7.5.4数据质量管理/132
7.5.5外部数据管理/135
7.6数据安全及隐私/139
7.6.1大数据带来的安全挑战/139
7.6.2大数据安全挑战应对方式/140
第8章银行大数据应用实践/142
8.1大数据应用体系构建/142
8.1.1数据正在成为银行的重要战略资产，未来银行必将是数据驱动型的/142
8.1.2大数据应用体系构建能力/143
8.2大数据挖掘/146
8.3大数据运营/147
8.3.1数据产品化/147
8.3.2数据服务社区/153
8.3.3数据服务目录/161
8.4大数据应用场景/165
8.4.1利用大数据支持客户服务提升/166
8.4.2利用大数据支持客户营销/168
8.4.3利用大数据进行线上客户智能运营/172
8.4.4利用大数据进行智能风险管理/174
8.4.5利用大数据提升运营效率/180
8.4.6利用大数据预防和控制金融犯罪/181
第9章银行大数据评价/184
9.1银行大数据能力评价/185
9.1.1数据管理能力成熟度模型/185
9.1.2大数据成熟度模型/186
9.1.3数据化能力指数：某银行数据能力评价实践/188
9.2大数据应用价值评价/193
9.2.1应用场景评价/193
9.2.2应用结果评价/194
9.3数据资产估值与交易/195
9.3.1数据交易市场/195
9.3.2数据资产估值/197
结语谁将引领未来的潮流/199
参考文献/203

本书详细阐述了大数据的基本概念，大数据将成为商业银行核心竞争力，商业银行大数据应用的各类场景等内容，列举了当前商业银行普遍使用的各类大数据相关技术，结合数据治理的方法论及框架，商业银行数据治理成果以及大数据时代的特点，构建大数据治理体系。同时，结合商业银行自身特点，指出商业银行大数据治理能力提升的6个重点方向。很后，结合大数据成熟度模型构建数据治理能力评价方法，探讨数据资产估值的现状及可行性。本书既有较为全面的理论知识又有丰富的商业银行实践与案例，可以作为商业银行数据管理者和大数据应用及开发人员的入门参考用书，也适合银行业务人员阅读，以帮助了解大数据应用对银行业务发展的意义和大数据治理对数据应用的支撑作用。