《(金融保险)金融行业数据挖掘技术》由会员分享，可在线阅读，更多相关《(金融保险)金融行业数据挖掘技术（9页珍藏版）》请在金锄头文库上搜索。
1、金融行业数据挖掘技术应用论坛 数据挖掘讨论组 朱建秋 一、 一、 简介“金融行业数据挖掘技术应用论坛”由中国电子信息产业发展研究院(CCID)和其旗下赛迪集团战略数据资源管理中心主办，北京赛迪数据有限公司负责具体承办，2002年11月25日在北京新世纪饭店召开。二、 二、 会议纪要1 1 会议内容1) 1) 数据挖掘技术与金融分析内容n n 数据仓库结构与技术n n 数据挖掘技术n n 评分系统在金融决策中的应用n n 数据挖掘用于评分系统主要观点：（1） （1） 数据仓库是适合知识发现的过程的结构。数据仓库的处理过程是从“数据清理/整合数据仓库数据选择数据挖掘模式评价知识”不断循环的过程（注
2、：类似Fayyad 96年提出的数据挖掘过程模型）。（2） （2） 将数据仓库和挖掘的结构划分为四个层次：第一层是数据层，第二层是多维数据库层MDDB，第三层是OLAP和OLAM，第四层是用户界面。（注：类似Han Jiawei的OLAM体系结构）（3） （3） 数据挖掘过程包括：数据选择，数据转换，数据挖掘，数据解释。（4） （4） 数据挖掘的方法：联想，划分，聚类，预测，顺序模式，相似时间序列。（5） （5） 数据挖掘的科学方法数学工具：统计学，决策树，神经网络，模糊逻辑，线性规划。（6） （6） 个人信用评分系统是将个人信用的历史（六个月以上）经过45至65个因素的刻划后表述的决策模型。
3、通常个人信用评分为350至850之间。每人从850分起，有坏帐记录，即扣去不同比例的分数。经过评分模型的分析，最后得到决策评分。（850为最好）（7） （7） 评分因素：过去的付帐历史、信用欠帐量、信用卡使用时间、新信用卡的申请、信用卡的类、信用卡交易情况、现金提取情况（8） （8） 应用前景：银行各类信贷风险分析，企业和个人信用风险分析2) 2) 如何利用数据挖掘工具协助进行市场营销内容n n 数据挖掘的定义n n IBM数据挖掘的解决方案n n 在金融行业的应用主要观点：（1） （1） 强调了数据挖掘过程，首先必须明确需要解决的商业问题。（2） （2） IBM有从数据库到最上层的挖掘工具的
4、一整套商业智能解决方案。（3） （3） 在银行应用的层次：信用评分，购物篮分析，区隔分析，交叉营销/向上营销，客户流失，客户价值。（4） （4） 讲解了Lift Chart图的含义3) 3) 数据挖掘在金融行业的应用趋势分析内容n n 数据管理技术的挑战n n 结构化数据挖掘应用n n 非结构化数据挖掘应用n n 金融行业数据挖掘应用趋势主要观点：（1） （1） 八十年代初，银行自动化建设，九十年代初银行网络化建设阶段，九五末期，数据大集中。（2） （2） 2002年上半年金融行业IT应用特点：数据大集中平稳进行，“银联”改善信用卡环境，电视会议扩大应用，个人理财系统成为新焦点，农信社信息化市
5、场升温，无线局域网开始应用。（3） （3） 结构化挖掘原理：从现有业务系统中抽取数据（业务数据、客户数据），建立深层次的分析体系（数据仓库、数据集市、业务分析模型），以信息驱动业务的管理、新一代电子商务企业（市场触觉敏感、以客户为中心、以信息驱动）。（4） （4） 一个比喻：数据仓库和数据挖掘好比一个大的厨师烧菜，开始需要选择原料，然后，将各种原料加工完毕（洗、切、剁等等），分门别类的放在厨房，这时候厨房就象数据仓库。厨师根据这些原料做出菜肴，就象数据挖掘得出有意义的知识。（5） （5） 结构化数据挖掘内容：（6） （6） 人事、财务生产、销售客户资料数据仓库抽取过滤转换市场需求客户忠诚度客户
6、等级客户销售模型分析非结构化数据挖掘的意义：企业战略规划的制定和战术方案的实施离不开对于海量非结构化数据的挖掘和现有知识的管理！（7） （7） 非结构化数据挖掘在企业竞争情报系统的应用，企业竞争情报系统将成为下一个数据挖掘应用的热点。（8） （8） 金融行业数据挖掘应用趋势，在数据集中的平台上，结合结构化和非结构化数据挖掘技术，部署企业的商业智能、客户关系管理、市场销售分析、竞争对手分析、市场需求动向等。4) 4) 用友金融行业财务管理解决方案黄伟先生一上来演示了一个FLASH游戏，在多张不同花色的牌中，让观众记住一张牌，说明他能够知道所有人记住的是什么牌。然后，他抽去一张牌，再打开其他的牌，
7、观众所记住的牌已经都不在了。原因很简单，他换去了所有牌的花色，造成一种错觉。黄伟先生用这个游戏说明，错觉往往带来错误的决策，引申开来，数据挖掘需要有正确的数据，才能进行深入的挖掘。介绍了用友集中式的财务管理解决方案，说明必须先收集这些重要的财务数据，才能进行更深入的挖掘。5) 5) CA数据管理技术行业应用解决方案讲解了CA公司的情况，以及CA的商业智能解决方案，特出了CA自己研制的一种预测技术。6) 6) 透过数据挖掘改善客户服务中心的管理讲解了一些数据挖掘概念性的东西，并举出了那个经典的“啤酒-尿布”的案例。7) 7) 金融信用决策的技术突破数据挖掘的应用n n 引言n n 信用周期一般介
8、绍n n 信用决策的简化流程n n 信用决策技术解析n n 信用决策技术的几个例子n n 信用决策技术带来的利益n n 中国运用信用技术的可行方案主要观点：（1） （1） 抵押贷款有很多缺点，信用贷款都能弥补，所以信用贷款是好的，是趋势。（2） （2） 信用周期（Credit Life Cycle）：招商Account Acquisition立户Account Origination信用决策管理CRM信用风险，市场管理（Risk & Marketing）付帐管理（Billing & Remittance）信用量管理（Line Increase & Line Decrease）超支管理（Over
9、 limit）离走管理（Attrition）促销管理（Promotions）定价管理（Pricing）再授信（Reissue） 资信金融Securitization收帐Collection & Recoverary（3） （3） 信用决策简化流程外部内部数据管理Data MGMT决策制定中心执行系统Strategy Execution顾客或潜在顾客作用于Action反馈及信息收集Reaction（4） （4） 传统的决策制定中心是主观制定决策（JUDGEMENT），主观决策存在一些不足，数据挖掘给决策技术带来了突破。数据挖掘是从广义的角度讲的，包括统计、机器学习、神经网络等等。（5） （5）
10、预测解析（Predictive Analytics）：信用评分技术（Credit Scoring）。n n 内在理解分析（Exploratory Analysis/KDD）：模块识别和相关性分析。n n 决策建模（Decision Modeling）：通过图论方法建立模型，对于给定的一个或多个决策建立数学关系。n n 策略优化（Strategy Optimization）：在给定的一些限制条件下，寻找改进利润的最优策略解。n n 策略精调（Strategy Refinement）：精调最优策略解，使其稳定可靠，易理解、易执行。外部内部数据管理Data MGMT执行系统Strategy Exec
11、ution顾客或潜在顾客作用于Action反馈及信息收集Reaction数据挖掘预测解析内在理解决策建模策略优化策略精调（6） （6） 预测解析：针对不同的信用周期阶段和不同的商业目标，建立模型n n 招商：依据风险的招商模型，申请模型，价值模型和响应模型。n n 立户：风险（坏帐，破产等），离走和利润定量等。n n 用户管理：分档系统，风险预测系统，坏帐、破产预警系统，债量预测模型，利润预测模型，欺诈预测模型等。n n 收帐：前期收帐，后期收帐等。n n 总体：损失预测，营利预测，最优组合建立，阶梯变坏率预测，等等。（7） （7） 内在理解分析n n 一般理解分析：变量的相互关系。工具因子分
12、析、主成分分析、聚类分析、关联规则等。n n 特殊理解分析：对给定目标，寻找贡献或影响的变量。工具FISHER显著性检验、参数估计、线性/非线性/LOGISTIC回归、神经网络、决策树等。（8） （8） 决策建模：对于1个或几个决策建立图论模型。从而建立起他们之间的数学关系。如下图所示：假设，、分别记作 利率、信用量、债务，则R（收入）= F（X1，Xn，,）L（损失）= F（X1，Xn，,）C（费用）= F（X1，Xn，,）最大利润 = R（收入）max(,) - L（损失）min(,) - C（费用）min(,)坏帐模型离走模型当前债务利率调整信用量调整债务转移收入利润损失和费用（9） （9） 优化决策和决策精调： 高中低高中低高中-2%$1000.00$2000.00-2%$2500.00$3000.000%$0.00$0.002%$-2000.00$0.00坏帐分数离走分数当前债务利率调整信用量调整债务转移优化决策和决策精调（10） （10） 信用评数技术：例子对偶模型 （11） （11） 信用决策技术利益：减少坏帐；增加利润；效率提升，开销缩小；策略的公平性和一贯性得以保障。（12） （12） 中国的可行方案n
