京公网安备 11010802034615号
经营许可证编号:京B2-20210330
信用评分建模中样本容量不足怎么办
在建立个人信用评分模型时,不仅需要有足够多的表征信贷申请人信用行为的特征变量,而且建模样本的容量也必须达到一定的数量。
一般来说,样本容量越大,所建立的模型的精度或预测能力就越高,模型也越稳健。
至于到底需要容量多大的样本才能建立一个预测精度较高,又具有较好稳健性的个人信用评分模型,目前还没有一个基于理论测算的最优数目,不过通过多年的建模实践,国外的许多学者提出了一些经验准则。
这些经验准则告诉我们,问题的关键并不在于建模样本容量的大小,而在于坏客户样本的数量。一个由50000个好客户,500个坏客户构成的建模样本并不比一个由5000个好客户,500个坏客户构成的样本含有更多的信息,因为在建立个人信用评分模型时坏客户样本所含的信息是我们重点关注的。
在实际的建模总体中,通常好客户的数量总是远远大于坏客户的数量,因此建模总体中坏客户数量的多少是能否成功地建立个人信用模型的关键因素之一。
在个人征信体系发达的国家,建模样本容量不足应该不是一个严重的问题。
这些国家解决这一问题可以有多种途径:
当需要对某种信用产品申请人进行评分时,若样本容量不足而不能建立评分模型,可以先用征信局的“通用化评分”来代替。待好、坏客户样本累积到一定容量后再建模。实际上有许多信用产品根本就不建立定制化的评分模型,而是直接用征信局提供的“通用化评分”对客户进行评价,当然这需要一定的成本。
由于社会征信体系较发达的国家一般其信用市场也较发达,信用产品比较丰富,在一个新的信用产品推广的初期,往往可以找到与之相类似的产品,用类似产品的样本建模在初期也是一个不错的选择。
在征信体系发达的国家,无论是信贷机构还是信用咨询机构都有较多的信用分析专家,利用这些专家的知识和经验可以建立所谓的“专家模型”。
就中国目前的状况而言,当建模样本不足时,以上3中解决方法均不是很有效的:
由于征信体系不发达,没有“通用化评分”可资利用;
消费信用产品还比较单一;
有关消费信用分析的专家还不多。
因此,样本容量不足是在中国现阶段建立个人信用评分模型时常常遇到的问题之一。
解决建模样本容量不足的方法有两类方法可以尝试:
一类是合并不同银行的相同产品的样本;
另一种是统计学中的Bootstrap方法。
方法1 将不同客户总体数据合并建模
当样本量不足时,最容易想到的一个解决办法是:将不同银行的相同产品的样本合并起来建立模型。
例如,当某个商业银行要针对其所发行的一种信用卡建立个人信用评分模型时,它可以将该银行在不同地区的分行的客户数据进行合并,这样在样本的数量上就可以满足建模的要求。
值得注意的是,这种合并不同总体的做法与通常建立个人信用评分时的做法是相反的。在建立个人信用评分模型时,为了提高模型的预测精度,当总体内部差异较大时,如果样本的容量足够大,在实际中的做法是将总体划分成几个内部一致性较好的子总体,然后对各个子总体分别建模。
关于将不同客户总体数据合并后建立模型的效果,国外的学者有过一些研究。大部分的实证研究表明,合并后建立的模型其精度往往会下降。
精度下降的原因可能来自两个方面:
由于各总体特征的差异较大影响了模型的预测能力;
各总体中保存的特征变量不尽一致,建模时往往只能使用各总体共有的部分。特征变量的减少,往往损失许多有用的信息。
方法2 Bootstrap方法应用于处理样本容量不足不同客户总体数据合并建模
将样本分成两部分,一部分是用于建模,另一部分用于检验。
这样做的主要目的是为了避免同时将一组样本既作为训练样本(用于建立模型)又作为检验样本从而对预测精度的估计过于乐观。在样本容量充足的情况下,这种做法是很有效的。但是在有些情况下,建模的样本数量并不是很充足。在这种情况下若还保留一部分样本进行检验显然不是一种有效的做法,这样会白白浪费掉保留样本中所包含的信息。
统计学中发展了多种方法来克服上述保留样本在样本容量不足时的缺陷,BootStrap方法是一种被证明行之有效的方法。
实际中的算法如下:
从经验分布F_n中有放回地抽取一个容量为n的样本(x_1,x_2,⋯,x_n)。通常称为BootStrap样本。
利用此样本计算θ的估计值,θ^*=θ(x_1,x_2,⋯,x_n)。通常称为BootStrap估计。
将过程(1),(2)重复K次,这样就得到K个BootStrap样本及K个BootStrap估计。
CDA学员免费下载查看报告全文:2026全球数智化人才指数报告【CDA数据科学研究院】.pdf
数据分析咨询请扫描二维码
若不方便扫码,搜微信号:CDAshujufenxi
在中介效应分析中,人口统计学变量(如年龄、性别、学历、收入、职业等)是常见的控制变量或调节变量,其处理方式直接影响分析结 ...
2026-04-29在SQL数据库实操中,日期数据的存储与显示是高频需求,而“数字日期”(如20240520、20241231、45321)是很多开发者、数据分析师 ...
2026-04-29 很多分析师在设计标签时思路清晰,但真到落地环节却面临“数据在手,不知如何转化为可用标签”的困境:或因加工方式选择不当 ...
2026-04-29在手游行业竞争日趋白热化的当下,“流量为王”早已升级为“留存为王”,而付费用户留存率更是衡量一款手游盈利能力、运营质量的 ...
2026-04-28在日常MySQL数据库运维与开发中,经常会遇到“同一台服务器上,两个不同数据库(以下简称“源库”“目标库”)的表数据需要保持 ...
2026-04-28 很多分析师每天和数据打交道,但当被问到“标签是什么”“标签和指标有什么区别”“标签体系如何设计”时,却常常答不上来。 ...
2026-04-28箱线图(Box Plot)作为一种经典的数据可视化工具,广泛应用于统计学、数据分析、科研实证等领域,核心价值在于直观呈现数据的集 ...
2026-04-27实证分析是社会科学、自然科学、经济管理等领域开展研究的核心范式,其核心逻辑是通过对多维度数据的收集、分析与解读,揭示变量 ...
2026-04-27 很多数据分析师精通Excel函数和数据透视表,但当被问到“数据从哪里来”“表和视图有什么区别”“数据库管理系统和SQL是什么 ...
2026-04-27在大数据技术飞速迭代、数字营销竞争日趋激烈的今天,“精准触达、高效转化、成本可控”已成为企业营销的核心诉求。传统广告投放 ...
2026-04-24在游戏行业竞争白热化的当下,用户流失已成为制约游戏生命周期、影响营收增长的核心痛点。据行业报告显示,2024年移动游戏平均次 ...
2026-04-24 很多业务负责人开会常说“我们要数据驱动”,最后却变成“看哪张报表数据多就用哪个”,往往因为缺乏一套结构性的方法去搭建 ...
2026-04-24在Power BI数据可视化分析中,切片器是连接用户与数据的核心交互工具,其核心价值在于帮助使用者快速筛选目标数据、聚焦分析重点 ...
2026-04-23以数为据,以析促优——数据分析结果指导临床技术改进的实践路径 临床技术是医疗服务的核心载体,其水平直接决定患者诊疗效果、 ...
2026-04-23很多数据分析师每天盯着GMV、DAU、转化率,但当被问到“哪些指标是所有企业都需要的”“哪些指标是因行业而异的”“北极星指标和 ...
2026-04-23近日,由 CDA 数据科学研究院重磅发布的《2026 全球数智化人才指数报告》,被中国教育科学研究院官方账号正式收录, ...
2026-04-22在数字化时代,客户每一次点击、浏览、下单、咨询等行为,都在传递其潜在需求与决策倾向——这些按时间顺序串联的行为轨迹,构成 ...
2026-04-22数据是数据分析、建模与业务决策的核心基石,而“数据清洗”作为数据预处理的核心环节,是打通数据从“原始杂乱”到“干净可用” ...
2026-04-22 很多数据分析师每天盯着GMV、转化率、DAU等数字看,但当被问到“什么是指标”“指标和维度有什么区别”“如何搭建一套完整的 ...
2026-04-22在数据分析与业务决策中,数据并非静止不变的数值,而是始终处于动态波动之中——股市收盘价的每日涨跌、企业月度销售额的起伏、 ...
2026-04-21