首页
学习
活动
专区
工具
TVP
发布

模型评价指标—KS

一、详细介绍KS 1 什么是KS KS(Kolmogorov-Smirnov):好坏样本之间累计分布的差值(最大值),用于评估模型的风险区分能力。...=Series(ksds.index) ks_index=ks_index.quantile(q=qe) ks_index=np.ceil(ks_index).astype(int)...[ksds.ks.idxmax()] print('ks_value is '+ str(np.round(ks_value,4))+' + at pop = '+ str(np.round(ks_pop...得到结果如下: ks_value is 0.354 + at pop = 0.3002 ? ? 三、如何评价KS 我们计算出了模型的KS,那么多少的KS值,模型才是可以使用的?...根据行业内的规范,一般KS值要大于0.2才是一个可用的模型,且KS值越大模型效果越好。 但是,KS值过高,需核验模型是否使用未来变量,要谨慎使用。 具体KS值对应的模型区别能力见下表: ?

4.6K20
您找到你想要的搜索结果了吗?
是的
没有找到

风控ML | 风控建模的KS

我将会从下面几个方面来展开讲解一下KSKS的概念 KS的生成逻辑 KS的效果应用 KS的实现 01 KS的概念 KS的全称叫“Kolmogorov-Smirnov“,我知道的是苏联数学家提出来的一个检验方法...02 KS的生成逻辑 KS的生成逻辑公式也是十分简单: 好样本累计占比坏样本累计占比 在风控领域,我们在计算KS前一般会根据我们认为的“正态分布原则”进行分箱,一般来说分成了10份,然后再进行KS的计算...具体的可以看下面的Demo: 我们将数据进行可视化,就可以得到经常看到的KS曲线图,并且从表格or曲线图中可以看到这个模型的KS是0.43。...03 KS的效果应用 KS的值域在0-1之间,一般来说KS是越大越有区分度的,但在风控领域并不是越大越好,到底KS值与风控模型可用性的关系如何,可看下表: 004 KS的实现 首先我们来对上面展示的例子进行...今天我们就先了解清楚一下KS就可以了。

4.2K30

【Python数据挖掘】应用toad包中的KS_bucket函数统计好坏样本率、KS

本文和你一起探索数据挖掘常用的函数toad.metrics.KS_bucket。...具体语句如下: help(toad.metrics.KS_bucket) 得到结果如下: Help on function KS_bucket in module toad.metrics: KS_bucket...四、应用KS_bucket函数计算变量的KS值 1 等频分割 接着,调用toad库下的KS_bucket函数,设置10等分等频分箱,进行数据统计分析,语句如下: d1=toad.metrics.KS_bucket...ks列统计对应分箱中累计好样本率和累计坏样本率的差值。详细的KS原理可以参考本公众号文章:模型评价指标—KS。...五、循环计算所有变量的KS值 最后,挑选需要统计KS值的变量,先展示全体变量,语句如下: columns = list(date.columns) columns 得到结果: ['input_time'

77410

KS检验及其在机器学习中的应用

KS检验及其在机器学习中的应用 什么是KS检验 Kolmogorov–Smirnov 检验,简称KS检验,是统计学中的一种非参数假设检验,用来检测单样本是否服从某一分布,或者两样本是否服从相同分布。...我们有假设:为此,我们构造KS统计量: 如下图,经验分布函数与目标分布的累积分布函数的最大差值就是我们要求的KS统计量: ?...image.png 两样本的KS检验 用同样的思想,我们可以检验「两个样本是否服从同一分布」,此时KS统计量为两样本的经验分布函数的最大差值 ?...ks_2samp(data1, data2) Ks_2sampResult(statistic=0.9219219219219219, pvalue=0.0) 这里KS统计量甚至超过了0.9,一般来说,...KS统计量超过0.6,就说明模型的分类能力比较强了。

2.7K20

LinuxLinux文件

Linux文件操作 Linux中,一切皆文件(网络设备除外)。 硬件设备也“是”文件,通过文件来使用设备。 目录(文件夹)也是一种文件。...boot:这里存放的是启动Linux时使用的一些核心文件,包括一些连接文件和镜像文件。...deb:deb是Device(设备)的缩写,该目录下存放的是Linux的外部设备,在Linux中访问设备的方式和访问文件的方式是相同的。...tmp:用来存放一些临时文件 media:Linux系统会自动识别一些设备,例如U盘、光驱等,当识别后,Linux会把识别的设备挂载到这个目录下。...mnt:临时挂载其他文件。 proc:包含了进程的相关信息。 ---- Linux文件的操作方式 文件描述符fd fd是一个大于等于0的整数。

39.6K30

linux 移动 文件,linux移动文件命令

linux移动文件命令 mv命令 功能:为文件或目录改名或将文件由一个目录移入另一个目录中。该命令如同DOS下的ren和move的组合。...语法:mv [选项] 源文件或目录 目标文件或目录 说明: 视mv命令中第二个参数类型的不同(是目标文件还是目标目录),mv命令将文件重命名或将其移至一个新的目录中。...当第二个参数类型是文件时,mv命令完成文件重命名,此时,源文件只能有一个(也可以是源目录名),它将所给的源文件或目录重命名为给定的目标文件名。...当第二个参数是已存在的目录名称时,源文件或目录参数可以有多个,mv命令将各参数指定的源文件均移至目标目录中。在跨文件系统移动文件时,mv先拷贝,再将原有文件删除,而链至该文件的链接也将丢失。...例2:将文件wch.txt重命名为wjz.doc$ mv wch.txt wjz.doc 相关视频教程推荐:《Linux教程》 版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。

21.1K40

LinuxLinux文件IO

例如: fwrite、fread、fopen、fclose、fseek、fflush ---- 文件系统接口 文件系统——一种把数据组织成文件和目录的存储方式,提供了基于文件的存取接口,并通过文件权限控制访问...文件系统缓存 主存(通常是DRAM)的一块区域用来缓存文件系统的内容,包含各种数据和元数据。...---- O_SYNC 缓存同步 为了保证磁盘系统与缓冲区内容一致,Linux系统提供了sync,fsync,fdatasync三个函数。...fsync——将fd对应文件的块缓冲区立即写入磁盘,并等待实际写磁盘操作结束返回。 fdatasync——类似fsync,但只影响文件的数据部分。而除数据外,fsync还会同步更新文件属性。...---- Linux文件IO流程图 内核中会有一个线程,不断地将高速页缓冲区中的数据写入到物理磁盘中。

28.6K30

Linux文件文件

对于文件的操作而言,“锁定”操作是对文件(尤其是对共享文件)的一种高级的文件操作。...当某进程在更新文件内数据时,期望某种机制能防止多个进程同时更新文件从而导致数据丢失,或者防止文件内容在未更新完毕时被读取并引发后续问题,这种机制就是“文件锁”。...在Linux系统中,通常采用“文件锁”的方式,当某个进程独占资源的时候,该资源被锁定,其他进程无法访问,这样就解决了共享资源的竞争问题。 文件锁包括建议性锁(又名“协同锁”)和强制性锁两种。...建议性锁要求每个相关进程访问文件的时候检查是否已经有锁存在并尊重当前的锁。一般情况下不建议使用建议性锁,因为无法保证每个进程都能自动检测是否有锁,Linux内核与系统总体上都坚持不使用建议性锁。...在Linux内核提供的系统调用中,实现文件上锁的函数有lockf()和fcntl(),其中lockf()用于对文件加建议性锁,这里不再讲解。fcntl()函数既可以加建议性锁,也可以加强制性锁。

9.3K20

Linux文件

Linux下,一切皆文件。这是我们嵌入式Linux开发与应用这门课的老师经常挂在嘴边的一句话。足以体现出在Linux操作系统中,对于一切资源的管理都是对文件的操作。...Linux系统中每一个分区都是一个文件系统,都有自己的目录层次。Linux会将这些在不同分区的,单独的文件系统按一定的方式形成一个系统的总目录层次结构。...目录在Linux下也是文件,称为目录文件。目录文件的内容是该目录的目录项,目录项是该目录下的文件和目录相关的信息。...Linux采用的是标准的目录结构——树形结构(B树家族) Linux既然采用了树形结构的目录形式,整个OS只有一棵文件树,这样方便OS对文件进行统一管理。...Linux文件分类: 普通文件:用户和OS的数据,程序等信息文件 目录文件Linux文件系统将文件索引节点号和文件名同时保存在目录中,所以目录就是一张表。

6.8K20

【自用】KS极速版sig3接口搭建

目录 前言 准备工具: 教程开始 ①安装KS极速版 ②重启模拟器 ③重启模拟器 ④Windows端 ⑤浏览器访问 免责声明: ---- 前言 提示:仅用作学习,个人感觉已经喂饭了 个人主页:@MIKE...下载下方两个文件 1.zip 密码:ai3o 2.zip密码:9qqu ---- 3 模拟器端:   adb工具:自己去下载,安装和配置(这无法上传)   雷电模拟器:下载地址:https...utm_source=ydsjxy 教程开始 ①安装KS极速版 打开模拟器,双击KS极速版apk,安装KS极速版,到设置–>其他设置,打开ROOT和ADB调试。...②重启模拟器 ③重启模拟器 打开KS极速版,再打开adb工具,先用adb工具连接模拟器,输入 adb devices 找到查看设备 再输入 adb forward tcp:27042 tcp...:27042 进行端口映射 输入 adb -s emulator-5554 shell 连接 打开电脑端的共享文件夹,把frida-server 放进去,回到shell,进入到共享文件夹,输入

87120

Linux文件文件IO

这是我们嵌入式Linux开发与应用这门课的老师经常挂在嘴边的一句话。足以体现出在Linux操作系统中,对于一切资源的管理都是对文件的操作。...Linux系统中每一个分区都是一个文件系统,都有自己的目录层次。Linux会将这些在不同分区的,单独的文件系统按一定的方式形成一个系统的总目录层次结构。...Linux采用的是标准的目录结构——树形结构(B树家族) Linux既然采用了树形结构的目录形式,整个OS只有一棵文件树,这样方便OS对文件进行统一管理。...Linux文件分类: 普通文件:用户和OS的数据,程序等信息文件 目录文件Linux文件系统将文件索引节点号和文件名同时保存在目录中,所以目录就是一张表。...Linux文件描述符 在Linux下当一个进程打开文件的时候,OS会返回相应的文件描述符,程序为了处理该文件必须使用这个文件描述符。文件描述符是一个正整数。

3.2K20

linux下移动文件命令_linux怎么移动文件

linux 中移动文件Linux中移动文件看似比较简单,但是可用的选项却比大多数人想象的要多。...实际上,文件在移动时会保留其权限,因为移动文件不会更改或重新创建它。 文件和目录索引节点从不暗示继承,而是由文件系统本身决定的。...发生这种情况是因为必须将新数据写入新文件系统。 因此,在Linux中,移动和重命名文件的操作实际上是相同的操作。...这也是在Linux上移动文件的第一种也是最直观的方法。 如果您习惯了一般的桌面体验,那么您可能已经知道如何在硬盘驱动器上移动文件。...翻译自: https://opensource.com/article/19/8/moving-files-linux-depth linux 中移动文件 版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人

17.4K20
领券