python实现K折交叉验证
作者：Jepson2017 发布时间：2023-06-08 18:49:01
标签：python,交叉验证
本文实例为大家分享了python实现K折交叉验证的具体代码，供大家参考，具体内容如下
用KNN算法训练iris数据，并使用K折交叉验证方法找出最优的K值
import numpy as np
from sklearn import datasets
from sklearn.neighbors import KNeighborsClassifier
from sklearn.model_selection import KFold # 主要用于K折交叉验证
# 导入iris数据集
iris = datasets.load_iris()
X = iris.data
y = iris.target
print(X.shape,y.shape)
# 定义想要搜索的K值，这里定义8个不同的值
ks = [1,3,5,7,9,11,13,15]
# 进行5折交叉验证，KFold返回的是每一折中训练数据和验证数据的index
# 假设数据样本为：[1,3,5,6,11,12,43,12,44,2],总共10个样本
# 则返回的kf的格式为（前面的是训练数据，后面的验证集）：
# [0,1,3,5,6,7,8,9],[2,4]
# [0,1,2,4,6,7,8,9],[3,5]
# [1,2,3,4,5,6,7,8],[0,9]
# [0,1,2,3,4,5,7,9],[6,8]
# [0,2,3,4,5,6,8,9],[1,7]
kf = KFold(n_splits = 5, random_state=2001, shuffle=True)
# 保存当前最好的k值和对应的准确率
best_k = ks[0]
best_score = 0
# 循环每一个k值
for k in ks:
curr_score = 0
for train_index,valid_index in kf.split(X):
# 每一折的训练以及计算准确率
clf = KNeighborsClassifier(n_neighbors=k)
clf.fit(X[train_index],y[train_index])
curr_score = curr_score + clf.score(X[valid_index],y[valid_index])
# 求一下5折的平均准确率
avg_score = curr_score/5
if avg_score > best_score:
best_k = k
best_score = avg_score
print("current best score is :％.2f" ％ best_score,"best k:％d" ％best_k)
print("after cross validation, the final best k is :％d" ％best_k)
来源：https://blog.csdn.net/d1240673769/article/details/103483845
0
投稿猜你喜欢
- 在多线程的使用时，为了线程的顺利进行，我们会使用函数来对某个线程进行暂停运行。在多线程中有两个函数可以实现sleep和wait，不过它们在使
指定变量类型有时您可能需要为变量指定类型，这可以通过 casting 来完成，Python 是一门面向对象的语言，因此它使用类来定义数据类型- 模块介绍：from ftplib import FTP ftp = FTP() #设置变量 ftp.set_debuglevel(2) #打
- 前言WHL文件是以Wheel格式保存的Python安装包，Wheel是Python发行版的标准内置包格式。在本质上是一个压缩包，WHL文件中
- MySQL注入的意图是接管网站数据库并窃取信息。常见的开源数据库，如MySQL，已经被许多网站开发人员用来储存重要信息，如密码，个人信息和管
- 本文实例为大家分享了python webp图片格式转化的具体代码，供大家参考，具体内容如下1、将本地的webp图片转换为jpg2、将下载的w
- <input id="workname" style="width: 200px" name=
- <!DOCTYPE HTML PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN&
- 本文实例讲述了GO语言延迟函数defer用法。分享给大家供大家参考。具体分析如下：defer 在声明时不会立即执行，而是在函数 return
- 前言： MySQL 主从架构应该是最常用的一组架构了。从库会实时同步主库传输来的数据，一般从库可以作为备用节点或作查询使用。其实不只是主库需
- 本文实例讲述了Python计算一个文件里字数的方法。分享给大家供大家参考。具体如下：这段程序从所给文件中找出字数来。from string
- 如下所示：import picklewith open(filename, 'rb') as f: datadict = p
- Series属性Series属性列表属性说明Series.index系列的索引（轴标签）Series.array系列或索引的数据Series
- 大家好，我是朱小五。大家如果看过我的书《快学Python：自动化办公轻松实战》，会发现Python操作PDF文档内容，主要围绕PDF文档的内
- 1.游戏画面1.1开始1.2射击怪物2.涉及知识点1.sprites2.pygame混音器3.图章 4.python
- 鉴于最近复习线性代数计算量较大，且1800答案常常忽略一些逆阵、行列式的计算答案，故用Python写出矩阵的简单计算程序，便于检查出错的步骤
- 概念节流 (throttle) 让一个函数不要执行的太频繁，减少执行过快的调用，叫节流去抖 (debounce) 去抖就是对于一定时间段的连
- 见下，把数字转成条形图、条形码的一个程序：<％Sub ShowChart(ByRef aValues,
- 本文实例讲述了Symfony2框架表单用法。分享给大家供大家参考，具体如下：对于一个Web开发者来说，处理HTML表单是一个最为普通又具挑战
- 一、Oracle分析函数简介：在日常的生产环境中，我们接触得比较多的是OLTP系统(即Online Transaction Process)
