5折交叉验证交叉验证可以提高准确性嘛?

5折交叉验证  时间:2022-02-12  阅读:()

交叉验证可以提高准确性嘛?

最近在做文本分类,遇到了一些问题,想问问大家有没有好的方法。为了节省时间,我只采取了部分数据来跑算法(全部数据跑了之后的结果和这个差不多)训练集:4837 documents 测试集:2074 documents 样本比例:正样本:负样本 = 1:3 预测结果中,有的算法在正样本中预测的精确率还行(0.95-1.00之间),但是召回率非常差,通常只有0.01和0.02左右,KNeighbors和DecisionTree的精确率和召回率都是0,只有NaiveBayes和BernoulliNB的PR和Recall比较平均,但是也没有到0.8。问题:我查了一下那些召回率较低(0.01)的算法,475个样本中(正样本),实际上只有5个被预测正确了的,但是具体原因没有查出来。我想请问一下:1.召回率低是因为样本极度不平衡造成的吗?(虽然我认为1:3的比例不算极度不平衡。)2.在这种样本不平衡的问题上,有没有什么好的方法可以提高召回率?我试过SMOTE方法(过采样和欠采样都有试过),但对于我的数据集并没有什么好的效果,不止到有没有有什么好的方法可以解决这个问题?!添加评论 分享查看全部 11 个回答 0赞同反对,不会显示你的姓名 Elvin 全是细枝末节,做一个乐于分享的人两个问题一并回答一下,根据你的描述,我觉得问题应该不是出在正负样本比上,1比3这个比例不但不是非常不均衡,相反在我看来已经是非常均衡了。以前做比赛有处理过正负比1比10000的数据,我觉得这才叫不平衡,才需要使用类似上采样,下采样,以及SMOTE算法(都用过),而且这样的情况下recall,F1等指标的提升是显著的。我觉得正负比例在1:1至1:100间差别都不会太大,需要根据具体问题做离线交叉验证去找到最好的比例。所以我建议你不用再纠结正负样本比的问题,可以再回头看一看你的数据集,一方面看一看代码是否有误?数据集是否太小?(总觉得你的数据集太小,而且测试集相对于训练集太大)另外训练集,测试集的划分是否正确?或者重新划分一下训练测试集做一下交叉验证看一看各项指标再具体研究。

NameCheap优惠活动 新注册域名38元

今天上午有网友在群里聊到是不是有新注册域名的海外域名商家的优惠活动。如果我们并非一定要在国外注册域名的话,最近年中促销期间,国内的服务商优惠力度还是比较大的,以前我们可能较多选择海外域名商家注册域名在于海外商家便宜,如今这几年国内的商家价格也不贵的。比如在前一段时间有分享到几个商家的年中活动:1、DNSPOD域名欢购活动 - 提供域名抢购活动、DNS解析折扣、SSL证书活动2、难得再次关注新网商家...

RackNerd新上圣何塞、芝加哥、达拉斯、亚特兰大INTEL系列,$9.49/年

racknerd怎么样?racknerd商家最近促销三款美国便宜vps,最低只需要9.49美元,可以选择美国圣何塞、西雅图、纽约和芝加哥机房。RackNerd是一家成立于2019年的美国高性价比服务器商家,主要从事美国和荷兰数据中心的便宜vps、独立服务器销售!支持中文工单、支持支付宝和微信以及PayPal付款购买!点击直达:racknerd官方网站INTEL系列可选机房:加利福尼亚州圣何塞、芝加...

[6.18]IMIDC:香港/台湾服务器月付30美元起,日本/俄罗斯服务器月付49美元起

IMIDC发布了6.18大促销活动,针对香港、台湾、日本和莫斯科独立服务器提供特别优惠价格最低月付30美元起。IMIDC名为彩虹数据(Rainbow Cloud),是一家香港本土运营商,全线产品自营,自有IP网络资源等,提供的产品包括VPS主机、独立服务器、站群独立服务器等,数据中心区域包括香港、日本、台湾、美国和南非等地机房,CN2网络直连到中国大陆。香港服务器   $39/...

5折交叉验证为你推荐
hotmail com@hotmail.com是哪个国家的邮箱虚拟主机cdn章鱼空间 二代虚拟主机怎么样 ?真的做到防御攻击 CDN加速吗云虚拟主机流量虚拟主机流量如何计算?1元免备案虚拟主机百度香港云虚拟主机速度快吗?小站每天访问500左右,dz 的可以做吗,稳定性如何?虚拟主机能怎么玩虚拟机怎么用越明白越好阿里免费虚拟主机阿里免费虚拟主机可以安装wordpress吗云服务器云虚拟主机云虚拟主机和云服务器哪个好?美橙互联虚拟主机美橙互联怎么样,美橙互联云主机怎么样,美橙互联建站之星怎么样虚拟主机搭建网站虚拟主机技术通过什么来架设网站上海千兆虚拟主机上海贝尔I-120E(WO-27s)这款是千兆猫吗
游戏服务器租用 主机测评网 美元争夺战 idc测评网 主机屋免费空间 天猫双十一秒杀 ssh帐号 私有云存储 免费个人网站申请 圣诞促销 idc资讯 香港新世界中心 shopex主机 电信网络测速器 德讯 网页加速 免费php空间 后门 服务器硬件配置 mteam 更多