近红外(NIR) » 讨论区 » 分析百问 » 【转载】【求助】内部交叉检验和检验集检验的区别是什么

采购询价

点击提交代表您同意 《用户服务协议》 《隐私政策》

 
需要登录并加入本群才可以回复和发新贴

标题:[未解决]【转载】【求助】内部交叉检验和检验集检验的区别是什么

  [未解决]本主题悬赏 可用分 1  
iop[使用道具]
一星
Rank: 6Rank: 6


UID 119925
精华 1
积分 4038
帖子 7492
信誉分 102
可用分 12243
专家分 0
阅读权限 255
注册 2014-2-3
状态 离线
1
 

【转载】【求助】内部交叉检验和检验集检验的区别是什么

光谱分析的时候要把样本分为预测集(检验集)和校正集



内部交叉检验只需要校正集就可以了,那运用这种方法的时候预测集有什么用?



两种检验方法的区别是什么?或者说是之间的关系?
顶部
shuishui[使用道具]
一星
Rank: 6Rank: 6


UID 119322
精华 2
积分 4179
帖子 7650
信誉分 104
可用分 12516
专家分 0
阅读权限 255
注册 2014-1-8
状态 离线
2
 
用交叉验证建模的时候,不是没有预测集,而是它的预测集是不断变化的。

以交叉验证最常见的留一验证为例。你留的那个样品实际上就算是待在预测集中的。
顶部
teddy[使用道具]
二星
Rank: 7Rank: 7Rank: 7


UID 72177
精华 4
积分 12607
帖子 19262
信誉分 106
可用分 27960
专家分 10
阅读权限 255
注册 2011-9-5
状态 离线
3
 
这点我明白了,那请问这两种检验的关系呢?我是指RMSECV和RMSEP的关系



比如说在一阶导数的预处理下RMSECV最小,二阶导数的预处理下RMESP最小



那我最终选择那种预处理方法呢?



还有主因子数的选择是不是在内部交叉检验中确定的,和外部检验没有关系?
顶部
vbnm[使用道具]
一星
Rank: 6Rank: 6


UID 119927
精华 2
积分 4008
帖子 7368
信誉分 104
可用分 12070
专家分 0
阅读权限 255
注册 2014-2-3
状态 离线
4
 
不同处理方法之间的比较,我们一般以同样指标进行比较。就是SEC和SEC比,SEP和SEP比,不过一般比较稳健的模型,SEP和SEC基本上差不多。这两个参数只看一个就行。



主因子数得选定主要考虑是是否过拟合或者是否选的不够。这些是通过增加主成分数来查看SEC和线性度是否有明显差异来选定,



比如你刚开始选定4个主成分,然后你发现到5个主成分时,线性度和SEC有明显增加,那说明选4个是不够的。反之如果你发现增加主成分后,SEC只有微小变化,那你就得考虑是不是得到合适的主成分了。



      主成分是否合适是通过后期的验证可以发现的。过拟合的模型,一旦验证,你就会发现预测结果非常差。
顶部
艰苦奋斗[使用道具]
二星
Rank: 7Rank: 7Rank: 7


UID 71375
精华 5
积分 10524
帖子 16352
信誉分 106
可用分 24337
专家分 1
阅读权限 255
注册 2011-8-24
状态 离线
5
 
SEC明显增加?sec不是越小越好吗
顶部
风往尘香[使用道具]
二星
Rank: 7Rank: 7Rank: 7


UID 71377
精华 2
积分 6046
帖子 10106
信誉分 103
可用分 17361
专家分 0
阅读权限 255
注册 2011-8-24
状态 离线
6
 
抱歉,一时写快,写错了,线性度是明显增加,SEC是明显减小。反正是这两个是有明显的变化。SEC不是越小越好,是选最合适的SEC,太小的SEC有可能是过拟合的
顶部