数据量不足如何合理增加?删除重复值能创建新数据吗?

数据量不足如何合理增加?删除重复值能创建新数据吗?

如何合理创建机器学习学习数据?

问题:

数据量不足时,如何尽量合理地增加数据?是否存在删除重复值创建新数据的方法?

回答 1:

对于数据量不足的情况,有以下处理方式:

  • 重采样:直接生成重复数据。
  • 过采样:除了重采样之外,还可以生成新数据,例如使用 SMOTE 算法或数据扩充。

回答 2:

问题中提到的 NUM1 和 NUM2 是否指同一数据?如果差异在于特征,需确保标签不变;如果差异在于数据本身,删除重复值并不会产生新数据。

重采样或过采样所得的数据仅适用于训练集,不得用于测试集,因为测试集需要真实数据。

分享:

参考一篇关于处理不平衡数据集的文章:https://www.cnblogs.com/wuliytTaotao/p/9308944.html

以上就是数据量不足如何合理增加?删除重复值能创建新数据吗?的详细内容,更多请关注其它相关文章!