Mon - Fri : 09:00 - 17:00 上海静安区市北高新38号
访问手机版

扫码访问手机版

App下载

手机扫描下载App客户端

电话: 400 4567 8910
返回顶部
样本标签极不均衡,这种训练方式可行吗
未解决31
551 0
样本标签极不均衡,这种训练方式可行吗
Bushishu2021-08-29 13:34:40
用多任务学习进行分类,比如任务A是分类3种风格,如阳光、低调、"其他风格",任务B是分类3种款式,如牛仔裤、西裤、"其他款式"。
任一样本被标记了风格和款式两个标签,但是95%的样本标签都是 任一风格+其他裤子 或者 任一裤子+其他风格 这样的。讲得可能不是很清楚,下图帮助理解:
这样数据集中阳光和低调、牛仔裤和西裤之间数量差不多,但是"其他款式"和"其他风格"占比非常大。
由于这是多任务学习网络,可不可一次只训练一个分支,即把另一个分支每个神经元的权重调成0,或者把另一个分支冻结,来进行训练?
或者还有没有其他更好的办法?
补充:
  • 上面提到的数据集是个假想的例子,实际数据集中的标签要多得多。
  • 我有考虑过数据增强和调样本权重。
    一开始我用了数据集中较少标签(只有款式和面料),训练出来的模型的F1值大小排序约为:数据增强>样本调权>数据增强+样本调权。
    然后我打算使用更多标签(款式、面料、贴图、风格),并只用了数据增强,最后模型把他们全部都预测为了其他分类。

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Nexer提供广泛的专业服务和高度专业化。我们为私人和上市公司提供服务。我们拥有超过35年的经验。
  • 手机触屏版

  • 手机APP

  • 微信公众号