分类深度学习下的文章

主要分享小余同学在学习深度学习遇到的问题和见解。

层级多标签分类怎么做？-以商品标题层级多标签分类为例

1、层次分类简介本项目提供通用场景下基于预训练模型微调的层次分类端到端应用方案，打通数据标注-模型训练-模型调优-模型压缩-预测部署全流程，有效缩短开发周...

2022 年 10 月 16 日

NLP深度学习训练时刷SOTA有哪些trick？

R-Drop：两次前向+KL loss约束Post Training: 在领域语料上用mlm进一步预训练EFL: 少样本下，把分类问题转为匹配问题，把输入...

2022 年 07 月 01 日

PyTorch显存机制是什么样的？今天来彻底分析一下。

我从研一开始学习NLP自然语言处理，经常使用PyTorch框架。一开始用的时候对于PyTorch的显存机制也是一知半解，连蒙带猜的，经常来知乎上来找答案。...

2022 年 06 月 28 日

《自然语言处理基于预训练模型的方法》- 第5章静态词向量预训练模型「学习笔记」

情感分类实战词表映射Vocabfrom collections import defaultdict # 词表映射 class Vocab: ...

2022 年 06 月 23 日

《自然语言处理基于预训练模型的方法》- 第4章静态词向量预训练模型「学习笔记」

简单的词向量预训练预训练任务基本任务就是根据上下文预测下一时刻词: $P\left(w_{t} \mid w_{1} w_{2} \ldots w_{t-...

2022 年 06 月 22 日