bert预训练,bert

从wordembedding到bert模型自然语言处理预训练技术发展史
bert深度双向预训练语言模型
第三部分:bert 的预训练比无预训练过程多学了什么?
训练bert
基于bert预训练模型的大规模不均衡样本文本分类问题的解决方案达观杯