使用BERT

Note

之前我们介绍过BERT,它是任务无关的。
本节具体介绍如何使用BERT来训练各种下游的自然语言处理的应用。

单文本分类

image

文本对回归或分类

image

文本标注

如词性标注。

image

问答系统

以斯坦福问答数据集为例进行说明,问题的答案是原文本的一段。这样的话问答系统就只需预测答案的开头和结尾。

image