bert在下游中包括:
2.判断句子语义相似楿关等 QA问答对.
4.阅读理解:(包括多选提,从一段话中抄某个片段作为答案)
以上是基于fine tune就可以实现了
这些现在大部分都有实现demo了,本文主要实验下多項选择提的.
阅读理解有一种形式就是多项选择,现在又好多比赛是这种形式的.
bert论文中也对这种阅读理解给了测试,但是没有放出代码.
bert论文中也對这种阅读理解给了测试,但是没有放出代码.作者在github问答区说了大体思路,并决定不放出源码.本文主要照着作者的意思,进行复现.
完整的源码就茬如下地址
和作者paper 有点差距. 应该是超参和作者有区别.
主要是对关键的代码进行解释:
ending 这边是指的是可能选择项.