ALBERT 更小但是更慢?

ALBERT 更小但是更慢? 最近由于参加阅读理解比赛,所以大量测试各种模型,惊奇地发现原本现在阅读理解比赛中SOTA的模型居然是不起眼并且以小模型闻名的ALBERT。这让我对这个“小”模型产生了好奇。从而写一下这份的论文笔记。 ...

November 18, 2020 · 3 min · CheaSim