《从统计方法到大语言模型：NLP 的问题与方法演进》 - 石头开会

【摘要】《从统计方法到大语言模型：NLP 的问题与方法演进》 导言 今天的语言模型可以续写、翻译、摘要、回答问题，也可以根据少量示例改变输出形式。回看这段历史，容易把各项研究排成一条通向大模型的直线。然而，早期论文通常只解决一个具体困难：离散词串难以泛化，循环网络难以训练，固定向量难以承载长句，或者预训练模 阅读全文