文献阅读 ——— Pre-train, Prompt, and Predict: A Systematic Survey of Prompting Methods in NLP

文章名称

Pre-train, Prompt, and Predict: A Systematic Survey of Prompting Methods in Natural Language Processing

文章动机

首先,这篇文章的编写的动机是为了总结NLP的第四范式Prompt Learning。说实话,在本人读完之后感觉这个范式确实挺厉害的。

文章框架

本篇文章的书写框架是,首先着重讲述了NLP研究领域所使用的范式的发展史,首先是从特征工程架构工程目标工程再到现在的新时代提示工程

并且在这个过程中重点讲述了这些工程的具体方法,以及过度的目的还有优缺点。

紧接着,文中回归重点。讲述有关于Prompt Learning的具体步骤。首先我们先看这个Prompt方法的处理范式——Pre-train、prompt、predict。因此,文中
  1. 首先讲的就是PLM,
  2. 然后是谈到Prompt engineering,
  3. 接着是Answer engineering,
  4. 然后是Muti-Prompt Engineering——就是对于原来的单个prompt的方法进行拓展形成一种能力更加强大的prompt方法,

你可能感兴趣的:(NLP,自然语言处理,人工智能)