自然语言处理概念及发展_国外 文本分类 研究 阶段

自然语言处理( Natural Language Processing ，简称 NLP )是计算机科学领域以及人工智能领域的一个重要的研究方向，它研究用计算机来处理、理解以及运用人类语言(如中文、英文等)，达到人与计算机之间进行有效通讯。

在一般情况下，用户可能不熟悉机器语言，所以自然语言处理技术可以帮助这样的用户使用自然语言和机器交流。从建模的角度看，为了方便计算机处理，自然语言可以被定义为一组规则或符号的集合，我们组合集合中的符号来传递各种信息。

自然语言处理研究表示语言能力、语言应用的模型，通过建立计算机框架来实现这样的语言模型，并且不断完善这样的语言模型，还需要根据该语言模型来设计各种实用的系统，并且探讨这些实用技术的评测技术。

从自然语言的角度出发，如图1所示， NLP 基本可以分为两个部分：自然语言理解以及自然语言生成。

其中，自然语言理解是个综合的系统工程，它包含很多细分学科：

• 代表声音的音系学；
• 代表构词法的词态学；
• 代表语句结构的句法学；
• 代表理解的语义句法学和语用学。

自然语言生成则从结构化数据中以读取的方式自动生成文本。该过程主要包含三个阶段:</