大学学习 自然语言理解全64讲

句法分析的任务是识别句子的句法结构。以局法树的形式表示的类型：1。短语结构分析：1。完整的句法分析：整个句子产生完整的分析树；2.局部句法分析：分析树名词短语、动词短语和分块2。依赖句法分析：目标：难以实现高准确性、高鲁棒性和高速自动句法分析过程：自然语言中有大量复杂的结构，基于CFG规则的歧义分析方法：线图分析方法CYK算法Earley（厄尔利）算法LR算法/Tomita算法-自上而下-自下而上的统计方法-基于PCFG的分析方法概率。上下文与语法无关：自下而上，自上而下，自下而上，自下而上，给出一组规则

 

复杂特征集的特点：

1.允许使用多个特征描述同一语言单位

2.从结构上看，复杂的特征集是一种嵌套结构，可以有效地表达复杂的短语或句子结构

3.特征名的定义及其相互关系具有明显的层次性，所有自然语言的结构都是层次性的，有利于语言的层次分析。

复杂的特征集易于操作，两个复杂的特征集可以通过统一的操作产生另一个复杂的特征集，这与句法分析中短语和句子的产生是一致的。

 

合一运算：

复杂特征集相容的定义

如果a，b不能拆分(都是原子)，如果a=b,则a合一b=a，否则a合一b=空集

 

统一运算的作用：合并原始特征信息，构建新的特征结构

检查

 

语言单位(如句子或短语等)负载的信息可以分布在每个组件中，每个组件只能负载部分信息。

通过一体化计算，在小成分组成大成分的过程中，有效成分负载的信息也可以同时传输或累积为大成分负载的信息。在一体化计算过程中，信息只会增加而不会减少。

句法和语义分析以统一为基本操作。不仅可以通过语义手段判断句子的合法性，还可以通过统一操作更自然地连接句子的句法结构和语义表达。

对于不同复杂特征的集合运算，结果运算的顺序是无关紧要的，集成的结果是相同的。这种集成运算的无序性很容易并行处理。 

现代计算语言学研究的重要方法之一是复杂特征集和统一运算的方法。

 

自然语言处理在某一阶段非常流行，并不意味着其他方法根本不好！！！

 

词汇功能语法：R.Kaplan和J.Bresnan提出

基本观点：

句子由两个相对独立的层次描述：

1.成分结构层次:描述句子成分的结构关系(名词短语、动词短语)

2.功能结构层次：描述句子主语、谓语和宾语之间的关系

 

要点：

1.突出词汇的作用：

LFG认为：

动词、形容词和一些名词在句子中的语法结构相当于数学逻辑中的谓词逻辑。

它们的意思决定了它们有什么论元

如果你知道谓词的意思，你就可以知道以谓词为中心的句子会出现什么样的词，它们的语法语义功能是什么。

 

名词谓语：鲁迅绍兴人

01 绪论（一）

02 绪论（二）

03 绪论（三）

04 数学基础(1)

05 数学基础(二)

06 数学基础(三)

07 数学基础(四)

08 数学基础(5)

09 NLP中的形式语言和自动机及其应用(1)

10 NLP中的形式语言和自动机及其应用(2)

11 NLP中的形式语言和自动机及其应用(3)

12 NLP中的形式语言和自动机及其应用(4)

13 形式语言和自动机及其在NLP中的应用(5)

14 形式语言和自动机及其在NLP中的应用(6)

15 语料库和语言知识库(1)

16 语料库和语言知识库(2)

17 语料库和语言知识库(3)

18 语料库和语言知识库(4)

19 语料库和语言知识库(5)

20 语言模型(1)

21 语言模型(2)

22 语言模型(3)

23 语言模型(4)

24 语言模型(5)

25 隐马尔柯夫模型(1)

26 隐马尔柯夫模型(2)

27 隐马尔柯夫模型(3)

28 隐马尔柯夫模型(4)

29 隐马尔柯夫模型(5)

30 隐马尔柯夫模型(6)

31 词法分析与词性标记(1)

32 词法分析和词性标注(二)

33 词法分析与词性标记(3)

34 词法分析与词性标记(4)

35 词法分析与词性标记(5)

36 语法理论(1)

37 语法理论(二)

38 语法理论(三)

39 语法理论(4)

40 句法分析(1)

41 句法分析(2)

42 句法分析(3)

43 句法分析(4)

44 句法分析(5)

45 句法分析(6)

46 句法分析(7)

47 句法分析(8)

48 句法分析(九)

49 句法分析(十)

50 句法分析(十一)

51 语义计算(1)

52 语义计算(2)

53 语义计算(3)

54 机器翻译(1)

55 机器翻译(2)

56 机器翻译(三)

57 机器翻译(4)

58 机器翻译(五)

59 机器翻译(6)

60 机器翻译(7)

61 机器翻译(8)

62 机器翻译(九)

63 机器翻译(十)

64 机器翻译(十一)