当前位置:   article > 正文

第三章 3、4 语言模型及其平滑项处理_计算句子在unigram.,bigram,trigram下的概率

计算句子在unigram.,bigram,trigram下的概率

Noisy Channel Model

下面这个是贝叶斯公式。因为source是给定的输入,所以它的概率是常数,分母就忽略了。
在这里插入图片描述
例如:一直输入的英文,求翻译之后的中文。
在这里插入图片描述
在这里插入图片描述

语言模型

LM:深度学习模型,判断语义性。
在这里插入图片描述
回忆一下联合概率公式
在这里插入图片描述
在语料库中先找后面这一句话,找到之后,看后面接的是什么。看是否出现,求概率。
缺点:当这这句话很长的时候,不好找
在这里插入图片描述
改进:马尔科夫假设
unigram bigram trigram

本文内容由网友自发贡献,转载请注明出处:https://www.wpsshop.cn/w/你好赵伟/article/detail/397433
推荐阅读
相关标签
  

闽ICP备14008679号