n-grams_ngrams什么意思

作者：凡人多烦事01 | 2024-05-31 23:51:35

踩

ngrams什么意思

1.含义

假设有一个字符串s，那么该字符串的N-Grams就表示按长度 N 切分原词得到的词段，也就是s中所有长度为 N 的子字符串。

该模型基于这样一种假设，第N个词的出现只与前面N-1个词相关，而与其它任何词都不相关，整句的概率就是各个词出现概率的乘积。这些概率可以通过直接从语料中统计N个词同时出现的次数得到。常用的是二元的Bi-Gram和三元的Tri-Gram。
那么n-grams到底有什么应用呢？
在这里插入图片描述

在这里插入图片描述

假设采用是2-gram模型，那么：

在这里插入图片描述

这之后就可以应用到搜索引擎的推荐当中去了

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/凡人多烦事01/article/detail/654994