TextRank文本摘要算法

作者：我家自动化 | 2024-04-23 11:24:37

踩

文本摘要算法

摘要提取：对文本进行降维处理

内容参考：
https://www.bilibili.com/video/BV1UR4y1E7fa?spm_id_from=333.337.search-card.all.click

TextRank-文本摘要算法

TextRank基于图的排序算法,来源于谷歌的PageRank算法，把文本单元分割成若干组成单元（单词或句子）并建立图模型，利用投票机制对文本的重要成分进行排序，仅仅利用****单篇文档本身的信息就可以实现关键词提取，摘录。和LDA，HMM等模型不同，TextRank不需要对多篇文档进行训练。

基于TextRank的关键词提取

从一端给定的文本自动抽取有意义的若干词语或词组，TextRank算法是利用局部词汇之间的关系（共现窗口）对后续关键词进行排序，直接从文本本身抽取：

给定文本T按照完整句子进行分割
每个句子进行分词和词性处理，并过滤掉停用词，只保留指定词性的单词，保留后的词为候选关键词
构建候选关键词图，G=（V，E）其中V为节点集，由步骤2中生成的候选关键词组成，然后采用共现关系构造任意两点之间的边，两个节点之间存在的边仅当他们对应的词汇在

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/我家自动化/article/detail/473632