当前位置:   article > 正文

Linux、windows系统中nltk库安装详解_nltk punkt

nltk punkt

1、nltk介绍

        NLTK(Natural Language Toolkit)是一个用于自然语言处理和文本分析的 Python 库。

        NLTK 支持众多自然语言处理任务,例如文本分类、语法分析、词性标注、文本语料库处理等。

2、nltk安装

pip install nltk

3、nltk_data安装

wget https://gitcode.net/mirrors/nltk/nltk_data/-/archive/gh-pages/nltk_data-gh-pages.zip

unzip nltk_data-gh-pages.zip

4、查看文件检索路径

新建py文件:

  1. import nltk
  2. nltk.data.find('.')

执行程序:

5、将词库放到搜索路径

将packages路径下的文件放到上面程序报错的任何一个路径下都可以。

cp -R nltk_data-gh-pages/packages/* /root/nltk_data/

注意:下面一步操作很重要!!!

找到 nltk-data 中 punkt 所在目录:

将punkt.zip压缩包进行加压,然后再将其删除即可!

6、nltk库测试

python示例代码:

  1. import nltk
  2. # 下载词性标注器
  3. #nltk.download('averaged_perceptron_tagger')
  4. text = "I love natural language processing"
  5. tokens = nltk.word_tokenize(text)
  6. tags = nltk.pos_tag(tokens)
  7. # 输出分类结果
  8. for word, pos in tags:
  9. print(word, pos)

参考博文:

Resource punkt not found.&&nltk.download()下载失败_punkt.zip 无法下载_IT之一小佬的博客-CSDN博客

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/不正经/article/detail/371824
推荐阅读
相关标签
  

闽ICP备14008679号