当前位置:   article > 正文

利用python实现词频统计_python词频统计

python词频统计

这是我们老师的作业 代码中都有注释

要求

词频统计软件:

1)从文本中读入数据:(文件的输入输出)
2)不区分大小写,去除特殊字符。
3)统计单词 例如:about :10 并统计总共多少单词
4)对单词排序。出现次数
5)输出词频最高的10个单词和次数
6)把统计结果存入文本


1.文件的读取,区分大小写,去除特殊字符

import re

def getword():
     # 读取文件
     f=open('read.txt','r',encoding='utf-8')
     # 将大写转化成小写
     word=f.read().lower()
     # 关闭文件
     f.close()
     #利用正则除去特殊字符   |符+
     list=re.split('s+|,+|.+|!+|:+|?+|;+|(+|)+|-+|_+|=+|++|“+|、+|/+|{+|}+|”+|:+|。+|“+|[+|]+|【+|】+|—+|%+|"+',word)
     # 遍历列表 去除列表中的空格
     i = 0
     while i < len(list):
          if list[i] == '&#
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
本文内容由网友自发贡献,转载请注明出处:https://www.wpsshop.cn/w/weixin_40725706/article/detail/384127
推荐阅读
相关标签
  

闽ICP备14008679号