利用Python实现词频统计(自然语言处理)

编译原理实验一:利用Python实现词频统计
利用Python实现词频统计(自然语言处理)_第1张图片
对类似的文档实现简单的词频统计
代码如下:

# -*- coding: utf-8 -*-
"""
Created on Fri Feb 21 14:16:28 2020

@author: lenovo
"""

import numpy as np
def  gettxt():
    txt=open("F:/学习文件/编译原理/实验一/Python实验1.txt",'r').read()
    txt=txt.lower()#先统一转化成小写
    for i in "!'#$%&()*+,-./:'<=>?@[\\]^-‘{|}~":
        txt=txt.replace(i," ")#将不规则的符号用空格替代
    return txt

Txt=gettxt()
words=Txt.split()#利用空格划分所有的单词
count={}
for i in words:
    count[i]=count.get(i,0)+1#统计每一个单词出现的次数
sort_count=sorted(count.items(),key=lambda v: v[1],reverse=True)#排序
Tjtxt=''
for i in sort_count:
    Tjtxt=Tjtxt+str(i[0])+' '+str(i[1])+'\n'
f=open("F:/学习文件/编译原理/实验一/词频统计结果.txt",'w')
f.write(Tjtxt)
f.close

最后结果如下:
利用Python实现词频统计(自然语言处理)_第2张图片
努力加油a啊,(o)/~

你可能感兴趣的:(Python,词频统计)