Python实现的统计文章单词次数功能示例
作者：_梧桐雨 发布时间：2022-03-15 11:38:07
标签：Python,统计,单词次数
本文实例讲述了Python实现的统计文章单词次数功能。分享给大家供大家参考，具体如下：
题目是这样的：你有一个目录，放了你一个月的日记，都是 txt，为了避免分词的问题，假设内容都是英文，请统计出你认为每篇日记最重要的词。
其实就是统计一篇文章出现最多的单词，但是要去除那些常见的连词、介词和谓语动词等，代码：
#coding=utf-8
import collections
import re
import os
useless_words=('the','a','an','and','by','of','in','on','is','to')
def get_important_word(file):
f=open(file)
word_counter=collections.Counter()
for line in f:
words=re.findall('\w+',line.lower())
word_counter.update(words)
f.close()
most_important_word=word_counter.most_common(1)[0][0]
count=2
while(most_important_word in useless_words):
most_important_word=word_counter.most_common(count)[count-1][0]
count+=1
num=word_counter.most_common(count)[count-1][1]
print 'the most important word in ％s is ％s,it appears ％d times'％(file,most_important_word,num)
if __name__=='__main__':
filepath='.'
for dirpath,dirname,dirfiles in os.walk(filepath):
for file in dirfiles:
if os.path.splitext(file)[1]=='.txt':
abspath=os.path.join(dirpath,file)
if os.path.isfile(abspath):
get_important_word(abspath)
学习笔记：
collections模块，是python内建的模块，提供了许多有用的集合类。我们这里用到了Counter类和其中的most_common()方法
PS：这里再为大家推荐2款相关统计工具供大家参考：
在线字数统计工具：
http://tools.jb51.net/code/zishutongji
在线字符统计与编辑工具：
http://tools.jb51.net/code/char_tongji
希望本文所述对大家Python程序设计有所帮助。
来源：https://blog.csdn.net/qq_20817327/article/details/77655399
0
投稿猜你喜欢
项目开发中文件的读写是必不可少的下面来简单介绍一下文件的读读文件，首先我们要有文件那我首先自己创建了一个文本文件password.txt内容- 说明C# 调用 Python 程序有多种方式，本篇用的是第 4 种：nuget的ironPython；用 c/c++ 调用python，再封
- 什么是标签平滑？在PyTorch中如何去使用它？在训练深度学习模型的过程中，过拟合和概率校准(probability calibration
- 1.文本string：通用字符串操作re：正则表达式操作difflib：差异计算工具textwrap：文本填充unicodedata：Uni
- create table test3(id int primary key not null identity(1,1),uname var
- 去除数字，特殊字符，只保留汉字import res = '1123*#$ 中abc国'str = re.sub('[
- 一、概念说明柱状图(bar chart)，从相同的横坐标出发，以不同的数值大小来设定柱子的高度，进而表示无序或有序的定性数据间某个定量指标的
- adodb.stream对象的方法/属性cancel 方法使用方法如下object.cancel说明：取消执行挂起的异步 execute 或
- 1. 代码讲解1.1 导库import os.pathfrom os import listdirimport numpy as npimp
- 静态页面由于其稳定性快速性，的确给SE、用户及站长带来了方便。但有时，需要记住用户的信息，如用户留下评论后，下一次再来，就要记住该用户的信息
- 看代码吧~import numpy as np a = np.array([[1,1,1],[2,2,2],[3,3,3], [4,4,4]
- MySQL DATE_FORMAT函数简介要将日期值格式化为特定格式，请使用DATE_FORMAT函数。 DATE_FORMAT函数的语法如
- Mysql迁移历史数据记录一下工作中由于业务需要以及系统的数据库模型变更，导致需要做一下历史数据迁移的解决办法需求陈述一共涉及到三张表，分别
- Jupyter Notebook 的快捷键使用前需要进行安装：pip install jupyter (前提是你已经安装好Python,并将
- 阅读器访问地址：http://easyrss.tk/，欢迎体验！阅读导览一、 概述 二、 设计的基本概念和原理 三、 设计方案四、 主要源代
- pandas返回缺失值位置有的时候我们可能需要获取一些缺失值的信息，因此我们需要获取这些缺失值在DataFrame中的位置。假如我们的Dat
- 本文实例讲述了Python基于正则表达式实现文件内容替换的方法。分享给大家供大家参考，具体如下：最近因为有一个项目需要从普通的服务器移植到S
- foreignkey是一种关联字段，将两张表进行关联的方式，我们在dodels.py里写入要生成的两张表：class Usergroup(m
- 使用 filters 实现 英文字母 转大写1、template :<di
- 本文实例为大家分享了vue+AI智能机器人回复的具体代码，供大家参考，具体内容如下操作步骤引入前端代码前端代码是参考github上的一个开源
