标签:jieba word 人物 水浒传 stopwords 出场 freq txt words
一.实验目标
(1) 掌握第三方库的安装和使用
(2) 掌握python内置模块的使用
(3) 了解jieba模块的使用
二.实验内容
import jieba
jieba.load_userdict('dict.txt')
stopwords = [line.strip() for line in open('stopwords.txt','r',encoding='utf-8').readlines()]
stopwords.append('')
article = open("shuihu60.txt",encoding = 'utf-8').read()
words = jieba.lcut(article)
word_freq = {}
for word in words:
if len(word) == 1 or (word in stopwords):
continue
else:
word_freq[word] = word_freq.get(word,0)+1
freq_word = []
for word, freq in word_freq.items():
freq_word.append((word, freq))
freq_word.sort(key = lambda x:x[1], reverse = True)
max_number = eval(input("显示前多少位高频词?"))
for word, freq in freq_word[:max_number]:
print(word,freq)
四.测试数据及结果
标签:jieba,word,人物,水浒传,stopwords,出场,freq,txt,words 来源: https://www.cnblogs.com/effortday/p/14990233.html
本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享; 2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关; 3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关; 4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除; 5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。