python词频统计怎么做
在 Python 中进行词频统计的步骤包括:导入 necessary 库。预处理文本,包括转换小写、删除标点符号和数字、分割文本。使用 Counter 类创建词频字典。根据单词频率对字典进行排序。打印排序后的词频列表。
Python 词频统计
如何使用 Python 进行词频统计
在 Python 中,进行词频统计是一种常见且有用的任务。它涉及计算文本中单词出现的频率,从而了解文本的主题和内容。以下是使用 Python 进行词频统计的分步指南:
步骤 1:导入必要的库
立即学习“Python免费学习笔记(深入)”;
import stringfrom collections import Counter
步骤 2:预处理文本
text = text.lower()text = text.translate(str.maketrans('', '', string.punctuation))words = text.split()
步骤 3:创建词频字典
使用 Counter 类创建词频字典,其中键为单词,值为单词出现的次数。
word_counts = Counter(words)
步骤 4:排序词频
根据单词频率对字典进行排序,从出现次数最多的单词开始。
sorted_word_counts = sorted(word_counts.items(), key=lambda x: x[1], reverse=True)
步骤 5:打印结果
打印排序后的词频列表。
for word, count in sorted_word_counts: print(f"{word}: {count}")
示例代码
text = "This is a sample text to demonstrate word frequency statistics. We will count how many times each word appears in the text."# 预处理和统计词频text = text.lower()text = text.translate(str.maketrans('', '', string.punctuation))words = text.split()word_counts = Counter(words)# 排序和打印词频sorted_word_counts = sorted(word_counts.items(), key=lambda x: x[1], reverse=True)for word, count in sorted_word_counts: print(f"{word}: {count}")