Python Biagrams
一些英文单词更频繁地一起出现。例如 – Sky High(高空),do or die(孤注一掷),best performance(最佳表演),heavy rain(大雨)等等。因此,在文本文档中,我们可能需要识别出这样的单词配对,这有助于情感分析。首先,我们需要从现有的句子中生成这样的单词配对,并保持它们当前的顺序。这样的配对被称为Bigrams(双词)。Python中有一个双词功能,它作为NLTK库的一部分帮助我们生成这些配对。
示例
import nltk
word_data = "The best performance can bring in sky high success."
nltk_tokens = nltk.word_tokenize(word_data)
print(list(nltk.bigrams(nltk_tokens)))
运行上述程序之后,我们得到以下输出 –
[('The', 'best'), ('best', 'performance'), ('performance', 'can'), ('can', 'bring'),
('bring', 'in'), ('in', 'sky'), ('sky', 'high'), ('high', 'success'), ('success', '.')]
该结果可用于对给定文本中此类对队出现频率的统计结果。这将与文本主体中的描述的一般情感相关。