- Python - 文本处理
- Python - 文本处理简介
- Python - 文本处理环境
- Python - 字符串不可变性
- Python - 对行进行分类
- Python - 重新格式化段落
- Python - 统计段落中token的数量
- Python - 二进制 ASCII 转换
- Python - 字符串作为文件
- Python - 向后读取文件
- Python - 过滤重复的单词
- Python - 从文本中提取电子邮件
- Python - 从文本中提取 URL
- Python - 漂亮打印
- Python - 文本处理状态机
- Python - 大写和翻译
- Python - 标记化
- Python - 删除停用词
- Python - 同义词和反义词
- Python - 文本翻译
- Python - 替换单词
- Python - 拼写检查
- Python - WordNet 接口
- Python - 语料库访问
- Python - 单词标记
- Python - 块和褶皱
- Python - 块分类
- Python - 文本分类
- Python - 双字组词
- Python - 处理 PDF
- Python - 处理 Word 文档
- Python - 读取 RSS 源
- Python - 情感分析
- Python - 搜索和匹配
- Python -文本整理
- Python - 文本换行
- Python - 频率分布
- Python - 文本摘要
- Python - 词干提取算法
- Python - 受限搜索
Python - 双字组词
某些英文单词经常一起出现。例如,Sky High、do or die、best performance、heavy rain 等。因此,在文本文件中,我们可能需要识别这样的单词对,这有助于进行情感分析。首先,我们需要从现有的句子中生成这样的词对,并保持它们当前的序列。这样的词对称为双字组词。Python 有一个双字组词函数作为 NLTK 库的一部分,它可以帮助我们生成这些词对。
示例
import nltk word_data = "The best performance can bring in sky high success." nltk_tokens = nltk.word_tokenize(word_data) print(list(nltk.bigrams(nltk_tokens)))
当我们运行上述程序时,我们将获得以下输出 −
[('The', 'best'), ('best', 'performance'), ('performance', 'can'), ('can', 'bring'), ('bring', 'in'), ('in', 'sky'), ('sky', 'high'), ('high', 'success'), ('success', '.')]
该结果可用于对给定文本中此类词对的频率进行统计调查。这将与文本正文中描述的一般情绪相关。
广告