stop-words 相关问题

停用词是在处理自然语言数据之前(或之后)过滤掉的词。

更快地删除Python中的停用词

我试图从一串文本中删除停用词:来自nltk.corpus import stopwords text ='hello bye the hi'text =''。join([text.split()中的单词,如果单词不在(停用词) 。话('...

回答 4 投票 28

单个学期的TF-IDF分数是否合并?

我正在阅读有关TF-IDF的内容,以便我可以从我的语料库中过滤掉常用词。在我看来,你得到每个单词,文档对的TF-IDF分数。你注意哪个分数?做......

回答 1 投票 0

在Gensim添加停用词

谢谢你的到来!我有一个关于附加停用词的快速问题。我有几个单词显示在我的数据集中,我正在跳跃,我可以将它们添加到gensims停止单词列表。我有 ...

回答 2 投票 0

(R)关于DocumentTermMatrix中的停用词

我有一些关于DocumentTermMatrix()及其停用词的问题。我键入如下,但无法得到我想要的结果。文本

回答 1 投票 0

使用spacy添加/删除停用词

使用spacy添加/删除停用词的最佳方法是什么?我正在使用token.is_stop函数,并希望对该集进行一些自定义更改。我在查看文档但找不到...

回答 4 投票 27

如何使用wordcloud STOPWORDS从txt文件中调用停用词

我正在从pdf文件中提取文字云。我可以从列表中提取停用词,但无法使用txt文件进行提取。我知道调用文件路径时出现问题。我成功了......

回答 1 投票 0

找出带有扩展字母的单词,并保留该字母的第一次出现

我有一个包含文本数据的数据框列。用重复的字母几乎没有单词。我想找到所有这些单词,然后将这些单词存储为字典中的键和正确的拼写...

回答 1 投票 0

pyspark:给定无效值的StopWordsRemover参数区域设置

我已经使用pyspark将几个文本文件加载到数据框中,将它们拆分为单词,现在想要使用StopWordsRemover过滤掉停用词。但是,当我想实例化...

回答 3 投票 1

使用re创建停用词列表

我想创建自己的禁用词列表。为了解决大小写问题,我想在列表中加入re:new_stopwords = ['food','eat','drink','order','time',r'[?M?m?c 2 C \ S]”, '服务' ...

回答 1 投票 -1

如何使用Python nltk.tokenize [duplicate]将包含停用词的短语视为单个标记

可以使用nltk.tokenize删除一些不必要的停用词来标记字符串。但是,如何将包含停用词的短语标记为单个标记,同时删除其他停用词?为......

回答 1 投票 3

在csv文件中写字典

我希望在执行代码期间将我在Python脚本中创建的所有词典中的值添加到CSV文件中,这样最后我会得到类似这样的内容:文件位于......

回答 1 投票 0

如果来自文件excel或csv的数据,如何使用stopword sastrawi库python

我不能使用excel文件中的数据来实现函数停用词我曾经尝试过这样的数据可以显示列hadist train ['hadis'] = train ['hadis']。apply(lambda x:“”。join (X....

回答 1 投票 1

如何使用python获取停用词列表

我如何才能获得法语中的停用词关键词列表,因为我的数据是法语。 STOP_WORDS = stopwords.words( '法国')

回答 1 投票 1

从字典的值中删除标点符号和停用词

我有一个这样的字典:{'47':'我','不','理解','不',''','生活','和','我','?','跟随|是','失去','帮助','我','stp','母亲','我','跟随','失去','你','...

回答 1 投票 1

字典理解:TypeError:'builtin_function_or_method'对象不可迭代

我有以下错误:回溯(最近一次调用最后一次):“CSV_dico.py”,第65行,in = {k:[elt.lower()表示el中的el如果elt.isalnum()如果elt不在stopWords中] for k,v in d_lemma.items]} ...

回答 1 投票 0

在csv文件中写字典

我希望在执行代码期间将我在Python脚本中创建的所有词典中的值添加到CSV文件中,这样最后我会得到类似这样的内容:文件位于......

回答 1 投票 0

使用主题模型,我们应该如何设置“停用词”列表?

有一些标准的停止列表,可以从语料库中删除“a of of not”之类的单词。但是,我想知道,停止名单是否会逐个变化?例如,我有10K篇文章......

回答 2 投票 4

MySQL全文索引下划线

我的MySQL全文索引有问题,它将下划线视为单词的一部分(为什么?dunno)。这是我在我的表中的字符串,VA _-_ Some_Album这是它的查询:SELECT * ...

回答 1 投票 1

如何从python中的列表列表中删除停用词

我有一组格式为列表的推文。我使用的代码用于删除停用词,但它不返回列表列表,而是返回一个大列表。我需要它作为列表...

回答 3 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.