gensim 相关问题

Gensim是一个免费的Python框架，旨在自动从文档中提取语义主题，尽可能高效（计算机方面）和无痛（人性化）。

我正在使用gensim寻找词汇外的OOV词的最相似词。类似这样： def get_word_vec(self, model, word): try: if word not in model.wv.vocab: ...。

python nlp gensim similarity oov

回答 1 投票 0

这里，best_model_lda是一个基于sklearn的LDA模型，我们试图找到这个模型的一致性得分... coherence_model_lda = CoherenceModel(model = best_lda_model,texts=data_vectorized,...)

scikit-learn gensim lda

回答 1 投票 1

我想再训练4个Word2vec模型，并对得到的嵌入矩阵进行平均。

我写了下面的代码，我用了Used spacy来限制tweets中的词的内容词，即名词、动词和形容词。将单词转化为小写，并将POS与......添加到一起。

python pandas nlp spacy gensim

回答 1 投票 0

不能从'smart_open'导入名称'open'。

我这样做，得到了这个错误：从gensim.models导入Word2Vec ImportError: cannot import name 'open' from 'smart_open' (C:\ProgramData\Anaconda3\lib/site-packages/smart_open/__init__.py) ...。

deep-learning nlp importerror gensim

回答 1 投票 0

并行化对训练word2vec模型没有好处。

我尝试使用gensim库中实现的word2vec进行并行。我注意到，我越是增加线程，训练就越慢，我不知道为什么。有什么需要设置的吗？I ...

parallel-processing nlp gensim word2vec

回答 1 投票 1

如何在gensim中删除停止符？

df_clean['message'] = df_clean['message'].apply(lambda x: gensim.parsing.preprocessing.remove_stopwords(x)) 我试着在数据帧的列 "message "上这样做，但我得到了错误。TypeError: decoding ...

python gensim

回答 2 投票 0

word2vec推荐系统KeyError: "单词'21883'不在词汇中"

代码对于包含500000+实例的数据集工作绝对正常，但每当我将数据集减少到50001000015000时，它就会抛出一个关键错误：单词 "***"不在词汇中。

gensim word2vec

回答 1 投票 0

使用gensim和FastText进行单词嵌入，对预训练的向量进行训练。

我试图加载Facebook fasttext crawl-300d-2M.vec的预训练向量文件，代码如下： from gensim.models.fasttext import load_facebook_model, load_facebook_vectors model_facebook =...

python gensim word-embedding fasttext

回答 1 投票 0

将字数组和向量数组组合以生成Gensim W2V模型

我有一个pickle文件中的单词数组，还有一个npy文件中的对应矢量数组，如何将它们组合起来以生成Gensim W2V模型？] >>

gensim word2vec embedding word-embedding

回答 1 投票 0

gensim word2vec词嵌入如何提取1个单词句子的训练单词对？

请参考下图（word2vec跳过图如何从输入句子中提取训练数据集-单词对的过程）。例如。 “我爱你。” ==> [[I，love），（I，you）]请问单词是什么...

nlp text-mining gensim word2vec word-embedding

回答 1 投票 0

提高DOC2VEC Gensim效率

我正在尝试在带标签的文档上训练Gensim Doc2Vec模型。我大约有4000000个文档。以下是我的代码：将pandas作为pd导入从nltk.corpus导入多处理从...