nlp 相关问题

自然语言处理(NLP)是人工智能的子领域,涉及从自然语言数据转换或提取有用信息。方法包括机器学习和基于规则的方法。

如何为 DL4J 导出带有 Ngram 权重的 Gensim Word2Vec 模型?

我对 nlp 很陌生。我正在尝试使用 dl4j 中的 gensim 训练的模型。我正在保存模型 w2v_model.wv.save_word2vec_format(“路径/到/w2v_model.bin”,二进制= True) 然后……

回答 1 投票 0

是否有可用于情感分析的新闻摘要或标题的带注释数据集(特别是“快乐”和“悲伤”)?

我想训练一个机器学习模型,将新闻标题或摘要分类为快乐或悲伤。为此,我需要真实且带注释的数据来训练我的模型。 我试着在谷歌上找到它......

回答 1 投票 0

Keras ValueError:无法重塑大小数组

我遇到了一个我无法理解的错误,使用 Keras 进行预测任务。 这是我的代码: 将 numpy 导入为 np 将 pandas 导入为 pd 从 sklearn.preprocessing 导入 MinMaxScaler 来自 keras.mod...

回答 0 投票 0

python 与 keras 和 pandas 预测股票价格

我编写了一个代码,其主要目标是通过伊朗股市 API 来预测股票。我用 AI 检查了它,但即使我更改了一些变量,我也会出现这种类型的错误,我实际上......

回答 0 投票 0

如何将 Spacy Model .pkl 文件转换为 .pt/.pth pytorch 支持的格式

我有 spacy 模型,用于 .pkl 格式的推理。 .pkl 文件的数据类型是 。我想让推理脚本在 GPU 上运行。我尝试使用不同的...

回答 1 投票 0

如何在keras中将词嵌入和softmax权重结合起来?

对于 NLP 和视觉语言问题中的各种神经网络架构来说,将初始词嵌入层的权重与输出 softmax 的权重联系起来是很常见的。通常这会产生...

回答 2 投票 0

如何对拥抱脸模型进行批量推理?

我想对 MarianMT 模型进行批量推理。这是代码: 从变压器导入 MarianTokenizer tokenizer = MarianTokenizer.from_pretrained('赫尔辛基-NLP/opus-mt-en-de') src_texts = [ &qu...

回答 1 投票 0

从 Penn Treebank 格式的文本中提取子句

说我有一句话: 吃完奶酪后,比尔去了杂货店。 在我的程序中,我得到以下输出: ---解析树--- (根 (S (SBAR(之后) (S (NP(...

回答 2 投票 0

BERTopic:“确保可迭代对象仅包含字符串”

我对Python还很陌生,所以这可能比我看起来更容易,但我被困住了。我正在尝试使用 BERTopic 并使用 PyLDAVis 可视化结果。我想将结果与

回答 1 投票 0

将拉丁语名称转译为西里尔字母的问题

简单地说,我有两个主要列“名字”,“姓氏”,用于存储名字和姓氏的数据,这些数据是拉丁文的。 我尝试根据音译类型使用不同的库,但是......

回答 1 投票 0

如何安装Detectron2

我正在安装布局解析器并点击此链接。使用以下软件包没有遇到任何问题。 pip 安装布局解析器 pip install "layoutparser[effdet]" 点安装

回答 3 投票 0

Stanford Stanza 有时会将一个句子分成两个句子

我正在使用节1.6.1。我一直在尝试 Stanza 的选区解析器。 在某些情况下,它将一个句子分成 2 个 Sentence 对象。例如,采用这句话:拉起字段...

回答 1 投票 0

向 Thinc 模型添加线性层示例 - 通过模型架构了解数据维度

尝试了解使用 Spacy 训练的模型的内部运作原理,Thinc 模型就是这样。查看本教程,我正在修改模型以查看哪些内容会损坏以及哪些内容有效。而不是标记,...

回答 1 投票 0

使用本地保存的SetFit模型

我在本地保存了SetFit模型,现在我想使用它来进行预测(用于模型部署),我尝试了以下代码: 从 setfit 导入 SetFitModel 模型 = SetFitModel.from_pretrained(&

回答 1 投票 0

加载 en_core_web_sm 会导致 AttributeError:模块“transformers”没有属性“BertTokenizerFast”

我(编程和任何与电脑相关的初学者)不知道如何解决以下问题: 我安装了 spacy 3.7.2,包括 en_core_web_sm。运行代码 nlp = spacy.load("

回答 1 投票 0

如何正确提示Transformer模型的解码器?

我正在使用拥抱脸部变形金刚。我有一个预训练的编码器 + 解码器模型 (Pegasus),并且想要按照本文所述对其进行微调。 具体来说,他们使用以下过程: 在...

回答 1 投票 0

为 Bert 截断中间的文本

我正在学习 Bert,它只处理少于 512 个标记的文本,并且遇到了这个答案,它说在中间截断文本(而不是在开头或结尾......

回答 1 投票 0

Spacy 导入错误:无法从“spacy.lang.char_classes”导入名称“COMBINING_DIACRITICS”

当我尝试使用 import spacy 导入 NLP 库“Spacy”时,出现以下错误: ImportError:无法从“spacy.lang.char_classes”导入名称“COMBINING_DIACRITICS” 这是我的

回答 1 投票 0

使用聊天模型时会向 llm 发送什么?

我对如何组合多个消息并将其发送到大型语言模型(例如 ChatOpenAI)感到困惑。 从 langchain_core.prompts 导入 ChatPromptTemplate 模板=聊天提示模板。

回答 1 投票 0

From_pretrained 未正确加载自定义微调模型“编码器权重未与解码器绑定”

在 Google Colab 中,我使用 Hugging Face 转换器库加载了 BERT 模型,然后使用 Seq2SeqTrainer 对其进行了微调。然后我使用 model.save_pretra 将此模型保存到我的 Google 云端硬盘...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.