johnsnowlabs-spark-nlp 相关问题


要求失败:johnsnowlabs.nlp中的inputCols注释符错误或缺失

我正在将com.johnsnowlabs.nlp-2.2.2与spark-2.4.4结合使用来处理一些文章。在那些文章中,有一些很长的词我不感兴趣,这大大降低了POS标签的速度。我...

回答 1 投票 0

无法下载spark-nlp库提供的管道

我无法使用spark-nlp库提供的预定义管道“ recognize_entities_dl”,我尝试安装不同版本的pyspark,而spark-nlp库从...中导入sparknlp ...

回答 1 投票 0

Persist BERT模型作为pickle文件在磁盘上

我设法使BERT模型在johnsnowlabs-spark-nlp库上工作。我可以将“训练后的模型”保存在磁盘上,如下所示。拟合模型df_bert_trained = bert_pipeline.fit(textRDD)...

回答 1 投票 1

Spark-nlp:无法从pyspark中的磁盘加载预训练的识别实体模型

我设置了一个Spark集群,并希望集成spark-nlp来运行命名实体识别。我需要从磁盘访问模型,而不是在运行时从Internet下载模型。我有...

回答 1 投票 1

如何在sparknlp中为文本文件使用注释器

由于我是NLP的初学者,我开始使用johnsnowlabs中显示的功能进行一些练习,我正在使用数据砖中的SCALA,并且从...获得了很大的文本文件。] >>> < [

回答 1 投票 0

关于使用scala的spark nlp错误

我是spark-nlp的初学者,我通过遵循johnsnowlabs中的示例来学习它。我在数据块中使用SCALA。当我按照以下示例进行操作时,导入com.johnsnowlabs.nlp.base ....

回答 1 投票 0

使用Spark-NLP和Spark MLlib PySpark的文本分类

我想使用Spark-NLP构建文本分类模型以对文档进行预处理,并使用Spark MLlib的OnevsRestClassifier生成每个类标签的概率预测(我有55个...

回答 1 投票 0
推荐问题