错误：对象Stemmer不是org.apache.spark.mllib.feature包的成员

Question

使用Scala在Spark-shell中导入org.apache.spark.mllib.feature.Stemmer包会返回以下错误：：47：错误：对象Stemmer不是软件包org.apache.spark.mllib.feature的成员导入org.apache.spark.mllib.feature.Stemmer

我正在尝试使用以下词干：

val stemmer_product_title = new Stemmer()
  .setInputCol("ngrams")
  .setOutputCol("stemmed")
  .setLanguage("English")

这里ngram是1克转换后的文本。有人可以帮我吗？我将不胜感激。

Answer 1

将以下依赖项添加到您的pom.xml

<dependency>
    <groupId>com.github.master</groupId>
    <artifactId>spark-stemming_2.10</artifactId>
    <version>0.2.0</version>
</dependency>