sparklyr 相关问题

sparklyr是Apache Spark的另一个R接口

如何使用sparklyr添加jar?

当我尝试使用Rstudio和sparklyr使用此代码访问Hive表时:库(sparklyr)库(dplyr)Sys.setenv(SPARK_HOME =“/ usr / hdp / current / spark2-client”)#来自ambari spark2 configs。 ..

回答 2 投票 2

使用sparklyr和dplyr时获得不同的结果

刚才我开始学习使用引用sparklyr的sparklyr包我做了文档中写的内容。当使用以下代码延迟%group_by(tailnum)...

回答 1 投票 3

是否可以在Sparklyr中将ORC文件读取到Spark数据框?

我知道sparklyr有以下读取文件方法:spark_read_csv spark_read_parquet spark_read_json读取orc文件怎么样?这个图书馆是否支持它?我知道我可以使用阅读....

回答 1 投票 3

Sparklyr:如何将列表列分解为Spark表中自己的列?

我的问题与此处的问题类似,但我在实现答案时遇到问题,我无法在该帖子中发表评论。所以,我有一个包含嵌套数据的大型CSV文件,...

回答 1 投票 2

有没有办法用sparklyr处理嵌套数据?

在下面的示例中,我加载了一个镶木地板文件,其中包含元字段中地图对象的嵌套记录。 sparklyr似乎在处理这些方面做得很好。但是tidyr :: unnest会......

回答 4 投票 9

当数据集在sparklyr中时,为什么我不能对dplyr使用双冒号运算符?

一个可重复的例子(改编自@ forestfanjoe的答案):library(dplyr)library(sparklyr)sc

回答 1 投票 2

如何在R中使用sparklyr打开“GZ FILE”?

我想使用sparklyr包打开gz文件,因为我在R上使用Spark。我知道我可以使用read.delim2(gzfile(“filename.csv.gz”),sep =“,”,header = FALSE )打开gz文件,我可以用...

回答 1 投票 1

使用SparkR的Sparklyr:麻烦解析函数参数

我正在使用SparkR运行Sparklyr。当我尝试使用spark_read_csv()创建的数据表调用schema()函数时,我收到以下错误(以及select()和lapply上的类似错误(...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.