作者tan800630 (天ㄦ)
看板R_Language
标题[问题] sparkR实作问题
时间Tue Nov 1 16:09:00 2016
ctrl + y 可以删除一整行,请将不需要的内容删除
[问题类型]:
程式谘询(我想用R 做某件事情,但是我不知道要怎麽用R 写出来)
[软体熟悉度]:
入门(写过其他程式,只是对语法不熟悉)
[问题叙述]:
各位前辈好,最近我想自学spark,因此昨天参照了
https://spark.apache.org/docs/latest/sparkr.html
网页中的步骤想自己玩玩看,但在creat dataframe时一直出现错误,
error code第一行如下
错误在invokeJava(isStatic = TRUE, className, methodName, ...) :
java.lang.reflect.InvocationTargetException
也稍微搜寻了是否有人遇到相似问题,依照类似的问题解答更新了java版本
以及重新install rJava套件但仍然出现相同状况,请各位大大解惑了,谢谢
[程式范例]:
code如见连结网址
http://pastie.org/10953656
[环境叙述]:
R version 3.1.2 (2014-10-31)
Platform: x86_64-w64-mingw32/x64 (64-bit)
locale:
[1] LC_COLLATE=Chinese (Traditional)_Taiwan.950
[2] LC_CTYPE=Chinese (Traditional)_Taiwan.950
[3] LC_MONETARY=Chinese (Traditional)_Taiwan.950
[4] LC_NUMERIC=C
[5] LC_TIME=Chinese (Traditional)_Taiwan.950
attached base packages:
[1] stats graphics grDevices utils datasets methods base
other attached packages:
[1] rJava_0.9-8 SparkR_2.0.1
[关键字]:
选择性,也许未来有用
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 111.83.225.137
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/R_Language/M.1477987745.A.764.html
2F:→ celestialgod: spark session加上hive.metastore.warehouse.dir 11/01 20:35
3F:→ celestialgod: 指向一个路径去放hive metastore的地方应该就可以了 11/01 20:35
4F:→ tan800630: 感谢楼上,我会试试看 11/01 22:54
5F:→ tan800630: 不过我原本以为用local的方式可以不用动到hadoop或hive 11/01 22:55
6F:→ celestialgod: 这里的hive是spark原生的 11/01 22:58
7F:→ celestialgod: 是不用安装hive就可以用的 11/01 22:58
8F:→ celestialgod: 你只是需要给一个路径去放而已 11/01 22:58