[问题] sparkR实作问题

楼主: tan800630 (天ㄦ)   2016-11-01 16:09:00
ctrl + y 可以删除一整行,请将不需要的内容删除
[问题类型]:
程式咨询(我想用R 做某件事情,但是我不知道要怎么用R 写出来)
[软件熟悉度]:
入门(写过其他程式,只是对语法不熟悉)
[问题叙述]:
各位前辈好,最近我想自学spark,因此昨天参照了
https://spark.apache.org/docs/latest/sparkr.html
网页中的步骤想自己玩玩看,但在creat dataframe时一直出现错误,
error code第一行如下
错误在invokeJava(isStatic = TRUE, className, methodName, ...) :
java.lang.reflect.InvocationTargetException
也稍微搜寻了是否有人遇到相似问题,依照类似的问题解答更新了java版本
以及重新install rJava套件但仍然出现相同状况,请各位大大解惑了,谢谢
[程式范例]:
code如见连结网址
http://pastie.org/10953656
[环境叙述]:
R version 3.1.2 (2014-10-31)
Platform: x86_64-w64-mingw32/x64 (64-bit)
locale:
[1] LC_COLLATE=Chinese (Traditional)_Taiwan.950
[2] LC_CTYPE=Chinese (Traditional)_Taiwan.950
[3] LC_MONETARY=Chinese (Traditional)_Taiwan.950
[4] LC_NUMERIC=C
[5] LC_TIME=Chinese (Traditional)_Taiwan.950
attached base packages:
[1] stats graphics grDevices utils datasets methods base
other attached packages:
[1] rJava_0.9-8 SparkR_2.0.1
[关键字]:
选择性,也许未来有用
楼主: tan800630 (天ㄦ)   2016-11-01 16:11:00
附上错误截图http://imgur.com/a/yzA6T
作者: celestialgod (天)   2016-11-01 20:35:00
spark session加上hive.metastore.warehouse.dir指向一个路径去放hive metastore的地方应该就可以了
楼主: tan800630 (天ㄦ)   2016-11-01 22:54:00
感谢楼上,我会试试看不过我原本以为用local的方式可以不用动到hadoop或hive
作者: celestialgod (天)   2016-11-01 22:58:00
这里的hive是spark原生的是不用安装hive就可以用的你只是需要给一个路径去放而已
楼主: tan800630 (天ㄦ)   2016-11-02 13:12:00
不知是否我的尝试有问题http://pastie.org/10954197仍然遇到相同状况呢 http://imgur.com/a/9FJ7k

Links booklink

Contact Us: admin [ a t ] ucptt.com