[问题] SparkR rJava 安装

楼主: pk790127 (<>)   2016-07-23 23:23:42
ctrl + y 可以删除一整行,请将不需要的内容删除
文章分类提示:
- 问题: 我想使用R里面的SparkR这个套件,不论是windos或是linux系统
[问题类型]:
实验室想要使用Hadoop或是Spark平行式的运算方式提升计算功能,主要研究Spark的方式
已查询过有SparkR的套件,但是怎么都装不起来,不论是linux 或是 windos
[软件熟悉度]:
请把以下不需要的部份删除
入门(写过其他程式,只是对语法不熟悉)
[问题叙述]:
请简略描述你所要做的事情,或是这个程式的目的
linux: 已将R 与 Rstudio scala spark 灌好,碰到
'devtools’&"rJava" is not available (for R version 3.2.2)这种类似的问题
导致后面无法进行 (参考对岸或是外国教学网站)
Windos: 主要是参考:
https://www.youtube.com/watch?v=oG0HZogxEUc
这个网站的教学,但是到了install_github后面将SparkR套件载下来就出错了!
还是我漏装了一些东西呢?
想请问有人有使用过sparkR这个套件 或是有更详细的安装教学网站(原文也可以)
能提供我参考吗 谢谢
作者: celestialgod (天)   2016-07-24 17:59:00
直接下载spark的pre-build然后把.libPath指到spark-bin/R/lib就可以正常library(SparkR)了github上面那个已经是之前的SparkR版本可以参考这个http://0rz.tw/RBda3不过windows上还要去下载winutils才行跑linux的话 我还没试过(摊手
楼主: pk790127 (<>)   2016-07-24 19:35:00
其实celes大的网址我也有找到..刚刚试的时候原来是资料夹 多弄了第二层,现在sparkR已经安装好了 谢谢可是想请问 winutils 载下来要放在哪? 这是hadoop吧?是他的分布式资料系统吗? (HDFS) 谢谢

Links booklink

Contact Us: admin [ a t ] ucptt.com