※ 引述《celestialgod (天)》之铭言：
: [关键字]: sparklyr
: [出处]: http://spark.rstudio.com/index.html
: [重点摘要]:
: 烦请移驾到我的部落格观看：http://goo.gl/SSor3y
: 最近花了点时间研究Spark
: 终于研究到了一个段落
: 回来研究一下自己最爱的R
: 而且又看到rstudio释出了sparklyr就手痒想说试试看了
: 于是就有这篇心得了XD
: 只是我还没去测试machine learning相关的东西
: 就留给其他人慢慢赏玩了
感谢celestialgod大大 无私分享这个关于spark的套件
小弟目前着手研究这个套件,并搭配出处原文参考
但是在安装的时候发现了一些问题
例如说是
Error:
To run Spark on Windows you need a copy of Hadoop winutils.exe:
1. Download Hadoop winutils.exe from:
2. Copy winutils.exe to
C:\Users\XXXXXX
这个问题网络上问的人蛮多的,只要将winutils放入指定路径即可
但是衍生成别的问题 就找不到解法,想请教大大
问题如下:
> library(sparklyr)
> sc <- spark_connect(master = "local")
Error in start_shell(master = master, spark_home = spark_home, spark_version
= version, :
Failed to launch Spark shell. Ports file does not exist.
Path: C:\spark-2.0.0-bin-hadoop2.7\bin\spark-submit.cmd
Parameters: