作者pk790127 (<>)
看板R_Language
标题[问题] SprkR rJava 安装
时间Sat Jul 23 23:23:42 2016
ctrl + y 可以删除一整行，请将不需要的内容删除
文章分类提示:
- 问题: 我想使用R里面的SparkR这个套件,不论是windos或是linux系统
[问题类型]:
实验室想要使用Hadoop或是Spark平行式的运算方式提升计算功能,主要研究Spark的方式
已查询过有SparkR的套件,但是怎麽都装不起来,不论是linux 或是 windos
[软体熟悉度]:
请把以下不需要的部份删除
入门(写过其他程式，只是对语法不熟悉)
[问题叙述]:
请简略描述你所要做的事情，或是这个程式的目的
linux: 已将R 与 Rstudio scala spark 灌好,碰到
'devtools’&"rJava" is not available (for R version 3.2.2)这种类似的问题
导致後面无法进行 (参考对岸或是外国教学网站)
Windos: 主要是参考:
https://www.youtube.com/watch?v=oG0HZogxEUc
这个网站的教学,但是到了install_github後面将SparkR套件载下来就出错了!
还是我漏装了一些东西呢?
想请问有人有使用过sparkR这个套件 或是有更详细的安装教学网站(原文也可以)
能提供我参考吗 谢谢
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 140.116.86.109
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/R_Language/M.1469287424.A.FC6.html
1F：→ celestialgod: 直接下载spark的pre-build然後把.libPath指到 07/24 17:59
2F：→ celestialgod: spark-bin/R/lib就可以正常library(SparkR)了 07/24 17:59
3F：→ celestialgod: github上面那个已经是之前的SparkR版本 07/24 18:00
5F：→ celestialgod: 不过windows上还要去下载winutils才行跑 07/24 18:03
6F：→ celestialgod: linux的话 我还没试过(摊手 07/24 18:03
7F：→ pk790127: 其实celes大的网址我也有找到..刚刚试的时候原来是资料 07/24 19:35
8F：→ pk790127: 夹 多弄了第二层,现在sparkR已经安装好了 谢谢 07/24 19:36
9F：→ pk790127: 可是想请问 winutils 载下来要放在哪? 这是hadoop吧? 07/24 19:36
10F：→ pk790127: 是他的分散式资料系统吗? (HDFS) 谢谢 07/24 19:37
11F：→ celestialgod: PATH中设定HADOOP_HOME，然後指向winutils的位置 11/24 23:16