折腾sparkR

2024-03-26 13:18
文章标签 折腾 sparkr

本文主要是介绍折腾sparkR,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

2016-01-26

基于spark1.4.0,一切都简单了,以前版本的sparkR要另行安装,诸多前置,现在只要安了R和Spark,sparkR就可用了。

(1) R安装见《linux centOS下安装R》

(2) spark 安装见《centos单机安装Spark1.4.0》

(3) 最后,

cd $SPARK_HOME

./bin/sparkR

简单多得去了~~~


-------------------------------------------------------------------------------------

2015-09-01

SparkR安装失败,记下些参考,留待有缘人~~~


yum -y install libcurl libcurl-devel
yum -y install libxml2 libxml2-devel

install.packages('RCurl')


wget http://repos.fedorapeople.org/repos/dchen/apache-maven/epel-apache-maven.repo -O /etc/yum.repos.d/epel-apache-maven.repo
yum -y install apache-maven
MAVEN_HOME
http://blog.csdn.net/zdnlp/article/details/7457596


curl https://bintray.com/sbt/rpm/rpm | sudo tee /etc/yum.repos.d/bintray-sbt-rpm.repo
yum -y install sbt
whereis sbt
cp /usr/share/sbt-launcher-packaging/bin/sbt-launch.jar /usr/bin
vi /usr/bin/sbt
  SBT_OPTS="-Xms512M -Xmx1536M -Xss1M -XX:+CMSClassUnloadingEnabled -XX:MaxPermSize=256M"
  java $SBT_OPTS -jar `dirname $0`/sbt-launch.jar "$@"
  chmod u+x /usr/bin/sbt
sbt


install_github("amplab-extras/SparkR-pkg", subdir="pkg")

traceback()


http://www.cnblogs.com/hseagle/p/3998853.html?utm_source=tuicool
http://www.infoq.com/cn/news/2014/01/amplab-launch-sparkr

http://www.94cto.com/index/Article/content/id/253.html
http://www.cnblogs.com/shanzhizi/archive/2012/07/09/2583739.html  (ftp://xmlsoft.org/libxml2/)
http://wenku.baidu.com/link?url=vRj7MvMdOesiF9mkBcMatBKgNNGjNaS9-itZMxA5NFZX8M299HbOqj6vIQdbcWDFtWzh5lhuZMZRhq_sEDX6bv2Nzwx-4xAsh0BErsRyeOO
http://blog.csdn.net/learneraiqi/article/details/46372901

http://amplab-extras.github.io/SparkR-pkg/

http://blog.csdn.net/wa2003/article/details/46635353

https://github.com/amplab-extras/SparkR-pkg

这篇关于折腾sparkR的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/848627

相关文章

DM8168 关于nand flash的折腾之路

主机平台:ubuntu 12.04  目标平台:TI DM8168 开发套件:*****北京某公司开发板 拿到板子,看了看资源,看了看平台的组成,上网看了看这写博客的评价,之后就开始了折腾之路,还是老方法;首先用厂商给的东西,原封不动的启动,摸索认识一番,TI给的是带开发套件的SD卡,按照 【快速开始QSG】;拨马开关-连线上电,启动。一切ok. 接着安装交叉编译工具,配置host主

redroid rk3588折腾笔记

手头有一个nanoPC-t6的3588板卡,想试下搭建云手机。 资料收集: 编译适用于RK3588的Redroid镜像 https://www.cnblogs.com/FW-ltlly/p/18014692 香橙派5plus上跑云手机方案一 redroid(带硬件加速) 容器虚拟安卓 在rock5b上使用redroid 适用于RK3588的Redroid镜像,包含多种功能 拉人入坑之,在Linu

阿里测试小组折腾1年!费尽心血!整理出来的软件测试工程师笔试题!

一、计算机知识 1、在Linux系统中,一个文件的访问权限是755,其含义是什么? 参考答案:        755表示该文件所有者对该文件具有读、写、执行权限,该文件所有者所在组用户及其他用户对该文件具有读和执行权限。 2、Linux中,如何从root用户切换到普通用户? 参考答案:su su user1  切换到user1,但切换后的当前目录还是root访问的目录 su – us

绿联nas折腾过程中遇到的问题

绿联nas折腾过程中遇到的问题 目录 ssh权限问题超级用户 ssh 权限问题 使用chmod -R 777 目录/ 给指定目录及其所有子目录和文件设置最大的权限,权限设置为 rwxrwxrwx(读、写、执行权限给所有用户)。这个命令会将目录和文件的权限设置为非常宽松,允许所有用户对它们进行任何操作。 700只有所有者有读和写以及执行的权限 查看访问权限:ls -l 当前文件夹下所有用

折腾了一下,让博客访问速度变快了

最近一直在写笔记,而没有更新系统性的内容,所以也很久没有打开自己的博客(xuzhougeng.top),最近打算更新一篇笔记的时候,发现博客居然打不开了。 我查了查原因,发现有两方面的问题 我使用halo建站,服务器地理位置不太好我用的halo主题太笨重了,需要加载太多的css 找到问题之后,就很好解决了。 我首先迁移了博客,发现访问速度并没有明显提升。接着,我通过浏览器的开发者工具,检查哪些内

小主机折腾记录27

1.买了一个9600k,3根台电 4G 2666 极光A40,一根台电8G2666 极光A40,一根国惠8G2666,一个惠普3热管散热器 测试结果如下 1)三根台电 4G2666 相互兼容,频率2667显示正常,显示为美光颗粒,时序如下 2)台电8G 2666与上述4g版本不兼容,一起使用频率为2400,显示为长鑫颗粒 时序忘了截图了 3)国惠8g与上述4G台电也不兼容,一起使用频率为240

折腾你的浏览器 —— 把10000x10000的图片无损压缩到200字节!

别紧张别怀疑,楼主可不是在故弄玄虚忽悠人:)事实上这还不是最小的!小弟先抛个砖,希望大家继续探索。  本文没有耍一点花招,都是最最基础的技术。即使是再菜的菜鸟也知道,想把一亿像素的照片保存进几百字节那是完全不可能的,更何况还是无损。事实上呢也的确不可能,因为本文标题里没说是照片,而是图片,毫无实际内容的图片:)      但也必须是标准的,通用的,能被各种浏览器识别的图片(PNG,GIF,

八爪鱼现金流-021-形势不好,不折腾也许是最好的选择

形势不好。大家都不敢消费了。 已经优化3波人了。 有技术、甚至有关系的,都可能被优化掉。 大家都在想着怎么多赚钱。弄点什么副业。 开直播,运营x书账号,摆摊。 所有你能想到的,早就有人做的非常好,非常专业了。 可能你投资进去了,买了好多东西,比如买些设备,摆摊费。 各种app的流量也不好,发啥都没人看。 最后本金都搭进去了。。。。 可能你辛辛苦苦,做了个网站,服务器费用、自己的时间。最后

折腾日记:废物利用改造kindle为天气预报日历

个人博客地址 很早之前购买了kindle用来看电纸书,后面也逐渐吃灰了,尤其当去年kndle电子书店停止服务后,就一直没充过电了,中途有段时间想着,当时买的时候还挺贵,不能这么浪费了,给它充满电后,用数据线接上电脑,发现它竟然无法连接电脑了,哎,真的是鸡肋了,吐槽归吐,一直考虑怎么利用这块墨水屏,于是,想到了用kindle做个天气预报日历。也算是废物利用了 大致思路就是在内网服务器上部署一个静态网

小主机折腾记25

10.买了惠普光驱,想给880g5twr安装上,结果发现卡扣不对 880g5twr的卡扣更长一些,比光驱本身长一些,各位如果想买的注意擦亮眼睛,看看卡扣跟你的主机一致与否 后续在闲鱼上买了个卡扣,加邮费12块钱…… 11.由于880G5twr上还有三个pcie 插槽没有用,而且m2插槽的传输模式没有显示,于是考虑把pciex4 插槽加一个转换卡,这样应该就能保证系统盘运行在pcie*4的模式