Linux64位操作系统(CentOS6.6)上如何编译spark1.3
发表于:2025-02-24 作者:千家信息网编辑
千家信息网最后更新 2025年02月24日,1.在官网下载1.3.0源码后执行如下命令:./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=
千家信息网最后更新 2025年02月24日Linux64位操作系统(CentOS6.6)上如何编译spark1.3
1.在官网下载1.3.0源码后执行如下命令:
./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=2.4.0 -Djava.version=1.7 -Dprotobuf.version=2.5.0 -Pyarn -Phive -Phive-thriftserver
2.参数说明:
--tgz 生成部署包;
--skip-java-test 滤过测试阶段;
--with-tachyon 感觉tachyon是趋势,所以加上tachyon的支持;
-Dhadoop.version 指定hadoop的版本,默认为1.0.4;
-Djava.version 指定java版本,默认是1.6;
-Dprotobuf.version 指定protobuf的版本,默认是2.4.1;这里指定是因为hadoop使用的2.5.0,不修改的话搭配的时候会出问题;
-Pyarn -Phive -Pthriftserver 分别加入yarn、hive的支持。
3.一个多小时后出现BUILD SUCCESS,即编译成功,可在spark-1.3.0文件夹中找到编译的文件。
版本
编译
文件
支持
成功
参数
可在
命令
小时
感觉
文件夹
时候
源码
趋势
问题
阶段
测试
生成
操作系统
系统
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
去浙江明讯网络技术有限公司
福建项目软件开发供应
杭州软件开发公司李文滨
河南滑县网络技术公司招聘
tv版软件开发
计算机网络技术专升本分数线山东
濮阳酷粉软件开发工作室
鞍山app软件开发多少钱
无限低速网络技术
网络安全宣传周主题宣传
应用控制服务器
网络安全监测装置部署方案
靖安软件开发商是谁
联网3d软件开发
小公司管理系统软件开发
国内展館馆网络技术
部队对手机网络安全进行检查
鸡东天气预报软件开发
各个公司软件开发模式
网络安全产品运维要求
服务器带外集中管理平台
小云服务器
软件开发培训班百度云
有线网络安全概述
高并发读数据库解决方案
电脑解析服务器ip地址失败
连接数据库时抱空指针异常
高科服务器是什么意思
联想视频服务器
各个公司软件开发模式