平武建站

Linux64位操作系统（CentOS6.6）上如何编译spark1.3

1.在官网下载1.3.0源码后执行如下命令：

创新互联公司是一家集网站建设,建邺企业网站建设,建邺品牌网站建设,网站定制,建邺网站建设报价,网络营销,网络优化,建邺网站推广为一体的创新建站企业，帮助传统企业提升企业形象加强企业竞争力。可充分满足这一群体相比中小企业更为丰富、高端、多元的互联网需求。同时我们时刻保持专业、时尚、前沿，时刻以成就客户成长自我，坚持不断学习、思考、沉淀、净化自己，让我们为更多的企业打造出实用型网站。

./make-distribution.sh --tgz --skip-java-test --with-tachyon -Dhadoop.version=2.4.0 -Djava.version=1.7 -Dprotobuf.version=2.5.0 -Pyarn -Phive -Phive-thriftserver

2.参数说明：

  • --tgz 生成部署包；

  • --skip-java-test 滤过测试阶段；

  • --with-tachyon 感觉tachyon是趋势，所以加上tachyon的支持；

  • -Dhadoop.version 指定hadoop的版本，默认为1.0.4；

  • -Djava.version 指定java版本，默认是1.6；

  • -Dprotobuf.version 指定protobuf的版本，默认是2.4.1；这里指定是因为hadoop使用的2.5.0，不修改的话搭配的时候会出问题；

  • -Pyarn -Phive -Pthriftserver 分别加入yarn、hive的支持。

3.一个多小时后出现BUILD SUCCESS,即编译成功，可在spark-1.3.0文件夹中找到编译的文件。


当前标题：Linux64位操作系统（CentOS6.6）上如何编译spark1.3
本文URL：http://pwwzsj.com/article/jipocj.html

其他资讯