大橙子网站建设,新征程启航

为企业提供网站建设、域名注册、服务器等服务

hadoop2.2.0第三方jar包引入的操作方法

这篇文章给大家介绍hadoop2.2.0 第三方jar包引入的操作方法,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。

尼泸西网站制作公司哪家好,找成都创新互联!从网页设计、网站建设、微信开发、APP开发、响应式网站建设等网站项目制作,到程序开发,运营维护。成都创新互联成立与2013年到现在10年的时间,我们拥有了丰富的建站经验和运维经验,来保证我们的工作的顺利进行。专注于网站建设就选成都创新互联

很有可能在hadoop job时,我们会引入第三方包,暂时有效的方法:

  • 将自己的程序,与第三方jar包的class文件一起打包成一个jar,有fatjar这麽个eclipse插件可简单打包;

  • 将第三方jar包都拷贝到集群中所有节点的${HADOOP_HOME}/lib下或者${JAVA_HOME}/ext;

  • 将第三方jar包放在叫lib的目录下,在通过eclipse导出jar包(Eclipse自带的导包)时,将这个lib目录一起打包,这样运行MapReduce任务时,hadoop能够加载到lib目录第三方的类;

  • 通过-libjars运行参数来指定第三方包,但在我的hadoop2.2.0集群中并无效,还在琢磨中。

    关于hadoop2.2.0 第三方jar包引入的操作方法就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。


    本文标题:hadoop2.2.0第三方jar包引入的操作方法
    当前URL:http://dzwzjz.com/article/ppceej.html
    在线咨询
    服务热线
    服务热线:028-86922220
    TOP