用户登录
用户注册

分享至

hadoop词频统计

  • 作者: 雏-
  • 来源: 51数据库
  • 2020-09-29
看一下hadoop中的配置文件core-site.xml
在Hadoop的配置文件core-site.xml中可以设置是否使用本地库:


hadoop.native.lib
true
Should native hadoop libraries, if present, be used.

Hadoop默认的配置为启用本地库。
有可能是这个问题:hadoop本地库版本与服务器版本不一样的问题,形成死循环。



  人品问题吧,看到很多这样的情况了,具体解决方法百度,google都没有说的,只有一个说是hosts文件的配置问题,把多个主机名映射到107.0.0.1了,你试试吧,能解决最好,不能解决也无所谓。
你的input下的文件有多大? 不要太大了,太大有可能就是内存的问题了,试着加大jvm运行时的内存,还有查看下日志看看有没有错误信息,只能这样了,还不行的话就自己写个wordcount程序,反正也不难,就当练手
软件
前端设计
程序设计
Java相关