异常。而同样的程序在java项目中却运行的正常。
FileSystem创建代码
File workaround = new File(".");System.getProperties().put("hadoop.home.dir", workaround.getAbsolutePath());new File("./bin").mkdirs();new File("./bin/winutils.exe").createNewFile();String hdfsURL = "hdfs://192.168.1.118:50040";Configuration configuration = new Configuration();FileSystem fileSystem = FileSystem.get(new URI(hdfsURL), configuration);抛异常:
Exception in thread "main" java.lang.VerifyError: (class: com/google/common/collect/Interners, method: newWeakInterner signature: ()Lcom/google/common/collect/Interner;) Incompatible argument to function at org.apache.hadoop.util.StringInterner.<clinit>(StringInterner.java:48) at org.apache.hadoop.conf.Configuration.loadResource(Configuration.java:2472) at org.apache.hadoop.conf.Configuration.loadResources(Configuration.java:2364) at org.apache.hadoop.conf.Configuration.getProps(Configuration.java:2281) at org.apache.hadoop.conf.Configuration.get(Configuration.java:888) at org.apache.hadoop.conf.Configuration.getTrimmed(Configuration.java:907) at org.apache.hadoop.conf.Configuration.getBoolean(Configuration.java:1308) at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:366)
因此我怀疑,这里存在web项目的包和hdfs相关包冲突了。于是花了好长的时间找啊找,终于找到了冲突的包。
冲突来自 Java_EE_6 中的weld-osgi-bundle.jar 和 guava-11.0.2.jar 这两个包。 com/google/common/collect/Interners 类是 HDFS在创建FileSystem时所需要使用的一个创建Interner类的工具类,但是 weld-osgi-bundle.jar和guava-11.0.2.jar 存在了一样的结构,而weld-osgi-bundle.jar中却不存在Interners类,导致在运行过程中的冲突。
解决方法一:
将web工程应用Java EE 5。笔者的项目使用Java EE 5已经足够了,如果你们的项目中有使用到Java EE 6的功能可以通过另外导入需要的工具实现。
解决方法二:
将Java EE 6 的包通过 ADD JARs... 的方式导入。 注意:不要将 Java EE 6中的包直接放到WebRoot/WEB-INF/lib 下,这样同样会导致包冲突