本博客属原创文章,转载请注明出处:http://guoyunsky.iteye.com/blog/1177909
欢迎加入Hadoop超级群: 180941958
终于可以调试Hive源码了.首当其冲的就报了这个错误:
FAILED: Error in metadata: java.lang.IllegalArgumentException: URI: does not have a scheme 2011-09-22 11:54:57,890 ERROR [main] session.SessionState$LogHelper(343): FAILED: Error in metadata: java.lang.IllegalArgumentException: URI: does not have a scheme org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.IllegalArgumentException: URI: does not have a scheme at org.apache.hadoop.hive.ql.metadata.Hive.getDatabase(Hive.java:1028) at org.apache.hadoop.hive.ql.metadata.Hive.databaseExists(Hive.java:1013) at org.apache.hadoop.hive.ql.exec.DDLTask.showTables(DDLTask.java:1691) at org.apache.hadoop.hive.ql.exec.DDLTask.execute(DDLTask.java:289) at org.apache.hadoop.hive.ql.exec.Task.executeTask(Task.java:130) at org.apache.hadoop.hive.ql.exec.TaskRunner.runSequential(TaskRunner.java:57) at org.apache.hadoop.hive.ql.Driver.launchTask(Driver.java:1063) at org.apache.hadoop.hive.ql.Driver.execute(Driver.java:900) at org.apache.hadoop.hive.ql.Driver.run(Driver.java:748) at org.apache.hadoop.hive.cli.CliDriver.processCmd(CliDriver.java:164) at org.apache.hadoop.hive.cli.CliDriver.processLine(CliDriver.java:241) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:456) Caused by: java.lang.IllegalArgumentException: URI: does not have a scheme at org.apache.hadoop.hive.metastore.HiveMetaStoreClient.<init>(HiveMetaStoreClient.java:127) at org.apache.hadoop.hive.ql.metadata.Hive.createMetaStoreClient(Hive.java:1855) at org.apache.hadoop.hive.ql.metadata.Hive.getMSC(Hive.java:1865) at org.apache.hadoop.hive.ql.metadata.Hive.getDatabase(Hive.java:1024) ... 11 more
然后启动后在控制台也收到这样一条Log:hive-log4j.properties not found
源码调下来,发现是Hive在加载配置文件如hive-default.xml,hive-log4j.properties时采用这种方法:
private ClassLoader classLoader; { classLoader = Thread.currentThread().getContextClassLoader(); if (classLoader == null) { classLoader = Configuration.class.getClassLoader(); } }
然后获取hive-default.xml等是采用如下代码:
URL hconfurl = getClassLoader().getResource("hive-default.xml");
这样在jar中运行是没有问题的,但放到Eclipse里运行的话,获取的路径就会有出路了.现在来验证下:
package com.guoyun.hive.study.basic; public class PrintSourcePath { /** * @param args */ public static void main(String[] args) { ClassLoader loader=Thread.currentThread().getContextClassLoader(); System.out.println("Run path:"+loader.getResource("").getPath()); // hive-default.xml System.out.println("hive-default.xml path:"+loader.getResource("hive-default.xml").getPath()); } }
控制台输出如下:
Run path:/home/hadoop/workspace/hive-0.7.0/bin/
Exception in thread "main" java.lang.NullPointerException
at com.guoyun.hive.study.basic.PrintSourcePath.main(PrintSourcePath.java:12)
在获取hive-default.xml文件源时报来空指针异常,现在将hive_home/conf下到文件拷到hive/bin下,再运行这个类就不会报错了,我的运行结果如下:
Run path:/home/hadoop/workspace/hive-0.7.0/bin/
hive-default.xml path:/home/hadoop/workspace/hive-0.7.0/bin/hive-default.xml
之后再来调试Hive源码,Log:hive-log4j.properties not found已经不出现了。同时也没这个错误来。该问题解决!但接下来又发生了其他错误。。。一步步解决吧。
更多技术文章、感悟、分享、勾搭,请用微信扫描:
相关推荐
hive 源码分析
使用hive3.1.2和spark3.0.0配置hive on spark的时候,发现官方下载的hive3.1.2和spark3.0.0不兼容,hive3.1.2对应的版本是spark2.3.0,而spark3.0.0对应的hadoop版本是hadoop2.6或hadoop2.7。 所以,如果想要使用高...
Hive on Spark源码分析,实际场景中会遇到需求:将Hive默认的执行引擎MapReduce换成Spark或者Tez。
cloudera-hive-cdh6.3.2源码包
hive源码,可以学习hive源码,对于源码有兴趣同学可以下载
在Windows_eclipse上单步调试Hive教程,好东西,大家分享
hive2.1.1orc格式读取报数组越界错误,替换jar包。hive-exec-2.1.1-cdh6.3.2.jar、hive-orc-2.1.1-cdh6.3.2.jar。分发各个服务器即可。
基于Hadoop Hive健身馆可视化分析平台项目源码+数据库文件.zip启动方式 环境启动 hadoop hive2元数据库 sql导入 导入hivesql脚本,修改application.yml 启动主程序 HadoopApplication 基于Hadoop Hive健身馆可视化...
java操作Hive源码之HiveJDBC实例(mysql数据库),附带所需jar包,欢迎下载学习。
apache-hive-1.2.1源码包(已编译)(含Hive的使用全解)
HDP3.1.5源码下载—hadoop hbase hive
windows系统下eclipse集成hadoop,spark,hive开发环境
利用Hive进行复杂用户行为大数据分析及优化案例(全套视频+课件+代码+讲义+工具软件),具体内容包括: 01_自动批量加载数据到hive 02_Hive表批量加载数据的脚本实现(一) 03_Hive表批量加载数据的脚本实现(二) ...
Scala代码积累之spark streaming kafka 数据存入到hive源码实例,Scala代码积累之spark streaming kafka 数据存入到hive源码实例。
eclipse下编译Hive,这个文档是网上下的,还可以
hive旅游-hive旅游系统-hive旅游系统源码-hive旅游管理系统-hive旅游管理系统java代码-hive旅游系统设计与实现-基于springboot的hive旅游系统-基于Web的hive旅游系统设计与实现-hive旅游网站-hive旅游网站代码-hive...
hive无法连接本地eclipse等
hive旅游-hive旅游系统-hive旅游系统源码-hive旅游管理系统-hive旅游管理系统java代码-hive旅游系统设计与实现-基于springboot的hive旅游系统-基于Web的hive旅游系统设计与实现-hive旅游网站-hive旅游网站代码-hive...
应用spark2.1的api对hive对进行读写,代码中有明确的操作步骤。