我遵循这个(相当老的)教程,使用storagehandler从hive访问本地oracle nosql db。
我成功地:
解压hadoop2.7.2下 /home/hadoop/hadoop
提取Hive1.2.1 /home/hadoop/hive
设置以下环境变量:
export HADOOP_HOME=/home/hadoop/hadoop
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_YARN_HOME=$HADOOP_HOME
export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native"
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export KVHOME=/home/hadoop/kv
export KVROOT=/tmp/kv-metadata
export HIVE_HOME=/home/hadoop/hive/
export HIVE_AUX_JARS_PATH=$KVHOME/lib/kvclient.jar
export PATH=$PATH:$HADOOP_HOME/sbin:$HADOOP_HOME/bin:$HIVE_HOME/bin
运行oracle nosql数据库:
java -jar $KVHOME/lib/kvstore.jar kvlite -root $KVROOT -host localhost &
创建了 MOVIE
oracle数据库中的表
但是,当我跑的时候 hive
和类型
hive> CREATE EXTERNAL TABLE IF NOT EXISTS MOVIE( id INT, original_title
STRING, overview STRING, poster_path STRING, release_date STRING,
vote_count INT, runtime INT, popularity DOUBLE, genres STRING)
STORED BY 'oracle.kv.hadoop.hive.table.TableStorageHandler'
TBLPROPERTIES ( "oracle.kv.kvstore"="kvstore",
"oracle.kv.hosts"="localhost:5000",
"oracle.kv.hadoop.hosts"="localhost",
"oracle.kv.tableName"="MOVIE");
我得到以下错误:
FAILED: Execution Error, return code 1 from
org.apache.hadoop.hive.ql.exec.DDLTask.
org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe.initSerdeParams
(Lorg/apache/hadoop/conf/Configuration;Ljava/util/Properties;Ljava
/lang/String;)Lorg/apache/hadoop/hive/serde2
/lazy/LazySimpleSerDe$SerDeParameters;
显然,这似乎是一个与serde组件相关的错误。
我也尝试过Hive2.0,但也不起作用。
有什么线索吗?
1条答案
按热度按时间cuxqih211#
这是一个已知的问题,与hive-9500引入lazysimpleserde公共接口的不兼容更改有关。切换到hive1.0.1解决了这个问题。