文本文件导入到Hbase中
文本文件导入到Hbase中
创建表
sudo su -
su - hadoop
./hbase shell
create 'table1',{NAME => 'DF', VERSIONS => 5}
www.zzzyk.com
配置环境
1.修改hadoop环境
vi /opt/hadoop-1.0.0/conf/hadoop-env.sh
增加如下信息
export HBASE_HOME=/opt/hbase-0.92.0
export HADOOP_CLASSPATH=$HBASE_HOME/hbase-0.92.0.jar:$HBASE_HOME/hbase-0.92.0-test.jar:$HBASE_HOME/conf:${HBASE_HOME}/lib/zookeeper-3.4.2.jar:${HBASE_HOME}/lib/guava-r09.jar
2.拷贝配置文件和jar包 www.zzzyk.com
cp /opt/hbase-0.92.0/hbase-0.92.0.jar /opt/hadoop-1.0.0/lib/
cp /opt/hbase-0.92.0/hbase-0.92.0-tests.jar /opt/hadoop-1.0.0/lib/
cp /opt/hbase-0.92.0/conf/hbase-site.xml /opt/hadoop-1.0.0/conf/
然后重启
/opt/hadoop-1.0.0/bin/stop-all.sh
/opt/hadoop-1.0.0/bin/start-all.sh
文件导入
3. 把文件导入到hadoop
hadoop fs -put test1.txt /test1
4.把文件导入到hbase
hadoop jar /opt/hbase-0.92.0/hbase-0.92.0.jar importtsv -Dimporttsv.columns=DF:rowNo,HBASE_ROW_KEY table1 /test1