当前位置:操作系统 > Unix/Linux >>

文本文件导入到Hbase中

文本文件导入到Hbase中
 
创建表
sudo su -
su - hadoop
./hbase shell
create 'table1',{NAME => 'DF', VERSIONS => 5}
  www.zzzyk.com  
配置环境
1.修改hadoop环境
 
vi /opt/hadoop-1.0.0/conf/hadoop-env.sh
增加如下信息
 
export HBASE_HOME=/opt/hbase-0.92.0
export HADOOP_CLASSPATH=$HBASE_HOME/hbase-0.92.0.jar:$HBASE_HOME/hbase-0.92.0-test.jar:$HBASE_HOME/conf:${HBASE_HOME}/lib/zookeeper-3.4.2.jar:${HBASE_HOME}/lib/guava-r09.jar
 
2.拷贝配置文件和jar包  www.zzzyk.com  
 
cp /opt/hbase-0.92.0/hbase-0.92.0.jar /opt/hadoop-1.0.0/lib/
cp /opt/hbase-0.92.0/hbase-0.92.0-tests.jar /opt/hadoop-1.0.0/lib/
cp /opt/hbase-0.92.0/conf/hbase-site.xml /opt/hadoop-1.0.0/conf/
 
然后重启
/opt/hadoop-1.0.0/bin/stop-all.sh 
/opt/hadoop-1.0.0/bin/start-all.sh 
 
文件导入
3. 把文件导入到hadoop
hadoop fs -put test1.txt /test1
 
4.把文件导入到hbase
hadoop jar /opt/hbase-0.92.0/hbase-0.92.0.jar importtsv -Dimporttsv.columns=DF:rowNo,HBASE_ROW_KEY table1 /test1
 
CopyRight © 2022 站长资源库 编程知识问答 zzzyk.com All Rights Reserved
部分文章来自网络,