HBase 命令

本文介绍了使用HBase命令进行数据处理,包括表的创建、数据导入以及检查HFile文件状态的过程。在表不存在时,系统会根据hfile的startkey来创建表和region。此外,文章还详细阐述了如何配置输出压缩类型和压缩编码,以优化数据存储。通过实例展示了如何使用Hadoop和HBase进行数据批量加载和历史数据备份。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

2011.11.03
1. HBase 命令的调用类org.apache.hadoop.hbase.mapreduce.Driver
hadoop jar hbase-0.90.3-cdh3u1.jar completebulkload /99bec08188cd8083d51d952d81012139 history_cn_lzo 在表不存在是会根据hfile的start key来创建表的及region,但是不能设定table的其它信息.


hadoop jar hbase-0.90.3-cdh3u1.jar completebulkload /99bec08188cd8083d51d952d81012139 history_cn_lzo


hadoop org.apache.hadoop.hbase.mapreduce.Export -D mapred.output.compress=true -D mapred.output.compression.codec=org.apache.hadoop.io.compress.BZip2Codec -D mapred.output.compression.type=BLOCK history_cn_lzo /hbase_bak/history_cn_lzo

hadoop org.apache.hadoop.hbase.mapreduce.Import history_cn /hbase_bak/history_cn_lzo

2012.01.21
1. 查看HFile文件的状态:
/usr/local/cloudera/hbase/bin/hbase org.apache.hadoop.hbase.io.hfile.HFile -v -m -f hdfs://namenode-bj.hadoop.maxthon.cn:9000//hbase/history_online_cn/03e8b3ef5afe79d12a7258a5465a8197/data/495533167198546319
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值