hive与hbase整合方式和优劣
分別安裝hive 和 hbase?
1、在hive中創(chuàng)建與hbase關(guān)聯(lián)的表
create table ganji_ranks (row string,num string) STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler' WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,info:num") TBLPROPERTIES ("hbase.table.name"="ganji_rankings");2、可以在hive中使用hsql 來插入數(shù)據(jù)并同時(shí)在hbase中也可以scan到
insert into table ganji_ranks select a,b,c from tablename where and/or ;3、可以在hbase中使用來插入數(shù)據(jù),支持更新,插入同樣rowkey的數(shù)據(jù),最新的數(shù)據(jù)會覆蓋前面一條
put 'ganji_ranking',a,vb,c .....4、如果需要清空表,在hbase中truncate 'tablename' 即可
5、如果需要?jiǎng)h除表,hbase也可,hive也可以,在hive之中刪除,hbase的表也會隨之刪除,在hbase中刪除之前 需要 :1)、disable 'tablename' 2)、 drop 'tablename' ? ? ?
優(yōu)勢:方便統(tǒng)計(jì),查看,查詢核對 ? 在hive中,因?yàn)槿绻兄形闹惖?#xff0c;hbase看不懂,還需要自己寫方法翻譯,有時(shí)候通過hive計(jì)算的結(jié)果插入挺方便
劣勢:hbase創(chuàng)建表的時(shí)候很多自定義的東西實(shí)現(xiàn)不了,而且hive中的表不支持修改,hbase表名如果修改了,hive會查不到hbase數(shù)據(jù)
?
?
好了,就這樣!
轉(zhuǎn)載于:https://www.cnblogs.com/tnsay/p/5783815.html
總結(jié)
以上是生活随笔為你收集整理的hive与hbase整合方式和优劣的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Python+MySQL学习笔记(一)
- 下一篇: anjularjs 路由