Hive - 增删改 Hive 表字段
一.引言
使用 Hive 表時(shí)由于數(shù)據(jù)的變換經(jīng)常需要調(diào)整 Hive 表字段結(jié)構(gòu),這里記錄一下常用方法。先創(chuàng)建一個(gè)測(cè)試表 tmp_change_column,包含兩個(gè)字段 a,b 和分區(qū)標(biāo)識(shí) dt :
function createTable() { hive -e " create table if not exists tmp_change_column ( a string, b string ) PARTITIONED BY(dt string) row format delimited fields terminated by '\t' " } createTable??
二.增加字段
1.末尾增加字段
在原始列名 a,b 基礎(chǔ)上增加字段 c
# 增加一列 hive -e "alter table tmp_change_column add columns (c string comment '增加一列');"?2.增加到指定位置
添加新字段到指定位置需要兩步,首先將字段添加至末尾,其次通過(guò) change 方法修改其順序,這里首先將 b_extend 添加至字段末尾,隨后 change b_extend after b,則達(dá)到指定位置目的
# 增加一列 hive -e "alter table tmp_change_column add columns (b_extend string comment '指定位置');" # 調(diào)整位置 hive -e "alter table tmp_change_column change b_extend b_extend string after b;"三.刪除字段
1.刪除末尾字段
刪除字段的原理是替代,用新的字段名替代原有的字段,舍棄掉最后的字段 c
# 刪除一列 hive -e "alter table tmp_change_column REPLACE COLUMNS ( a string, b string, b_extend string);"?2.刪除指定字段
其實(shí)和刪除末尾字段一致,只需替換?REPLACE COLUMNS 內(nèi)字段即可,現(xiàn)在刪除字段 b
# 刪除指定列 hive -e "alter table tmp_change_column REPLACE COLUMNS ( a string, b_extend string);"四.修改字段
1.修改字段名稱(chēng)
將字段 b_extend 改為字段 b
# 修改列名 hive -e "alter table tmp_change_column change b_extend b string;"2.修改字段類(lèi)型
常用的類(lèi)型有 STRING,BOOLEAN,INT,FLOAT,DOUBLE,CHAR 等,把字段 b 的類(lèi)型修改為 Double
# 修改類(lèi)型 hive -e "alter table tmp_change_column change b b DOUBLE;"3.修改字段注釋
除了名稱(chēng)和類(lèi)型,注釋也可以相對(duì)應(yīng)修改
# 修改注釋 hive -e "alter table tmp_change_column change b b DOUBLE comment '修改注釋';"4.同時(shí)修改名稱(chēng),類(lèi)型,注釋
上述操作也可以合并,一次性修改字段的多個(gè)屬性
# 全部修改 hive -e "alter table tmp_change_column change b b_change STRING comment '再次修改注釋'"五.總結(jié)
Hive 表字段的相關(guān)操作大致就這些,有一點(diǎn)需要注意,增加字段后,Hive 表當(dāng)前對(duì)應(yīng)的 Location 地址并不會(huì)自動(dòng)補(bǔ)上該數(shù)據(jù),但此時(shí)已經(jīng)可以 select 從表中獲取該字段,會(huì)全部獲得 Null,后續(xù)可以通過(guò) select 操作補(bǔ)齊該數(shù)據(jù),或者用新的地址 location 補(bǔ)齊該字段。
總結(jié)
以上是生活随笔為你收集整理的Hive - 增删改 Hive 表字段的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 遨博机械臂——ROS通讯机制
- 下一篇: plc系统和工控机的区别