日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

HIVE快速入门

發布時間:2025/6/15 编程问答 23 豆豆
生活随笔 收集整理的這篇文章主要介紹了 HIVE快速入门 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
(一)簡單入門
1、創建一個表
create table if not exists ljh_emp(
name string,
salary float,
gender string)
comment 'basic information of a employee'
row format delimited fields terminated by ',’;

2、準備數據文件
創建test目錄且目錄只有一個文件,文件內容如下:
ljh,25000,male
jediael,25000,male
llq,15000,female

3、將數據導入表中
load data local inpath '/home/ljhn1829/test' into table ljh_emp;

4、查詢表中的內容
select * from ljh_emp;
OK
ljh?? ?25000.0?? ?male
jediael?? ?25000.0?? ?male
llq?? ?15000.0?? ?female
Time taken: 0.159 seconds, Fetched: 3 row(s)

(二)關于分隔符
1、默認分隔符
hive中的行默認分隔符為 \n,字段分隔符為 ctrl+A,此外還有ctrl+B,ctrl+C,可以用于分隔array,struct,map等,詳見《hive編程指南》P44。
因此,若在建表是不指定row format delimited fields terminated by ‘,’,則認為默認字段分隔符為ctrl+A。
可以有2種解決方案:
一是在創建表時指定分隔符,如上例所示,
二是在數據文件中使用ctrl+A,見下例

2、在數據文件中使用ctrl+A全分隔符
(1)創建表
create table ljh_test_emp(name string, salary float, gender string);
(2)準備數據文件
創建test2目錄,目錄下只有一個文件,文件內容如下:
ljh^A25000^Amale
jediael^A25000^Amale
llq^A15000^Afemale
其中的^A字符僅在vi時才能看到,cat不能看到。
輸出^A的方法是:在vi的插入模式下,先按ctrl+V,再按ctrl+A
(3)將數據導入表
create table ljh_test_emp(name string, salary float, gender string);
(4)查詢數據
hive> select * from ljh_test_emp;
OK
ljh?? ?25000.0?? ?male
jediael?? ?25000.0?? ?male
llq?? ?15000.0?? ?female
Time taken: 0.2 seconds, Fetched: 3 row(s)

3、未指定分隔符,且又未使用ctrl+A作文件中的分隔符,出現以下錯誤
(1)創建表
create table if not exists ljh_emp_test(
name string,
salary float,
gender string)
comment 'basic information of a employee’;
(2)準備數據
ljh,25000,male
jediael,25000,male
llq,15000,female
(3)將數據導入表中
load data local inpath '/home/ljhn1829/test' into table ljh_emp_test;
(4)查看表中數據
select * from ljh_emp_test;
OK
ljh,25000,male?? ?NULL?? ?NULL
jediael,25000,male?? ?NULL?? ?NULL
llq,15000,female?? ?NULL?? ?NULL
Time taken: 0.185 seconds, Fetched: 3 row(s)
可以看出,由于分隔符為ctrl+A,因此導入數據時將文件中的每一行內容均只當作第一個字段,導致后面2個字段均為null。

(三)復雜一點的表
1、創建表
create table employees (
??? name string,
??? slalary float,
??? suboddinates array<string>,
??? deductions map<string,float>,
??? address struct<stree:string, city:string, state:string, zip:int>
)
partitioned by(country string, state string);

2、準備數據
John Doe^A100001.1^AMary Smith^BTodd Jones^AFederal Taxes^C.2^BStateTaxes^C.05^BInsurance^C.1^A1 Michigan Ave.^BChicago^BIL^B60600
Mary Smith^A80000.0^ABill King^AFederal Taxes^C.2^BState Taxes^C.05^BInsurance^C.1^A100 Ontario St.^BChicago^BIL^B60601
Todd Jones^A70000.0^A^AFederal Taxes^C.15^BState Taxes^C.03^BInsurance^C.1^A200 Chicago Ave.^BOak Park^BIL^B60700
Bill King^A60001.0^A^AFederal Taxes^C.15^BState Taxes^C.03^BInsurance^C.1^A300 Obscure Dr.^BObscuria^BIL^B60100
注意? ^A:分隔字段 ^B:分隔array/struct/map中的元素 ^C:分隔map中的KV
詳見《hive編程指南》P44。

3、將數據導入表中
load data local inpath '/home/ljhn1829/phd' into table employees partition(country='us',state='ca');

4、查看表數據
hive> select * from employees;
OK
John Doe?? ?100001.1?? ?["Mary Smith","Todd Jones"]?? ?{"Federal Taxes":0.2,"StateTaxes":0.05,"Insurance":0.1}?? ?{"stree":"1 Michigan Ave.","city":"Chicago","state":"IL","zip":60600}?? ?us?? ?ca
Mary Smith?? ?80000.0?? ?["Bill King"]?? ?{"Federal Taxes":0.2,"State Taxes":0.05,"Insurance":0.1}?? ?{"stree":"100 Ontario St.","city":"Chicago","state":"IL","zip":60601}?? ?us?? ?ca
Todd Jones?? ?70000.0?? ?[]?? ?{"Federal Taxes":0.15,"State Taxes":0.03,"Insurance":0.1}?? ?{"stree":"200 Chicago Ave.","city":"Oak Park","state":"IL","zip":60700}?? ?us?? ?ca
Bill King?? ?60001.0?? ?[]?? ?{"Federal Taxes":0.15,"State Taxes":0.03,"Insurance":0.1}?? ?{"stree":"300 Obscure Dr.","city":"Obscuria","state":"IL","zip":60100}?? ?us?? ?ca
Time taken: 0.312 seconds, Fetched: 4 row(s)

5、查看hdfs中的文件
hadoop fs -ls /data/gamein/g4_us/meta/employees/country=us/state=ca
Found 1 items
-rwxr-x---?? 3 ljhn1829 g4_us??????? 428 2015-05-12 12:49 /data/gamein/g4_us/meta/employees/country=us/state=ca/progamming_hive_data.txt
該文件中的內容與原有文件一致。


(四)通過select子句插入數據
1、創建表
create table employees2 (
??? name string,
??? slalary float,
??? suboddinates array<string>,
??? deductions map<string,float>,
??? address struct<stree:string, city:string, state:string, zip:int>
)
partitioned by(country string, state string);

2、插入數據
hive>? set hive.exec.dynamic.partition.mode=nonstrict;
否則會出現以下異常:
FAILED: SemanticException [Error 10096]: Dynamic partition strict mode requires at least one static partition column. To turn this off set hive.exec.dynamic.partition.mode=nonstrict

insert into table employees2?
partition (country,state)
select name,slalary,suboddinates,deductions,address, e.country, e.state
from employees e;

總結

以上是生活随笔為你收集整理的HIVE快速入门的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

主站蜘蛛池模板: 天天干夜夜骑 | av大片在线看 | 日韩乱码人妻无码系列中文字幕 | 亚洲欧洲自拍偷拍 | 亚洲免费看片 | 久久精品在线播放 | 毛片www| 亚洲精品系列 | 97人妻精品一区二区三区 | 欧美aa在线| www.色在线观看 | 国产一区在线观看视频 | 香港三日本8a三级少妇三级99 | 波多野结衣视频一区二区 | 肉丝肉足丝袜一区二区三区 | 波多野结衣黄色 | 久久精品这里只有精品 | 秋霞在线观看视频 | 国产一区二区高清视频 | 日韩欧美精品免费 | 日本黄色免费在线观看 | 国产第6页 | a级黄色网址 | 亚洲一区二三区 | 一边摸一边做爽的视频17国产 | 懂色av蜜臀av粉嫩av分享吧最新章节 | 少妇高潮惨叫久久久久久 | 日韩在线观看精品 | 99久久精品一区 | 午夜精品久久久久久久久久久 | 国产一区二区三区 | 久久午夜场 | 黄色免费版| 天堂av免费在线 | 国产一区二区99 | 懂色av中文一区二区三区天美 | 免费三片60分钟 | 国产极品91 | 欧美一级片在线视频 | 狠狠干五月天 | 日韩乱码人妻无码中文字幕 | 日韩a级黄色片 | 日本白嫩的bbw | 久久美 | 国产在线视频在线观看 | 中文字幕免费高清在线 | 悟空影视大全免费高清观看在线 | 一区二区视频观看 | 国产二级视频 | 亚洲αv| 久草午夜 | 特级大胆西西4444人体 | 中国一及毛片 | 欧美在线播放一区 | 成人做爰66片免费看网站 | 欧美成人精品在线 | 免费看黄色片网站 | 日韩成人午夜电影 | 国产91在线播放精品91 | 清纯唯美第一页 | 91caob | 国产在线色站 | 久久久水蜜桃 | 性激情视频 | 大咪咪av | 成人做爰69片免费观看 | 91色在线视频| 国产精品6666 | 午夜精品久久久久久99热 | 在线观看第一页 | 午夜av影视| 男女无套免费视频网站动漫 | 午夜精品久久久久久久99热黄桃 | 寡妇激情做爰呻吟 | 免费av网站观看 | 日韩av在线观看免费 | 国产一区二区三区在线观看 | www奇米影视com | avwww.| 亚洲中文字幕97久久精品少妇 | 国产国语亲子伦亲子 | 91黄色免费 | 在线h网 | 日韩精品视频久久 | 免费看黄视频的网站 | 中国少妇无码专区 | 黄色片aa | 国产美女无遮挡网站 | 草视频在线观看 | 希岛婚前侵犯中文字幕在线 | av在线男人天堂 | 久操久| 污视频在线免费观看 | 色乱码一区二区三区网站 | 毛片在线观看视频 | 国产区久久 | 亚洲视频在线视频 | 久久国产精品一区 | 中国一级片在线观看 |