日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

hive 创建表_2min快速了解,Hive内部表和外部表

發(fā)布時間:2024/7/5 编程问答 43 豆豆
生活随笔 收集整理的這篇文章主要介紹了 hive 创建表_2min快速了解,Hive内部表和外部表 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

在了解內(nèi)部表和外部表區(qū)別前,

我們需要先了解一下Hive架構(gòu)

大家可以簡單看一下這個架構(gòu)圖,我介紹其中要點:

Hive的數(shù)據(jù)分為兩種,一種為普通數(shù)據(jù),一種為元數(shù)據(jù)。

  • 元數(shù)據(jù)存儲著表的基本信息,增刪改查記錄,類似于Hadoop架構(gòu)中的namespace。普通數(shù)據(jù)就是表中的詳細數(shù)據(jù)。
  • Hive的元數(shù)據(jù)默認存儲在derby中,但大多數(shù)情況下存儲在MySQL中。普通數(shù)據(jù)如架構(gòu)圖所示存儲在hdfs中。
  • 下面我們來介紹表的兩種類型:內(nèi)部表和外部表

  • 內(nèi)部表(MANAGED):hive在hdfs中存在默認的存儲路徑,即default數(shù)據(jù)庫。之后創(chuàng)建的數(shù)據(jù)庫及表,如果沒有指定路徑應都在/user/hive/warehouse下,所以在該路徑下的表為內(nèi)部表。
  • 外部表(EXTERNAL):指定了/user/hive/warehouse以外路徑所創(chuàng)建的表
  • 而內(nèi)部表和外部表的主要區(qū)別就是
    • 內(nèi)部表:當刪除內(nèi)部表時,MySQL的元數(shù)據(jù)和HDFS上的普通數(shù)據(jù)都會刪除 ;
    • 外部表:當刪除外部表時,MySQL的元數(shù)據(jù)會被刪除,HDFS上的數(shù)據(jù)不會被刪除;

    1.準備數(shù)據(jù): 按tab鍵制表符作為字段分割符

    2.內(nèi)部表測試:

    2.1 在Hive里面創(chuàng)建一個表:

    2.2 這樣我們就在Hive里面創(chuàng)建了一張普通的表,現(xiàn)在給這個表導入數(shù)據(jù):

    2.3 內(nèi)部表刪除

    3.外部表測試:

    3.1 創(chuàng)建外部表多了external關(guān)鍵字說明以及hdfs上location ‘/hive/external’

    創(chuàng)建外部表,需要在創(chuàng)建表的時候加上external關(guān)鍵字,同時指定外部表存放數(shù)據(jù)的路徑

    (當然,你也可以不指定外部表的存放路徑,這樣Hive將 在HDFS上的/user/hive/warehouse/文件夾下以外部表的表名創(chuàng)建一個文件夾,并將屬于這個表的數(shù)據(jù)存放在這里)

    3.2 外部表導入數(shù)據(jù)和內(nèi)部表一樣:

    3.3 刪除外部表

    總結(jié)

    以上是生活随笔為你收集整理的hive 创建表_2min快速了解,Hive内部表和外部表的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。