日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Sqoop导入导出的时候总是出现等待5分钟的问题解决办法

發布時間:2024/9/27 编程问答 43 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Sqoop导入导出的时候总是出现等待5分钟的问题解决办法 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

25.25.27 Sqoop導入導出的時候總是出現等待5分鐘的問題解決辦法:

HDP3.1 中的 YARN 的 timeline server 默認使用內置的 HBase,不知道為什么,總是過幾天就掛掉,暫時還沒找到原因。后來想著讓它使用外部的 HBase 看看會不會還有此問題。配置如下:
前提: Ambari 中已經裝好 YARN 和 HBase 了。
(1) 把 YARN 的配置頁中 Advanced yarn-hbase-env 部分里的下面三個值改成 HBase 配置頁里相應的值。然后重啟 YARN 的服務。

hbase.zookeeper.quorum 拷貝hbase中的設置 hbase.zookeeper.property.clientPort 2181 zookeeper.znode.parent

(2) 登陸到某臺機器,執行下面的命令,創建需要的表。

export HBASE_CLASSPATH_PREFIX={hdp-dir}/hadoop-yarn/timelineservice/*{hdp-dir}/hbase/bin/hbase org.apache.hadoop.yarn.server.timelineservice.storage.TimelineSchemaCreator -Dhbase.client.retries.number=35 -create -s

上面{hdp-dir} 是HDP 安裝的目錄,我的是 /usr/hdp/3.1.4.0-315

筆者的執行語句如下:

export HBASE_CLASSPATH_PREFIX=/usr/hdp/3.1.4.0-315/hadoop-yarn/timelineservice/* /usr/hdp/3.1.4.0-315/hbase/bin/hbase org.apache.hadoop.yarn.server.timelineservice.storage.TimelineSchemaCreator -Dhbase.client.retries.number=35 -create -s

(3) 登陸 HBase shell,給 yarn 用戶賦權限。

grant 'yarn', 'RWXCA' (筆者沒有設置)

轉載于:https://www.cnblogs.com/langfanyun/p/10821415.html

總結

以上是生活随笔為你收集整理的Sqoop导入导出的时候总是出现等待5分钟的问题解决办法的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。