日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 运维知识 > Ubuntu >内容正文

Ubuntu

Ubuntu 下PySpark安装

發(fā)布時(shí)間:2025/3/11 Ubuntu 51 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Ubuntu 下PySpark安装 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
  • 操作系統(tǒng):Ubuntu20.04
  • 所需軟件: Java 8 +,Python 3.5 +, Scala 2.11.12+
  • 安裝Java 8 sudo apt-get updatesudo apt-get install openjdk-8-jdkjava -version
  • 安裝scalasudo wget https://downloads.lightbend.com/scala/2.12.8/scala-2.12.8.deb sudo dpkg -i scala-2.12.8.deb scala -version
  • 安裝pipsudo apt-get install pip
  • 安裝py4jsudo pip install py4j
  • 安裝Python3.6
    默認(rèn)情況下,Ubuntu20.04附帶了Python2.7和Python3.5,如果沒(méi)有附帶或者想要安裝最新python3.6,可以使用"deadsnakes"團(tuán)隊(duì)PPA,它為Ubuntu打包了最新Python版本 sudo add-apt-repository ppa:deadsnakes/ppasudo apt updatesudo apt install python3.6
  • 安裝sparksudo wget https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-2.4.8/spark-2.4.8-bin-hadoop2.7.tgz tar -zxvf spark-2.4.8-bin-hadoop2.7.tgz
  • 編輯系統(tǒng)變量vim ~/.bashrc SPARK_HOME路徑視自己安裝路徑?jīng)Q定。export SPARK_HOME=/opt/module/spark-2.4.8-bin-hadoop2.7 export PATH=${SPARK_HOME}/bin:$PATH source ~/.bashrc
  • 啟動(dòng)pysparkpyspark
  • 文章轉(zhuǎn)載于:鏈接
    作者:Congqing He

    總結(jié)

    以上是生活随笔為你收集整理的Ubuntu 下PySpark安装的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

    如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。