當前位置：首頁 >

python spark 配置

發布時間：2023/11/29 36 豆豆

生活随笔收集整理的這篇文章主要介紹了 python spark 配置小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

前提：已經裝好 java 1.8 和 hadoop 2.7

1. 下載解壓放后的目錄?/Users/gao/spark-1.4.1-bin-hadoop2.6

2. 在~/.bash_profile 中加入 export PYTHONPATH=$PYTHONPATH:/Users/gao/spark-1.4.1-bin-hadoop2.6/python

3. 將/Users/gao/spark-1.4.1-bin-hadoop2.6/python/lib/py4j 解藥到?/Users/gao/spark-1.4.1-bin-hadoop2.6/python/ 目錄下

大功告成，在 python 命令行中輸入from pyspark import SparkContext，沒報錯即ok。

轉載于:https://www.cnblogs.com/olivetree123/p/4756270.html

總結

以上是生活随笔為你收集整理的python spark 配置的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。