如何在pycharm中配置Spark

2021-08-22 19:19:27 字數 620 閱讀 8767

因為作業要用到這個spark和python, 就著手開始配置,但是搜了一圈還是發現了不少雷。就把我自己的解決辦法發上來:

開啟pycharm,匯入已有的或者新建工程。

2.建立新的run configurition。

如右上角所示,選擇edit configurition。

設定環境,建立pythonpath和spark_home

配置路徑如圖所示,都可以在spark安裝路徑下找到:

4.選擇 file->setting->你的project->project structure

右上角add content root新增:py4j-some-version.zip和pyspark.zip的路徑(這兩個檔案都在spark中的python資料夾下,自己找一下)

5.儲存,ok

如何在pycharm中配置Spark

因為作業要用到這個spark和python,就著手開始配置,但是搜了一圈還是發現了不少雷。就把我自己的解決辦法發上來 開啟pycharm,匯入已有的或者新建工程。2.建立新的run configurition。如右上角所示,選擇edit configurition。設定環境,建立pythonpath...

如何在Pycharm中新增新的模組

在使用pycharm編寫程式時,我們時常需要呼叫某些模組,但有些模組事先是沒有的,我們需要把模組新增上去。最近在學習爬蟲,寫了下面幾行 結果出現錯誤 錯誤modulenotfounderror no module named bs4 的意思是未找到名為bs4的模組,我們就需要pycharm上安裝 b...

如何在Kubuntu中配置fcitx

1.fcitx輸入法的安裝 apt get install im switch fcitx 2.在 etc x11 xsession.d中建立乙個檔案,檔名為95fcitx start,內容為 export lc ctype zh cn.utf 8 export xmodifiers im fcit...