其中乙個異常關鍵字： 「bad substitution」
然後在stackoverflow發現相同提問，文中提到是因為沒有制定hdp版本，我才明白spark-bin-hadoop，編譯的是原生態的hadoop。
英文應該都懂，我就不用翻譯了。
正常情況遇見問題，不應該直接在網上找答案，診斷流程：從log或者終端中進行排查，如果不行就使用debug進行，異常重現，這樣才能理解問題的本源。
不過最後一句，stackoverflow太好用，國內的卻沒有，只能嘆氣呀！
Spark on YARN的兩種模式
目錄前言 一 client模式 二 cluster模式 三 兩種模式對比 需要在環境變數裡設定hadoop conf dir或yarn conf dir，告訴spark如何連線hadoop 可以看到兩種模式，最大的區別就是 client模式driver執行在本地，而cluster模式driver執行...
Spark On YARN部署模式下的記憶體分配情況
本文主要了解spark on yarn部署模式下的記憶體分配情況，因為沒有深入研究spark的源 所以只能根據日誌去看相關的源 從而了解 為什麼會這樣，為什麼會那樣 按照spark應用程式中的driver分布方式不同，spark on yarn有兩種模式 yarn client模式 yarn clu...
h2連線模式
h2連線模式 嵌入方式 本地使用jdbc訪問 伺服器方式 遠端通過tcp ip使用jdbc,odbc訪問 混合方式 同時相容嵌入方式和伺服器方式 嵌入方式 jdbc h2 file home目錄 jdbc h2 test 其他 jdbc h2 file c jdbc h2 file 記憶體資料庫 資...