大資料課上

2022-08-19 21:45:14 字數 708 閱讀 5470

在所有主機上依次執行如下命令:

# 移動到個人資料夾(以免因誤操作刪除掉系統檔案)

spark

wget

# 解壓

sudo tar -zxf spark-2.3.0-bin-hadoop2.7.tgz -c /usr/local/

# 刪除用過的壓縮包

rm spark-2.3.0-bin-hadoop2.7.tgz

# 改名

+ 授予許可權

cd /usr/local/

sudo mv spark-2.3.0-bin-hadoop2.7/ spark/

# 此處,如果小組統一的使用者名稱不是

hadoop

# 請把此處的使用者名稱

↓ 替換成你們小組統一的使用者名稱

sudo chown -r hadoop spark/

# 配置環境變數

sudo gedit ~/.bashrc

# 在除了第一行的任意地方新增如下內容:

export spark_home="/usr/local/spark"

export path=$path:$spark_home/bin:$spark_home/sbin

# 儲存,並執行

source ~/.bashrc

到此,從節點的組員可以休息了(但必須開機並保持聯網),接下來交給主節點操作

資料結構課上筆記2

今天繼續說明了一些基本概念,講解了時間空間複雜度。對於概念的掌握也很重要 元素之間的關係在計算機中有兩種表示方法 順序映像和非順序映像,由此得到兩種不同的儲存結構 順序儲存結構和鏈式儲存結構。順序 根據元素在儲存器中的相對位置表示關係 鏈式 借助指標表示關係 資料型別 是乙個值的集合和定義在這個值集...

資料結構課上筆記6

本節課介紹了單鏈表的操作實現細節,介紹了靜態鍊錶。鍊錶帶頭的作用 對鍊錶進行操作時,可以對空表 非空表的情況以及 對首元結點進行統一處理,程式設計更方便。下面給出帶頭的單鏈表實現思路 按下標查詢 判斷非法輸入,當 1 p l next j 1 while p j i return 按值查詢 p l1...

資料結構課上筆記12

一般二叉樹 將其每個結點與完 全二叉樹上的結點相對照,儲存在一 維陣列的相應分量中。最壞情況 樹退化為線性後 深度為 k 的且只 有 k 個結點的右單支樹需要 長度為2 k 1 的一維陣列。lchild和rchild都是指向相同結構的指標 在 n 個結點的二叉鍊錶中有 n 1 個空指標域。typed...