ETL Talend官方入門實戰案例

2021-09-22 16:36:06 字數 981 閱讀 7797

鑑於國內關於talend文件使用案例相對較少,對初學者相當不友好,所以本文基於官方文件做出的實際的使用例子,全部流程完美復現。對於初學者請耐心作完,將受益匪淺。

文件是省略版,底部有打包上傳的**,並有詳細的說明文件,請實際操作並復現比對

案例1 :讀取本地原始檔並結構化輸出

構建movie.csv檔案元資料結構資訊

在job design新增乙個movie的作業

新增ffileinputdelimited、tlogrow元件到作業裡面

新增要讀入的檔案資訊、並輸出到控制台

案例2 :讀取本地原始檔並按要求過濾
在job design新增乙個filter_movie的作業

新增ffileinputdelimited、tmap、tlogrow元件到作業裡面

新增要讀入的檔案資訊、過濾、並輸出到控制台

案例3 :將過濾的有效和無效的資料分別寫入mysql

在job design新增乙個mysql_filter_movie的作業

新增ffileinputdelimited、tmap、tdbooutput、tlogrow元件到作業裡面

新增要讀入的檔案資訊、過濾、寫入資料庫

案例3 :將mysql的資料讀取寫入hdfs
在job design新增乙個mysql_hdfs的作業

新增mysql、thdfsooutput、tlogrow元件到作業裡面

讀取資料,寫入hdfs

ubuntu 官方入門指南

linux基礎 1.目錄和檔案系統 bin 重要的二進位制 binary 應用程式 boot 啟動 boot 配置檔案 dev 裝置 device 檔案 etc 配置檔案 啟動指令碼等 etc home 本地使用者主 home 目錄 lib 系統庫 libraries 檔案 lost found 在...

github guide官方入門示例

老外的文件還是清晰明了,學會看英文教程,事半功倍。多人協作,版本控制是github的最基本功能。學會以下功能 1.建立repositories 很容易,直接在github上建立。2.建立branch 很容易,直接在branch欄建立。3.commit 編輯完檔案,提交,沒啥好說。4.建立pull r...

CMake入門實戰

編寫cmake配置檔案cmakelists.txt。執行命令cmake path或者ccmake path生成makefile。其中,path是cmakelists.txt所在的目錄。使用make命令進行編譯。首先編寫 cmakelists.txt 檔案,並儲存在與main.cc原始檔同個目錄下 c...