資料抽取工具Kettle學習

2021-08-10 20:57:38 字數 421 閱讀 7567

kettle 是」kettle e.t.t.l. envirnonment」只取首字母的縮寫,這意味著它被設計用來幫助你實現你的ettl需要:抽取、轉換、裝入和載入資料。

翻譯成中文名稱應該叫水壺,名字的起源正如該項目的主程式設計師matt 在乙個論壇裡說的哪樣:希望把各種資料放到乙個壺裡然後以一種指定的格式流出。

spoon 是乙個圖形使用者介面,它允許你執行轉換或者任務,其中轉換是用pan 工具來執行,任務是用kitchen 來執行。

1. pan 是乙個資料轉換引擎,它可以執行很多功能,例如:從不同的資料來源讀取、操作和寫入資料。

2. kitchen 是乙個可以執行利用xml 或資料資源庫描述的任務。通常任務是在規定的時間間隔內用批處理的模式自動執行。

etl工具kettle

Kettle資料抽取 增量抽取

使用 kettle 實現資料的增量抽取的方法大致如下 從目標表中讀取最大的時間戳或者增量字段 id,作為條件,然後把源表中所有大於這個增量欄位的資料讀出來,插入到目標表當中去 1.開啟 kettle 工具,開啟新建的全量抽取流 2.選擇 input,再拖出來乙個 表輸入 控制項 開啟表輸入 2,配置...

Kettle抽取資料 迴圈遍歷資料

kettle是個好工具,可是教程還是比較少,自己研究遇到了不少坑。版本 7.1 場景 我查出乙個列表,需要針對列表中的每乙個值再進行相同的處理。解決 目前沒有找到能在乙個轉換中進行這樣處理的迴圈元件,經查詢可以在作業中進行轉換之間的結果傳遞。轉換之間的結果傳遞 需要用到下面兩個元件 步驟 1.新建作...

Informatica資料抽取工具

公司介紹 創立於 1993 年,總部位於 palo alto,california of usa 的 informatica nasdaq infa 公司,作為電子商務分析型軟體市場的領先者,一直致力於通過自身的產品和服務提公升企業的競爭性優勢。其拳頭產品 informatica insight n...