kettle的基本教程
來源:互聯網
上載者:User
kettle是一個資料清洗工具,可能功能很多,就目前我瞭解的感覺就是抽取資料,最大的最用就是用來作資料庫的定時任務。
kettle是一款免安裝的,解壓即可試用。
1.spoon.bat 是在window作業系統下使用的 2.spoon.sh 是在linux作業系統下使用的
接下來是建立資產庫
點擊'+'號並選擇第一個選項
顯示的彈框點擊建立(這裡講的是oracle的串連方式)
//寫上要串連的IP
這裡要注意,這個資料庫名稱並不是說是資料庫名字 ,是資料庫的sid_name
點擊測試,測試通過了再點擊確認
接下來就講講kettle的用法: 1.資料的匯出(kettle就是把資料先匯入kettle資源,再進行操作,最後再分配給你要的表,或者是excel或者其他) 首先點擊建立轉換。 在輸入與輸出選項中拖出下面的2個選項
表輸入就是你要操作的資料的源表。 可以點擊 擷取SQL查詢語句 可以查詢當 前資料庫下的全部表格,中間的sql可以自動產生也 可以手動輸入。這個表裡面的where BRITHDAY > ? and BRITHDAY < ? 是因為我從其他步驟傳來了2個值,這2個問號就是又來接受這2個值的,這裡可以不管. 表輸出就是你要將資料輸出的表格,當你串連資料庫了 當你在目標表寫的表名在資料庫不存在就點擊下方的sql 就可以建立表格。 可以在 指定資料庫欄位 那點勾選並點擊 資料庫欄位 ,可以對 資料庫的欄位進行操作。 這裡要注意,這裡 替換SQL語句裡的變數 勾選是因為我作了定時 包括 執行每一行。 與 從步驟插入資料 裡的選項都是為了定時任務 而勾選的,而sql裡面的2個問好也是,這是固定的寫法。 定時的寫法 從輸入中拖出下面的選項
擷取系統資訊裡面提供了很強大的各種資源。我在這裡定義了2個變數,beginTime與endTime點擊類型可以看到有很多的系統資訊可以選擇。 我在這個地方作的是每天定時抽取前一天的資料,所以就選擇了昨天 00:00