KETTLE使用javascript步驟過濾特殊字元

標籤：kettle   pentaho   javascript步驟   字元替換   Regex   

KETTLE使用javascript步驟過濾特殊字元

 

使用kettle在抽取大量excel資料時，總是遇到excel中有一些特殊字元，導致ExecuteSQL script步驟執行失敗，本文記錄一些方法過濾一些特殊字元。同行有更好的方式實現，歡迎指點，共同學習。

 

完整的實現轉換如下

1、  使用javascript步驟過濾所有string欄位的字元

 

使用javascript步驟可以通過代碼來實現，避免增加過多的步驟，且一次性過濾所有的欄位；代碼如下：

 

for (vari=0;i<getInputRowMeta().size();i++){/

  var valueMeta=getInputRowMeta().getValueMeta(i);

 

  if (valueMeta.getTypeDesc().equals("String")) {

    var fStr= row[i];

    fStr=replace(row[i],‘\n‘,‘‘);

    fStr=replace(fStr,‘\r‘,‘‘);

    fStr=replace(fStr,‘\t‘,‘ ‘);

 

    fStr=replace(fStr,‘;‘,‘；‘);

    fStr=replace(fStr,‘·‘,‘‘);

   fStr=replace(fStr,"‘","‘‘");

 

    row[i]=fStr;

  }

}

2、 使用Regex，過濾重複字元

實際項目中遇到excel檔案中有若干個-號，數量不確定，上面的方式就不行了，replace in String步驟可以解決。useRegEx是開關，確定是否使用Regex，search 中填入運算式，replaceWith使用字串去替換。

 

 

3、 截取長度

如果資料來源的內容超過資料庫欄位長度，插入報錯，使用String cut步驟可以實現；

 

 

KETTLE使用javascript步驟過濾特殊字元