資料擷取平台

資料擷取平台

詳見HDM檔案夾。

HDM\資料擷取平台導數模板製作.docx

HDM\資料擷取平台營運手冊.docx

資料擷取平台主要是將手工管理但需用於未來經營分析的資料通過資料擷取平台進行收集

與ODI系統整合，進行ODI介面的管理。

p  可自訂匯入模板

p  支援覆蓋、增量兩種資料匯入方式

p  可進行個人化查詢與資料匯出，甚至是處理簡單報表

p  主要資料的管理

 

建表、視圖、序列

資料擷取平台常見錯誤

1.      導數之前要確保視圖和表展示的對應（每張表對應一個視圖，前台展示的是視圖裡面的資料）

2.      匯入資料出錯：Delayed_job未啟動，delay_job服務未啟動

sudo/u01/nginx/sbin/nginx –s stop                                             停止nginx 和delay_job服務

sudo/u01/nginx/sbin/nginx(具體按實際nginx安裝路徑)       啟動nginx和delay_job

cd    /u01/HDCM/hdcm

./script/delayed_job–n 20 start

sudo/u01/nginx/sbin/nginx –s reload(具體按實際nginx安裝路徑)

 

3.      增量匯入，全量匯入（先清掉再匯入）；多處同時匯入伺服器會死掉（在模板上修改選項）

4.      儲存模板時的錯誤

錯誤意思是query_view長度過長COLLECTDATA.CUX_TAOBAO_PL_ITEM_MAPPING_ALL_V長度為32，oracle資料庫允許最大長度為30.需更改視圖長度在30以內。

5.      匯入資料時出錯，可能是因為匯入檔案必須為.xls或.xlsx

 

6.      建表的時候必須加上ID列，視圖中不必要，表中的ID和視圖中的rowid對應，錯誤6也是因為這個原因