大資料項目之測試標準化

標籤：

資料項目確保資料品質是最重要的事。

但作為開發人員的我，一直對代碼的熱情遠高於資料，這是不應該的。

因為凡是涉及到資料的項目，資料品質的重要性遠遠比代碼重要。

理解資料，比最佳化代碼更重要，只有在保證資料品質的前提下，再最佳化代碼才是錦上添花。

責任心是安全之魂，標準化是安全之本。

還有時候，開發週期比較短，開發人員一急躁，沒有做完整的測試，或當時辦公室溫度比較燥，

引發其心理比較煩躁，就極容易造成代碼品質的下降，但這些都不重要，最重要的是我們需要有一個

標準化的測試流程，無論在什麼樣的情況下，代碼輸出的資料需要確認，通過了檢驗才能算完成。

做到測試的標準化，才能讓我們對自己的資料品質更放心。

我的一點小技巧，

使用excel擬造少量的資料，人工地根據自己對分析的流程，一步步做出正確的輸出。

然後使用代碼，一步一步產生資料，跟excel做對比。這樣如果能通過代碼測試，

在很大程度上就能確定資料的準確性。

因為大資料項目本身資料量比較大，你直接從資料表中去查看資料項目不容易發現的問題，

在資料量小的時候就容易發現了，但有些問題，資料量小的時候發現不了，資料量大的時候就

暴露出來了？這時該怎麼辦？

大資料項目之測試標準化