能否成功利用大資料，是商務變革的關鍵

大資料時代已經到來，如何處理和利用龐大的資訊，是眾多企業所面臨的新問題。

現在，眾多的社會活動及企業活動都離不開IT，而在這些活動中必然產生龐大的資訊。 隨著移動寬頻和移動通信產品的日益普及，更加速了這一趨勢。 「資訊爆炸」要求企業系統能夠正確分析和處理大量而複雜的資訊資料，但是，依靠以往的技術則很難做到。

只有能解決大資料問題的企業，才能從商務變革中獲得商機。

要知道，大資料的種類多種多樣，比如，在進行金融交易、購買、服務活動時，在記錄器上以及產品製造過程中都會產生資料；如果能夠快速處理這些資料，不僅現有的產品及服務的效率得到提高，而且以往的人工業務也通過電腦自動化， 得以改善或提供嶄新的服務。 這樣一來，不同的商務領域，都將發現新的商機。

處理大資料的系統要做到：

只有同時滿足以上4個條件，企業才能從大資料中獲得商業利益。 以往的技術能處理數百GB的資料，但是處理百萬億兆規模的資料時，就會遇到諸如無法應對、處理能力不足、無法靈活擴展以及耗費成本等問題。

從技術層面，在滿足商業利益的前提下，能夠解決上述問題的關鍵是記憶體即採取利用RAM(隨機存取存蓄器)處理資料的方法。 在以往的硬碟磁碟機上，無法滿足現有的性能要求。 即使是速度更快的固態硬碟（SSD）和快閃記憶體也是遠遠不夠的。 可以利用比HDD性價比更高的RAM。 RAM具有HDD、SSD和快閃記憶體無法比擬的性能。

而且，軟體方面JAVA是解決很多問題的關鍵。 JAVA具有垃圾回收（GC）這一優良的資料管理功能，即當需要分配的記憶體空間不再使用時，JVM將調用垃圾回收機制來回收記憶體空間，從而大大提高記憶體的利用效率。 但是GC也有它的問題，就是當通過GC記憶體得以釋放時，應用軟體也會停止。

雖然隨著64（bit）中央處理器的普及，相當容量的記憶體是能夠分配的，但是記憶體量越大，因GC而引起的軟體停止時間也就越長。 對於要求具備更高性能的系統而言，這是致命的弱點。 處理大資料的系統必須解決這個問題。

Terracotta已成功地開發出能夠快速處理大資料的技術。 在利用JAVA應用軟體的同時，包括財富2000在內的50萬以上的商業使用者採用了大資料解決方案，並取得很大的成效。

Terracotta提供的解決方案中，核心產品有兩個。 一是Enterprise Ehcache（緩存），它是通過JAVA商務系統，把大量的資料存儲在外部高速緩衝儲存體內，以提高應用軟體的性能。 二是BigMemory，它支援進程內的堆外緩存，可用來存儲應用相關的大批量資料。

通過這兩項產品實現的記憶體資料管理環境，並不依賴于特定的作業系統和JAVA環境以及資料庫。 當把這兩個產品安裝于軟體伺服器和資料存儲區之間時，後部的各種資料庫資料庫就變成一個抽象化的巨大資料庫，能快速處理資料庫裡的資料和檔。

安裝于JAVA記憶領域外部時，GC（垃圾回收機制即自動記憶體）的前述的問題也就迎刃而解了。

與此同時，此項資料管理環境，是在產品伺服器上運行，通過增加伺服器，使資料放置區域Scale Up。 經過這個方法，上述4個問題可以同時得到解決。

Terracotta客戶中，比如VISA和提供線上支付服務的PayPal，為了解決因信用卡和線上結算而產生的不正行為問題，就利用了Terracotta的大資料解決方案。

在檢查不正行為時，需要對龐大的資料進行高速的分析處理。 以往雖然使用高價的硬體和資料庫，但其效果卻不盡人意。 各公司在利用Terracotta大資料解決方案後，成功地創造了及時分析數TB資料的環境。

VISA過去處理1件不正行為，通常需要花費十幾分鐘，而利用我們的大資料解決方案後，所需時間縮短到僅僅幾秒鐘。

除此而外，澳大利亞最大的通訊公司Telstra 就用CRM（客戶關係管理系統），管理絕大部分的顧客資訊。 運用大型電腦和開放環境的RDB（關係資料庫）處理CRM時，因為需要參照資料庫內的客戶資訊，所以處理一件平均要花費30秒。 由於公司和顧客之間的95%的點擊來自客服中心，公司在運營客服中心上每年都要投入10億美元。 公司曾經考慮將客服中心轉到網站上，但因參照顧客資訊還是要花費30秒而不得不放棄。

在此情況下，該公司就啟動了Terracotta大資料解決方案，採取了將資料庫中的顧客資料記憶體後再加以處理的方式。 通過這種方式，成功地把參照處理所需時間縮短到30毫秒。 預計，幾年後公司顧客資訊的規模將從目前的10TB，增加到100TB。

這樣，TelstraCRM系統的速度得以提高後，在成功地降低成本的同時，服務也得到提高。 公司認為，利用Terracotta大資料解決方案將會解決解約問題，並通過實施交叉銷售，大幅度提高銷售額。

由此可見，該公司的記憶體資料庫管理的解決方案，不僅可以解決以往的問題，還可以成為推動商務變革的巨大動力。

本文作者是美國Terracotta公司總經理，他是商務軟體方面的專家，有著20年以上的工作經驗。 在他的領導下，Terracotta在處理大資料方面成效顯著。 目前，Terracotta為世界眾多由於「資訊爆炸」而面臨商務變革的企業提供解決了方案。

(責任編輯：呂光)