核心提示:原因有很多種,比如: 1.資料量過於龐大;死迴圈 ;靜態變數和靜態方法過多;遞迴;無法確定是否被引用的對象; 2.虛擬機器不回收記憶體(記憶體流失); 說白了就是程式運行要用到的記憶體大於虛擬機器能提供的最大記憶體就發生記憶體溢出了。 記憶體溢出的問題要看業務和系原因有很多種,比如:
1.資料量過於龐大;死迴圈 ;靜態變數和靜態方法過多;遞迴;無法確定是否被引用的對象;
2.虛擬機器不回收記憶體(記憶體流失);
說白了就是程式運行要用到的記憶體大於虛擬機器能提供的最大記憶體就發生記憶體溢出了。 記憶體溢出的問題要看業務和系統大小而定,對於某些系統可能記憶體溢出不常見,但某些系統還是很常見的解決的方法,
一個是最佳化程式碼,如果業務龐大,邏輯複雜,盡量減少全域變數的引用,讓程式使用完變數的時候釋放該引用能夠讓記憶體回收行程回收,釋放資源。
二就是物理解決,增大實體記憶體,然後通過:-Xms256m -Xmx256m -XX:MaxNewSize=256m -XX:MaxPermSize=256m的修改
一、記憶體溢出類型
1 、 java.lang.OutOfMemoryError: PermGen space
JVM 管理兩種類型的記憶體,堆和非堆。堆是給開發人員用的上面說的就是,是在 JVM 啟動時建立;非堆是留給 JVM 自己用的,用來存放類的資訊的。它和堆不同,運行期內 GC 不會釋放空間。如果 web app 用了大量的第三方 jar 或者應用有太多的 class 檔案而恰好 MaxPermSize 設定較小,超出了也會導致這塊記憶體的佔用過多造成溢出,或者 tomcat 熱部署時侯不會清理前面載入的環境,只會將 context 更改為新部署的,非堆存的內容就會越來越多。
2 、 java.lang.OutOfMemoryError: Java heap space
第一種情況是個補充,主要存在問題就是出現在這個情況中。其預設空間 ( 即 -Xms) 是實體記憶體的 1/64 ,最大空間 (-Xmx) 是實體記憶體的 1/4 。如果記憶體剩餘不到 40 %, JVM 就會增大堆到 Xmx 設定的值,記憶體剩餘超過 70 %, JVM 就會減小堆到 Xms 設定的值。所以伺服器的 Xmx 和 Xms 設定一般應該設定相同避免每次 GC 後都要調整虛擬機器堆的大小。假設實體記憶體無限大,那麼 JVM 記憶體的最大值跟作業系統有關,一般 32 位機是 1.5g 到 3g 之間,而 64 位元的就不會有限制了。
注意:如果 Xms 超過了 Xmx 值,或者堆最大值和非堆最大值的總和超過了實體記憶體或者作業系統的最大限制都會引起伺服器啟動不起來。
記憶體回收 GC 的角色
JVM 調用 GC 的頻度還是很高的,主要兩種情況下進行記憶體回收:
當應用程式線程空閑;另一個是 java 記憶體堆不足時,會不斷調用 GC ,若連續回收都解決不了記憶體堆不足的問題時,就會報 out of memory 錯誤。因為這個異常根據系統運行環境決定,所以無法預期它何時出現。
根據 GC 的機制,程式的運行會引起系統運行環境的變化,增加 GC 的觸發機會。
為了避免這些問題,程式的設計和編寫就應避免垃圾對象的記憶體佔用和 GC 的開銷。顯示調用 System.GC() 只能建議 JVM 需要在記憶體中對垃圾對象進行回收,但不是必須馬上回收,
一個是並不能解決記憶體資源耗空的局面,另外也會增加 GC 的消耗。
二、 JVM 記憶體地區組成
簡單的說 java中的堆和棧
java把記憶體分兩種:一種是棧記憶體,另一種是堆記憶體
1。在函數中定義的基本類型變數和對象的引用變數都在函數的棧記憶體中分配;
2。堆記憶體用來存放由 new建立的對象和數組
在函數(代碼塊)中定義一個變數時, java就在棧中為這個變數分配記憶體空間,當超過變數的範圍後, java會自動釋放掉為該變數所分配的記憶體空間;在堆中分配的記憶體由 java虛擬機器的自動記憶體回收行程來管理
堆的優勢是可以動態分配記憶體大小,生存期也不必事先告訴編譯器,因為它是在運行時動態分配記憶體的。缺點就是要在運行時動態分配記憶體,存取速度較慢;
棧的優勢是存取速度比堆要快,缺點是存在棧中的資料大小與生存期必須是確定的無靈活 性。
java 堆分為三個區: New 、 Old 和 Permanent
GC 有兩個線程:
新建立的對象被分配到 New 區,當該區被填滿時會被 GC 輔助線程移到 Old 區,當 Old 區也填滿了會觸發 GC 主線程遍曆堆記憶體裡的所有對象。 Old 區的大小等於 Xmx 減去 -Xmn
java棧存放
棧調整:參數有 +UseDefaultStackSize -Xss256K,表示每個線程可申請 256k的棧空間
每個線程都有他自己的 Stack
三、 JVM如何設定虛擬記憶體
提示:在 JVM中如果 98%的時間是用於 GC且可用的 Heap size 不足 2%的時候將拋出此異常資訊。
提示: Heap Size 最大不要超過可用實體記憶體的 80%,一般的要將 -Xms和 -Xmx選項設定為相同,而 -Xmn為 1/4的 -Xmx值。
提示: JVM初始分配的記憶體由 -Xms指定,預設是實體記憶體的 1/64; JVM最大分配的記憶體由 -Xmx指定,預設是實體記憶體的 1/4。
預設空餘堆記憶體小於 40%時, JVM就會增大堆直到 -Xmx的最大限制;空餘堆記憶體大於 70%時, JVM會減少堆直到 -Xms的最小限制。因此伺服器一般設定 -Xms、 -Xmx相等以避免在每次 GC 後調整堆的大小。
提示:假設實體記憶體無限大的話, JVM記憶體的最大值跟作業系統有很大的關係。
簡單的說就 32位處理器雖然可控記憶體空間有 4GB,但是具體的作業系統會給一個限制,
這個限制一般是 2GB-3GB(一般來說 Windows系統下為 1.5G-2G, Linux系統下為 2G-3G), 而 64bit以上的處理器就不會有限制了
提示:注意:如果 Xms超過了 Xmx值,或者堆最大值和非堆最大值的總和超過了物理內 存或者作業系統的最大限制都會引起伺服器啟動不起來。
提示:設定 NewSize、 MaxNewSize相等, “new”的大小最好不要大於 “old”的一半,原因是 old區如果不夠大會頻繁的觸發 “主 ” GC ,大大降低了效能
JVM使用 -XX:PermSize設定非堆記憶體初始值,預設是實體記憶體的 1/64;
由 XX:MaxPermSize設定最大非堆記憶體的大小,預設是實體記憶體的 1/4。
解決方案:手動設定 Heap size
修改 TOMCAT_HOME/bin/catalina.bat
在“ echo “Using CATALINA_BASE: $CATALINA_BASE””上面加入以下行:
- JAVA_OPTS=”-server -Xms800m -Xmx800m -XX:MaxNewSize=256m”
四、效能檢查工具使用
定位記憶體流失:
JProfiler 工具主要用於檢查和跟蹤系統(限於 Java 開發的)的效能。 JProfiler 可以通過時時的監控系統的記憶體使用量情況,隨時監視記憶體回收,線程健全狀態等手段,從而很好的監視 JVM 運行情況及其效能。
1. 應用伺服器記憶體長期不合理佔用,記憶體經常處於高位佔用,很難回收到低位;
2. 應用伺服器極為不穩定,幾乎每兩天重新啟動一次,有時甚至每天重新啟動一次;
3. 應用伺服器經常做 Full GC(Garbage Collection),而且時間很長,大約需要 30-40秒,應用伺服器在做 Full GC的時候是不響應客戶的交易請求的,非常影響系統效能。
因為開發環境和產品環境會有不同,導致該問題發生有時會在產品環境中發生, 通常可以使用工具跟蹤系統的記憶體使用量情況,在有些個別情況下或許某個時刻確實 是使用了大量記憶體導致 out of memory,這時應繼續跟蹤看接下來是否會有下降,
如果一直居高不下這肯定就因為程式的原因導致記憶體流失。
五、不健壯代碼的特徵及解決辦法
1 、儘早釋放無用對象的引用。好的辦法是使用臨時變數的時候,讓引用變數在退出活動域後,自動化佈建為 null ,暗示垃圾收集器來收集該對象,防止發生記憶體泄露。
對於仍然有指標指向的執行個體, jvm 就不會回收該資源 , 因為記憶體回收會將值為 null 的對象作為垃圾,提高 GC 回收機制效率;
2 、我們的程式裡不可避免大量使用字串處理,避免使用 String ,應大量使用 StringBuffer ,每一個 String 對象都得獨立佔用記憶體一塊地區;
- String str = “aaa”;
-
- String str2 = “bbb”;
-
- String str3 = str + str2;// 假如執行此次之後 str ,str2 以後再不被調用 , 那它就會被放在記憶體中等待 Java 的 gc 去回收 , 程式內過多的出現這樣的情況就會報上面的那個錯誤 , 建議在使用字串時能使用 StringBuffer 就不要用 String, 這樣可以省不少開銷;
3 、盡量少用靜態變數,因為靜態變數是全域的, GC 不會回收的;
4 、避免集中建立對象尤其是大對象, JVM 會突然需要大量記憶體,這時必然會觸發 GC 最佳化系統記憶體環境;顯示的聲明數組空間,而且申請數量還極大。
這是一個案例想定供大家警戒:
使用jspsmartUpload作檔案上傳,現在運行過程中經常出現java.outofMemoryError的錯誤,用top命令看看進程使用方式,發現記憶體不足2M,花了很長時間,發現是jspsmartupload的問題。把jspsmartupload組件的源碼檔案(class檔案)反編譯成Java檔案,如夢方醒:
- m_totalBytes = m_request.getContentLength();
- m_binArray = new byte[m_totalBytes];
變數m_totalBytes表示使用者上傳的檔案的總長度,這是一個很大的數。如果用這樣大的數去聲明一個byte數組,並給數組的每個元素分配記憶體空間,而且m_binArray數組不能馬上被釋放,JVM的記憶體回收確實有問題,導致的結果就是記憶體溢出。
jspsmartUpload為什末要這樣作,有他的原因,根據RFC1867的http上傳標準,得到一個檔案流,並不知道檔案流的長度。設計者如果想檔案的長度,只有操作servletinputstream一次才知道,因為任何流都不知道大小。只有知道檔案長度了,才可以限制使用者上傳檔案的長度。為了省去這個麻煩,jspsmartUpload設計者直接在記憶體中開啟檔案,判斷長度是否符合標準,符合就寫到伺服器的硬碟。這樣產生記憶體溢出,這隻是我的一個猜測而已。
所以編程的時候,不要在記憶體中申請大的空間,因為web伺服器的記憶體有限,並且儘可能的使用流操作,例如
byte[] mFileBody = new byte[512];
Blob vField= rs.getBlob("FileBody");
InputStream instream=vField.getBinaryStream();
FileOutputStream fos=new FileOutputStream(saveFilePath+CFILENAME);
int b;
while( (b =instream.read(mFileBody)) != -1){
fos.write(mFileBody,0,b);
}
fos.close();
instream.close();
5 、盡量運用對象池技術以提高系統效能;生命週期長的對象擁有生命週期短的對象時容易引發記憶體流失,例如大集合對象擁有大資料量的業務對象的時候,可以考慮分塊進行處理,然後解決一塊釋放一塊的策略。
6 、不要在經常調用的方法中建立對象,尤其是忌諱在迴圈中建立對象。可以適當的使用 hashtable , vector 建立一組對象容器,然後從容器中去取那些對象,而不用每次 new 之後又丟棄
7 、一般都是發生在開啟大型檔案或跟資料庫一次拿了太多的資料,造成 Out Of Memory Error 的狀況,這時就大概要計算一下資料量的最大值是多少,並且設定所需最小及最大的記憶體空間值。
引用:http://ajava.org/course/java/12437.html