經過大量的實驗後,發現了如下幾個BUG:
1、客戶機的關閉導致伺服器崩潰,出現斷錯誤
2、當伺服器段錯誤出現後,再次開啟伺服器無法再次進行視頻編碼,移除視頻檔案後正常
3、開啟多個用戶端時幀率下降很快
4、開啟多個用戶端時會發生死機現象
BUG1
首先這個問題和客戶機有關,我們把代碼定位在net.c函數中。在仔細分析,問題應該在處理客戶機串連的線程裡面,我們使用gdb調試,發現當關閉後調用
//檢測客戶機是否斷開
getsockopt(c->sock, IPPROTO_TCP, TCP_INFO, &info, (socklen_t *)&len);
函數時發生了段錯誤。這個函數是用來檢測客戶機是否斷開的,如果斷開,則清除和這次串連有關的所有事件:
//關閉sockclose(c->sock);epoll_del_event(c->srv->epfd, c->ev_tx);epoll_del_event(c->srv->epfd, c->ev_tx);free(c);
但是在檢測到斷開,並釋放相關變數後沒有使用break跳出while,導致下次執行getsockopt函數時發生段錯誤。因此修改如下:
while(1){//檢測客戶機是否斷開getsockopt(c->sock, IPPROTO_TCP, TCP_INFO, &info, (socklen_t *)&len);if((info.tcpi_state==TCP_ESTABLISHED)){fds = epoll_wait(c->srv->epfd, events, 10, 1000);for(i=0; i<fds; i++){event = events[i].events;e = events[i].data.ptr;if((event & EPOLLIN) && (e->events & EPOLLIN)){e->handler(e->fd, e->arg);}if((event & EPOLLOUT) && (e->events & EPOLLOUT)){e->handler(e->fd, e->arg);}if((event & EPOLLERR) && (e->events & EPOLLERR)){e->handler(e->fd, e->arg);}}}else{//關閉sockclose(c->sock);epoll_del_event(c->srv->epfd, c->ev_tx);epoll_del_event(c->srv->epfd, c->ev_tx);free(c);break;}}修改後這個BUG完美解決。
BUG2
首先可以確定BUG2的問題應該是由BUG1引起的。由於代碼非正常退出,導致視頻檔案沒有寫檔案尾,或者發生了某種損壞,導致下次編碼無法再次進行。
BUG3 BUG3的原因很好發現,因為伺服器中的網路攝影機子系統和網路子系統之間需要互斥訪問圖片檔案。網路攝影機子系統負責寫圖片,網路子系統負責讀圖片,如果串連了很多客戶機,那麼只有當所有的客戶機都讀取完圖片之後,伺服器才可以對圖片檔案進行寫操作,因此,這種方法大大的降低了客戶機幀率。
在運行過程中,幀率情況如下: 1個客戶機 80pts左右 2個客戶機 50pts左右 3個客戶機 30pts左右 4個客戶機 20pts左右
所以串連的客戶機越多,幀率越低。
先來分析一下到底能不能最佳化幀率,網路攝影機輸出格式是yuv的,如果要壓縮成jpg格式的圖片從而在用戶端顯示,那麼必定要把圖片檔案給儲存起來,這樣的話幀率就無法最佳化幀率了。同時我們知道V4L2的幀緩衝存放的是圖片未經處理資料,網路攝影機輸出的圖片直接寫入這些緩衝中,我們可以認為寫的時間可以忽略,如果把快取資料直接拷貝出來發送給客戶機,也就不需要互斥訪問了。所以有2中方法:
1、如果GTK可以直接顯示YUV格式的圖片,則直接發送YUV圖片的未經處理資料 2、如果GTK不能顯示YUV格式的圖片,則把YUV未經處理資料的處理交給用戶端來做
BUG4 在查閱相關資料後,發現死機是由於2個或2個以上的線程訪問同一段代碼,但是這段代碼沒有做可重新進入處理造成的。在整個工程中,tx_hander和rx_hander函數及其子函數。具體的可重新進入函數的實現方法見 http://www.cnblogs.com/xiaojiang1025/p/6020822.html
總結 總體來說系統大部分的功能都可以正常實現,在這其中也學習到了很多關於線程編程的東西,比如說訪問共用資源需要互斥,訪問相同代碼需要做可重新進入處理等等。但是系統的總體效能還不如意,我在想能不能用UDP的方式來實現視頻監控而不是TCP,或許這樣能很好的提高幀率。這個想法就交給以後來實現好了。