0 引言 在許多比較惡劣的環境如野外、井下、甚至在戰爭中,人們更需要獲取及時、有效的視頻信息,這種環境對系統的能耗、抗干擾性、穩定性等方面提出了更高的要求,把嵌入式技術應用于視頻的采集和傳輸可以解決很多復雜的環境問題。德州儀器 (TI)推出的基于達芬奇技術的新型TMS320DM365 數字媒體處理器,DM365 高度集成了眾多組件,其中包括符合生產要求的H.264、MPEG-4、MPEG-2、MJPEG 與VC1 編解碼器,可滿足智能視頻處理功能的集成影像信號處理(ISP)解決方案,以及一系列板載外設等,可使開發人員將系統成本降低25%。本文圍繞DM365 數字媒體處理器,對基于DM365 的嵌入式視頻采集與傳輸系統的設計做了具體介紹。 1 嵌入式視頻采集與傳輸系統的整體結構 本系統利用目前先進的WiFi 無線通信技術,結合H.264 視頻壓縮算法構建無線視頻監控系統。系統工作過程為:視頻采集節點將采集到的視頻、音頻數據,經過前端壓縮等處理之后,轉換成統一的IP 數據包格式,以WiFi 無線方式發送到AP,AP 接入工業光纖以太網,實現無線與現有通信網絡的無縫連接,構成感知礦山多媒體數字網絡。該無線視頻監控系統既可應用于礦井救災應急通信系統,也可用于井下皮帶、液壓支架等煤礦安全生產管理,可極大提高礦井安全監控系統的能效,節約礦井生產成本。無線視頻監控系統圖如圖1 所示。 圖1 系統整體架構 2 系統硬件實現 2.1 系統核心架構 本視頻采集與傳輸系統完成的主要功能是在煤礦井下能夠進行實時流暢的多媒體通信。 系統設計的總指導原則是:在保持實時的多媒體通信質量的前提下,低功耗,低成本。節點硬件主要包括:視頻采集前端、視頻處理模塊、無線發射模塊和電源模塊以及一些外圍電路。 系統的原理框圖如圖2 所示。 圖2 攝像機原理框圖 2.2 視頻處理模塊 視頻處理模塊采用TI的達芬奇高性能多媒體處理器TMS320DM365 完成設備管理、音視頻的壓縮處理及傳輸通信,通過外接的以太網物理層芯片實現有線網絡接口,利用轉WIFI芯片GS1010 實現無線網絡通信,支持TCP/IP 網絡協議。 TMS320DM365 是德州儀器(TI)推出的基于達芬奇技術(DaVinciTM technology),面向便攜高清視頻應用的新型數字媒體處理器。該處理器延續了達芬奇家族中DM355 的處理器構架,集成了一顆ARM926EJ-S 內核,一個H.264 高清編解碼協處理器HDVICP 和一個MPEG-4/JPEG高清編解碼協處理器MJCP,可以支持H.264/MPEG-4 的高清視頻編解碼。 DM365 內部集成有視頻處理子系統VPSS(Video Processing Subsystem)、H.264 協處理器(HDVICP)、ARM926EJS 的處理器以及各種相關外設,并且可以使用豐富的外設,例如高速的USB OTG 2.0。通過各種擴展的結合,DM365 可應用于相機、網絡數碼攝像機等領域。 2.2.1 ARM處理器 ARM 組系統采用ARMv5TEJ(32/16bit)指令集的ARM926EJ-S 內核CPU,是采用管道化流水線的32bit RSIC 處理器,工作頻率為216/270/300MHz。ARM CPU 執行通常的系統控制任務,如系統初始化,配置,電源管理,用戶界接口和用戶命令等。ARM 作為主控和執行這些功能是因為它有一個大的程序存儲空間和快速的任務切換能力,因而其更適合復雜的,多任務和通用的任務控制。 ARM 子系統(ARMSS)包含ARM926EJ-S RISC 處理器,ARM 內部存儲器,嵌入式跟蹤模塊和嵌入式跟蹤緩存模塊(ETM/ETB)和系統控制外設。ARM926EJ-S RISC 處理器又包含協處理器15,內存管理單元(MMU),16KB 指令集,8KB 數據cache,寫緩存和Java 加速器。ARM 內部存儲器包括一個32KB 的內部RAM(32-bit 寬訪問)和16KB 內部ROM。系統控制ARM中斷控制器,PLL控制器,電源管理模塊和系統模塊。 2.2.2 視頻處理子系統(VPSS) TMSDM365 擁有一個視頻處理子系統(Video Processing Subsystem-VPSS)支持輸入接口(Video Processing Front End-VPFE)用于外部圖像外設,例如圖像傳感器, 視頻解碼器等等。 并且支持輸出接口(Video Processing Back End-VPBE)用于顯示設備,例如模擬SDTV/HDTV顯示器,數字LCD 顯示等等。 除了這些外圍設備,有一個共同的緩沖存儲器和DMA 控制設置,以確保有效地利用DDR2/mDDR 帶寬。共享緩沖邏輯/內存是唯一的模塊,無縫集成到一個圖像的VPSS 內的圖像/視頻處理子系統。它作為主要的源和接收器給所有的VPFE 和VPBE 模塊, 以從DDR2/mDDR 獲得或傳遞數據。為了有效地利用外部DDR2/mDDR 帶寬, 它通過高帶寬總線(64-bit寬)DMA系統, 共享緩沖區的邏輯/內存接口。共享緩存的邏輯/內存接口通過一個128-bit 寬總線給所有VPFE 和VPBE 模塊。 VPFE 模塊包含圖像傳感器接口(ISIF), 圖像通道(IPIPE), 圖像通道接口(IPIPEIF)和硬件3A 統計發生器(H3A)。這些模塊提供了設備強大和靈活的前端接口。 VPBE 模塊包含屏幕菜單(OSD)和視頻編碼(VENC)模塊。這些模塊支持設備帶有強大和靈活的后端顯示接口。 2.3 視頻采集前端 視頻采集前端核心部件即攝像頭,一般攝像頭由鏡頭、圖像傳感器、數字信號處理芯片、等部分組成。景物通過鏡頭生成的光學圖像投射到圖像傳感器表面上,然后轉為電信號,經過A/D(模數轉換)轉換后變為數字圖像信號,再送到數字信號處理芯片(DSP)中加工處理,最后通過接口傳輸到計算機中進行處理,通過顯示器即可看到圖像。 CCD 和CMOS 傳感器是當前被普遍采用的兩種圖像傳感器,兩者都是利用感光二極管進行光電轉換,將光像轉換為電子數據。由于CCD 與CMOS 圖像傳感器的工作原理的不同導致兩者在性能表現上各有優劣。 表1 CCD與CMOS優缺點比較 總之,CMOS 傳感在采集圖像品質方面相對于CCD 傳感器有一些缺點,有上表可知但CMOS 在其他特性方面卻占有一定優勢。考慮到系統對功耗的要求比較高,而CMOS 攝像頭采集圖像質量還是能夠滿足大部分監控需求的,所以本系統選用CMOS攝像頭。 2.4 無線發射模塊 利用 wifi 技術來實現視頻的無線發送,Wifi 是Wireless Fidelity 的縮寫,是一種無線局域網數據傳輸的技術與規格,也就是IEEE 所定義的無線通信標準IEEE 802.11。從DM365開發板的接口特性考慮,系統節點采用wifi 解決方案GS1010 芯片,該款無線SOC 芯片采用雙ARM7 內核,包括實時時鐘(RTC)、功耗控制單元、閃存(Flash)和 SRAM,并且整合了wifi 射頻(RF)前端和微控制器,具備定位跟蹤以及監控物資功能,這樣的芯片結構大大減輕了節點設計的復雜度,也節省了節點的成本。電源模塊為傳感器模塊及處理器模塊提供能量,氣體調理電路的輸出僅需要連接到GS1010 的ADC 接口,這樣就基本完成了基于wifi的氣體監測節點的硬件設計。GS1010 采用0.18 微米工藝制造,10mm*10mmQFN 封裝,在硬件設計上節省了元器件數量,簡化了設計電路布線密度,提高了系統的可靠性,1.8V 工作時電流為2mA,3.6V 時為5mA,在單節AA 電池下能維持長達5~10 年的節點運行壽命。 另外,它還支持IEEE802.11b/g 標準,并提供802.11i(WPA2-PSK)、AES 編碼、EAPFAST三種方式保證數據和信息安全。 3 結束語 視頻信號具有直觀、豐富與時序性的信息內涵,在傳達信息方面有著其他信號無法達到的效果。本文重點闡述了基于DM365 的嵌入式Linux 視頻采集與傳輸系統硬件的具體設計,該系統功耗低、價格廉,實現了對復雜、惡劣工作環境的實時監控,可以應用于煤礦中的無人工作面,及時了解工作面環境等各種變化,保障了現場工作人員的安全。 Author: Source:中電網 |