視頻采集的主流實現方案有兩種:一是基于ASIC,該方案一般采用意法、AMD等公司的專用視頻處理芯片;二是基于DSP,主要采用TI、ADI等公司的DSP信號處理器。它們作為輔處理器,可在主CPU控制下進行視頻信號的采集壓縮。隨著FPGA的發展,通過SOPC技術實現視頻采集已成為一種易于開發、設計靈活的方案。而這主要得益于IP復用技術的發展。在FPGA上構建復雜嵌入式系統可利用既有的功能模塊及其驅動程序。該方案具有更大的集成度和靈活性,因而必將成為電子設計發展的一大趨勢。
本文介紹了采用Xilinx公司的Spartan-3 FPGA實現通用視頻采集系統的設計方案。該系統外接模擬PAL/NTAL制式的攝像頭,就能實時采集視頻信號并進行MPEG-4格式壓縮編碼,碼流可通過USB接口傳給PC機,或通過以太網接口進行網絡傳輸。本系統選用的是Spartan-3 FPGA系列的XC3S200芯片,該芯片有4320個邏輯單元(LC)、216Kbit BlockRAM、4個數字延遲鎖相環(DDL)、173個用戶I/O,而且邏輯密度高、I/O多、成本低。本設計主要涉及電路板級硬件設計、FPGA片級硬件系統設計和系統軟件設計。
1 板級硬件設計
FPGA在電源和配置電路的支持下,即可構成嵌入式系統的最小化系統,并能實現片內的所有功能。在此最小化系統上,就可以根據本設計的應用需求,來擴展外部存儲模塊、視頻采集模塊、USB接口模塊、以太網接口模塊等功能模塊電路,從而形成電路板級硬件平臺。該板級硬件平臺的結構組成如圖1所示。
1.1 最小化系統
該FPGA是基于SRAM存儲結構的器件。每次上電時可將配置數據從外部配置存儲器加載到內部SRAM中,以使其構建邏輯結構從而實現邏輯功能。配置調試模塊主要包括配置存儲器、配置模式跳線開關和JTAG調試端口,其中JTAG調試端口是系統開發階段PC機與FPGA的通信接口,可用于從PC機下載FPGA配置數據,并在程序調試階段作為聯機接口。本設計采用Xilinx公司Platform. Flash系列配置存儲器XCF02S,并采用14針JTAG接口。模式跳線開關可決定FPGA是由JTAG還是由配置存儲器來進行配置。系統時鐘模塊可對XC3S200提供50 MHz高頻時鐘信號,它采用高穩定性的石英晶體振蕩器分立元件。電源管理模塊采用DC/DC變換器來為系統各元件提供需要的各種電壓電流。以上部分與FPGA芯片相連即可構成嵌入式系統工作的最小化系統。
1.2 外部存儲擴展
由于XC3S200的片內存儲容量有限且掉電即失,因此必須配置大容量的外部儲存器。本設計擴展了4MByte的flash和32MByte的SDRAM (包括一片AMD公司的AM29LV320DT90EC型Flash和兩片HYNIX公司的HY57V281620HCT-PI型SDRAM)。其中Flash在系統中用于存放程序代碼、常量表以及一些在系統掉電后需要保存的用戶數據。而SDRAM掉電數據即失,但其存取速度大大高于Flash且可讀可寫,因而在系統中用作程序的運行空間、臨時數據及堆棧區等。
1.3 視頻采集模塊
TVP5150是TI公司推出的一款超低功耗的高性能混合信號視頻解碼芯片,可自動識別NTSC/PAL/SECAM制式的模擬信號,并將其按照YCbCr4:2:2的格式轉化成數字信號,然后以8位內嵌同步信號的ITU-RBT.656格式輸出。TVP5150具有價格低、體積小、操作簡便等特點。FPGA對TVP5150芯片的操作是通過I2C總線實現的,數據傳輸連接方式采用最簡單的ITU-RBT.656方式。
1.4 USB接口模塊
USB接口模塊選用PHILIPS公司的高性能USB接口芯片PDIUSBD12。該芯片完全符合USB1.1規范,可支持DMA傳輸,并可通過高速8位并行接口和FPGA進行通信,其最高并行接口速率可達到2 MB/s。
1.5 以太網接口模塊
該模塊采用Realtek公司生產的高度集成的以太網控制器RTL8019AS。RTL8019AS支持IEEE802.3標準和8位或16位數據總線。其內置16KB的SRAM可用于收發緩沖。在全雙工模式時,其收發可同時達到10Mbps。RTL8019AS可支持10Base5、10Base2、10BaseT,并能自動檢測所連接的介質。本設計采用RTL8019AS跳線接口模式,并通過16位數據總線連接FPGA。
2 片級硬件系統設計
在Spartan-3上構建嵌入式系統的基礎是MicroBlaze IP核。這是一種用硬件描述語言在FPGA內部實現的32位微處理器,采用RISC指令集和Ha rvard體系結構??筛鶕煌耐庠O和存儲器配置進行定制,并可以針對應用來調整處理器系統架構。在Spartan-3系列芯片上進行該配置大約占用500 Slices。該IP核具有32個32位通用寄存器和2個專用寄存器。其32位寬的指令系統能支持3個操作數和兩種尋址方式,而其獨立的32位指令和數據總線則可與IBM的OPB總線完全兼容。通過模塊中的LMB總線,其32位指令和數據可直接與片內的塊存儲器相連。此外,該IP核還具有高速的指令和數據緩存(Cache)、三級流水線結構、32位地址總線、硬件調試邏輯、8個輸入和8個輸出的快速鏈路(FSL)接口等。MicroBlaze軟處理器的內部功能結構如圖2所示。
在FPGA上設計嵌入式系統時,可在最低層硬件資源上開發片內外設IP核,或利用已開發的IP核搭建嵌入式系統的硬件部分,然后開發IP核的設備驅動、應用接口(API)和應用層(算法)。通過標準總線接口將局部存儲器總線(LMB)和片內外設總線(OPB)連接到片內外設IP核,MicroBlaze處理器就可以和各種外設IP核及片內BlockRAM相連。該開發工具提供的IP核均有相應的設備驅動和應用接口,使用者只需利用相應的函數庫來編寫自己的應用軟件和算法程序即可。對于用戶自己開發的IP核,則需要自己編寫相應的驅動和接口函數。利用MicroBlaze處理器構建的基本嵌入式系統如圖3所示。
在FPGA上實現嵌入式系統,主要是構建片內MicroBlaze處理器,并為處理器添加片內外設以實現硬件模塊功能,同時應添加片內外設與芯片外部引腳的連接。在開發片內外設的同時,應開發外設功能的底層驅動程序,然后在MicroBlaze處理器上實現系統應用程序。這是個軟件與硬件協同開發的過程。以MicroBlaze處理器為核心的系統開發可使用Xilinx公司提供的EDK(Embedded Development Kit)。該EDK提供有一個集成開發環境XPS(Xilinx Platform. Studio),它同時集成了硬件平臺產生器、軟件平臺產生器、仿真模型生成器、軟件編譯器和軟件調試器等工具。在此環境下調用各種工具即可完成軟硬件協同開發的整個流程。EDK提供有多種與MicroBlaze處理器相關的功能IP核,其中包括OPB 10/100M以太網控制器、PLB/OPB SDRAM控制器、UART中斷控制器、定時器及其它外圍設備接口等資源。使用EDK中的系統硬件平臺設計向導(Base System Builder Wizard)可進行MicroBlaze處理器的配置,而使用添加外圍設備向導(ImportPeripheral Wizard)則可調用既有IP核以生成片內設備,并與處理器總線相連。
本系統的片內主要功能模塊包括視頻接口模塊、環形緩沖區、碼流兩級FIFO緩沖區、MPEG-4編碼器、Flash控制器、SDRAM控制器、10/100M以太網控制模塊、USB控制模塊等。其中視頻接口模塊是MicroBlaze處理器與TVP5150的接口。MicroBlaze處理器對TVP5150的控制驅動程序可從TVP5150驅動程序模板移植而來,可用于實現TVP5150采集方式的配置,并將采集的視頻信號以4:2:0YUV格式存儲到環形緩沖區里。環形緩沖區是片內與MicroBlaze處理器總線相連的SRAM存儲空間的一部分,其中數據隊列的首尾指針是由MicroBlaze處理器程序維護的。采用開發工具提供的FIFO模板可對其深度、位寬、讀寫時鐘、滿標志等參數進行設定,并將兩個FIFO相連以構成兩級FIFO,然后將其入口與MPEG-4編碼器的輸出相連。FIFO的先一級與MicroBlaze處理器總線相連可支持DMA讀取。MPEG-4編碼器是Xilinx公司授權的MPEG-4 Simple Profile編碼器IP核,它接受環形緩沖區里未壓縮的4:2:0YUV格式視頻信號并可將其生成MPEG-4Simple Profile格式壓縮碼流。MPEG-4編碼器與MicroBlaze處理器總線和兩級FIFO輸入相連,可為EDK提供其驅動程序。Flash控制器、SDRAM控制器、10/100M以太網控制器的實現軟件在EDK中已提供,其與處理器總線的連接也在向導工具中自動設定,其驅動程序就包含在其中。由于片外采用了高度集成的USB控制器,而片內的USB控制模塊只是MicroBlaze處理器總線與引腳的直接相連,故其驅動程序只是參考PDIUSBD12的一般驅動程序在EDK軟件平臺上的移植。
本系統的片內外設與MircoBlaze處理器的連接如圖4所示,其中箭頭表示視頻數據的流向。
3 系統軟件設計
系統中的MicroBlaze處理器對TVP515 0和PDIUSBD12的控制驅動程序可根據其通用驅動程序在EDK軟件平臺上移植生成。利用Xilinx公司提供的IP核可以搭建FPGA片內硬件平臺,同時可獲得底層硬件驅動程序的支持,然后在此基礎上進行系統應用程序的開發。
外部模擬視頻信號經TVP5150轉換為數字視頻信號后,即可進入FPGA并通過視頻接口模塊直接排列到內部環形緩沖區數據隊列的隊尾。
當MircoBlaze處理器接收到MPEG-4編碼器可用中斷時,系統將檢測環形緩沖區是否為空。非空時,可將數據隊列的頭部數據取出送給MPEG-4編碼器,同時啟動編碼器編碼。
視頻信號經過編碼器編成視頻原碼流后,即可進入FPGA內部二級FIFO緩存。當FIFO先一級滿時向MircoBlaze處理器發出數據輸出中斷請求。
MircoBlaze處理器響應來自FIFO的中斷后,可將FIFO先一級數據取出并以USB或以太網接口輸出,然后清空FIFO先一級。
依據上面的工作過程,MircoBlaze處理器的應用程序包括以下幾部分:
(1)系統復位初始化
即禁止外部中斷,初始化各驅動程序,清空環形緩沖區和兩級FIFO,檢測USB接口、以太網接口連接以決定用何種方式輸出,然后啟動對TVP5150的控制并進行數據采集,最后啟用外部中斷。
(2)編碼器可用中斷服務
編碼器完成一幀數據編碼即可向MircoBlaze處理器發出中斷,然后由MircoBlaze處理器控制編碼器向環形緩沖區提取數據,并在環形緩沖區耗盡時等待一定時間;
(3)碼流可輸出中斷服務
當兩級FIFO先一級所準備輸出的碼流滿時,可向MircoBlaze處理器發出中斷,然后在MircoBlaze處理器控制下,將該碼流交付給USB或以太網輸出接口API并由底層驅動輸出,最后再清空FIFO先一級。
圖5所示是其應用程序流程圖。
4 結束語
本設計介紹了基于Spartan-3 FPGA實現通用視頻采集系統的實現方案。本系統的設計依賴于專用的設計軟件和IP模塊。由于采用了SOPC技術,該系統可裁減、可擴充、可升級,而多層次IP模塊的高度復用又使得本系統具有設計周期短,風險投資小和設計成本低等優勢。
責任編輯:gt
-
dsp
+關注
關注
552文章
7962瀏覽量
348310 -
FPGA
+關注
關注
1626文章
21678瀏覽量
602043 -
芯片
+關注
關注
454文章
50460瀏覽量
421980
發布評論請先 登錄
相關推薦
評論