嵌入聲紋特征的個(gè)人證件識(shí)讀器
摘 要:在現(xiàn)今的電子產(chǎn)品開發(fā)領(lǐng)域中,基于FPGA的SOPC占有極其重要的地位。本文介紹了基于SOPC、嵌入生物特征的個(gè)人證件識(shí)讀器設(shè)計(jì)。其中,生物特征主要以聲紋特征為目標(biāo),將其嵌入到二維條形碼中,再打印條碼到個(gè)人證件上,用于個(gè)人證件的防偽驗(yàn)證。本設(shè)計(jì)采用Altera公司的FPGA軟核處理器以及通用IP核實(shí)現(xiàn)系統(tǒng)的集成化,并且用C2H工具對(duì)軟件算法的瓶頸進(jìn)行硬件加速處理,系統(tǒng)性能得到了明顯提高。
關(guān)鍵詞: SOPC;IP核;二維條形碼;C2H
引言
SOPC可編程片上系統(tǒng)是一種獨(dú)特的嵌入式微處理系統(tǒng)。首先,它是SoC,即由單個(gè)芯片完成整個(gè)系統(tǒng)的主要邏輯功能;其次,它是可編程系統(tǒng),以FPGA為硬件基礎(chǔ),具有靈活的設(shè)計(jì)方式,可裁減、可擴(kuò)充、可升級(jí),并具備軟硬件系統(tǒng)在線可編程的能力。
本系統(tǒng)采用了Altera公司的Cyclone II FPGA開發(fā)平臺(tái)和相應(yīng)的開發(fā)工具Quartus II進(jìn)行系統(tǒng)硬件部分的開發(fā);利用Nios II IDE實(shí)現(xiàn)了語音識(shí)別算法的編譯、鏈接、調(diào)試和運(yùn)行;同時(shí)還應(yīng)用了Altera公司獨(dú)具特色的C2H加速工具,實(shí)現(xiàn)了語音算法程序的硬件加速,使系統(tǒng)性能得到了明顯的提升。
此次設(shè)計(jì)采用了二維條形碼進(jìn)行語音特征的存儲(chǔ),一方面是考慮到二維條形碼的成本很低,市場(chǎng)應(yīng)用潛力巨大;另一方面,正因?yàn)樵趥€(gè)人證件上擁有了二維條形碼,系統(tǒng)可以脫離數(shù)據(jù)庫的支持,變得更加靈活實(shí)用。
系統(tǒng)結(jié)構(gòu)
本設(shè)計(jì)采用SOPC的可編程設(shè)計(jì)思想,以Cyclone II中實(shí)現(xiàn)的Nios II處理器為核心,系統(tǒng)架構(gòu)如圖1所示。
圖1 系統(tǒng)結(jié)構(gòu)框圖
中心處理模塊可以接收其他模塊的數(shù)據(jù),并進(jìn)行處理,再將處理結(jié)果送到外部設(shè)備進(jìn)行顯示和報(bào)告。語音采集模塊在用戶注冊(cè)和認(rèn)證時(shí)采集用戶口令(即語音),其中包含A/D采樣、量化、編碼等,并會(huì)將數(shù)字形式的數(shù)據(jù)送到中心處理模塊等待處理。系統(tǒng)以串口掃描槍做為條碼掃描設(shè)備,用于讀取個(gè)人證件上嵌入聲紋特征的二維條形碼中的數(shù)據(jù),這些數(shù)據(jù)是在用戶注冊(cè)時(shí)生成的。
本設(shè)計(jì)將SOPC設(shè)計(jì)與二維條形碼數(shù)據(jù)存儲(chǔ)相結(jié)合,不僅發(fā)揮了各自的特點(diǎn),而且擴(kuò)寬了應(yīng)用領(lǐng)域。
系統(tǒng)工作流程分為注冊(cè)和驗(yàn)證兩個(gè)階段。注冊(cè)過程需要采集同一用戶的多個(gè)語音,通過注冊(cè)算法生成個(gè)人的生物特征,將其嵌入到二維條碼中,再打印條碼到此用戶的個(gè)人證件上。這樣的證件具備了唯一、不易復(fù)制等特點(diǎn),從而提高了證件的安全性能。對(duì)證件進(jìn)行驗(yàn)證時(shí),先用條碼掃描設(shè)備讀取條碼中的特征數(shù)據(jù),然后現(xiàn)場(chǎng)采集證件持有人的語音,進(jìn)行比對(duì),給出驗(yàn)證結(jié)果。
硬件的具體實(shí)現(xiàn)
本設(shè)計(jì)以32位Nios II軟核處理器為系統(tǒng)的核心部分,負(fù)責(zé)執(zhí)行指令和數(shù)據(jù)運(yùn)算。各種IP都可以通過SOPC Builder連接到Avalon總線上,其中包含用戶自定義的外設(shè)。用戶外設(shè)的編寫需要符合Avalon總線的規(guī)范。
系統(tǒng)硬件結(jié)構(gòu)如圖2所示,包括CPU、UART、LCD、三態(tài)橋、片外存儲(chǔ)器控制,以及各種輸入/輸出控制,這些IP都可以直接復(fù)用。這樣的系統(tǒng)設(shè)計(jì)方法不僅模塊化,而且大大縮短了系統(tǒng)設(shè)計(jì)周期。FFT運(yùn)算模塊不僅可以直接使用IP,還可以用C2H加速工具來提高系統(tǒng)性能。在此次設(shè)計(jì)中,F(xiàn)FT、DCT以及數(shù)據(jù)量較大的循環(huán)運(yùn)算都采用C2H完成了硬件加速,效果較為明顯。
圖2 系統(tǒng)硬件結(jié)構(gòu)
Nios II軟核處理器
Nios II是32位軟核處理器,具有較高的性能。本設(shè)計(jì)在Altera的Cyclone II上實(shí)現(xiàn)了處理器的配置,可以通過添加用戶自定義指令來增強(qiáng)系統(tǒng)設(shè)計(jì)性能,同時(shí)可以添加多個(gè)片內(nèi)存儲(chǔ)器來提高數(shù)據(jù)的處理能力。
串口通信
本設(shè)計(jì)用到的掃描槍通過串口(UART)連接到開發(fā)平臺(tái)上,目的是對(duì)二維條形碼中包含語音特征的數(shù)據(jù)進(jìn)行讀取,通過Avalon總線將數(shù)據(jù)傳送到相應(yīng)的片外存儲(chǔ)器中等待處理。
Timer
本設(shè)計(jì)利用SOPC Builder工具將兩個(gè)Timer掛到Avalon總線上。其中一個(gè)設(shè)置為在IDE中運(yùn)行C程序時(shí)的系統(tǒng)時(shí)鐘,另外一個(gè)用作計(jì)時(shí)器。算法程序中設(shè)置了多個(gè)時(shí)間戳(Timestamp),相鄰兩個(gè)時(shí)間戳內(nèi)程序段的運(yùn)行時(shí)間可以用這兩個(gè)時(shí)間戳的差值來表示。時(shí)間戳的設(shè)置對(duì)程序運(yùn)行沒有影響。設(shè)置計(jì)時(shí)器的最終目的是:將完全的軟件實(shí)現(xiàn)與用C2H加速后的程序運(yùn)行時(shí)間進(jìn)行比較。
語音采集和語音報(bào)告驗(yàn)證結(jié)果
系統(tǒng)中,語音采集和語音報(bào)告驗(yàn)證結(jié)果部分均由Wolfson公司的WM8731L完成。WM8731L可以獨(dú)立于Nios II軟核處理器單獨(dú)工作,其控制模塊可按照I2C總線的時(shí)序編寫。WM8731L內(nèi)部含有A/D、D/A模塊,同時(shí)具備較高的采樣率和量化精度。本設(shè)計(jì)采用了8kHz的采樣率,16位的量化精度。
在語音采集部分,由于A/D是串行數(shù)據(jù)輸出,因此編寫了串行到并行數(shù)據(jù)轉(zhuǎn)換以及寫SRAM控制的Verilog模塊。語音報(bào)告結(jié)果部分通過GPIO與CPU進(jìn)行數(shù)據(jù)、地址通信,將不同的語音按照不同的驗(yàn)證結(jié)果播放出來,這些語音的數(shù)據(jù)已經(jīng)事先燒寫進(jìn)FLASH中。GPIO的控制可以通過Nios IDE來完成。類似地,播放語音部分由于從FLASH讀出的數(shù)據(jù)是并行的,因此編寫了并行到串行數(shù)據(jù)轉(zhuǎn)換的Verilog模塊。
加速模塊
首先,在Nios IDE下運(yùn)行算法C語言程序,利用計(jì)時(shí)器找出程序運(yùn)行的瓶頸環(huán)節(jié)。而后對(duì)瓶頸部分利用C2H工具進(jìn)行硬件加速,從而提高系統(tǒng)性能。這部分主要包括FFT運(yùn)算加速和循環(huán)運(yùn)算加速模塊。
軟件流程
個(gè)人證件的驗(yàn)證流程如圖3所示。驗(yàn)證分為兩個(gè)基本過程,首先要讀取條碼中的數(shù)據(jù),即用戶登錄;然后采集用戶語音,即用戶身份輸入。經(jīng)過特征比對(duì),給出驗(yàn)證結(jié)果,由此可以說明用戶現(xiàn)場(chǎng)所持證件是否屬于其個(gè)人。
圖3 驗(yàn)證過軟件結(jié)構(gòu)流程圖
C2H硬件加速
Nios II C2H加速器可以將ANSI C源程序代碼轉(zhuǎn)換成用戶自定義的硬件加速模塊。利用C2H工具,開發(fā)人員首先在Altera Nios II處理器中開發(fā)和調(diào)試C語言算法,而后將分析出的C程序瓶頸代碼轉(zhuǎn)換成硬件加速模塊。硬件加速模塊被掛到Avalon總線上,作為用戶外設(shè)來使用。由此實(shí)現(xiàn)了從軟件運(yùn)行算法到硬件加速處理的轉(zhuǎn)換過程。需要注意的是,并不是所有的C代碼都可以轉(zhuǎn)換成硬件加速模塊。C2H編譯器的特點(diǎn)如下:
①支持大部分的ANSI C代碼和C語言結(jié)構(gòu),如指針、堆棧、結(jié)構(gòu)體、全局和局部變量、循環(huán)、函數(shù)調(diào)用等;
②C2H編譯器可以將C語言的語法成分映射為硬件結(jié)構(gòu),而且用戶可以控制這些硬件加速結(jié)構(gòu);
③由于IDE6.0整合了C2H工具,用戶無需學(xué)習(xí)新的開發(fā)環(huán)境;
④C2H可以利用SOPC Builder將加速好的硬件結(jié)構(gòu)自動(dòng)連接到Avalon總線上,無需用戶手動(dòng)處理;
⑤C2H可以產(chǎn)生硬件結(jié)構(gòu)、資源利用率等詳細(xì)報(bào)告。
本設(shè)計(jì)中規(guī)定用戶采集語音的時(shí)長(zhǎng)約為1s,內(nèi)容為“你好”。在這樣的條件下,利用計(jì)時(shí)器計(jì)算從預(yù)處理到給出識(shí)別結(jié)果的程序運(yùn)行時(shí)間。系統(tǒng)時(shí)鐘頻率設(shè)置為50MHz。通過試驗(yàn),得出運(yùn)行時(shí)間約為5s,這顯然不能滿足實(shí)際需求。對(duì)實(shí)驗(yàn)結(jié)果進(jìn)行分析,發(fā)現(xiàn)程序運(yùn)行耗時(shí)主要集中在預(yù)處理和特征提取這部分,將其稱為“前端”。經(jīng)過分析前端的代碼運(yùn)行情況,設(shè)計(jì)師發(fā)現(xiàn)程序運(yùn)行時(shí)間較長(zhǎng)的主要原因是該部分包含了大量的矩陣運(yùn)算和循環(huán)運(yùn)算。下一步工作就是分析程序的運(yùn)行瓶頸。經(jīng)過分析研究發(fā)現(xiàn),本設(shè)計(jì)算法中的瓶頸主要集中在加窗、FFT和DCT等部分,它們的耗時(shí)一般占到整個(gè)程序運(yùn)行的60%以上。若將這些環(huán)節(jié)加速成功,性能將有較大提升。
圖4中顯示了在SOPC Builder中向Avalon總線加載C2H加速器和片內(nèi)RAM的情況。圖中顯示了兩個(gè)加速器:accelerator_ c2h_fft_fft和 accelerator_ c2h_fft_ham,分別對(duì)應(yīng)FFT和加窗(漢明窗)的硬件加速運(yùn)算過程,SOPC Builder并沒有為這兩個(gè)模塊分配基地址。圖4中最下方的4個(gè)片內(nèi)RAM可以起到數(shù)據(jù)緩存的作用。SinRAM與CosRAM為FFT加速運(yùn)算提供正弦和余弦的查找表數(shù)據(jù),dataRRAM與dataIRAM分別用于存儲(chǔ)FFT運(yùn)算后生成數(shù)據(jù)的實(shí)部和虛部。
圖4 C2H加速器和添加的片內(nèi)RAM
本設(shè)計(jì)中FFT采用256點(diǎn)的運(yùn)算。軟件FFT與硬件加速FFT計(jì)算時(shí)間的比較如表1所示,其中V1、V2、V3是設(shè)計(jì)中同一用戶注冊(cè)時(shí)的3段語音(內(nèi)容相同)。通過表1可以看出,完全軟件計(jì)算時(shí),F(xiàn)FT耗時(shí)大約為2s;利用C2H工具加速后,耗時(shí)僅約為0.01s,提速效果良好。而后再將算法程序中其它環(huán)節(jié)進(jìn)行加速,則設(shè)計(jì)的整體性能是可以滿足實(shí)際需求的。因此,C2H對(duì)運(yùn)行在SOPC系統(tǒng)上軟件算法的加速處理是十分有效的。
結(jié)語
本文闡述了一種基于FPGA平臺(tái)的應(yīng)用設(shè)計(jì)實(shí)例,不僅能充分體現(xiàn)SOPC設(shè)計(jì)理念,而且與生物特征技術(shù)有機(jī)結(jié)合,發(fā)揮了二者的優(yōu)勢(shì),具有廣闊的應(yīng)用前景。另外,本設(shè)計(jì)采用了Altera的C2H加速工具對(duì)軟件算法進(jìn)行硬件加速,實(shí)驗(yàn)結(jié)果表明利用這種方法進(jìn)行設(shè)計(jì)效果明顯。由于使用C2H工具對(duì)算法有一定的限制,因此某些情況下,用戶自定義指令和用戶外設(shè)仍然是不可或缺的設(shè)計(jì)方法。這幾種設(shè)計(jì)手段的有機(jī)結(jié)合是FPGA設(shè)計(jì)的主要方向。■
參考文獻(xiàn)
1徐光輝,程動(dòng)旭,黃如.基于FPGA的嵌入式開發(fā)與應(yīng)用.北京:電子工業(yè)出版社,2006
2夏宇聞.Verilog數(shù)字系統(tǒng)設(shè)計(jì)教程.北京:北京航空航天大學(xué)出版社,2003
3 EDA先鋒工作室.Altera FPGA/CPLD設(shè)計(jì).北京:人民郵電出版社,2005
4 Nios II C2H Compiler User Guide
5 Quartus II Version 6.0 Handbook. Volume 5: Altera Embedded Peripherals
6 Quatieri, Thomas F. Discrete-time Speech Signal Processing: Principles and Practice.2004
評(píng)論