基于Android平臺(tái)的可視對(duì)講系統(tǒng)設(shè)計(jì)

(3)JNI接口函數(shù)

JNI接口函數(shù)編寫在C語(yǔ)言文件中，與音視頻解碼源碼一起打包生成動(dòng)態(tài)鏈接庫(kù)。在接口函數(shù)中聲明4個(gè)無(wú)符號(hào)指針變量：decode指向待解碼的數(shù)據(jù)、depcm指向解碼后的數(shù)據(jù)、enpcm指向待編碼的數(shù)據(jù)、encode指向編碼后的數(shù)據(jù)。解碼代碼如下：

void Java_com_qsa_play_G711Decoder

(JNIEnv*env，jobject this，jbyteArray pcm，jbyteArray code，jint size，jint lawflag)

{

depcm=(unsigned char*)(*env)->

GetByteArrayElements(env，pcm，0);

decode=(unsigned char*)(*env)->

GetByteArrayElements(env，code，0);

G711Decoder(depcm，decode，size，lawflag);

(*env)->ReleaseByteArrayElements(env， pcm，

(jbyte)depcm，0);

(*env)->ReleaseByteArrayElements(env，code，(jbyte)

decode，0);

}

其中，depcm=(unsigned char*)(*env)->GetByteArrayElements(env，pcm，0)用來(lái)獲取Java層傳遞的待解碼字節(jié)數(shù)組的首地址，G711Decoder()函數(shù)實(shí)現(xiàn)音頻解碼，(*env)->ReleaseByteArrayElements(env，pcm， (jbyte)depcm，0)釋放傳遞的數(shù)組成員，進(jìn)行資源回收。

(4)使用NDK中ndk-build命令編譯生成動(dòng)態(tài)鏈接庫(kù)

ndk-build命令是ndk命令工具集中的一個(gè)命令，與Linux下shell編程中的make命令相似，它會(huì)查找文件夾中的后綴為“.mk”的Makefile文件，根據(jù)該文件的依賴文件，將源文件編譯成動(dòng)態(tài)鏈接庫(kù)。

2.3.2 視頻編解碼實(shí)現(xiàn)

視頻的編解碼流程與音頻編解碼流程基本相似，視頻編解碼調(diào)用的C庫(kù)函數(shù)分別為avcodec_encode_video、avcodec_decode_video2。限于篇幅，在此重點(diǎn)介紹Android平臺(tái)視頻的解碼及顯示。

在解碼視頻數(shù)據(jù)前，要先做一系列的準(zhǔn)備工作：

(1)給出主要的數(shù)據(jù)結(jié)構(gòu)

static AVPacket avpkt;

static AVFrame*picture;

static AVFrame*pFrameRGB;

static AVCodec*codec;

static AVCodecContext*c= NULL;

static struct SwsContext*img_convert_ctx;

AndroidBitmapInfo info;

void*pixels;

(2)初始化流程

①注冊(cè)解碼器

avcodec_init();

av_register_all();

②初始化AVPacket、AVCodecContext、AVFrame

av_init_packet(avpkt);

c=avcodec_alloc_context();

picture=avcodec_alloc_frame();

其中，AVFrame是數(shù)據(jù)流在編解碼過(guò)程中用來(lái)保存數(shù)據(jù)緩存的對(duì)象，從數(shù)據(jù)流中讀取到的數(shù)據(jù)首先保存到AVPacket中。一個(gè)AVPacket最多只包含一個(gè)AVFrame，而一個(gè)AVFrame可以包含好幾個(gè)AVPacket。AVCodecContext用于動(dòng)態(tài)記錄一個(gè)解碼器的上下文信息。

③設(shè)置視頻解碼器

codec=avcodec_find_decoder(MPEG-4);

avcodec_open(c，codec);

④視頻解碼流程

視頻解碼流程如圖4所示。圖4中，AndroidBitmap_getinfo用于獲取Android平臺(tái)Bitmap對(duì)象的大小，AndroidBitmap_ lockpixels函數(shù)是對(duì)Bitmap進(jìn)行加鎖、互斥使用資源。如果AVPacket包中存在未解碼完的數(shù)據(jù)，則調(diào)用函數(shù)avcodec_decode_ video2進(jìn)行解碼;若解碼出一幀后需要調(diào)用函數(shù)sws_scale進(jìn)行格式轉(zhuǎn)換。視頻數(shù)據(jù)解碼完后顏色空間為YUV，需轉(zhuǎn)換成RGB顏色空間。最后調(diào)用fill_bitmap函數(shù)進(jìn)行數(shù)據(jù)填充及進(jìn)行Bitmap的解鎖和資源的釋放。

視頻顯示采用Android平臺(tái)的ImageView控件進(jìn)行顯示。解碼線程接收到視頻數(shù)據(jù)后，通過(guò)JNI調(diào)用，調(diào)用動(dòng)態(tài)庫(kù)中的視頻解碼接口函數(shù)進(jìn)行解碼，每解碼完一幀后通過(guò)消息通知主線程進(jìn)行顯示圖像的更新，這樣就達(dá)到了視頻數(shù)據(jù)動(dòng)態(tài)顯示的效果。

3 實(shí)現(xiàn)效果

Android平臺(tái)在i.MX51 EVK平臺(tái)上移植成功后，串口中Android 操作系統(tǒng)啟動(dòng)信息如圖5所示。 從圖中的啟動(dòng)信息可以看出，Android平臺(tái)移植成功，啟動(dòng)信息也包含有CPU信息、內(nèi)核版本、大小、加載地址、Android文件系統(tǒng)版本等信息。

該軟件開(kāi)發(fā)完成后，在Android工程的bin下生成apk文件，并復(fù)制apk文件到SD卡中，在Android系統(tǒng)中安裝該軟件，使用門口機(jī)進(jìn)行撥號(hào)，編碼后的音視頻數(shù)據(jù)通過(guò)網(wǎng)線進(jìn)行傳輸。

本文將Android手機(jī)操作系統(tǒng)應(yīng)用于i.MX51 EVK平臺(tái)，并在該平臺(tái)上提出了可視對(duì)講的設(shè)計(jì)方案，分別進(jìn)行了通信流程、應(yīng)用協(xié)議、功能模塊等設(shè)計(jì)，最后實(shí)現(xiàn)了系統(tǒng)的設(shè)計(jì)方案。但由于視頻是使用軟件解碼，運(yùn)行效率有待提高，且語(yǔ)音對(duì)講部分回聲消除存在問(wèn)題，有待進(jìn)一步研究。