基于內(nèi)容的信息存取與MPEG-7

五、 多媒體研究與MPEG-7

MPEG-7將標(biāo)準(zhǔn)化各種類型多媒體信息的描述，但它不包含描述子/特征的提取，也不規(guī)范搜索引擎和其他使用這些描述的程序。因此，圍繞 MPEG-7，在多媒體信息存取方面，以下工作可以進(jìn)一步開(kāi)展：

1.存取接口

研究通用的和與應(yīng)用相關(guān)的多媒體信息查詢接口。例如在鍵盤(pán)上演奏幾個(gè)音符來(lái)查詢音樂(lè)、用“尖叫的剎車(chē)聲音”查找出汽車(chē)追逐的場(chǎng)景;在屏幕上畫(huà)一些線段，獲得一組包含相似圖形、標(biāo)志和符號(hào)的圖像;定義對(duì)象的顏色和紋理，獲得與你選擇的特征相似的圖像;對(duì)于給定的一組對(duì)象，描述運(yùn)動(dòng)和對(duì)象之間的關(guān)系，獲得一組動(dòng)態(tài)圖像，包含描述的時(shí)空關(guān)系;在給定內(nèi)容條件下，描述情節(jié)，并獲得多個(gè)相似情節(jié)發(fā)生的場(chǎng)景，等等。另外一些值得考慮的問(wèn)題是：如何組合這些查詢;如何在查詢過(guò)程中引入交互和優(yōu)先級(jí);如何設(shè)計(jì)一種查詢語(yǔ)言;如何構(gòu)造瀏覽和可視化視圖，以建立更有效和可靠的多媒體信息存取接口。

2.特征提取和檢索引擎

自動(dòng)和半自動(dòng)的特征提取方法。這對(duì)大規(guī)模的多媒體數(shù)據(jù)管理是非常有價(jià)值的。這里把特征提取和檢索引擎放在一起討論是因?yàn)閮烧叩难芯吭跈z索效率和有效性方面是緊密聯(lián)系在一起的，即檢索有效性使用戶和系統(tǒng)得到查找的東西而不是其他;檢索效率使用戶或系統(tǒng)快速得到所要的結(jié)果。這需要研究者探討更能代表媒體數(shù)據(jù)內(nèi)容的特征(便于區(qū)分)，以及高效的索引結(jié)構(gòu)和算法。

3.廣泛的多媒體應(yīng)用研究

MPEG-7不僅僅用于多媒體信息的檢索，更能廣泛地用于其他與多媒體信息內(nèi)容管理相關(guān)的領(lǐng)域。許多應(yīng)用和應(yīng)用領(lǐng)域?qū)腗PEG-7標(biāo)準(zhǔn)中獲得好處。在MPEG-7推薦的應(yīng)用中實(shí)際上蘊(yùn)涵了許多值得研究的課題。