基于稀疏編碼哈希的跨模多媒體檢索.pdf

1、在多媒體檢索中,基于哈希的相似檢索是一種非常有效的跨模檢索方法,已經(jīng)得到了廣泛的關(guān)注?？缒z索的核心問題就是怎樣在多模態(tài)數(shù)據(jù)的不同特征表示之間構(gòu)建相關(guān)性。跨模檢索(Cross-Modal Retrieval)的目標(biāo)是為了可以在不同模態(tài)數(shù)據(jù)之間進(jìn)行檢索?？缒９?Cross-Modal Hashing)是將不同模態(tài)的數(shù)據(jù)映射到同一個(gè)低維度的Hamming空間中。由于不同維度的多媒體的數(shù)據(jù)特征表示都最終轉(zhuǎn)化成了相同維度下的二進(jìn)制表示,因此跨

2、模哈?？梢詫?shí)現(xiàn)不同模態(tài)數(shù)據(jù)之間的高效檢索。類似于典型相關(guān)分析(CCA),大多數(shù)現(xiàn)有的跨模哈希多媒體檢索方法是為了用來(lái)實(shí)現(xiàn)來(lái)自相同模態(tài)或者相同視角內(nèi)的數(shù)據(jù)之間的檢索,它們通過(guò)線性映射將不同模態(tài)的數(shù)據(jù)特征映射到一個(gè)共同的抽象空間中。但是,這種方法不能很好地消除不同模態(tài)數(shù)據(jù)間的語(yǔ)義鴻溝,而提取到更高級(jí)別的語(yǔ)義信息可以更加有利于檢索。為了解決這個(gè)問題,本文中,提出了一種新的檢索方法,稀疏編碼哈希,同時(shí)對(duì)該檢索方法進(jìn)行實(shí)驗(yàn)論證,并得出了相應(yīng)的實(shí)驗(yàn)

3、結(jié)果。主要內(nèi)容如下：
　　通過(guò)使用稀疏編碼哈希來(lái)進(jìn)行跨模多媒體檢索,首先使用稀疏編碼來(lái)獲取圖像與文本的顯著特征和潛在語(yǔ)義概念,然后將學(xué)習(xí)到的潛在語(yǔ)義特征映射到共同的抽象空間,再通過(guò)迭代機(jī)制,找到多模態(tài)數(shù)據(jù)特征表示間的相關(guān)性,最后通過(guò)更高級(jí)別抽象空間的量化得到統(tǒng)一的哈希編碼。同時(shí),本文通過(guò)結(jié)合SLEP(有效映射稀疏學(xué)習(xí))和拉格朗日對(duì)偶來(lái)求解目標(biāo)函數(shù),將一個(gè)含有五個(gè)矩陣變量的非凸性的優(yōu)化問題轉(zhuǎn)化為只含有四個(gè)矩陣變量的凸性問題,這樣目標(biāo)