追蹤裝置
技術(shù)領(lǐng)域
[0001] 本發(fā)明涉及一種有效技術(shù),其適用于追蹤圖像內(nèi)的人物的臉的裝置和方法。
背景技術(shù)
[0002] 近年來,實現(xiàn)從靜止圖像或運(yùn)動圖像中檢測/追蹤人物的處理(以下,稱為[人物追蹤處理])的技術(shù)正在受到關(guān)注。在這樣的技術(shù)中,一般把人的臉用作為檢測/追蹤的對象。因為臉兼有眾人共通的特征和每個人各不相同的特征。即,通過把臉作為對象,可以利用眾人共通的特征來檢測出臉,可以利用每個人各不相同的特征來識別個人。
[0003] 現(xiàn)有的一般的人物追蹤處理以下這樣執(zhí)行。首先,利用眾人共通的臉的特征,從圖像中檢測出人的臉,指定臉的區(qū)域。接著,從所檢測出的臉中選擇追蹤對象。對于該選擇,不僅有通過執(zhí)行個人辨識處理而對于各張臉自動進(jìn)行的情況,也有通過人的目視進(jìn)行的情況。選擇了追蹤對象后,在前次的處理中檢測出臉的位置的周圍(以下,稱為[次檢測區(qū)域]),執(zhí)行人臉檢測。然后,對于所檢測出的臉執(zhí)行個人辨識處理,由此實現(xiàn)追蹤。而且,也提出了即使在辨識處理失敗的情況下,基于語音方向識別或膚色識別等的識別結(jié)果,進(jìn)行人物的位置推定,繼續(xù)追蹤的技術(shù)(參照專利文獻(xiàn)1)。
[0004] 但是,在以臉作為檢測/追蹤對象,從運(yùn)動圖像等中追蹤人物的現(xiàn)有技術(shù)中存在以下這樣的問題。第一,臉被障礙物的陰影遮擋時,或臉朝向側(cè)面或后面時等,存在執(zhí)行追蹤變得困難的問題。例如假設(shè)即使執(zhí)行語音方向識別,在被攝物體不發(fā)聲的情況下或在噪音環(huán)境下,存在得不到有效結(jié)果的問題。第二,因為個人的辨識處理需要很長的處理時間,存在不適合于需要反復(fù)執(zhí)行的運(yùn)動圖像中的人物追蹤處理的問題。
[0005] 因此,為了提高魯棒性并且實現(xiàn)處理的高速化,提出了通過將人的衣服的顏色作為追蹤的對象,實現(xiàn)人物的追蹤的技術(shù)。作為這樣的技術(shù)的具體例,提出了將測距用框內(nèi)的被攝物體中面積最大的顏色作為衣服的顏色,進(jìn)行追蹤的技術(shù)(參照專利文獻(xiàn)2)。一般的,衣服的顏色大多不隨朝向變化而固定,因此通過這樣對衣服的顏色進(jìn)行追蹤,能夠提高魯棒性。并且,通過把顏色作為追蹤的對象,處理變得容易,因此能夠?qū)崿F(xiàn)高速化。
[0006] 【專利文獻(xiàn)1】日本特開2004-283959號公報
[0007] 【專利文獻(xiàn)2】日本特開平06-22195號公報
[0008] 但是,在上述這樣的技術(shù)中也存在問題點(diǎn)。例如,當(dāng)在測距用框內(nèi)存在面積比應(yīng)當(dāng)作為被攝物體的人的衣服更大的其它顏色區(qū)域的情況下,會錯誤地檢測追蹤對象,將錯誤的被攝物體作為追蹤的對象。并且,在追蹤對象的周圍存在具有與追蹤對象相同的顏色的多個被攝物體的情況下,有追蹤錯誤的被攝物體的可能性。
[0009] 對于這樣的問題,也可以考慮通過預(yù)先對衣服進(jìn)行學(xué)習(xí)處理,防止誤檢測/誤追蹤。但是,通常,衣服是每天變化的,因此不能說執(zhí)行基于學(xué)習(xí)的檢測/追蹤是有效的。
發(fā)明內(nèi)容
[0010] 因此本發(fā)明的目的是提供能夠提高運(yùn)動圖像中的人物追蹤處理的魯棒性的裝置和方法。換言之,本發(fā)明的目的是提供即使在運(yùn)動圖像中產(chǎn)生了無法檢測追蹤對象的臉的情況下,也能夠繼續(xù)進(jìn)行被攝物體的追蹤的裝置和方法。
[0011] 為了解決上述問題,本發(fā)明采用以下這樣的結(jié)構(gòu)。本發(fā)明是追蹤運(yùn)動圖像中的人臉的位置的追蹤裝置,包括人臉檢測單元、存儲單元以及推定單元。人臉檢測單元從圖像中檢測人臉。存儲單元存儲周圍信息,該周圍信息是從所述圖像中與人臉檢測單元所檢測出的人臉的位置相關(guān)聯(lián)、由與人臉的位置之間的相對位置關(guān)系所確定的區(qū)域中獲取的。推定單元,其不是通過人臉檢測單元檢測人臉,而是基于之前檢測出的人臉的位置,求出多個當(dāng)前人臉候選位置,取得與這些候選位置分別對應(yīng)的多個周圍信息,基于取得了和與之前檢測出的人臉位置相關(guān)聯(lián)的周圍信息最類似的周圍信息的候選位置,確定當(dāng)前的人臉的位置。所謂之前檢測出的人臉,可以是在前一圖像中所檢測出的人臉,也可以是在之前的多張圖像中所檢測出的人臉。
[0012] 在這樣構(gòu)成的追蹤裝置中,在推定當(dāng)前的人臉的位置時,可以不從圖像中檢測人臉而進(jìn)行推定。因此,即使例如追蹤對象的臉被物體的陰影遮擋的情況,或人臉朝向后方的情況這樣,很難進(jìn)行人臉的檢測的情況下,也不會追丟追蹤對象的臉,而能夠繼續(xù)追蹤。
[0013] 本發(fā)明也可以構(gòu)成為,還具有基于之前檢測出的人臉的位置,獲取人臉的運(yùn)動信息的運(yùn)動信息獲取單元。該情況下,推定單元也可以構(gòu)成為基于之前檢測出的人臉的位置和運(yùn)動信息,求得候選位置。
[0014] 此外,本發(fā)明的存儲單元可以構(gòu)成為還關(guān)聯(lián)地存儲特征量。此時人臉檢測單元可以構(gòu)成為,基于檢測出的人臉的特征量和之前檢測出的人臉的特征量,判斷檢測出的人臉與該之前檢測出的人臉是否相同。并且此時推定單元也可以構(gòu)成為,確定在存儲單元中存儲了特征量的人臉之未由人臉檢測單元檢測出的人臉的位置。