圖像處理裝置和圖像處理方法
【技術(shù)領(lǐng)域】
[0001]本技術(shù)涉及一種圖像處理裝置和圖像處理方法，更具體而言，涉及一種用于對包括在可變速率控制流中的圖像進(jìn)行圖像處理的圖像處理裝置和圖像處理方法。
【背景技術(shù)】
[0002]近年來，通過可變速率控制流發(fā)送各種內(nèi)容的發(fā)送系統(tǒng)已經(jīng)得到普遍應(yīng)用。在這種發(fā)送系統(tǒng)中，當(dāng)流作為在其中一幀被劃分為兩個視場的隔行圖像而發(fā)送時，有必要將圖像在接收端處轉(zhuǎn)換為逐行圖像。此外，在許多情況下，在接收側(cè)進(jìn)行用于減少包括在圖像中的噪聲的處理。例如，有人提出了根據(jù)圖像信號外觀模式進(jìn)行隔行/逐行轉(zhuǎn)換或降噪處理的圖像處理裝置(參見，例如，專利文獻(xiàn)I)。
[0003]專利文獻(xiàn)1:日本專利申請公開號2012-253667

【發(fā)明內(nèi)容】

[0004]本發(fā)明要解決的問題
[0005]在可變速率控制流中，圖像的分辨率根據(jù)通信線路的狀態(tài)而變化。由于通信線路的狀態(tài)的變化與圖像場景無關(guān)，所以分辨率的變化也與圖像場景無關(guān)。另一方面，雖然如上所述對包括在流中的圖像進(jìn)行隔行/逐行轉(zhuǎn)換或降噪處理，但是理想的是此時不僅參考目標(biāo)圖像，還參考其它圖像。然而，當(dāng)分辨率改變時，其它圖像不能被參考且圖像處理通過目標(biāo)圖像中的內(nèi)插處理來進(jìn)行，其結(jié)果是圖像質(zhì)量變差。特別是在視頻點播等的服務(wù)中，由于隔行/進(jìn)展轉(zhuǎn)換或降噪處理而引起的劣化易于在再現(xiàn)開始時間或在通信線路卡住的時隙中發(fā)生。
[0006]已經(jīng)鑒于如上所述的情況作出了本技術(shù)，其目的是避免由于圖像處理引起的圖像質(zhì)量劣化，同時保持圖像在可變速率控制流中的分辨率。
[0007]用于解決問題的方式
[0008]完成本技術(shù)是為了解決上述問題，且根據(jù)第一方面，提供了一種圖像處理裝置，其包括:包括分辨率獲取部，其獲取時間上連續(xù)的多個圖像中的每一個的分辨率；縮放百分比生成部，其基于所獲取的分辨率為多個圖像中的每一個生成縮放百分比；圖像縮放部，其根據(jù)所生成的縮放百分比對多個圖像中的每一個進(jìn)行圖像縮放處理；和圖像轉(zhuǎn)換部，其對經(jīng)受圖像縮放處理的多個圖像中的每一個進(jìn)行圖像轉(zhuǎn)換處理；及其圖像處理方法。因此，可獲得通過根據(jù)輸入圖像的分辨率進(jìn)行圖像縮放處理來保持作為圖像轉(zhuǎn)換處理的目標(biāo)圖像的分辨率的操作。
[0009]此外，根據(jù)第一方面，圖像處理裝置還可包括位置檢測部分，其在多個圖像中檢測相關(guān)度降低的位置，且縮放百分比生成部可在相關(guān)度降低的位置處將縮放百分比初始化。通過這種結(jié)構(gòu)，可獲得抑制無助于圖像轉(zhuǎn)換處理的不必要的圖像縮放處理操作。
[0010]此外，根據(jù)第一方面，當(dāng)基于所獲取的分辨率的縮放百分比超過預(yù)定范圍時，縮放百分比生成部可將縮放百分比初始化。通過這種結(jié)構(gòu)，可獲得防止由于過度圖像縮放處理而引起的圖像質(zhì)量劣化的操作。
[0011]此外，在這種情況下，圖像處理裝置還可包括縮放百分比存儲部，其存儲所生成的縮放百分比的歷史，且即使當(dāng)基于所獲取的分辨率的所述縮放百分比超過預(yù)定范圍時，在基于存儲在所述縮放百分比存儲部中的縮放百分比的歷史判斷出超過預(yù)定范圍的狀態(tài)是臨時的時候，縮放百分比生成部也會在不進(jìn)行初始化的情況下生成縮放百分比。通過這種結(jié)構(gòu)，可獲得進(jìn)行滯后操作以免對暫時性波動過度反應(yīng)的操作。
[0012]此外，根據(jù)第一方面，在以所述多個圖像中的每一個作為目標(biāo)圖像進(jìn)行圖像轉(zhuǎn)換處理的時候，當(dāng)在時間上與所述目標(biāo)圖像接近的其它圖像與所述目標(biāo)圖像具有相關(guān)性時，所述圖像轉(zhuǎn)換部參考所述目標(biāo)圖像和所述其他圖像來進(jìn)行所述圖像轉(zhuǎn)換處理，當(dāng)所述其他圖像與所述目標(biāo)圖像不具有相關(guān)性時，所述圖像轉(zhuǎn)換部內(nèi)插所述目標(biāo)圖像來進(jìn)行所述圖像轉(zhuǎn)換處理。根據(jù)這樣的前提，可獲得通過根據(jù)輸入圖像的分辨率進(jìn)行圖像縮放處理來保持作為圖像轉(zhuǎn)換處理的目標(biāo)的圖像的分辨率的操作。
[0013]此外，根據(jù)第一方面，多個圖像中的每個是隔行圖像，且其中圖像轉(zhuǎn)換部可包括作為圖像轉(zhuǎn)換處理的將隔行圖像轉(zhuǎn)換為逐行圖像的處理。此外，圖像轉(zhuǎn)換部可包括作為圖像轉(zhuǎn)換處理的減少多個圖像中的每個的噪聲的處理。
[0014]發(fā)明的效果
[0015]根據(jù)本技術(shù)，能夠獲得以下優(yōu)良效果:由于圖像處理引起的圖像質(zhì)量劣化，同時保持圖像在可變速率控制流中的分辨率。
【附圖說明】
[0016][圖1]示出根據(jù)本技術(shù)的實施例的圖像顯示裝置的結(jié)構(gòu)實例的視圖。
[0017][圖2]示出根據(jù)本技術(shù)的實施例的圖像顯示裝置的主要部分的功能結(jié)構(gòu)實例的示圖。
[0018][圖3]示出根據(jù)本技術(shù)的第一實施例的縮放百分比生成部140的結(jié)構(gòu)實例的示圖。
[0019][圖4]示出由根據(jù)本技術(shù)的實施例的圖像信息獲取部130獲取的圖像信息的實例的示圖。
[0020][圖5]示出根據(jù)本技術(shù)的第一實施例的縮放百分比生成處理的處理過程的實例的流程圖。
[0021][圖6]示出根據(jù)本技術(shù)的實施例的圖像轉(zhuǎn)換處理的處理過程的實例的流程圖。
[0022][圖7]示出根據(jù)本技術(shù)的實施例的圖像轉(zhuǎn)換處理的時序?qū)嵗膱D。
[0023][圖8]示出根據(jù)本技術(shù)的第二實施例的縮放百分比生成部140的結(jié)構(gòu)實例的圖。
[0024][圖9]示出根據(jù)本技術(shù)的第二實施例的縮放百分比生成處理的處理過程的實例的流程圖。
[0025][圖10]示出根據(jù)本技術(shù)的第三實施例的縮放百分比生成處理的處理過程的實例的流程圖。
[0026][圖11]示出根據(jù)本技術(shù)的第四實施例的縮放百分比生成部140的結(jié)構(gòu)實例的圖。
[0027][圖12]示出根據(jù)本技術(shù)的第四實施例的縮放百分比生成處理的處理過程的實例的流程圖。
【具體實施方式】
[0028]在下文中，將描述體現(xiàn)本技術(shù)的形式(以下，稱為實施例)進(jìn)行說明。描述將按照以下順序進(jìn)行。
[0029]1.第一實施例(相對于分辨率的變化的圖像縮放)
[0030]2.第二實施例(場景變化時的圖像縮放抑制)
[0031]3.第三實施例(相對于分辨率的急劇變化的圖像縮放抑制)
[0032]4.第四實施例(相對于分辨率的臨時變化的遲滯操作)
[0033]〈1.第一實施例>
[0034][圖像顯示裝置的結(jié)構(gòu)]
[0035]圖1是示出根據(jù)本技術(shù)的實施例的圖像顯示裝置的結(jié)構(gòu)實例的圖。圖像顯示裝置經(jīng)由通信線接收可變速率控制流并顯示包括在流中的圖像。圖像顯示裝置由流存儲部10、解多路復(fù)用器11、解碼器12、圖像縮放部15、圖像轉(zhuǎn)換部16、移動圖像生成部17、處理器20、存儲器30、OSD生成部40、圖像疊加部50，和顯示部60構(gòu)成。由處理器20、存儲器30、圖像縮放部15和圖像轉(zhuǎn)換部16將構(gòu)成的部分被特定稱為圖像處理裝置。
[0036]流存儲部10存儲經(jīng)由通信線接收的數(shù)據(jù)流。例如，MPEG-2系統(tǒng)或H.264/AVC的比特流被發(fā)送并作為傳輸流和程序流而存儲。
[0037]解多路復(fù)用器11分離在存儲在流存儲部10中的流中復(fù)用的圖像、音頻、數(shù)據(jù)等并將其存儲在存儲器30中。
[0038]解碼器12解碼由解多路復(fù)用器11分離的圖像。例如假設(shè)為MPEG-2或AVC數(shù)字解碼器。
[0039]圖像放大縮小部15對由解碼器12解碼的圖像實施圖像放大處理或者圖像縮小處理(在下文，稱為圖像縮放處理)。
[0040]圖像轉(zhuǎn)換部16對經(jīng)受由圖像縮放部15進(jìn)行的圖像縮放處理的圖像實施圖像轉(zhuǎn)換處理。在這里，圖像轉(zhuǎn)換處理假設(shè)為將隔行圖像轉(zhuǎn)換為逐行圖像的IP轉(zhuǎn)換(隔行/逐行轉(zhuǎn)換)處理、減少圖像噪聲的降噪(NR:降噪)處理等。
[0041]移動圖像生成部17通過對經(jīng)受由圖像轉(zhuǎn)換部16進(jìn)行的圖像轉(zhuǎn)換處理的圖像進(jìn)行縮放處理，來生成其尺寸與顯示部60的面板尺寸匹配的移動圖像。
[0042]OSD生成部40生成OSD(在屏幕顯示上)圖像。OSD圖像疊加在由移動圖像生成部17生成的移動圖像上，并假設(shè)為例如用戶界面圖像、字幕圖像、數(shù)據(jù)廣播服務(wù)等。
[0043]圖像疊加部50將由OSD生成部40生成的OSD圖像疊加到由移動圖像生成部17生成的移動圖像。圖像疊加部50的疊加處理假設(shè)例如為α混合處理。
[0044]處理器20控制圖像顯示裝置的一系列處理。
[0045]存儲器30存儲在圖像顯示裝置中產(chǎn)生的圖像、音頻、數(shù)據(jù)等，并假設(shè)為例如DRAM，諸如DDR0
[0046]顯示部60顯示經(jīng)受由圖像疊加部50進(jìn)行的疊加處理的圖像。顯示部60的實例是顯示器，諸如IXD (液晶顯示器)。
[0047]圖2示出根據(jù)本技術(shù)的實施例的圖像顯示裝置的主要部分的功能結(jié)構(gòu)實例的圖。在這里，解多路復(fù)用器110、解碼器120、圖像縮放部分150和圖像轉(zhuǎn)換部160被示為解多路復(fù)用器11、解碼器12、圖像縮放部15和圖像轉(zhuǎn)換部16的功能。此外，圖像信息獲取部130和縮放百分比生成部140被示為處理器20的功能。此外，雖然功能結(jié)構(gòu)被示為直接連接，但是它們可被暫時存儲在圖像顯示裝置的存儲器30中。
[0048]解多路復(fù)用器110分離從信號線109輸入的流中的多路