圖像處理裝置和圖像處理方法
【技術領域】
[0001]本技術涉及一種圖像處理裝置和圖像處理方法，更具體而言，涉及一種用于對包括在可變速率控制流中的圖像進行圖像處理的圖像處理裝置和圖像處理方法。
【背景技術】
[0002]近年來，通過可變速率控制流發送各種內容的發送系統已經得到普遍應用。在這種發送系統中，當流作為在其中一幀被劃分為兩個視場的隔行圖像而發送時，有必要將圖像在接收端處轉換為逐行圖像。此外，在許多情況下，在接收側進行用于減少包括在圖像中的噪聲的處理。例如，有人提出了根據圖像信號外觀模式進行隔行/逐行轉換或降噪處理的圖像處理裝置(參見，例如，專利文獻I)。
[0003]專利文獻1:日本專利申請公開號2012-253667

【發明內容】

[0004]本發明要解決的問題
[0005]在可變速率控制流中，圖像的分辨率根據通信線路的狀態而變化。由于通信線路的狀態的變化與圖像場景無關，所以分辨率的變化也與圖像場景無關。另一方面，雖然如上所述對包括在流中的圖像進行隔行/逐行轉換或降噪處理，但是理想的是此時不僅參考目標圖像，還參考其它圖像。然而，當分辨率改變時，其它圖像不能被參考且圖像處理通過目標圖像中的內插處理來進行，其結果是圖像質量變差。特別是在視頻點播等的服務中，由于隔行/進展轉換或降噪處理而引起的劣化易于在再現開始時間或在通信線路卡住的時隙中發生。
[0006]已經鑒于如上所述的情況作出了本技術，其目的是避免由于圖像處理引起的圖像質量劣化，同時保持圖像在可變速率控制流中的分辨率。
[0007]用于解決問題的方式
[0008]完成本技術是為了解決上述問題，且根據第一方面，提供了一種圖像處理裝置，其包括:包括分辨率獲取部，其獲取時間上連續的多個圖像中的每一個的分辨率；縮放百分比生成部，其基于所獲取的分辨率為多個圖像中的每一個生成縮放百分比；圖像縮放部，其根據所生成的縮放百分比對多個圖像中的每一個進行圖像縮放處理；和圖像轉換部，其對經受圖像縮放處理的多個圖像中的每一個進行圖像轉換處理；及其圖像處理方法。因此，可獲得通過根據輸入圖像的分辨率進行圖像縮放處理來保持作為圖像轉換處理的目標圖像的分辨率的操作。
[0009]此外，根據第一方面，圖像處理裝置還可包括位置檢測部分，其在多個圖像中檢測相關度降低的位置，且縮放百分比生成部可在相關度降低的位置處將縮放百分比初始化。通過這種結構，可獲得抑制無助于圖像轉換處理的不必要的圖像縮放處理操作。
[0010]此外，根據第一方面，當基于所獲取的分辨率的縮放百分比超過預定范圍時，縮放百分比生成部可將縮放百分比初始化。通過這種結構，可獲得防止由于過度圖像縮放處理而引起的圖像質量劣化的操作。
[0011]此外，在這種情況下，圖像處理裝置還可包括縮放百分比存儲部，其存儲所生成的縮放百分比的歷史，且即使當基于所獲取的分辨率的所述縮放百分比超過預定范圍時，在基于存儲在所述縮放百分比存儲部中的縮放百分比的歷史判斷出超過預定范圍的狀態是臨時的時候，縮放百分比生成部也會在不進行初始化的情況下生成縮放百分比。通過這種結構，可獲得進行滯后操作以免對暫時性波動過度反應的操作。
[0012]此外，根據第一方面，在以所述多個圖像中的每一個作為目標圖像進行圖像轉換處理的時候，當在時間上與所述目標圖像接近的其它圖像與所述目標圖像具有相關性時，所述圖像轉換部參考所述目標圖像和所述其他圖像來進行所述圖像轉換處理，當所述其他圖像與所述目標圖像不具有相關性時，所述圖像轉換部內插所述目標圖像來進行所述圖像轉換處理。根據這樣的前提，可獲得通過根據輸入圖像的分辨率進行圖像縮放處理來保持作為圖像轉換處理的目標的圖像的分辨率的操作。
[0013]此外，根據第一方面，多個圖像中的每個是隔行圖像，且其中圖像轉換部可包括作為圖像轉換處理的將隔行圖像轉換為逐行圖像的處理。此外，圖像轉換部可包括作為圖像轉換處理的減少多個圖像中的每個的噪聲的處理。
[0014]發明的效果
[0015]根據本技術，能夠獲得以下優良效果:由于圖像處理引起的圖像質量劣化，同時保持圖像在可變速率控制流中的分辨率。
【附圖說明】
[0016][圖1]示出根據本技術的實施例的圖像顯示裝置的結構實例的視圖。
[0017][圖2]示出根據本技術的實施例的圖像顯示裝置的主要部分的功能結構實例的示圖。
[0018][圖3]示出根據本技術的第一實施例的縮放百分比生成部140的結構實例的示圖。
[0019][圖4]示出由根據本技術的實施例的圖像信息獲取部130獲取的圖像信息的實例的示圖。
[0020][圖5]示出根據本技術的第一實施例的縮放百分比生成處理的處理過程的實例的流程圖。
[0021][圖6]示出根據本技術的實施例的圖像轉換處理的處理過程的實例的流程圖。
[0022][圖7]示出根據本技術的實施例的圖像轉換處理的時序實例的圖。
[0023][圖8]示出根據本技術的第二實施例的縮放百分比生成部140的結構實例的圖。
[0024][圖9]示出根據本技術的第二實施例的縮放百分比生成處理的處理過程的實例的流程圖。
[0025][圖10]示出根據本技術的第三實施例的縮放百分比生成處理的處理過程的實例的流程圖。
[0026][圖11]示出根據本技術的第四實施例的縮放百分比生成部140的結構實例的圖。
[0027][圖12]示出根據本技術的第四實施例的縮放百分比生成處理的處理過程的實例的流程圖。
【具體實施方式】
[0028]在下文中，將描述體現本技術的形式(以下，稱為實施例)進行說明。描述將按照以下順序進行。
[0029]1.第一實施例(相對于分辨率的變化的圖像縮放)
[0030]2.第二實施例(場景變化時的圖像縮放抑制)
[0031]3.第三實施例(相對于分辨率的急劇變化的圖像縮放抑制)
[0032]4.第四實施例(相對于分辨率的臨時變化的遲滯操作)
[0033]〈1.第一實施例>
[0034][圖像顯示裝置的結構]
[0035]圖1是示出根據本技術的實施例的圖像顯示裝置的結構實例的圖。圖像顯示裝置經由通信線接收可變速率控制流并顯示包括在流中的圖像。圖像顯示裝置由流存儲部10、解多路復用器11、解碼器12、圖像縮放部15、圖像轉換部16、移動圖像生成部17、處理器20、存儲器30、OSD生成部40、圖像疊加部50，和顯示部60構成。由處理器20、存儲器30、圖像縮放部15和圖像轉換部16將構成的部分被特定稱為圖像處理裝置。
[0036]流存儲部10存儲經由通信線接收的數據流。例如，MPEG-2系統或H.264/AVC的比特流被發送并作為傳輸流和程序流而存儲。
[0037]解多路復用器11分離在存儲在流存儲部10中的流中復用的圖像、音頻、數據等并將其存儲在存儲器30中。
[0038]解碼器12解碼由解多路復用器11分離的圖像。例如假設為MPEG-2或AVC數字解碼器。
[0039]圖像放大縮小部15對由解碼器12解碼的圖像實施圖像放大處理或者圖像縮小處理(在下文，稱為圖像縮放處理)。
[0040]圖像轉換部16對經受由圖像縮放部15進行的圖像縮放處理的圖像實施圖像轉換處理。在這里，圖像轉換處理假設為將隔行圖像轉換為逐行圖像的IP轉換(隔行/逐行轉換)處理、減少圖像噪聲的降噪(NR:降噪)處理等。
[0041]移動圖像生成部17通過對經受由圖像轉換部16進行的圖像轉換處理的圖像進行縮放處理，來生成其尺寸與顯示部60的面板尺寸匹配的移動圖像。
[0042]OSD生成部40生成OSD(在屏幕顯示上)圖像。OSD圖像疊加在由移動圖像生成部17生成的移動圖像上，并假設為例如用戶界面圖像、字幕圖像、數據廣播服務等。
[0043]圖像疊加部50將由OSD生成部40生成的OSD圖像疊加到由移動圖像生成部17生成的移動圖像。圖像疊加部50的疊加處理假設例如為α混合處理。
[0044]處理器20控制圖像顯示裝置的一系列處理。
[0045]存儲器30存儲在圖像顯示裝置中產生的圖像、音頻、數據等，并假設為例如DRAM，諸如DDR0
[0046]顯示部60顯示經受由圖像疊加部50進行的疊加處理的圖像。顯示部60的實例是顯示器，諸如IXD (液晶顯示器)。
[0047]圖2示出根據本技術的實施例的圖像顯示裝置的主要部分的功能結構實例的圖。在這里，解多路復用器110、解碼器120、圖像縮放部分150和圖像轉換部160被示為解多路復用器11、解碼器12、圖像縮放部15和圖像轉換部16的功能。此外，圖像信息獲取部130和縮放百分比生成部140被示為處理器20的功能。此外，雖然功能結構被示為直接連接，但是它們可被暫時存儲在圖像顯示裝置的存儲器30中。
[0048]解多路復用器110分離從信號線109輸入的流中的多路