專利名稱:影像信號處理裝置和影像信號處理方法
技術領域:
本發(fā)明涉及影像信號處理裝置,尤其涉及對三維影像信號進行處理的影像信號處
理裝置。
背景技術:
以往,為了顯示使視聽者立體感受的三維影像,已知有對包含左眼用圖像和右眼用圖像的三維影像信號進行處理的影像信號處理裝置(例如參照專利文獻1)。左眼用圖像和右眼用圖像是相互具有視差、例如由配置在不同位置的2臺照相機生成的圖像。影像信號處理裝置例如對所輸入的三維影像信號進行格式變換處理。格式變換處理例如是幀頻的變換處理、圖像尺寸的變換處理以及掃描方式的變換處理等。影像信號處理裝置將進行了格式變換處理的三維影像信號輸出給三維影像顯示裝置。三維影像顯示裝置通過按照預定的方式顯示左眼用圖像和右眼用圖像來顯示使視聽者立體感受的三維影像。例如,三維影像顯示裝置按照每1幀交替顯示左眼用圖像和右眼用圖像?,F(xiàn)有技術文獻專利文獻專利文獻1日本特開平4-M1593號公報
發(fā)明內容
發(fā)明要解決的課題然而,上述以往技術具有三維影像信號的處理所涉及的處理量增大的課題。為了按照與二維影像相同的畫質和相同的幀頻來顯示三維影像,需要二維影像2 倍的處理。這是因為在三維影像中,1幀的三維圖像由左眼用圖像和右眼用圖像這2個二維圖像構成。因此,影像信號處理裝置必須處理2個二維圖像,處理量增大。因此,本發(fā)明是為了解決上述課題而進行的,其目的在于提供一種能夠抑制處理量增大的影像信號處理裝置和影像信號處理方法。用于解決課題的手段為了達成上述目的,本發(fā)明的影像信號處理裝置對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,其中,所述影像信號處理裝置具備信息獲取部,從所述左眼用圖像和所述右眼用圖像的一方中獲取進行預定處理時所用的信息;以及圖像處理部,使用所述信息獲取部所獲取的信息對所述左眼用圖像和所述右眼用圖像的雙方進行所述預定處理。由此,通過將從左眼用圖像和右眼用圖像的任意一方中獲取的信息用于左眼用圖像和右眼用圖像的雙方的處理,能夠避免處理的重復,能夠抑制處理量的增大。由于左眼用圖像和右眼用圖像通常是從不同視點拍攝同一被攝體所獲得的圖像,所以在分別對左眼用圖像和右眼用圖像進行了預定處理的情況下,處理結果大多數(shù)情況下是相同的,因此能夠共用結果。并且,所述信息獲取部可以通過對所述左眼用圖像和所述右眼用圖像的一方進行膜檢測來獲取膜信息,該膜信息表示所述三維影像信號是否是根據(jù)膜影像生成的影像信號。由此,膜檢測的結果能夠在左眼用圖像和右眼用圖像中共用。膜檢測是圖像的特征檢測處理的一例,是檢測三維影像信號是否是根據(jù)膜影像生成的影像信號的處理。通過進行膜檢測,通常在左眼用圖像和右眼用圖像中獲得同一檢測結果。因此,通過共用膜檢測的結果,能夠避免處理的重復,能夠抑制處理量的增大。并且,在所述三維影像信號是根據(jù)膜影像生成的影像信號的情況下,所述信息獲取部還可以獲取圖片信息,該圖片信息表示根據(jù)所述膜影像所包含的多個幀中的同一幀生成的圖片,在所述膜信息表示所述三維影像信號是根據(jù)膜影像生成的影像信號的情況下, 所述圖像處理部使用所述圖片信息分別對所述左眼用圖像和所述右眼用圖像的雙方進行掃描方式的變換和幀頻的變換中的至少一方,來作為所述預定處理。由此,在對根據(jù)膜影像生成的影像信號進行掃描方式的變換或幀頻的變換時,能夠抑制處理量的增大。并且,所述信息獲取部可以通過檢測所述左眼用圖像和所述右眼用圖像的一方中是否包含亮度值恒定的特定圖像,來獲取表示包含有該特定圖像的區(qū)域的特定圖像信息。由此,特定圖像的檢測結果能夠在左眼用圖像和右眼用圖像中共用。特定圖像例如是亮度值恒定的圖像,是以縱橫比的調整等為目的附加在本來圖像上的圖像。由于在左眼用圖像和右眼用圖像中通常附加在相同的區(qū)域,所以只要從左眼用圖像和右眼用圖像的任意一方中檢測特定圖像即可,能夠避免處理的重復。并且,所述信息獲取部可以通過對所述左眼用圖像和所述右眼用圖像的一方檢測圖像左側和右側是否包含所述特定圖像來獲取所述特定圖像信息。由此,能夠檢測所謂的側邊(左右黑邊(Pillar box))。并且,所述信息獲取部可以通過對所述左眼用圖像和所述右眼用圖像的一方檢測圖像上側和下側是否包含所述特定圖像來獲取所述特定圖像信息。由此,能夠檢測所謂的上下黑邊(letter box)。所述圖像處理部可以對所述左眼用圖像和所述右眼用圖像的雙方分別計算所述特定圖像信息表示的區(qū)域以外的有效圖像區(qū)域的平均亮度值。由此,通過計算特定圖像的區(qū)域以外的有效圖像區(qū)域的平均亮度值,能夠算出本來圖像的平均亮度值。這是因為由于所檢測出的特定圖像不是本來圖像,所以在計算出圖像的所有區(qū)域的平均亮度值的情況下,計算了與本來圖像的平均亮度值不同的值。并且,所述影像信號處理裝置還可以具備分割部,該分割部將所述三維影像信號分割成所述左眼用圖像和所述右眼用圖像,所述圖像處理部具有左眼用圖像處理部,對所述左眼用圖像進行所述預定處理;以及右眼用圖像處理部,對所述右眼用圖像進行所述預定處理,所述信息獲取部從所述分割部所分割的所述左眼用圖像和所述右眼用圖像的一方中獲取所述信息,并將所獲取的信息輸出給所述左眼用圖像處理部和所述右眼用圖像處理部。由此,由于能夠通過并列處理對左眼用圖像和右眼用圖像進行處理,所以能夠使處理速度提高。另外,本發(fā)明不僅能夠實現(xiàn)為上述的影像信號處理裝置,也可以實現(xiàn)為將構成該影像信號處理裝置的處理部作為步驟的方法。并且,還可以實現(xiàn)為使計算機執(zhí)行這些步驟的程序。另外,還可以實現(xiàn)為記錄了該程序的計算機能夠讀取的⑶-R0M(Compact Disc-Read Memory 光盤只讀存儲器)等記錄介質以及表示該程序的信息、數(shù)據(jù)或信號。并且,也可以經(jīng)由互聯(lián)網(wǎng)等通信網(wǎng)絡發(fā)送這些程序、信息、數(shù)據(jù)和信號。構成上述的各影像信號處理裝置的構成要素的一部分或全部可以由1個系統(tǒng) LSI (Large Scale integration 大規(guī)模集成電路)構成。系統(tǒng)LSI是將多個構成部集成在 1個芯片上制造而成的超多功能LSI,具體來講,是構成為包含微處理器、ROM、RAM (Random Access Memory :隨機存取存儲器)等的計算機系統(tǒng)。發(fā)明效果根據(jù)本發(fā)明所涉及的影像信號處理裝置和影像信號處理方法,能夠抑制處理量的增大。
圖1是表示包含實施方式1所涉及的影像信號處理裝置的影像信號處理系統(tǒng)的結構的框圖。圖2A是表示實施方式1所涉及的三維影像信號的配置圖形的一例的圖。圖2B是表示實施方式1所涉及的三維影像信號的配置圖形的一例的圖。圖3是表示實施方式1所涉及的影像信號處理裝置的結構的框圖。圖4是表示實施方式1所涉及的影像信號處理裝置的動作的一例的流程圖。圖5是表示實施方式1所涉及的影像信號處理裝置的三維影像信號的流程的一例的圖。圖6是表示實施方式1所涉及的交換處理部的結構的一例的框圖。圖7是表示實施方式1所涉及的交換處理部的動作的一例的流程圖。圖8是表示膜影像與輸入三維影像信號的一例的圖。圖9是表示實施方式1所涉及的IP變換部將60i的影像IP變換為60p的影像時的處理例的圖。圖10A是表示實施方式2所涉及的輸入選擇部的結構的一例的框圖。圖10B是表示實施方式2所涉及的輸入選擇部的結構的另一例的框圖。圖IlA是表示側邊圖像的一例的圖。圖IlB是表示上下黑邊圖像的一例的圖。圖12是表示實施方式2所涉及的輸入選擇部的動作的一例的圖。圖13是表示具備本發(fā)明所涉及的影像信號處理裝置的數(shù)字錄像機和數(shù)字電視機的一例的外觀圖。
具體實施例方式以下,根據(jù)實施方式,一邊參照附圖一邊對本發(fā)明所涉及的影像信號處理裝置和影像信號處理方法進行詳細說明。
6
(實施方式1)實施方式1所涉及的影像信號處理裝置對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,其特征在于,該影像信號處理裝置具有信息獲取部,從左眼用圖像和右眼用圖像的一方中獲取進行預定處理時使用的信息;以及圖像處理部,使用信息獲取部獲取的信息,對左眼用圖像和右眼用圖像的雙方進行上述預定的處理。更具體來講,在本實施方式中,信息獲取部進行作為圖像特征量檢測處理的一例的膜檢測,并且使用該檢測結果,對包含左眼用圖像的左眼用影像數(shù)據(jù)和包含右眼用圖像的右眼用影像數(shù)據(jù)的雙方分別進行掃描方式的變換或幀頻的變換。首先,對包含實施方式1所涉及的影像信號處理裝置的影像信號處理系統(tǒng)的結構進行說明。圖1是表示包含實施方式1所涉及的影像信號處理裝置100的影像信號處理系統(tǒng) 10的結構的框圖。圖1所示的影像信號處理系統(tǒng)10具備數(shù)據(jù)錄像機20、數(shù)據(jù)電視機30以及快門眼鏡40。并且,數(shù)字錄像機20和數(shù)據(jù)電視機30通過HDMI (High Definition Multimedia Interface 高清晰多媒體接口 )電纜41來進行連接。數(shù)字錄像機20對記錄在記錄介質42中的三維影像信號的格式進行變換,并將變換后的三維影像信號經(jīng)由HDMI電纜41輸出給數(shù)字電視機30。另外,記錄介質42例如是 BD (Blu-ray Disc 藍光盤)等光盤、HDD (Hard Disk Drive :硬盤驅動器)等磁盤或者非易失性存儲器等。數(shù)字電視機30對從數(shù)字錄像機20經(jīng)由HDMI電纜41輸入的三維影像信號或包含在廣播波43中的三維影像信號的格式進行變換,并對變換后的三維影像信號中包含的三維影像進行顯示。另外,廣播波43例如是地上數(shù)字電視廣播和衛(wèi)星數(shù)字電視廣播等??扉T眼鏡40是為了觀看三維影像而由視聽者佩戴的眼鏡,例如是液晶快門眼鏡。 快門眼鏡40具備左眼用液晶快門和右眼用液晶快門,能夠與數(shù)字電視機30顯示的影像同步地控制快門的開閉。另外,數(shù)字錄像機20可以對廣播波43所包含的三維影像信號或者經(jīng)由因特網(wǎng)等通信網(wǎng)獲取的三維影像信號的格式進行變換。并且,數(shù)字錄像機20可以對從外部裝置經(jīng)由外部輸入端子(未圖示)輸入的三維影像信號的格式進行變換。同樣,數(shù)字電視機30可以對記錄在記錄介質42中的三維影像信號的格式進行變換。并且,數(shù)字電視機30也可以對從數(shù)字錄像機20以外的外部裝置經(jīng)由外部輸入端子(未圖示)輸入的三維影像信號的格式進行變換。并且,數(shù)字錄像機20和數(shù)字電視機30可以通過HDMI電纜41以外的規(guī)格的電纜來連接,或者還可以通過無線通信網(wǎng)來連接。以下,對數(shù)字錄像機20和數(shù)字電視機30的詳細結構進行說明。首先,對數(shù)字錄像機20進行說明。如圖1所示,數(shù)字錄像機20具備輸入部21、解碼器22、影像信號處理裝置100和 HDMI通信部23。輸入部21獲取記錄在記錄介質42中的三維影像信號51。三維影像信號51包含有例如根據(jù)MPEG-4AVC/H. 264等標準被壓縮編碼的編碼三維影像。
解碼器22通過對輸入部21所獲取的三維影像信號51進行解碼來生成輸入三維影像信號52。影像信號處理裝置100通過對解碼器22所生成的輸入三維影像信號52進行處理來生成輸出三維影像信號53。影像信號處理裝置100的詳細結構和動作將在后面進行說明。HDMI通信部23將影像信號處理裝置100所生成的輸出三維影像信號53經(jīng)由HDMI 電纜41輸出給數(shù)字電視機30。另外,數(shù)字錄像機20可以將所生成的輸出三維影像信號存儲在該數(shù)字錄像機20 所具備的存儲部(HDD和非易失性存儲器等)中?;蛘?,也可以記錄在相對于該數(shù)字錄像機 20可拆裝的記錄介質(光盤等)中。并且,數(shù)字錄像機20在通過HDMI電纜41以外的單元與數(shù)字電視機30連接的情況下,可以代替HDMI通信部23而具備與該單元對應的通信部。例如,在連接單元是無線通信網(wǎng)的情況下,數(shù)字錄像機20具備無線通信部,在連接單元是依據(jù)其他規(guī)格的電纜的情況下,數(shù)字錄像機20具備與該規(guī)格對應的通信部。另外,數(shù)字錄像機20也可以具備這些多個通信部,并切換利用多個通信部。接著,對數(shù)字電視機30進行說明。如圖1所述,數(shù)字電視機30具備輸入部31、解碼部32、HDMI通信部33、影像信號處理裝置100、顯示面板;34和發(fā)射機35。輸入部31獲取包含在廣播波43中的三維影像信號M。三維影像信號M包含例如根據(jù)MPEG-4AVC/H. 264等規(guī)格而壓縮編碼的編碼三維影像。解碼部32通過對輸入部31所獲取的三維影像信號M進行解碼,生成輸入三維影像信號55。HDMI通信部33獲取從數(shù)字錄像機20的HDMI通信部23輸出的輸出三維影像信號 53,并作為輸入三維影像信號56輸出給影像信號處理裝置100。影像信號處理裝置100通過對輸入三維影像信號55和56進行處理,生成輸出三維影像信號57。關于影像信號處理裝置100的詳細結構和動作,將在后面說明。顯示面板34顯示輸出三維影像信號57所包含的三維影像。發(fā)射機35使用無線通信來控制快門眼鏡40的快門的開閉。另外,數(shù)字電視機30與數(shù)字錄像機20同樣,在通過HDMI電纜41以外的單元與數(shù)字錄像機20連接的情況下,也可以具備與該單元對應的通信部來代替HDMI通信部33。這里,對顯示面板34顯示的三維影像進行說明,并對取得顯示面板34與快門眼鏡 40的同步的方法進行說明。三維影像包含相互具有視差的左眼圖像和右眼用圖像。通過選擇性地分別將左眼用圖像入射到視聽者的左眼、將右眼用圖像入射到視聽者的右眼,能夠使視聽者立體感受到影像。圖2A示出數(shù)字電視機30具備的影像信號處理裝置100所生成的輸出三維影像信號57的一例。另外,圖2A是表示實施方式1所涉及的三維影像信號的配置圖形的一例的圖。圖2A所示的輸出三維影像信號57按照每1幀交替包含左眼用圖像57L和右眼用圖像57R。例如,輸出三維影像信號57的幀頻是120fps,掃描方式是逐行方式。另外,將這種影像信號也記載為120p的影像信號。顯示面板34接收圖2A所示的輸出三維影像信號57,按照每1幀交替顯示左眼用圖像57L和右眼用圖像57R。此時,發(fā)射機35在顯示面板34顯示左眼用圖像57L的期間, 對快門眼鏡40進行打開快門眼鏡40的左眼用液晶快門、并且關閉右眼用液晶快門的控制。 并且,發(fā)射機35在顯示面板34顯示右眼用圖像57R的期間,對快門眼鏡40進行打開快門眼鏡40的右眼用液晶快門、并且關閉左眼用液晶快門的控制。由此,選擇性地分別將左眼用圖像57L入射到視聽者的左眼、將右眼用圖像57R入射到視聽者的右眼。這樣,顯示面板;34在時間上切換顯示左眼用圖像57L和右眼用圖像57R。另外,在圖2A所示的例子中,按照每1幀切換左眼用圖像57L和右眼用圖像57R,但也可以按照多個幀來進行切換。另外,選擇性地分別向視聽者的左眼和右眼入射左眼用圖像和右眼用圖像的方法不限于上述方法,也可以使用其他方法。例如,數(shù)字電視機30具備的影像信號處理裝置100可以生成圖2B所示的輸出三維影像信號58。所生成的輸出三維影像信號58輸出給顯示面板34。另外,圖2B是表示實施方式1所涉及的三維影像信號的配置圖形的一例的圖。例如,圖2B所示的輸出三維影像信號58將左眼用圖像58L和右眼用圖像58R包含在1個幀內的不同區(qū)域。具體來講,左眼用圖像58L和右眼用圖像58R被配置成棋盤狀。 例如,輸出三維影像信號58的幀頻是60fps,掃描方式是逐行方式。另外,將這種影像信號也記載為60p的影像信號。顯示面板34接收圖2B所示的輸出三維影像信號58,并顯示將左眼用圖像58L和右眼用圖像58R配置成棋盤狀的圖像。在該情況下,顯示面板34具備形成在顯示左眼用圖像58L的像素上的左眼用偏光膜和形成在顯示右眼用圖像58R的像素上的右眼用偏光膜。 由此,對左眼用圖像58L和右眼用圖像58R施加相互不同的偏光(直線偏光或圓偏光等)。另外,視聽者可以代替快門眼鏡40而佩戴偏光眼鏡,該偏光眼鏡具備分別與顯示面板34具備的偏光對應的左眼用偏光膜和右眼用偏光膜。由此,能夠選擇性地分別向視聽者的左眼和右眼入射左眼用圖像58L和右眼用圖像58R。這樣,顯示面板;34顯示將左眼用圖像58L和右眼用圖像58R配置于1幀內在空間上不同區(qū)域的影像。另外,在圖2B所示的例子中,按照每1像素配置了左眼用圖像58L和右眼用圖像58R,但也可以按照多個像素配置左眼用圖像58L和右眼用圖像58R。并且,也可以不是棋盤狀,而按照每條水平線或者每條垂直線配置左眼用圖像58L和右眼用圖像58R。以下,對實施方式1所涉及的影像信號處理裝置100的詳細結構和動作進行說明。實施方式1所涉及的影像信號處理裝置100對包含左眼用圖像和右眼用圖像的三維影像信號進行處理。具體來講,影像信號處理裝置100對所輸入的三維影像信號進行格式變換處理。例如,數(shù)字錄像機20具備的影像信號處理裝置100將第1格式的輸入三維影像信號52變換為第2格式的輸出三維影像信號53。這里,影像信號處理裝置100進行的格式變換處理是配置圖形、幀頻、掃描方式以及圖像尺寸的變換中的至少1個的處理。另外,影像信號處理裝置100也可以進行這些處理以外的處理。
配置圖形的變換是對包含在三維影像信號中的左眼用圖像和右眼用圖像的時間上的配置或空間上的配置進行變換。例如,影像信號處理裝置100將圖2A所示的三維影像信號變換為圖2B所示的三維影像信號。幀頻的變換是對三維影像信號的幀頻進行變換。例如,影像信號處理裝置100通過進行幀插值或幀復制處理,將低幀頻(例如60fps)的三維影像信號變換為高幀頻(例如 120fps)的三維影像信號。或者,影像信號處理裝置100通過對幀進行間除或者生成在時間上對多個幀進行了平均的幀,將高幀頻的三維影像信號變換為低幀頻的三維影像信號。掃描方式的變換是從隔行方式向逐行方式的變換、或者從逐行方式向隔行方式的變換。另外,隔行方式是指將幀分成由第奇數(shù)線構成的頂場和由第偶數(shù)線構成的底場來進行掃描的方式。圖像尺寸的變換是進行圖像的放大和縮小。例如,影像信號處理裝置100通過進行像素的插值或復制來放大圖像?;蛘?,影像信號處理裝置100通過間除像素或計算多個像素的平均值來縮小圖像。例如,像素尺寸具有VGA(640X480)、高清晰電視圖像 (1280X720)以及全格碼高清晰電視圖像(1920X1080)等。圖3是表示實施方式1所涉及的影像信號處理裝置100的結構的框圖。圖3所示的影像信號處理裝置100具備輸入選擇部110、第1處理部120、第2處理部130、合成部140。輸入選擇部110將輸入三維影像信號分割成左眼用圖像210L和右眼用圖像210R, 將左眼用圖像210L輸出給第1處理部120,將右眼用圖像210R輸出給第2處理部130。具體來講,輸入選擇部110將輸入三維影像信號分割成只包含左眼用圖像和右眼用圖像中的左眼用圖像的左眼用影像數(shù)據(jù)和只包含右眼用圖像的右眼用圖像數(shù)據(jù)。并且,輸入選擇部 110將左眼用影像數(shù)據(jù)輸出給第1處理部120,將右眼用影像數(shù)據(jù)輸出給第2處理部130。 另外,輸入選擇部110也可以將輸入三維影像信號分別輸出給第1處理部120和第2處理部130,由第1處理部120提取左眼用影像數(shù)據(jù),由第2處理部130提取右眼用影像數(shù)據(jù)。第1處理部120對輸入選擇部110所輸入左眼用影像數(shù)據(jù)進行處理。具體來講, 第1處理部120進行左眼用影像數(shù)據(jù)的格式變換。此時,第1處理部120從左眼用影像數(shù)據(jù)獲取進行預定處理時使用的信息,并將所獲取的信息輸出給第2處理部130。例如,第1 處理部120通過對所輸入的左眼用影像數(shù)據(jù)進行圖像特征檢測處理,獲取預定信息作為特征檢測結果。圖像特征檢測處理例如是膜檢測。膜檢測的詳細情況將在后面進行說明。第2處理部130對輸入選擇部110所輸入右眼用影像數(shù)據(jù)進行處理。具體來講, 第2處理部130進行右眼用影像數(shù)據(jù)的格式變換。此時,第2處理部130接收第1處理部 120從左眼用影像數(shù)據(jù)獲取的信息。并且,第2處理部130利用所接收的信息對右眼用影像數(shù)據(jù)進行預定處理。合成部140通過對第1處理部120所生成的變換后的左眼用圖像250L和第2處理部130所生成的變換后的右眼用圖像250R進行合成,生成合成圖像沈0。包含所生成的合成圖像沈0的影像信號作為輸出三維影像信號被輸出。第1處理部120的詳細結構如下所述。如圖3所示,第1處理部120具備第1水平尺寸調整部121、變換處理部122、垂直尺寸調整部123、第2水平尺寸調整部124。
第1水平尺寸調整部121對所輸入的左眼用圖像210L的水平方向的圖像尺寸進行尺寸調整、即放大或縮小。例如,第1水平尺寸調整部121通過間除像素或計算多個像素的平均值,在水平方向上縮小左眼用圖像210L。將縮小后的左眼用圖像220L輸出給變換處理部122。變換處理部122對所輸入的縮小后的左眼用圖像220L進行IP變換。IP變換是掃描方式的變換的一例,是將縮小后的左眼用圖像220L的掃描方式從隔行方式變換為逐行方式。將IP變換后的左眼用圖像230L輸出給垂直尺寸調整部123。另外,變換處理部122從左眼用圖像220L中獲取預定處理所用的信息,將其輸出給第2處理部130。并且,變換處理部122也可以進行降噪處理(NR處理)。關于變換處理部122的詳細結構和動作,后面使用圖4進行說明。并且,關于上述的預定處理和該處理所用的信息也在后面進行說明。垂直尺寸調整部123對變換處理部122進行了 IP變換后的左眼用圖像230L的垂直方向的圖像尺寸進行尺寸調整、即放大或縮小。將尺寸調整后的左眼用圖像MOL輸出給第2水平尺寸調整部124。第2水平尺寸調整部IM對尺寸調整后的左眼用圖像MOL的水平方向的圖像尺寸進行尺寸調整、即放大或縮小。例如,第2水平尺寸調整部IM通過對像素進行插值或者復制,在水平方向上放大尺寸調整后的左眼用圖像M0L。將放大后的左眼用圖像250L輸出給合成部140。并且,第2處理部130的詳細結構如下所述。如圖3所示,第2處理部130具備第1水平尺寸調整部131、變換處理部132、垂直尺寸調整部133、第2水平尺寸調整部134。第1水平尺寸調整部131對所輸入的右眼用圖像210R的水平方向的圖像尺寸進行尺寸調整、即放大或縮小。例如,第1水平尺寸調整部131通過間除像素或計算多個像素的平均值,在水平方向上縮小右眼用圖像210R。將縮小后的右眼用圖像220R輸出給變換處理部132。變換處理部132對所輸入的縮小后的右眼用圖像220R進行IP變換。IP變換是將縮小后的右眼用圖像220R的掃描方式從隔行方式變換為逐行方式。將IP變換后的右眼用圖像230R輸出給垂直尺寸調整部133。另外,變換處理部132從第1處理部120的變換處理部122中獲取預定處理所用的信息。并且,變換處理部132也可以進行降噪處理(NR處理)。垂直尺寸調整部133對變換處理部132進行了 IP變換后的右眼用圖像230R的垂直方向的圖像尺寸進行尺寸調整、即放大或縮小。將尺寸調整后的右眼用圖像MOR輸出給第2水平尺寸調整部134。第2水平尺寸調整部134對尺寸調整后的右眼用圖像MOR的水平方向的圖像尺寸進行尺寸調整、即放大或縮小。例如,第2水平尺寸調整部134通過對像素進行插值或者復制,在水平方向上放大尺寸調整后的右眼用圖像M0R。將放大后的右眼用圖像250R輸出給合成部140。另外,輸入選擇部110也可以將左眼用圖像210L輸出給第2處理部130、將右眼用圖像210R輸出給第1處理部120。并且,在輸入了只表示左眼用圖像的左眼用影像信號和只表示右眼用圖像的右眼用影像信號這2個影像信號作為輸入三維影像信號的情況下,輸入選擇部110可以不進行分割處理,而將左眼用影像信號輸出給第1處理部120、將右眼用影像信號輸出給第2處理部130。如上所述,實施方式1所涉及的影像信號處理裝置100從左眼用圖像和右眼用圖像中的任意一方中獲取信息,并使用所獲取的信息對左眼用圖像和右眼用圖像的雙方進行處理。接著,使用圖4和圖5對上述的影像信號處理裝置100進行的處理進行說明。另外,圖4是表示實施方式1所涉及的影像信號處理裝置100的動作的一例的流程圖。圖5 是實施方式1所涉及的影像信號處理裝置100進行的三維影像信號的流程的一例的圖。以下,對數(shù)字錄像機20具備的影像信號處理裝置100的動作進行說明。另外,對數(shù)字電視機30具備的影像信號處理裝置100的動作也是同樣的。首先,輸入選擇部110將輸入三維影像信號52分割成左眼用圖像210和右眼用圖像210R(SllO)。另外,實施方式1所涉及的輸入三維影像信號52是隔行方式的影像信號, 例如是全格碼高清晰電視影像。因此,如圖5所示,左眼用圖像210L包含左眼用頂場210Lt和左眼用底場210Lb。 同樣地,右眼用圖像210R包含右眼用頂場210Rt和右眼用底場210Rb。各場由1920XM0
像素構成。接著,第1水平尺寸調整部121和131分別在水平方向上縮小左眼用圖像210L和右眼用圖像210R(S120)。這里,第1水平尺寸調整部121和131在水平方向上縮小為1/2 倍。由此,如圖5所示,生成縮小后的左眼用圖像220L和縮小后的右眼用圖像220R。另外, 縮小率不限于1/2倍。另外,第1水平尺寸調整部121和131也可以在水平方向上分別放大左眼用圖像210L和右眼用圖像210R??s小后的左眼用圖像220L包含縮小后的左眼用頂場220Lt和縮小后的左眼用底場220Lb??s小后的右眼用圖像220R包含縮小后的右眼用頂場220Rt和縮小后的右眼用底場220 。各場由960 X 540像素構成。另外,此時,第1水平尺寸調整部121和131為了生成圖2B所示的棋盤狀的圖像, 可以分別錯開開始位置。具體來講,第1水平尺寸調整部121通過提取包含在左眼用頂場 210Lt中的第偶數(shù)像素(0、2、4、6…),生成縮小后的左眼用頂場220Lt。另外,第1水平尺寸調整部121通過提取包含在左眼用底場210Lb中的第奇數(shù)像素(1、3、5、7…),生成縮小后的左眼用底場220Lb。并且,第1水平尺寸調整部131通過提取包含在右眼用頂場210Rt中的第奇數(shù)像素(1、3、5、7···),生成縮小后的右眼用頂場220Rt。另外,第1水平尺寸調整部131通過提取包含在右眼用底場210 中的第偶數(shù)像素(0、2、4、6…),生成縮小后的右眼用底場220詘。接著,變換處理部122和變換處理部132分別對縮小后的左眼用圖像220L和縮小后的右眼用圖像220R進行IP變換(S130)。變換處理部122和變換處理部132分別通過進行IP變換,生成逐行方式的左眼用圖像230L和右眼用圖像230R。另外,關于IP變換的詳細情況將在后面說明。接著,垂直尺寸調整部123和133在垂直方向上對左眼用圖像230L和右眼用圖像 230R進行尺寸調整、即進行放大或縮小(S140)。在圖5所示的例子中,垂直尺寸調整部123和133不進行垂直方向的尺寸調整就輸出左眼用圖像MOL和右眼用圖像M0R。接著,第2水平尺寸調整部IM和134在水平方向上放大左眼用圖像MOL和右眼用圖像M0R(S150)。例如,第2水平尺寸調整部IM通過復制包含在左眼用圖像MOL中的各像素,生成放大為2倍的左眼用圖像250L。同樣,第2水平尺寸調整部134通過復制包含在右眼用圖像MOR中的各像素,生成放大為2倍的右眼用圖像250R。另外,放大率例如是第1水平尺寸調整部121和131中的縮小處理的縮小率的倒數(shù)。但是并不限于此。第2水平尺寸調整部IM和134可以分別在水平方向上縮小左眼用圖像MOL和右眼用圖像M0R。最后,合成部140通過對左眼用圖像250L和右眼用圖像250R進行合成來生成合成圖像260 (S160)。合成圖像260例如如圖2B所示,是將包含在左眼用圖像250L中的像素和包含在右眼用圖像250R中的像素排列為棋盤狀的圖像。通過合成得到的合成圖像260 被作為輸出三維影像信號53輸出。如上所述,實施方式1所涉及的影像信號處理裝置100通過對輸入三維影像信號 52進行處理來生成輸出三維影像信號53。接著,對變換處理部122的詳細結構及其動作、從左眼用圖像中獲取的信息以及使用該信息的處理進行說明。實施方式1所涉及的變換處理部122在進行IP變換之前進行膜檢測。膜檢測是圖像特征檢測處理的一例,是檢測影像數(shù)據(jù)是否是根據(jù)膜影像生成的影像數(shù)據(jù)的處理。這里, 作為膜檢測,變換處理部122檢測只包含左眼用圖像的左眼用影像數(shù)據(jù)是否是根據(jù)膜影像生成的影像數(shù)據(jù)。并且,變換處理部122將膜檢測的結果輸出給變換處理部132。另外,在變換處理部132中,對只包含右眼用圖像的右眼用影像數(shù)據(jù)進行IP變換,以下,對變換處理部122的具體結構和動作進行說明。圖6是表示實施方式1所涉及的變換處理部122的結構的一例的框圖。如圖6所示,變換處理部122具備膜檢測部310、IP變換部320。膜檢測部310是本發(fā)明所涉及的信息獲取部的一例,對左眼用圖像進行膜檢測。 具體來講,膜檢測部310通過對包含左眼用圖像的左眼用影像數(shù)據(jù)進行膜檢測,獲取表示輸入三維影像信號是否是根據(jù)膜影像生成的影像信號的膜信息、以及在輸入三維影像信號是根據(jù)膜影像生成的影像信號的情況下表示根據(jù)膜影像所包含的多個幀中的同一幀生成的圖片的圖片信息。另外,這里,作為圖片信息的一例,膜檢測部310獲取表示應當合成的場的IP變換信息。IP變換部320是本發(fā)明所涉及的左眼用圖像處理部的一例,使用膜信息和IP變換信息將左眼用影像數(shù)據(jù)從隔行方式變換為逐行方式。具體來講,在膜信息表示輸入三維影像信號是根據(jù)膜影像生成的影像信號的情況下,IP變換部320使用IP變換信息將左眼用影像數(shù)據(jù)從隔行方式變換為逐行方式。并且,在膜信息表示輸入三維影像信號不是根據(jù)膜影像生成的影像信號的情況下,IP變換部320例如通過對相鄰的2個場進行合成,將左眼用影像數(shù)據(jù)從隔行方式變換為逐行方式。另外,變換處理部132是本發(fā)明所涉及的右眼用圖像處理部的一例,對右眼用影像數(shù)據(jù)進行預定的處理。具體來講,變換處理部132從膜檢測部310接收作為膜檢測的結果的膜信息和IP變換信息。并且,變換處理部132與IP變換部320同樣,使用膜信息和IP 變換信息將右眼用影像數(shù)據(jù)從隔行方式變換為逐行方式。圖7是表示實施方式1所涉及的變換處理部122的動作的一例的流程圖。首先,膜檢測部310對左眼用影像數(shù)據(jù)進行膜檢測(S131)。另外,通過將右眼用影像數(shù)據(jù)輸入給第1處理部120,膜檢測部310也可以對右眼用影像數(shù)據(jù)進行膜檢測。作為膜檢測的結果的膜信息和IP變換信息被輸出給IP變換部320和變換處理部132。接著,IP變換部320和變換處理部132使用膜信息和IP變換信息,將左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)從隔行方式變換為逐行方式(S13》。關于膜檢測和IP變換的具體處理,以下舉出膜影像和三維影像的例子進行說明。圖8是表示膜影像和輸入三維影像信號的一例的圖。在圖8所示的例子中,膜影像是M幀/秒(Mfps)的逐行方式的影像的影像)。輸入三維影像信號例如是表示幀頻是60fps的隔行方式的影像(60i的影像)的信號。即,輸入三維影像信號在1秒鐘內包含60張頂場和底場(只包含頂場或底場的幀頻為 30fps)ο如圖8所示,在從Mp的影像生成60i的影像的情況下,首先讀出3次24p的影像所包含的幀A,分別用于頂場(At。p)、底場(Abtm)、頂場(Atop)。接著讀出2次24p的影像所包含的幀B,分別用于底場(Bbtm)、頂場(Bt。p)。接著讀出3次24p的影像所包含的幀C,分別用于底場(Cbtm)、頂場(Ct。p)、底場(Cbtm)。如上所述,通過交替重復幀的3次讀出和2次讀出,能夠從24p的影像生成60i的影像(3-2下拉處理)。另外,在進行其他幀頻間的交換的情況下,也同樣只要根據(jù)變換前的幀頻和變換后的幀頻的比例來決定讀出次數(shù)即可。接著,說明將如圖8所示那樣生成的60i的影像(輸入三維影像信號)IP變換為 60p的影像(輸出三維影像信號)的情況。另外,60p的影像是60fps的逐行方式的影像。作為膜檢測,膜檢測部310計算2個場間的差分。例如,膜檢測部310計算成為對象的場與其前面第2個場之間的差分。如圖8所示,包含從作為24p的影像的膜影像生成的 60 的影像的輸入三維影像信號在5張場中包含2張相同的場(例如,第1和第3是At。p, 第6和第8是Cbtm)。因此,在依次計算2個場間的差分時,5張場中存在1組差分幾乎為0的場組。由此,膜檢測部310通過檢測差分幾乎為0的比例,能夠檢測出包含輸入三維影像信號被3-2 下拉的影像。即,在檢測出差分幾乎為0的比例為5張場中有1組場的情況下,膜檢測部310 將表示輸入三維影像信號是根據(jù)膜影像生成的影像信號的膜信息輸出給IP變換部320。另外,膜檢測部310在檢測出差分幾乎為0的比例是5張場中有1組場的情況下, 獲取表示膜影像的幀頻的幀頻信息。即,由于輸入三維影像信號是被3-2下拉的影像、并且輸入三維影像信號的幀頻為60fps,所以可知膜影像的幀頻是= 60X2/^)fps。并且, 膜檢測部310在IP變換時,將表示應當合成的頂場和底場的IP變換信息輸出給IP變換部 320。圖9是表示實施方式1所涉及的IP變換部320將60i的影像IP變換為60p的影像時的處理例的圖。
IP變換部320按照每場從60i的輸入影像、將該輸入影像延遲1幀后的第1延遲影像、將60i的輸入影像延遲2幀后的第2延遲影像中選擇2個影像來進行合成。此時,選擇哪個影像、即選擇哪個頂場和哪個底場,根據(jù)作為膜檢測部310的膜檢測的結果的IP變換信息來決定。具體來講,膜檢測部310在檢測出輸入三維影像信號是被3-2下拉的影像信號的情況下,將表示根據(jù)膜影像所包含的同一幀生成的場的信息作為IP變換信息輸出。并且, IP變換部320根據(jù)所接收的IP變換信息,選擇根據(jù)同一幀生成的場之間進行合成。例如,IP變換部320通過合成由圖9中虛線所示的四邊形圍成的2張場,生成1幀圖像。具體來講,IP變換部320在時刻T2,合成第1延遲影像的At。p和60i的影像的Abtm。 并且,在時刻T3,IP變換部320合成第1延遲影像的Abtm和60i的影像的At。p。另外,在時刻T3,也可以合成第1延遲影像的Abtm和第2延遲影像的At。p。另外,在時刻T4,IP變換部320合成第1延遲影像的At。p和第2延遲影像的Abtm。 接著,在時刻T5,IP變換部320合成60i的影像的Bt。p和第1延遲影像的Abtm。這樣,在對3-2下拉的影像信號進行IP變換的情況下,關于根據(jù)同一幀生成的3 張連續(xù)的場,只要最初的2張合成第1延遲影像和輸入影像,剩下的1張合成第1延遲影像和第2延遲影像即可。另外,正中的1張可以合成第1延遲影像和第2延遲影像。另外,關于根據(jù)同一幀生成的2張連續(xù)的場,只要第1張合成第1延遲影像和輸入影像,第2張合成第1延遲影像和第2延遲影像即可。如上所述,IP變換部320通過選擇根據(jù)膜影像所包含的同一幀生成的場之間來進行合成,從預定幀頻的隔行方式的輸入三維影像信號生成相同幀頻的逐行方式的輸出三維
影像信號。并且,IP變換部320在膜信息表示輸入三維影像信號不是根據(jù)膜影像生成的影像信號的情況下,通過依次合成相鄰的場,生成逐行方式的輸出三維影像信號。另外,在輸入三維影像信號是根據(jù)膜影像生成的影像信號的情況下,IP變換部 320不進行膜檢測,在只依次合成了相鄰的場的情況下,例如合成At。p和,從而導致畫質劣化。因此,通過如上所述進行膜檢測,本實施方式所涉及的IP變換部320能夠對根據(jù)膜影像所包含的同一幀生成的場之間進行合成,所以能夠防止畫質的劣化。如上所述,在實施方式1所涉及的變換處理部122中,對左眼用影像數(shù)據(jù)進行膜檢測,并將其結果輸出給變換處理部132。變換處理部132使用變換處理部122所輸入的膜檢測的結果,對右眼用影像數(shù)據(jù)進行IP變換。左眼用圖像和右眼用圖像說起來是從不同視點拍攝相同被攝體所獲得的圖像或者將相同圖像錯開預定視差而生成的圖像。因此,無論對左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)的哪個進行膜檢測,都能夠獲得相同的結果。因此,如本實施方式那樣,通過只對左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)中的任意一方進行膜檢測,并將其檢測結果利用于左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)雙方,能夠避免處理的重復。由此,本實施方式所涉及的影像信號處理裝置100能夠避免冗長的處理,能夠降低消耗功率并且提高處理速度。并且,當在左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)中獨立地進行了檢測的情況下,有可能獲得相互不同的檢測結果。在該情況下,由于變換處理部122和132根據(jù)不同的檢測結果進行IP變換,所以合成部140在對左眼用圖像和右眼用圖像進行了合成的情況下,有可能生成不自然的影像。與此相對,在本實施方式所涉及的影像信號處理裝置100中,由于使用相同的檢測結果對左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)的雙方進行處理,所以能夠降低如上述那樣生成不自然的影像的可能性。另外,在上述說明中,示出了對隔行方式的輸入三維影像信號進行膜檢測的結構, 但也可以對逐行方式的輸入三維影像信號進行膜檢測。例如,假定將根據(jù)圖8所示的24p 的膜影像(ABC···)生成的圖9所示的60p的影像信號(AAABBCCC…)作為輸入三維影像信號輸入給本實施方式所涉及的影像信號處理裝置100的情況。膜檢測部310計算左眼用影像數(shù)據(jù)所包含的2個幀之間的差分。例如,膜檢測部 310計算在時間上相鄰的2個幀之間的差分,由此差分為“小小大小大小小大小大…”。由此,膜檢測部310將表示輸入三維影像信號包含被3-2下拉的影像的膜信息輸出給IP變換部 320。另外,膜檢測部310將表示根據(jù)膜影像所包含的同一幀所生成的幀的幀信息作為圖片信息的一例輸出給IP變換部320和變換處理部132。例如,在時間上相鄰的2個幀之間的差分幾乎為0的情況下,膜檢測部310通過判定為這2個幀是根據(jù)膜影像所包含的同一幀所生成的幀來輸出幀信息。IP變換部320接收膜信息和幀信息,根據(jù)所接收的膜信息和幀信息來變換作為左眼用影像數(shù)據(jù)的輸入三維影像信號的幀頻。例如,在膜信息表示輸入三維影像信號包含被 3-2下拉的影像的情況下,IP變換部320使用幀信息來決定應當輸出的幀及其張數(shù)。例如,IP變換部320通過兩張兩張地選擇輸出同一幀,輸出幀頻為48fps的影像信號(AABBCC···)。在該影像信號中兩張兩張地包含同一幀?;蛘?,IP變換部320也可以通過五張五張地選擇輸出同一幀,輸出幀頻為120fps的影像信號(AAAAABBBBBCCCCC…)。該影像信號五張五張地包含同一幀。變換處理部132對右眼用影像數(shù)據(jù)進行與IP變換部320同樣的處理。也可以如上所述對逐行方式的輸入三維影像信號進行膜檢測。在該情況下也是, 由于在左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)中膜檢測結果一致,所以能夠通過只對一方進行膜檢測來抑制處理量的增大。另外,IP變換部320也可以進行掃描方式的變換和幀頻的變換這雙方。例如,IP 變換部320將隔行方式的影像信號(60i的影像信號)變換為逐行方式的影像信號(60p的影像信號),并且如上述那樣對所變換的影像信號的幀頻進行變換。由此,例如,IP變換部 320能夠從60i的影像信號生成48p或120p的影像信號。并且,在膜檢測中,作為輸入三維影像信號,對3-2下拉的影像信號進行了說明, 但也可以是2-2下拉的影像信號。例如,在計算相鄰的2場的差分時,如果是2-2下拉的影像信號,則差分重復“大小大小…”。因此,膜檢測部310通過判斷所檢測到的差分的變化的傾向,能夠檢測出輸入三維影像信號是2-2下拉的影像信號。另外,膜檢測部310進行的膜檢測不限于上述方法,也可以是其他方法。并且,說明了本實施方式所涉及的影像信號處理裝置100使用第1處理部120和第2處理部130對左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)進行并行處理的結構,但也可以只具備2個處理部中的任意一個處理部。例如輸入選擇部110也可以將左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)的雙方輸入給第1處理部120。第1處理部120具備的各處理部分別依次處理左眼用影像數(shù)據(jù)和右眼用影像數(shù)據(jù)。例如,在處理了左眼用影像數(shù)據(jù)之后處理右眼用影像數(shù)據(jù)(或者,也可以相反)。此時, 只要將從左眼用影像數(shù)據(jù)中獲取的膜信息和IP變換信息保存在存儲器等中即可。并且,在本實施方式中,對左眼用圖像進行了膜檢測,但也可以對右眼用圖像進行膜檢測,將檢測結果利用于左眼用圖像和右眼用圖像的雙方。如上所述,實施方式1所涉及的影像信號處理裝置100具備作為信息獲取部的一例的膜檢測部310,該膜檢測部310從左眼用圖像和右眼用圖像的一方中獲取進行IP變換等預定處理時使用的信息。并且,影像信號處理裝置100具備作為圖像處理部的一例的IP 變換部320和變換處理部132,它們使用作為信息獲取部的一例的膜檢測部310所獲取的信息,對左眼用圖像和右眼用圖像的雙方進行IP變換或幀頻的變換。通過該結構,根據(jù)實施方式1所涉及的影像信號處理裝置100,只要僅對左眼用圖像和右眼用圖像的一方進行作為用于獲取上述信息的處理的一例的膜檢測即可,能夠避免處理的重復。因此,能夠抑制處理量的增大。(實施方式2)實施方式2所涉及的影像信號處理裝置與實施方式1同樣,其特征在于,具備信息獲取部,從左眼用圖像和右眼用圖像的一方中獲取進行預定處理時所使用的信息;以及圖像處理部,使用信息獲取部所獲取的信息,對所述左眼用圖像和所述右眼用圖像的雙方進行所述處理。更具體來講,在實施方式2中,信息獲取部通過檢測在左眼用圖像和右眼用圖像的一方中是否包含亮度值恒定的特定圖像,來獲取表示包含特定圖像的區(qū)域的特定圖像信息。另外,以下省略與實施方式1重復的說明,以與實施方式1的不同點為中心進行說明。實施方式2所涉及的影像信號處理裝置與實施方式1的圖3所示的影像信號處理裝置100幾乎相同,不同點在于代替輸入選擇部110而具備輸入選擇部410。以下,首先對實施方式2所涉及的影像信號處理裝置具備的輸入選擇部410的結構進行說明。圖IOA和圖IOB是表示實施方式2所涉及的影像信號處理裝置具備的輸入選擇部 410的結構的一例的框圖。如圖IOA所示,輸入選擇部410具備分割部411、特定圖像檢測部412、APL計算部413和414。分割部411將輸入三維影像信號分割成左眼用圖像和右眼用圖像。左眼用圖像被輸出給特定圖像檢測部412,右眼用圖像被輸出給APL計算部414。另外,左眼用圖像被輸出給APL計算部414,右眼用圖像被輸出給特定圖像檢測部412。并且,在輸入三維影像信號被預先分割成左眼用圖像和右眼用圖像的情況下,輸入選擇部410也可以不具備分割部411。在該情況下,直接將左眼用圖像輸入給特定圖像檢測部12,將右眼用圖像輸入給APL計算部414。特定圖像檢測部412是本發(fā)明所涉及的信息獲取部的一例,通過檢測在左眼用圖像和右眼用圖像的一方中是否包含亮度值恒定的特定圖像,來獲取表示包含該特定圖像的
17區(qū)域的特定圖像信息。這里,由于輸入左眼用圖像,所以特定圖像檢測部412檢測在左眼用圖像中是否包含特定圖像。具體來講,特定圖像檢測部412進行側邊檢測和上下黑邊檢測。如圖IOA所示,特定圖像檢測部412具備側邊檢測部41 和上下黑邊檢測部 412b。側邊檢測部41 對左眼用圖像和右眼用圖像的一方檢測圖像的左側和右側是否包含特定圖像(側邊檢測或左右黑邊檢測)。這里,由于輸入左眼用圖像,所以側邊檢測部 41 檢測左眼用圖像的左側和右側是否包含特定圖像。另外,特定圖像是亮度值恒定的圖像,例如是黑色圖像。側邊檢測部41 通過進行側邊檢測,獲取表示包含特定圖像的區(qū)域的特定圖像信息。特定圖像信息例如是表示包含特定圖像的區(qū)域是從圖像的左側或右側起幾個像素的 fn息ο上下黑邊檢測部412b對左眼用圖像和右眼用圖像的一方檢測圖像的上側和下側是否包含特定圖像(上下黑邊檢測)。這里,由于輸入左眼用圖像,所以上下黑邊檢測部 412b檢測左眼用圖像的上側和下側是否包含特定圖像。上下黑邊檢測部412b通過進行上下黑邊檢測,獲取表示包含特定圖像的區(qū)域的特定圖像信息。特定圖像信息例如是表示包含特定圖像的區(qū)域是從圖像的上側或下側起幾個像素的信息。另外,特定圖像檢測部412也可以只進行側邊檢測和上下黑邊檢測中的任意一方。在進行了雙方檢測的情況下,特定圖像檢測部412將側邊檢測部41 所獲取的特定圖像信息和上下黑邊檢測部412b所獲取的特定圖像信息合并起來作為表示包含特定圖像的區(qū)域的特定圖像信息輸出給APL計算部413和414。APL計算部413和414是本發(fā)明所涉及的圖像處理部的一例,對左眼用圖像和右眼用圖像的雙方計算特定圖像信息表示的區(qū)域以外的有效圖像區(qū)域的平均亮度值(Average Picture Level) 0具體來講,APL計算部413計算左眼用圖像中特定圖像信息表示的區(qū)域以外的有效圖像區(qū)域的平均亮度值。并且,APL計算部414計算右眼用圖像中特定圖像信息表示的區(qū)域以外的有效圖像區(qū)域的平均亮度值。另外,有效圖像區(qū)域是顯示本來圖像的區(qū)域。這里,對特定圖像的例子進行說明。圖IlA是表示側邊圖像500的一例的圖。圖IlB是表示上下黑邊圖像600的一例的圖。側邊圖像500分別在本來的圖像510的左側和右側附加了特定圖像520。具體來講,當在縱橫比為16 9的畫面上顯示了縱橫比為4 3的本來的圖像510時,將特定圖像520附加在本來的圖像510。另外,側邊也稱為左右黑邊。側邊檢測部41 檢測是否在本來的圖像510上附加有圖IlA所示的特定圖像 520。例如,側邊檢測部41 判定所輸入的左眼用圖像的左側區(qū)域(幾個像素列的區(qū)域) 和右側區(qū)域(幾個像素列的區(qū)域)的雙方所包含的像素的亮度值是否全部是相同的預定值 (黑色)。在判定為左側區(qū)域和右側區(qū)域所包含的像素的亮度值全部是相同的預定值(黑色)的情況下,側邊檢測部41 判定所輸入的左眼用圖像是側邊圖像500。并且,側邊檢測部41 將表示特定圖像520的區(qū)域的特定圖像信息輸出給APL計算部413。APL計算部 413計算側邊圖像500中除去特定圖像520的區(qū)域(有效圖像區(qū)域)、即本來圖像510的平
均亮度值。在計算出側邊圖像500的平均亮度值的情況下,計算了包含亮度值恒定的特定圖像520的平均亮度值。即,計算出與本來的圖像510的平均亮度值不同的值。因此,在使用平均亮度值校正圖像的情況下等,由于平均亮度值不同,所以無法準確校正圖像。與此相對, 在本實施方式中,通過進行側邊檢測并確定特定圖像區(qū)域,能夠進行準確的校正處理等。上下黑邊圖像600分別在本來的圖像610的上側和下側附加了特定圖像620。具體來講,當在縱橫比為4 3的畫面上顯示了縱橫比為16 9的本來的圖像610時,將特定圖像620附加在本來的圖像610上。上下黑邊檢測部412b檢測是否在本來的圖像610上附加有圖IlB所示的特定圖像620。例如,上下黑邊檢測部412b判定所輸入的右眼用圖像的上側區(qū)域(幾個像素行的區(qū)域)和下側區(qū)域(幾個像素行的區(qū)域)的雙方所包含的像素的亮度值是否全部是相同的預定值(黑色)。在判定為上側區(qū)域和下側區(qū)域所包含的像素的亮度值全部是相同的預定值(黑色)的情況下,上下黑邊檢測部412b判定所輸入的右眼用圖像是上下黑邊圖像600。并且, 上下黑邊檢測部412b將表示特定圖像520的區(qū)域的特定圖像信息輸出給APL計算部413。 APL計算部413計算上下黑邊圖像600中除去特定圖像620的區(qū)域(有效圖像區(qū)域)、即本來圖像610的平均亮度值。由此,與側邊檢測同樣,通過進行上下黑邊檢測并確定特定圖像的區(qū)域,能夠進行準確的校正處理等。另外,上述的縱橫比是一例,即使在其他的縱橫比的情況下也是同樣的。如上所述,APL計算部414使用從左眼用圖像中檢測到的特定圖像信息來計算右眼用圖像的平均亮度值。在左眼用圖像和右眼用圖像中,通常沒有只在一方包含特定圖像的情況,也沒有在不同的區(qū)域包含特定圖像的情況。因此,從左眼用圖像中檢測到的特定圖像信息與從右眼用圖像中檢測到的特定圖像信息幾乎是一致的。因此,在不需要嚴密的結果的情況下,從左眼用圖像和右眼用圖像的雙方獲取特定圖像信息的處理是冗長的,如本實施方式那樣,通過只從任意一方中獲取特定圖像信息, 能夠抑制處理量的增大。另外,在需要嚴密結果的情況下,只要側邊檢測部41 和上下黑邊檢測部412b分別對左眼用圖像和右眼用圖像進行側邊檢測和上下黑邊檢測即可。另外,如圖IOB所示,輸入選擇部410可以不具備APL計算部414。S卩,APL計算部 413可以將從左眼用圖像中計算出的平均亮度值用作右眼用圖像的平均亮度值。這是因為左眼用圖像的平均亮度值與右眼用圖像的平均亮度值也為相同值的情況較多。另外,此時的APL計算部413是本發(fā)明所涉及的信息獲取部的一例。接著,使用圖12對實施方式2所涉及的影像信號處理裝置的動作中輸入選擇部 410的動作進行說明。另外,實施方式2所涉及的影像信號處理裝置的動作與實施方式1所涉及的影像信號處理裝置100的動作(參照圖4)幾乎相同,輸入選擇部110的動作(SllO) 不同。圖12是表示實施方式2所涉及的影像信號處理裝置具備的輸入選擇部410的動作的一例的流程圖。圖12相當于圖4所示的輸入選擇部110的動作(SllO)。
19
首先,分割部411將輸入三維影像信號分割為左眼用圖像和右眼用圖像(S210)。 左眼用圖像被輸出給特定圖像檢測部412,右眼用圖像被輸出給APL計算部414。接著,特定圖像檢測部412對左眼用圖像進行側邊檢測和上下黑邊檢測(S220)。 另外,也可以只執(zhí)行側邊檢測和上下黑邊檢測中的任意一方。例如,在通過側邊檢測檢測到特定圖像的情況下,也可以不進行上下黑邊檢測。相反,在通過上下黑邊檢測檢測到特定圖像的情況下,也可以不進行側邊檢測。作為檢測結果的特定圖像信息被輸出到APL計算部 413和APL計算部414的雙方。接著,APL計算部413使用特定圖像信息來計算左眼用圖像的平均亮度值,APL計算部414使用特定圖像信息來計算右眼用圖像的平均亮度值(S230)。如上所述,在實施方式2所涉及的影像信號處理裝置中,在輸入選擇部410中,通過對左眼用圖像進行側邊檢測和上下黑邊檢測來檢測特定圖像,使用所檢測的結果對左眼用圖像和右眼用圖像的雙方進行平均亮度值的計算。由此,根據(jù)實施方式2所涉及的影像信號處理裝置,通過只從左眼用圖像和右眼用圖像的任意一方中獲取特定圖像信息,能夠抑制處理量的增大。另外,在實施方式2中,輸入選擇部410進行了側邊檢測和上下黑邊檢測,但與實施方式1相同,變換處理部122也可以對左眼用圖像進行這些檢測。并且,變換處理部122 也可以將所獲得的檢測結果輸出給變換處理部132。并且,平均亮度值的計算也同樣可以不由輸入選擇部410進行而由變換處理部 122和132進行?;蛘咭部梢杂晌磮D示的其他處理部執(zhí)行。如上所述,本發(fā)明所涉及的影像信號處理裝置是包含左眼用圖像和右眼用圖像的三維影像信號處理裝置,其中,使用從左眼用圖像和右眼用圖像的任意一方獲取的信息對左眼用圖像和右眼用圖像的雙方進行預定處理。左眼用圖像和右眼用圖像通常是從不同視點拍攝相同被攝體而獲得的圖像,這是利用相互共同點多的情況。例如,如上所述,膜檢測結果、側邊檢測結果和上下黑邊檢測結果等在左眼用圖像和右眼用圖像中是共同的。因此,通過只對任意一方進行獲得共同結果的處理,能夠避免處理的重復,能夠抑制處理量的增大。并且,在通常應當獲得相同結果卻獲得了不同結果的情況下,有可能在合成左眼用圖像和右眼用圖像時生成不自然的圖像。在本發(fā)明所涉及的影像信號處理裝置中,由于使用共同的結果,所以能夠防止這種不自然的圖像的生成。以上,根據(jù)實施方式對影像信號處理裝置和影像信號處理方法進行了說明,但本發(fā)明不限于這些實施方式。只要不脫離本發(fā)明的宗旨,將本領域技術人員能夠想到的各種變形應用于本實施方式或組合不同實施方式中的結構要素而構筑的方式也包含在本發(fā)明的范圍內。例如,可以對左眼用圖像和右眼用圖像的一方進行CM檢測。CM檢測是判定所輸入的左眼用圖像或右眼用圖像是包含在影像中的廣告信息等CM還是電影等內容的處理。由于在同一顯示時刻只有左眼用圖像和右眼用圖像的任意一方是CM這樣的情況通常是不可能的,所以CM檢測結果在左眼用圖像和右眼用圖像中也是相同的。因此,能夠對左眼用圖像和右眼用圖像的任意一方進行CM檢測,并將所獲得的結果用作左眼用圖像和右眼用圖像的雙方的CM檢測結果。另外,例如輸入選擇部110或410進行CM檢測。例如,通過檢測表示圖像是CM的識別符、或者在CM和內容中檢測解像度的不同來判定所輸入的左眼用圖像或右眼用圖像是否是CM。在判定為左眼用圖像是CM的情況下,例如,第1水平尺寸調整部121和131通過以較高的縮小率來縮小左眼用圖像和右眼用圖像,能夠降低以后的處理量。并且,在對所輸入的三維影像信號進行編碼的情況下,可以從包含左眼用圖像的左眼用影像數(shù)據(jù)和包含右眼用圖像的右眼用影像數(shù)據(jù)的一方中檢測動作。并且,同樣也可以決定幀或場的參照關系。這些處理例如由輸入選擇部110或410、變換處理部122或132 或者其他處理部進行。另外,本發(fā)明所涉及的影像信號處理裝置100搭載在圖13所示的數(shù)字錄像機20 和數(shù)字電視機30中。另外,根據(jù)上述實施方式對本發(fā)明進行了說明,但當然不限于上述實施方式。以下的情況也包含在本發(fā)明的范圍內。上述的各裝置具體來講是由微處理器、ROM、RAM、硬盤單元、顯示單元、鍵盤、鼠標等構成的計算機系統(tǒng)。RAM或硬盤單元中存儲有計算機程序。微處理器根據(jù)計算機程序進行動作,由此各裝置達成其功能。這里,計算機程序為了達成預定的功能,組合多個表示針對計算機的指令的命令編碼而構成。構成上述各裝置的構成要素的一部分或全部可以由1個系統(tǒng)LSI構成。系統(tǒng)LSI 是將多個構成要素集成在1個芯片上制造而成的超多功能LSI,具體來講,是構成為包含微處理器、R0M、RAM等的計算機系統(tǒng)。RAM中存儲計算機程序。微處理器根據(jù)計算機程序進行動作,由此系統(tǒng)LSI達成其功能。構成上述各裝置的構成要素的一部分或全部也可以由可裝卸在各裝置中的IC卡或單體的模塊構成。IC卡或模塊是由微處理器、R0M、RAM等構成的計算機系統(tǒng)。IC卡或模塊也可以包含上述的超多功能LSI。微處理器根據(jù)計算機程序進行動作,由此IC卡或模塊達成其功能。該IC卡或模塊也可以具有耐干擾性。并且,本發(fā)明可以是上述所示的方法。并且,也可以是通過計算機實現(xiàn)這些方法的計算機程序,還可以是由計算機程序構成的數(shù)字信號。并且,本發(fā)明可以將計算機程序或數(shù)字信號記錄在計算機能夠讀取記錄介質例如軟盤、硬盤、CD-ROM、MO (Magneto-Optical Disk 磁光盤)、DVD (Digital Versatile Disc 數(shù)字多用途光盤)、DVD-ROM、DVD-RAM、BD、半導體存儲器等中。并且,也可以是記錄在這些記錄介質中的數(shù)字信號。并且,本發(fā)明可以經(jīng)由電氣通信線路、無線或有線通信線路、以互聯(lián)網(wǎng)為代表的網(wǎng)絡、數(shù)據(jù)廣播等來傳送計算機程序或數(shù)字信號。并且,本發(fā)明可以是具備微處理器和存儲器的計算機系統(tǒng),其中,存儲器存儲上述計算機程序,微處理器根據(jù)計算機程序來進行動作。并且,通過將程序或數(shù)字信號記錄到記錄介質中進行移送、或者經(jīng)由網(wǎng)絡等對程序或數(shù)字信號進行移動,能夠由獨立的其他計算機系統(tǒng)來實施。產(chǎn)業(yè)上的可利用性本發(fā)明所涉及的影響信號處理裝置和影像信號處理方法起到能夠抑制處理量的增大的效果,例如能夠應用于數(shù)字電視機和數(shù)字錄像機等。
符號說明10 影像信號處理系統(tǒng);20 數(shù)字錄像機;21、31 輸入部;22、32 解碼器;23、33 HDMI通信部;30 數(shù)字電視機;34 顯示面板;35 發(fā)射機;40 快門眼鏡;41 =HDMI電纜;42 記錄介質;43 廣播波;5154 三維影像信號;52、55、56 輸入三維影像信號;53、57、58 輸出三維影像信號;57L、58L、210L、220L、230L、240L、250L 左眼用圖像;57R、58R、210R、 220R、230R、240R、250R:右眼用圖像;100 影像信號處理裝置;110,410 輸入選擇部;120 第1處理部;121、131 第1水平尺寸調整部;122、132 變換處理部;123、133 垂直尺寸調整部;1對、1;34 第2水平尺寸調整部;130 第2處理部;140 合成部;210Lb、220Lb 左眼用底場;210Lt、220Lt 左眼用頂場;210Rb、220Rb 右眼用底場;210Rt、220Rt 右眼用頂場; 260 合成圖像;310 膜檢測部;320 =IP變換部;411 分割部;412 特定圖像檢測部;412a 側邊檢測部;412b 上下黑邊檢測部;413,414 =APL計算部;500 側邊圖像;510,610 本來的圖像;520、620 特定圖像;600 上下黑邊圖像。
權利要求
1.一種影像信號處理裝置,對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,其中,所述影像信號處理裝置具備信息獲取部,從所述左眼用圖像和所述右眼用圖像的一方中獲取進行預定處理時所用的信息;以及圖像處理部,使用所述信息獲取部所獲取的信息對所述左眼用圖像和所述右眼用圖像的雙方進行所述預定處理。
2.根據(jù)權利要求1所述的影像信號處理裝置,其中,所述信息獲取部通過對所述左眼用圖像和所述右眼用圖像的一方進行膜檢測來獲取膜信息,該膜信息表示所述三維影像信號是否是根據(jù)膜影像生成的影像信號。
3.根據(jù)權利要求2所述的影像信號處理裝置,其中,在所述三維影像信號是根據(jù)膜影像生成的影像信號的情況下,所述信息獲取部還獲取圖片信息,該圖片信息表示根據(jù)所述膜影像所包含的多個幀中的同一幀生成的圖片,在所述膜信息表示所述三維影像信號是根據(jù)膜影像生成的影像信號的情況下,所述圖像處理部使用所述圖片信息分別對所述左眼用圖像和所述右眼用圖像的雙方進行掃描方式的變換和幀頻的變換中的至少一方,來作為所述預定處理。
4.根據(jù)權利要求1所述的影像信號處理裝置,其中,所述信息獲取部通過檢測所述左眼用圖像和所述右眼用圖像的一方中是否包含亮度值恒定的特定圖像,來獲取表示包含有該特定圖像的區(qū)域的特定圖像信息。
5.根據(jù)權利要求4所述的影像信號處理裝置,其中,所述信息獲取部通過對所述左眼用圖像和所述右眼用圖像的一方檢測圖像左側和右側是否包含所述特定圖像,來獲取所述特定圖像信息。
6.根據(jù)權利要求4所述的影像信號處理裝置,其中,所述信息獲取部通過對所述左眼用圖像和所述右眼用圖像的一方檢測圖像上側和下側是否包含所述特定圖像,來獲取所述特定圖像信息。
7.根據(jù)權利要求5所述的影像信號處理裝置,其中,所述圖像處理部對所述左眼用圖像和所述右眼用圖像的雙方分別計算所述特定圖像信息表示的區(qū)域以外的有效圖像區(qū)域的平均亮度值。
8.根據(jù)權利要求1所述的影像信號處理裝置,其中,所述影像信號處理裝置還具備分割部,該分割部將所述三維影像信號分割成所述左眼用圖像和所述右眼用圖像,所述圖像處理部具有左眼用圖像處理部,對所述左眼用圖像進行所述預定處理;以及右眼用圖像處理部,對所述右眼用圖像進行所述預定處理,所述信息獲取部從所述分割部所分割的所述左眼用圖像和所述右眼用圖像的一方中獲取所述信息,并將所獲取的信息輸出給所述左眼用圖像處理部和所述右眼用圖像處理部。
9.一種影像信號處理方法,對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,其中,所述影像信號處理方法包含如下步驟信息獲取步驟,從所述左眼用圖像和所述右眼用圖像的一方中獲取進行預定處理時所用的信息;以及圖像處理步驟,使用在所述信息獲取步驟中獲取的信息對所述左眼用圖像和所述右眼用圖像的雙方進行所述預定處理。
10.一種集成電路,對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,其中,所述集成電路具備信息獲取部,從所述左眼用圖像和所述右眼用圖像的一方中獲取進行預定處理時所用的信息;以及圖像處理部,使用所述信息獲取部所獲取的信息對所述左眼用圖像和所述右眼用圖像的雙方進行所述預定處理。
11.一種用于使計算機執(zhí)行影像信號處理方法的程序,該影像信號處理方法對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,其中,所述程序包含如下步驟信息獲取步驟,從所述左眼用圖像和所述右眼用圖像的一方中獲取進行預定處理時所用的信息;以及圖像處理步驟,使用在所述信息獲取步驟中獲取的信息對所述左眼用圖像和所述右眼用圖像的雙方進行所述預定處理。
全文摘要
本發(fā)明提供一種能夠抑制處理量的增大的影像信號處理裝置。該影像信號處理裝置(100)對包含左眼用圖像和右眼用圖像的三維影像信號進行處理,該影像信號處理裝置(100)具備作為信息獲取部的一例的膜檢測部(310),從左眼用圖像和右眼用圖像的一方中獲取進行預定處理時所用的信息;以及作為圖像處理部的一例的IP變換部(320),使用信息獲取部所獲取的信息對左眼用圖像和右眼用圖像的雙方進行所述預定處理。
文檔編號H04N7/01GK102342122SQ20108000997
公開日2012年2月1日 申請日期2010年6月21日 優(yōu)先權日2009年9月17日
發(fā)明者中村每良 申請人:松下電器產(chǎn)業(yè)株式會社