JP2006267767A - 画像表示装置 - Google Patents

Abstract

【課題】簡単な構成で、より臨場感のある立体画像を視認させることができる画像表示装置を提供する。
【解決手段】 本体部１０内に結像光学系により同一被写界内の互いに異なる距離にある被写体がそれぞれ合焦状態に結像した複数の画像データを生成する撮像素子を複数個（例えば３つ）１０３Ａ〜１０３Ｃ配備する。各撮像素子１０３Ａ〜１０３Ｃで得られた複数の画像データに基づいて、被写界を複数の距離領域に分割したときの各距離領域の画像をそれぞれ、複数の表示パネル１１１Ａ〜１１１Ｃ上に表示する。
【選択図】 図１

Description

本発明は、結像光学系を経由してきた被写体光を捉えて画像データを生成しその画像データに基づく画像を表示する画像表示装置に関する。

２０年程前から奥行き感のある画像を視聴者に提供しようと右目用、左眼用の画像を表示画面上に重ねて表示しておいて、眼鏡等を用いて表示画面上の画像を左眼用と右眼用とに分離して左右の眼に視差を持たせることにより立体画像を視聴者に視認させる表示技術が提案されている。

しかしながら、眼鏡をかけて表示画面を見るということに抵抗を感じる人も多い。

そこで、最近では、表示画面上に重ねて表示されている左眼用の画像と右眼用の画像とを分離することができるように、例えば狭指向性のレンチキュラレンズを表示画面上に配備して裸眼であっても左眼には左眼用の画像を、右眼には右眼用の画像を見せるようにして眼鏡をかけずに立体画像を視認させる表示技術が提案されている（例えば特許文献１参照）。また特許文献２、特許文献３には、右眼用の画像と左眼用の画像とを１つの表示画面上に配置して右眼と左眼とに別々に各画像を視認させるようにする技術が開示されている。

しかしながら、いずれの特許文献のものにおいても、右眼と左眼とに別々に画像を視認させるため、レンチキュラレンズを含むレンズ類や空間変調器などを設けなければならず、構成が複雑になるという問題がある。

そこで、近景にピント位置を持った画像を１フィールド目に表示させ２フィールド目に遠景にピント位置を持った画像を表示させることにより、立体画像を視認させようとする簡易的な表示技術が提案されている（例えば特許文献４参照）。この表示技術を用いると、１フレーム内の１フィールド目の画像と２フィールド目の画像とが合成され双方の画像の高周波成分（つまりピントの合っている部分）が強調されて視認され１フレームの画像が立体画像として知覚されるようになる。

しかしながら、特許文献４のものは、２つのピント位置を持つ画像を交互に切り替えてみせるようなものであるため、今ひとつ臨場感にかけるという問題がある。

また、特許文献５には、特許文献４を発展させて被写体の細かな凹凸までが画像データとして抽出されるようなデータ取得技術が開示されているが、これは解析データを得るための技術であって立体画像を表示するための技術ではない。
特開平１０−１８６２７７号公報 特開２００２−１２５２４５号公報 特開平７−１５９７２７号公報 特開平７−３０７９１号公報 特開平１０−２９０３８９号公報

本発明は、上記事情に鑑み、簡単な構成で、より臨場感のある立体画像を視認させることができる画像表示装置を提供することを目的とする。

上記目的を達成する本発明の画像表示装置は、結像光学系を経由してきた被写体光を捉えて画像データを生成し該画像データに基づく画像を表示する画像表示装置において、
上記結像光学系により同一被写界内の互いに異なる距離にある被写体がそれぞれ合焦状態に結像した複数の画像データを生成する撮像素子と、
上記撮像素子で得られた複数の画像データに基づいて、被写界を複数の距離領域に分割したときの分割領域の画像を含みその各距離領域以外の非表示領域が非表示に処理された各距離領域ごとの各画像データを生成する画像処理部と、
視点側から見て重なるように配置され、上記画像処理部で得られた各距離領域ごとの各画像データに基づく各画像をそれぞれ表示してその各画像を重ねた状態を視認させる複数の表示パネルとを備えたことを特徴とする。

上記本発明の画像表示装置によれば、上記画像処理部により被写界内の上記距離領域ごとに、各距離領域にピントのあった部分以外の領域が非表示処理された画像データが生成され、それらの画像データに基づく画像それぞれが上記複数の表示パネルそれぞれに表示される。

例えば、一つの距離領域に対応する表示パネルに透過型の表示パネルが用いられていたとすると、非表示処理された部分を通して遠方側にある表示パネルの表示画像が見えるようになる。

そうすると、上記複数の表示パネルそれぞれに、例えば上記特許文献１に記載されているような近景にピントのあった画像、遠景にピントのあった画像がそれぞれ同時に表示されるため、上記視点側から見たときに、重なって配列されている表示パネルの前方の画像（近景の画像）と遠方の画像（遠景の画像）とが目に奥行き感を持たせるようになる。

上記近景・遠景だけでなく、その間の被写体距離にピントのあった画像を複数の表示パネルそれぞれに表示していくことによって、より実際の被写体に近い立体感を持つ画像が複数の表示パネル上に復元される。これを視点側から見ると臨場感のある立体画像となってあたかも撮影している被写体がそこにあるかのように立体視されるようになる。

すなわち、簡単な構成で、より臨場感のある立体画像を視認させることができる画像表示装置が実現される。

ここで、上記撮像素子が、上記結像光学系が１つのピント位置にあるときに同一被写界内の互いに異なる距離になる被写体がそれぞれ合焦状態に結像させる複数の単位撮像素子からなるものであっても、また、上記撮像素子は一つの撮像素子であって、上記結像光学系が、同一被写界内の互いに異なる距離にある被写体が合焦状態に順次結像されるようにピント位置を移動させるものであっても良い。

上記視点が正面付近にある場合は良いが、視点が斜め方向にどんどんとずれていって斜め方向から複数の表示パネルが視認されるようになってくると、正面から見ると重なっていた表示パネルが複数枚あることが視認されるようになって各表示パネルごとの画像がそれぞれ別々に視認されてしまうようなことがある。

そこで、視点範囲を広げる場合には、視点側から見たときの遠方にある表示パネルに表示される画像ほど、その表示パネルが分担する距離領域の画像の周縁に食み出して非表示領域をより縮小させた画像を表示する画像データを生成しておくと良い。

そうすると、斜め方向を視点としてその視点から複数の表示パネルからなる画像を視認したときにも、前方側にある画像が強調されるようになって立体画像の鮮明さが保たれるようになる。

以上、説明したように、簡単な構成で、より臨場感のある立体画像を視認させることができる画像表示装置が実現される。

以下、本発明の実施の形態について説明する。

図１は、本発明の撮影装置の一実施形態である画像表示装置を示す図であり、図２は、その画像表示装置を構成する本体部の構成を示す図である。

図１には、画像表示装置１を構成する本体部１０と表示部１１とを斜め上方から見た図が示されており、図２には、本体部１０内の構成が示されている。

図１に示すように、この画像表示装置１は、本体部１０と表示部１１とを備えており、この図１には、本体部１０内の結像光学系により捉えた、近景、中景、遠景に対応する３つの画像それぞれを、表示部１１が備える３枚の表示パネル１１１Ａ〜１１１Ｃそれぞれに分けて表示した場合の例が示されている。なお、ここでは照明用光源１１２によって３枚の表示パネル１１１Ａ〜１１１Ｃが後方から照明されていてその照明用光源とは反対の側の正面側にある視点Ｐから３枚の表示パネル１１１を見たときに立体画像が視認される構成が示されている。

ここで、図２を参照してこの画像表示装置１の内部の構成を説明する。

図１に示す画像表示装置１の本体部１０内には、図２に示すように撮影レンズ１０１およびダイクロイックプリズム１０２からなる結像光学系により同一被写界内の互いに異なる距離（図１には一例としてＤ、Ｅ，Ｆがそれぞれ示されている）にある被写体がそれぞれ合焦状態に結像した複数の画像データを生成する３つの単位撮像素子１０３Ａ，１０３Ｂ，１０３Ｃが配備されており、それら３つの単位撮像素子１０３Ａ〜１０３Ｃそれぞれで生成された画像データそれぞれの画像処理を行なう画像処理部１０４がそれらの単位撮像素子１０３Ａ〜１０３Ｃの後段に設けられている。３つの単位撮像素子のうちの一つの撮像素子１０３Ａは、被写界内の互いに異なる距離のうちの近距離部（図１には符号Ｄで示してある近景の人物）が合焦状態に結像する撮像素子であり、３つの単位撮像素子のうちの一つの撮像素子１０３Ｂは、被写界内の互いに異なる距離のうちの中距離部（図１にはＥで示してある中景の家）が合焦状態に結像する撮像素子であり、３つの単位撮像素子のうちの一つの撮像素子１０３Ｃは、被写界内の互いに異なる距離のうちの遠距離部（図１にはＦで示してある遠景の山）が合焦状態に結像する撮像素子である。

これらの３つの単位撮像素子それぞれで、近景・中景・遠景に対応する画像データを生成して、それぞれの画像データに基づく各画像を図１に示すように３枚の表示パネルそれぞれに表示するようにしている。３枚の表示パネル１１１Ａ〜１１１Ｃは図１に示す視点Ｐから見たときにそれぞれの画像が重なって見えるように配列されており、視点Ｐから表示パネル側を見たときには図１下方に示す如き画像があたかも奥行きがあるかのように視認されるようになっている。下方には平坦な画像が示されているが、実際には、３枚の表示パネルのうちの近景に対応する表示パネルには人物（被写界内の符号Ｄに対応する部分）のみが表示され、中景に対応する表示パネルには家（被写界内の符号Ｅに対応する部分）のみが表示され、遠景に対応する表示パネルには山（被写界内の符号Ｆに対応する部分）のみが表示されるので、視点Ｐから見たときには実際の被写界を見たときと同じ様な立体的な画像が視認されるようになる。後述するが、図１に示す表示パネルそれぞれに表示されている人、家、山といった表示画像領域以外の表示領域は全て非表示になるような非表示処理が施されており、視点側から見たときには前方の非表示領域を通して遠方側の表示パネルの画像が視認されるような工夫も施されている。

ここで、図２、図３および図４を参照して画像処理部１０４内の構成および動作を説明する。

図３は、画像処理部が行なう表示処理および非表示処理を説明する図である。また、図４は、表示パネル上の表示処理および非表示処理の区分を説明する図である。

図２に示すように、３つの単位撮像素子１０３Ａ〜１０３Ｃそれぞれで生成された、近景、中景、遠景に対応するそれぞれの画像データは画像処理部１０４内の、３つのフレームメモリ１０４Ａ〜１０４Ｃにそれぞれ記憶され、各フレームメモリ１０４Ａ〜１０４Ｃ内の画像データが後段のエリア分割部１０４１に供給される。このエリア分割部１０４１によって１つの単位撮像素子１０３Ａ、あるいは１０３Ｂ、あるいは１０３Ｃで得られた各画像データが多数の小エリアごとの画像データに分割される。それらの分割された小エリアごとの画像データが後段の高周波積算部１０４２に供給されて各エリアごとに高周波成分の積算処理が行なわれる。周知の如くピントが合えばあうほど撮像素子上に結像された画像のピントの合った部分に高周波成分が多く検出されることになるので、このエリア毎の高周波成分積算部１０４２で各エリアごとの高周波成分が検出され検出された高周波成分を示すデータとともに各エリアの位置座標を示すデータが後段のエリアごとの合焦積算部１０４３に供給される。そしエリア毎の合焦積算部１０４３で各エリアの積算結果から、どのエリア周辺に合焦点があるかどうかが検出される。そうしたら、合焦点のある小エリアごとの画像データ（例えば人を表わす画像データ）とともに位置座標を示すデータが次段の非表示エリアの画像処理部１０４４に供給される。この非表示エリアの画像処理部１０４４によって合焦状態にある小エリアの画像データとそれ以外のエリアの画像データが図４に示すように区分され、合焦状態にある小エリアの画像データはそのまま被写体を表わす画像データとなって表示部１１に供給され、合焦状態にある小エリア以外の画像データは、非表示処理されて表示部１１に供給される。例えば表示パネルが液晶パネルであった場合には、図３に示すようにＲＧＢ共にｍａｘの値となる画像データを表示部に供給して表示パネル上の表示が無色透明になるようにするようなことが行なわれる。

そうすると、図１に示すように近景においては人物以外の部分が透明色になって人物のみが表示され、中景においては家以外の部分が透明色になって家のみが表示され、遠景においては山以外が透明色になって山のみが表示されて、視点Ｐから見たときにはすべての表示が重なって立体視されるようになる。

以上説明したように、簡単な構成で、より臨場感のある立体画像を視認させることができる画像表示装置が実現される。

なお、上記実施形態では、３つの単位撮像素子および３枚の表示パネルを対応させているが、もっと多くの単位撮像素子および表示パネルを用いて構成しても良い。また撮像素子については、３つの単位撮像素子を用いることなく、近景から遠景までの被写体が合焦状態に順次結像されるようにピント位置を移動させるような構成にしても良い。

ところで、上記視点Ｐが図１に示すように表示パネルのパネル面に対して正対する位置にあれば良いが、視点Ｐが斜め方向にどんどんとずれていって視点Ｑのような斜め方向になってくると、正面からのときには重なっていて見えなかった遠方側の表示パネルの非表示領域が視認されてしまう恐れがある。そうすると、非表示領域がめだってしまって現実味のない画像となってしまう。

図５は、各表示パネルごとの画像が斜め方向から見ても重なるように工夫を施した場合の工夫例を説明する図である。図５には、近景・中景・遠景に対応する表示パネル１１１Ａ〜１１１Ｃのうち、近景に対応する表示パネル１１１Ａと中景に対応する表示パネル１１１Ｂとを抜き出して示してある。

図５（ａ）に示すように、斜めから見たときに遠方側（ここでは中景側）の画像の非表示領域が視認されるようになると、近景側の画像である人物と遠方側の非表示部が視認されてしまって、前方側の人物が浮いた感じになる。

そこで、そのような違和感を排除して視点範囲を広げるために図４（ｂ）に示すように視点Ｑ側から見たときの遠方側にある表示パネル１０４Ｂに表示される画像ほど、その表示パネル１１０Ｂが分担する距離領域の画像の周縁に食み出して非表示領域をより縮小させた画像を表示する画像データを生成している。

ここでは、図４（ｂ）に示すように前方側の表示パネル上に表示されている人物の輪郭が強調されるように中景に対応する表示パネル上の人物と重なる非表示領域を縮小させるように前方の人物の周縁部に表示領域（ハッチング部Ｒ）を設けて対応している。本実施形態の画像表示装置では、図３に示すように小エリアに分割されて画像処理が行なわれているので、前方の人物の輪郭を示す座標データがあれば、中景に対応する画像データの非表示処理を行なうことは容易い。

このように非表示処理の縮小を行なうことで斜め方向を視点としてその視点から複数の表示パネルからなる画像を視認したとしても遠方側にある表示パネルの非表示領域が視認されるというようなことがなくなる。言い換えれば斜め側に視点がずれたときには、前方にある人物の画像と遠方側の非表示領域の周縁部の輪郭部が視認されるようになって立体画像の鮮明さが保たれるようになる。

以上説明したように、簡単な構成で、より臨場感のある画像を視認させることができる画像表示装置が実現される。

なお、本実施形態では、結像光学系を撮影用の光学系として用いる例を示したが、複数枚のスライド画像等を結像レンズ系により複数枚のパネル上に表示させるような構成のものであっても良い。

本発明の撮影装置の一実施形態である画像表示装置を示す図である。 画像表示装置を構成する本体部の構成を示す図である。 画像処理部が行なう表示処理および非表示処理を説明する図である。 表示パネル上の表示処理および非表示処理の区分を説明する図である。 各表示パネルごとの画像が斜め方向から見ても重なるように工夫を施す施策の一例を説明する図である。

符号の説明

１ 画像表示装置
１０ 本体部
１０１ 撮影レンズ
１０２ ダイクロイックプリズム
１０３Ａ １０３Ｂ １０３Ｃ 撮像素子
１０４ 画像処理部
１０４Ａ １０４Ｂ １０４Ｃ フレームメモリ
１０４１ エリア分割部
１０４２ エリア毎の高周波成分積算部
１０４３ エリア毎の合焦積算部
１０４４ 非表示エリアの画像処理部
１１ 表示部
１１１Ａ １１１Ｂ １１１Ｃ 表示パネル
１１２ 照明用光源

Claims (4)

1. 結像光学系を経由してきた被写体光を捉えて画像データを生成し該画像データに基づく画像を表示する画像表示装置において、
   前記結像光学系により同一被写界内の互いに異なる距離にある被写体がそれぞれ合焦状態に結像した複数の画像データを生成する撮像素子と、
   前記撮像素子で得られた複数の画像データに基づいて、被写界を複数の距離領域に分割したときの各距離領域の画像を含み該各距離領域以外の非表示領域が非表示に処理された各距離領域ごとの各画像データを生成する画像処理部と、
   視点側から見て重なるように配置され、前記画像処理部で得られた各距離領域ごとの各画像データに基づく各画像をそれぞれ表示して該各画像を重ねた状態を視認させる複数の表示パネルとを備えたことを特徴とする画像表示装置。
2. 前記撮像素子が、前記結像光学系が１つのピント位置にあるときに同一被写界内の互いに異なる距離になる被写体がそれぞれ合焦状態に結像される複数の単位撮像素子からなることを特徴とする請求項１記載の画像表示装置。
3. 前記結像光学系が、同一被写界内の互いに異なる距離にある被写体が合焦状態に順次結像されるようにピント位置を移動させるものであることを特徴とする請求項１記載の画像表示装置。
4. 前記画像表示部は、視点側から見たときの遠方にある表示パネルに表示される画像ほど、該表示パネルが分担する距離領域の画像の周縁に食み出して非表示領域をより縮小させた画像を表示する画像データを生成するものであることを特徴とする請求項１記載の画像表示装置。

Images