WO2011083649A1 - マルチレイヤディスプレイ装置、および画像処理システム - Google Patents

Abstract

　層状に配置された複数の表示画面と、前記複数の表示画面の前面側に配置されたタッチパネルと、前記タッチパネルに対する操作に応じて、複数の表示画面のうちの少なくとも何れかを、操作対象画面として設定可能な設定部と、前記設定部により、複数の表示画面が操作対象画面として設定されたとき、各操作対象画面を合成した画面を表示させる表示制御部を備えるマルチレイヤディスプレイ装置とする。

Description

マルチレイヤディスプレイ装置、および画像処理システム

　本発明は、複数の表示画面が層状に配置されたマルチレイヤディスプレイ装置、および画像処理システムに関する。

　従来、画像を表示させる表示装置の一種として、複数の表示画面が層状に配置されたマルチレイヤディスプレイ［Multi　Layer　Display］装置（以下、「ＭＬＤ装置」と略記する場合がある）が考案されている。ＭＬＤ装置によれば、ユーザ（観察者）は、各表示画面に表示された画像が合わさって形成された画像を、観察することが可能である。

　合わさって形成された画像の各部分の表示位置と観察者との距離は、その部分が何れの表示画面に表示されているかによって、実際に変化する。そのためＭＬＤ装置によれば、一般的な表示装置（表示画面が単層の場合）に比べて、立体的に見せるべき画像を、より忠実に表示することが可能となる。

　なお表示装置によっては、表示画面に表示される画像を印刷する印刷機能を有しているものや、当該画像の情報を印刷情報として、外部接続された印刷装置（プリンタ）に送信する機能を有している場合がある。例えば特開２００９－２２０４８号公報には、上述したような印刷機能を備えた表示装置（画像処理装置）が開示されている。

　当該表示装置によれば、ユーザは、表示内容の印刷された印刷物（紙など）を入手することが可能である。ユーザは、例えば表示内容のメモを取る代わりに、当該表示内容を印刷させることも可能となり、このような観点から、当該表示装置は利便性が良いと言える。

　上述したように、表示装置が表示する画像の印刷が可能となっていれば、ユーザにとって利便性の高いものとなる。ところでＭＬＤ装置によれば、複数の表示画面の各々に画像が表示されるため、印刷に反映させようとする画像が、二つ以上の表示画面にわたって表示されるようなケースも想定される。

　しかしＭＬＤ装置において、単に、一つの表示画面に表示される画像を印刷する機能や、当該画像の情報を印刷情報として送信する機能を有するにとどまっている場合は、二つ以上の表示画面にわたって表示される画像を印刷に反映させることは難しい。

　本発明に係るマルチレイヤディスプレイ装置は、層状に配置された複数の表示画面と、前記複数の表示画面の前面側に配置されたタッチパネルと、前記タッチパネルに対する操作に応じて、複数の表示画面のうちの少なくとも何れかを、操作対象画面として設定可能な設定部と、前記設定部により、複数の表示画面が操作対象画面として設定されたとき、各操作対象画面を合成した画面を表示させる表示制御部を備える構成とする。

本発明の実施形態に係るＭＬＤ装置の構成に関するブロック図である。 当該ＭＬＤ装置の断面図である。 当該ＭＬＤ装置が行う動作の流れ図（ステップＳ１～Ｓ８）である。 当該ＭＬＤ装置が行う動作の流れ図（ステップＳ５０～Ｓ５８）である。 オリジナル画像情報に関する説明図である。 修正画像情報に関する説明図である。 観察される画像（合わさって形成された画像）に関する説明図である。 合成対象画像の一例を表す説明図である。 印刷情報の一例を表す説明図である。 予め修正がなされたオリジナル画像情報に関する説明図である。 代替画像の填め込みがなされた画像情報に関する説明図である。

　本発明の実施形態について、マルチレイヤディスプレイ装置（ＭＬＤ装置）を例に挙げて、以下に説明する。

　図１は、当該ＭＬＤ装置の構成に関するブロック図である。本図に示すように当該ＭＬＤ装置１は、印刷情報出力インターフェース１１、第１表示画面１２、第２表示画面１３、第３表示画面１４、バックライト１５、印刷制御部１６、表示制御部１７、ＣＰＵ［Central　Processing　Unit］１８、操作ボタン１９、内蔵メモリ２０、画像情報入力部２１、および画像情報入力インターフェース２２などを備えている。

　また図２は、ユーザ（観察者）の観察方向に平行な面を断面とした場合の、ＭＬＤ装置１の断面図である。本図に示すようにＭＬＤ装置１は、手前側（本願では、観察者に近い側を意味する）が開口している筐体１０に、第１表示画面１２、第２表示画面１３、第３表示画面１４、およびバックライト１５が、手前側から奥側へ順に並ぶように配置されている。

　このように各表示画面（１２～１４）は、手前側から奥側に向かう方向を層方向として、層状に配置されている。なお本実施形態では、３層の表示画面を有しているが、２層あるいは４層以上の表示画面を有していても構わない。

　印刷情報出力インターフェース１１は、外部接続端子などが設けられており、外部機器としての印刷装置２が、着脱自在に接続される。印刷情報出力インターフェース１１は、印刷情報を印刷装置２へ出力するときに用いられる、インターフェースとして機能する。

　なお印刷装置２は、例えば汎用的なプリンタであり、予め供給されている印刷用紙に、取得した印刷情報（画像情報などの、印刷の内容を特定する情報）を印刷するものである。ＭＬＤ装置１に接続された状態では、印刷装置２は、ＭＬＤ装置１から印刷情報を受信し、受信した印刷情報を印刷する。

　第１から第３の各表示画面（１２～１４）は、ＲＧＢ（赤・緑・青）の各画素が全面に配置された、それぞれ同等の大きさの面を有する液晶ディスプレイとして形成されている。各表示画面（１２～１４）における画素ごとの光の透過度合は、表示制御部１７によって調整される。これにより各表示画面（１２～１４）においては、バックライト１５から手前側に向けて放たれた光によって、画像が形成される。

　バックライト１５は、ＭＬＤ装置１の光源として機能するものであり、例えば蛍光管やＬＥＤ［Light　Emitting　Diode］によって形成されている。バックライト１５は、各表示画面（１２～１４）に画像を表示させるべき期間において、白色の光を継続的に放つように制御される。

　印刷制御部１６は、印刷情報出力インターフェース１１を介して印刷装置２との通信を行うことが可能となっており、ＣＰＵ１８の指示に従って、印刷情報を印刷装置２に送信する。なお、どのような情報が印刷情報として採用されるかについては、後述する説明によって明らかとなる。

　表示制御部１７は、内蔵メモリ２０や画像情報入力部２１等から伝送されてきた画像情報に基づいて、各表示画面（１２～１４）に画像が形成されるように、各表示画面（１２～１４）に設けられた各画素の光の透過度合を調整する。なおＭＬＤ装置１において用いられる画像情報の形式については、改めて説明する。

　また印刷制御部１６と表示制御部１７の各機能部は、別々の装置によって実現されていても良く、同じ装置によって実現されていても良い。またＣＰＵ１８が、印刷制御部１６や表示制御部１７の機能を兼ね備えるようにしても構わない。

　ＣＰＵ１８は、ＭＬＤ装置１の機能が発揮されるように（必要な動作が適切に遂行されるように）、ＭＬＤ装置１の各部を適切に制御する。なおＭＬＤ装置１において実行される主な動作の内容については、改めて詳細に説明する。

　操作ボタン１９は、ユーザによって操作される複数のボタンスイッチ（例えば押しボタンスイッチ）からなり、ユーザが操作できる位置に設けられている。操作ボタン１９におけるユーザの操作内容は、ＣＰＵ１８に伝送され、ＭＬＤ装置１の各種動作に反映される。

　内蔵メモリ２０は、書換え可能である不揮発性のメモリや、作業用メモリとして利用されるＲＡＭ等によって形成されており、画像情報などを記憶する。また画像情報入力部２１は、画像情報入力インターフェース２２を介して、外部から画像情報が入力されるようになっている。入力された画像情報は、例えば内蔵メモリ２０に一旦記録される。

［ＭＬＤ装置が行う主な動作について］
　次に、ＭＬＤ装置１が行う主な動作の内容について説明する。

　ＭＬＤ装置１は、各表示画面（１２～１４）に画像を表示させつつ、ユーザの操作に応じて印刷情報を生成し、印刷装置２に送信する動作を行うようになっている。当該動作の流れについて、図３および図４に示すフローチャートを参照しながら、より詳細に説明する。まず当該動作の全体的な流れについて、図３に示すフローチャートを参照して説明する。

　ＭＬＤ装置１は、通常時、内蔵メモリ２０に格納されている画像情報のうち、表示すべき画像についてのユーザの指定（例えば、画像情報に付けられたファイル名の指定）を受付ける。そして当該指定がなされると、ＣＰＵ１８は、指定された画像情報を表示対象の画像情報として特定する（ステップＳ１）。特定された画像情報は、例えば作業用メモリに読み出され、以降の動作に使用される。

　ここでＭＬＤ装置１において扱われる画像情報には、第１表示装置１２に表示される画像の情報である第１オリジナル画像情報、第２表示装置１３に表示される画像の情報である第２オリジナル画像情報、および第３表示装置１４に表示される画像の情報である第３オリジナル画像情報が含まれている。なお「オリジナル画像情報」の語は、後に登場する「修正画像情報」と区別するために、便宜的に定義したものである。

　また第１から第３の各オリジナル画像情報に係る画像は、表示画面の枠に対応するフレーム内の空白に、１個または複数個の前景（何らかの形状の輪郭を有するもの）が配置された形態となっている。つまりフレーム内の前景を除いた領域は、空白となっている。前景は色の情報も付与されており、表示画面に表示された際に、その色に表示されることとなる。

　またオリジナル画像が表示画面に表示されたとき、空白に対応する領域は完全に透明（つまり、より奥側の表示状態が、そのまま透けて見える状態）となる。各オリジナル画像情報は、少なくとも、各前景の形状、向き、色、およびフレーム内での位置を特定する情報となっている。

　図５は、第１オリジナル画像情報ＯＲＧ－１、第２オリジナル画像情報ＯＲＧ－２、および第３オリジナル画像情報ＯＲＧ－３の具体例を示したものである。これらの画像が、それぞれ対応する表示画面（１２～１４）に表示されると、観察者からは、これらの画像情報が合わさって見えることになる。

　ただし、第２および第３のオリジナル画像情報（ＯＲＧ－２、ＯＲＧ－３）が、それぞれ第２および第３の表示画面（１３、１４）にそのまま表示されると、観察者の視点からは、異なる画像情報の前景同士が重なり合う部分において色が混ざったように見えるため、観察者は違和感を覚えることになる。そこでＣＰＵ１８は、このような重なり合いが解消されるように、第２および第３のオリジナル画像情報（ＯＲＧ－２、ＯＲＧ－３）について修正処理を施し、それぞれに対応する修正画像情報を生成する（ステップＳ２）。

　より具体的には、各オリジナル画像情報（ＯＲＧ－２、ＯＲＧ－３）の前景における、より手前側に表示される各オリジナル画像情報の前景と重なり合う領域が、空白となるように修正が施される。すなわち、第２のオリジナル画像情報（ＯＲＧ－２）については、図６の上段に示すように、第１のオリジナル画像情報（ＯＲＧ－１）の前景と重なり合う領域が空白に修正され、第２の修正画像情報（ＣＯＲ－２）が生成される。また、第３のオリジナル画像情報（ＯＲＧ－３）については、図６の下段に示すように、第１と第２のオリジナル画像情報（ＯＲＧ－１、ＯＲＧ－２）の前景と重なり合う領域が空白に修正され、第３の修正画像情報（ＣＯＲ－３）が生成される。

　その後ＣＰＵ１８は、第１表示画面１２に第１オリジナル画像情報ＯＲＧ－１が、第２表示画面１３に第２修正画像情報ＣＯＲ－２が、第３表示画面１４に第３修正画像情報ＣＯＲ－３が、それぞれ表示されるように、表示制御部１７に指示を与える（ステップＳ３）。これにより各表示画面（１２～１４）には、当該指示通りに画像が表示される。

　このようにＭＬＤ装置１では、オリジナル画像情報同士における前景同士の重なり合う部分について、当該オリジナル画像情報のうちの最も手前側の表示画面に対応しているものを除く全ての画像情報の該部分が空白に修正される。そしてＭＬＤ装置１は、当該修正された画像情報を用いて、表示画面に画像を表示させるようになっている。

　そのためユーザによって観察される画像（合わさって形成される画像）について、前景同士の重なる部分については、そのうちの最も手前側に表示されるものだけが現れることになり、重なっている各前景の色が混ざったように見えることはない。その結果、ＭＬＤ装置１は、観察される画像を、ユーザに出来るだけ違和感を与えないように構成することが可能となっている。

　ＭＬＤ装置１によれば、各表示画面（１２～１４）に画像が表示され、観察者には、図７に示すように、これらの画像の各々が合わさって見えるようになる。換言すれば、ＭＬＤ装置１は、これらの画像の各々が合わさって形成された画像を、層方向の手前側に向けて表示するようになっていると言える。

　またこのように各表示画面（１２～１４）に画像が表示された状態において、ＣＰＵ１８は、ユーザによる印刷対象画面の選択操作（印刷対象画面とすべき表示画面を選択する操作）を受付ける状態で待機する（ステップＳ４）。

　これによりユーザは、操作ボタン１９の操作を通じて、全ての表示画面（１２～１４）のうちから、任意の数の表示画面を、自在に選択することが可能となっている。ユーザは、一つの表示画面に表示された画像を印刷したいときには、その一つの表示画面を選択することになる。またユーザは、複数個の表示画面に表示された各画像の合成画像を印刷したいときには、その複数個の表示画面を選択することになる。

　ユーザによる印刷対象画面の選択操作がなされたら（ステップＳ４のＹ）、ＣＰＵ１８は、選択された１個または複数個の表示画面を印刷対象画面として認識するとともに、印刷対象画面に対応する各画像情報を合成し、印刷情報を生成する（ステップＳ５）。これにより、一画面分の画像情報が、当該印刷情報として生成されることになる。なおステップＳ５の動作の、より詳細な説明については後述する。

　その後ＣＰＵ１８は、生成された印刷情報を、第１表示画面１２に表示させる（ステップＳ６）。またこのとき、第２および第３の表示画面（１３、１４）は、何も表示されない状態（完全に空白の状態）とされる。これによりユーザは、第１表示画面１２を見て、印刷情報の内容を確認することが可能となっている。

　また当該印刷情報が表示された状態において、ＭＬＤ装置１は、当該印刷情報を印刷装置２に送信すべきか否かについての、ユーザの指示を受付ける（ステップＳ７）。ユーザは、上述した通り印刷情報の内容を確認し、この内容にて印刷を実施させたい場合には、送信すべき旨を指示し、印刷内容の変更や印刷中止を望む場合には、送信すべきでない旨を指示することになる。

　そして送信すべき旨の指示がなされた場合には（ステップＳ７のＹ）、ＭＬＤ装置１は、当該印刷情報を印刷装置２に送信し（ステップＳ８）、その後ＣＰＵ１８の動作は、ステップＳ３の動作に戻る。これにより印刷装置２は当該印刷情報を受信し、この印刷情報を印刷することとなる。その結果ユーザは、当該印刷情報の印刷された印刷物を入手することができる。

　一方で、送信すべきでない旨の指示がなされた場合には（ステップＳ７のＮ）、当該印刷情報を印刷装置２に送信されず、ＣＰＵ１８の動作は、ステップＳ３の動作に戻る。ステップＳ３の動作が再度実行されることにより、各表示画面（１２～１４）の表示内容は、ステップＳ６の動作が実行される前の状態に戻る。

　なお、ステップＳ６およびＳ７の動作については、省略されるようにしても構わない。この場合、ステップＳ５の動作によって印刷情報が生成された後、当該印刷情報は、直ちに印刷装置２に送信される（ステップＳ８）。

［ステップＳ５の動作の詳細について］
　次に、先述したステップＳ５の動作について、図４に示すフローチャートを参照しながら、より詳細に説明する。ステップＳ５の動作は、より詳細には、以下に説明するステップＳ５０からステップＳ５８までの一連の動作となっている。

　先ずＣＰＵ１８は、最も手前側の表示画面に対応したオリジナル画像情報（本実施形態では、第１表示画面１２に対応した第１オリジナル画像情報ＯＲＧ－１）を、処理対象（ステップＳ５１～Ｓ５５の処理の対象）に設定する（ステップＳ５０）。次にＣＰＵ１８は、処理対象となっているオリジナル画像情報が、印刷対象画面に対応したものであるかを判断する（ステップＳ５１）。そして対応したものである場合には（ステップＳ５１のＹ）、次にＣＰＵ１８は、合成対象画像（後述するステップＳ５４およびＳ５５を参照）が、現時点で既に存在するかを判断する（ステップＳ５２）。

　その結果、合成対象画像が既に存在する場合には（ステップＳ５２のＹ）、次にＣＰＵ１８は、処理対象となっているオリジナル画像情報の前景と、何れかの合成対象画像の前景との間で、互いに重なり合う部分が有るか否かを判断する（ステップＳ５３）。そして重なり合う部分が有る場合には（ステップＳ５３のＹ）、ＣＰＵ１８は、処理対象となっているオリジナル画像情報の当該重なり合う部分を空白に修正し、当該修正後の画像情報を、合成対象画像の一つに設定する（ステップＳ５４）。

　一方で、合成対象画像が未だ存在していない場合（ステップＳ５２のＮ）、或いは、処理対象となっているオリジナル画像情報の前景が、何れの合成対象画像の前景とも重なり合っていない場合（ステップＳ５３のＮ）には、処理対象となっているオリジナル画像情報をそのまま（特段の修正を施さずに）合成対象画像の一つに設定する（ステップＳ５５）。

　ステップＳ５４またはＳ５５の動作がなされた後、ＣＰＵ１８は、全てのオリジナル画像情報について処理が済んでいるか（つまり、処理対象とされたか）を判断する（ステップＳ５６）。なお処理対象は、手前側の表示画面に対応するものから順に設定される（後述するステップＳ５７の動作を参照）ため、ステップＳ５６に係る判断の結果は、最も奥側の表示画面に対応したオリジナル画像について処理が済んだかの判断の結果と同じとなる。そのためステップＳ５６の動作は、最も奥側の表示画面に対応したオリジナル画像について処理が済んだかを、判断する動作となっていても構わない。

　そして未処理のオリジナル画像情報がある場合（ステップＳ５６のＮ）、或いは、現時点で処理対象となっているオリジナル画像情報が、印刷対象画面に対応していない場合（ステップＳ５１のＮ）には、ＣＰＵ１８は、一つ奥側の表示画面に対応したオリジナル画像情報を、処理対象に設定する（ステップＳ５７）。すなわちＣＰＵ１８は、手前側からＮ番目の表示画面に対応するオリジナル画像情報が、現時点での処理対象に設定されている場合に、処理対象を、手前側からＮ＋１番目の表示画面に対応するオリジナル画像情報に更新する。

　また一方で、全てのオリジナル画像情報について処理が済んでいる場合（ステップＳ５６のＹ）には、ＣＰＵ１８は、全ての合成対象画像（これまでに実施されたステップＳ５４或いはＳ５５の処理によって、合成対象画像に設定された画像情報の全て）を、一画面分の一つの画像に合成し、印刷情報を生成する（ステップＳ５８）。

　ここで、ステップＳ５の動作をより理解容易とするため、当該動作が実行される様子について、具体的な事例を挙げて説明する。なお本事例では、第１～第３の各オリジナル画像情報（ＯＲＧ－１～ＯＲＧ－３）は、図５に示した画像を表すものとする。また本事例では、第１表示画面１２および第３表示画面１４の２個の表示画面が、印刷対象画面として選択されたものとする。

　本事例では、まず第１表示画面１２に対応した第１オリジナル画像情報ＯＲＧ－１が、処理対象に設定される（ステップＳ５０）。そして、第１オリジナル画像情報ＯＲＧ－１は印刷対象画面に対応しており（ステップＳ５１のＹ）、また、この時点では合成対象画像は存在していないため（ステップＳ５２のＮ）、第１オリジナル画像情報ＯＲＧ－１は、そのまま合成対象画像に設定される（ステップＳ５５）。

　その後、未処理のオリジナル画像情報があるため（ステップＳ５６のＮ）、ステップＳ５７の動作が実行され、第２表示画面１３に対応した第２オリジナル画像情報ＯＲＧ－２が、処理対象に設定される。しかし、第２オリジナル画像情報ＯＲＧ－２は、印刷対象画面に対応していないため（ステップＳ５１のＮ）、次に、第３表示画面１４に対応した第３オリジナル画像情報ＯＲＧ－３が、処理対象に設定される（ステップＳ５７）。

　第３オリジナル画像情報ＯＲＧ－３は印刷対象画面に対応しており（ステップＳ５１のＹ）、また、合成対象画像（修正されていない第１オリジナル画像情報ＯＲＧ－１）は既に存在している（ステップＳ５２のＹ）。また第３オリジナル画像情報ＯＲＧ－３の前景の一部は、合成対象画像の前景と重なり合っている（ステップＳ５３のＹ）。そこで図８に示すように、当該重なり合う部分が空白に修正された第３オリジナル画像情報ＯＲＧ－３が、合成対象画像に設定される（ステップＳ５４）。

　この段階で、全てのオリジナル画像情報について処理が済んだことになる（ステップＳ５６のＹ）。そこで、全ての合成対象画像（修正されていない第１オリジナル画像情報ＯＲＧ－１と、修正された第３オリジナル画像情報ＯＲＧ－３）は、図９に示すように一つの画像に合成され、印刷情報が生成される（ステップＳ５８）。

　以上に説明した事例からも明らかなように、ステップＳ５の動作によれば、印刷対象画面に対応する画像のみが一つの画像に合成され、印刷情報が生成されることになる。なおステップＳ５の動作によれば、印刷対象画面に対応したオリジナル画像情報同士における、前景同士の重なり合う部分については、これらのオリジナル画像情報のうちの最も手前側の印刷対象画面に対応しているものを除く、全てのオリジナル画像情報の当該部分が空白に修正される。

　その結果、印刷対象画面に対応したオリジナル画像情報同士における、前景同士の重なり合う部分については、これらのオリジナル画像情報のうちの最も手前側の印刷対象画面に対応しているものの当該部分が、印刷情報を生成するための合成（ステップＳ５８）に用いられることになる。

　これにより印刷情報に係る画像では、前景同士の重なる部分については、観察者がＭＬＤ装置１を観察する場合と同様に、手前側に表示されるものが現れることになる。そのため、印刷情報に係る画像は、ユーザに出来るだけ違和感を与えないように構成されたものとなる。なお、ステップＳ５の動作によれば、印刷対象画面に選択された表示画面が一つだけである場合は、その表示画面に対応したオリジナル画像情報が、そのまま印刷情報となる。このように、印刷対象画面に選択された表示画面が一つだけであっても、印刷情報は適切に生成される。

［オリジナル画像情報同士の重なり合いが、予め修正されている場合について］
　またＭＬＤ装置１で用いられる画像情報について、オリジナル画像情報の段階で、前景同士の重なり合いを解消するための修正が施されているケースも考えられる。すなわち、オリジナル画像情報同士における前景同士の重なり合う部分については、これらのオリジナル画像情報のうちの最も手前側の表示画面に対応しているものを除く、全てのオリジナル画像情報の当該部分が、予め空白に修正されているケースも考えられる。

　例えば、元々は図５に示す内容となっていた各オリジナル画像情報（ＯＲＧ－１～ＯＲＧ－３）について、予め当該修正が施され、図１０に示す内容の各オリジナル画像情報（ＯＲＧ－１ａ～ＯＲＧ－３ａ）を含む画像情報が、内蔵メモリ２０に記録されているケースである。このようなケースでは、各オリジナル画像情報の前景同士がそもそも重なり合わないので、前景同士の重なり合いを解消させるための処理（先述したステップＳ２の処理や、ステップＳ５４の処理の一部）の実行を省略することが可能である。

　しかしこのケースでは、印刷対象画面に対応したオリジナル画像情報に、印刷対象画面に対応していないオリジナル画像情報との関係で修正のなされた部分がある場合に、合成画像情報が、不要な空白を有するものとなるおそれがある。一例としては、第１表示画面１２は印刷対象画面に選択されていないが、第２表示画面１３は印刷対象画面に選択された場合、本来であれば、図５に示す第２オリジナル画像情報ＯＲＧ－２が合成対象画像（不要な空白が無い）となるべきであるが、本ケースでは、図１０に示す第２オリジナル画像情報ＯＲＧ－２ａ（修正によって不要な空白が生じている）が合成対象画像となってしまう。

　つまり、第２オリジナル画像情報ＯＲＧ－２ａに修正によって付加された空白は、第１オリジナル画像情報ＯＲＧ－１ａとの重なり合いを解消させるためのものであり、第１オリジナル画像情報ＯＲＧ－１ａが関与しない場合には、当該空白は不要であるといえる。

　そこでＭＬＤ装置１は、このような不要な空白が生じる場合、当該空白の部分に代替画像を填め込む処理を実行するようになっていても良い。つまり、印刷対象画面に対応したオリジナル画像情報において、印刷対象画面に対応していないオリジナル画像情報との関係で当該修正のなされた部分があるときは、該修正のなされた部分に、代替画像が填め込まれるようにしても良い。

　修正のなされたオリジナル画像情報について、どの部分が空白に修正されているかを特定し得る情報が取得可能であれば（例えば画像情報に、当該情報も含まれていれば）、このような処理は実施可能である。なお代替画像としては、例えば、他のオリジナル画像情報に配置された前景の全部または一部であって、当該空白の部分に重なるものを採用すれば良い。また代替画像を填め込む処理については、例えば、ステップＳ５８の動作がなされる直前のタイミングで、実行されるようにすれば良い。

　このようにすれば、例えば第１表示画面１２は印刷対象画面に選択されていないが、第２表示画面１３は印刷対象画面に選択された場合、図１１に示すように、第２オリジナル画像情報ＯＲＧ－２ａの不要な空白に、代替画像（第１オリジナル画像情報ＯＲＧ－１ａの一部であって、当該空白の部分に重なるもの）が填め込まれたものが、合成対象画像となる。これにより不要な空白は排除され、印刷情報に係る画像を、ユーザに出来るだけ違和感を与えないものとすることが可能である。

［まとめ］
　以上に説明した通り、本実施形態に係るＭＬＤ装置１は、複数の表示画面（１２～１４）のうちの何れか一つ以上をユーザに選択させ、当該選択のなされた表示画面を印刷対象画面（選択画面）に設定する機能部と、複数の表示画面（１２～１４）のうちの二つ以上が印刷対象画面に設定された場合、印刷対象画面の各々に対応した画像情報（未修正あるいは修正済みのオリジナル画像情報）の合成を行って、一画面分の画像情報（合成画像情報）を生成する機能部と、を備えている。

　そしてＭＬＤ装置１は、印刷装置２との通信を行う機能部を備え、表示画面（１２～１４）のうちの一つが印刷対象画面に設定された場合には、この印刷対象画面に対応したオリジナル画像情報を、印刷情報として印刷装置２に送信する。またＭＬＤ装置１は、表示画面（１２～１４）のうちの二つ以上が印刷対象画面に設定された場合には、生成された合成画像情報を、印刷情報として印刷装置２に送信する。

　そのためＭＬＤ装置１によれば、印刷に反映させようとする画像が、一つの表示画面に表示される場合だけでなく、二つ以上の表示画面にわたって表示される場合であっても、印刷装置２を用いて要望に沿った印刷を実現することが可能となっている。

　以上の通り、本発明の実施形態について説明したが、本発明はこの内容に限定されるものではない。また本発明の実施形態は、本発明の主旨を逸脱しない限り、種々の変形を加えることが可能である。例えばＭＬＤ装置１自体に印刷を行う機能を備えさせておき、ＭＬＤ装置１が単独で、印刷情報に基づいた印刷を行うことが可能となっていても構わない。

Claims (8)

1. 　層状に配置された複数の表示画面と、
   　前記複数の表示画面の前面側に配置されたタッチパネルと、
   　前記タッチパネルに対する操作に応じて、複数の表示画面のうちの少なくとも何れかを、操作対象画面として設定可能な設定部と、
   　前記設定部により、複数の表示画面が操作対象画面として設定されたとき、各操作対象画面を合成した画面を表示させる表示制御部
   　を備えることを特徴とするマルチレイヤディスプレイ装置。
2. 　前記表示制御部は、
   　前記操作対象画面に対応した画像情報同士における、前景同士の重なり合う部分について、該画像情報のうちの最も手前側の操作対象画面に対応しているものの該部分を、前記合成に用いることを特徴とする請求項１に記載のマルチレイヤディスプレイ装置。
3. 　前記画像情報の各々は、フレーム内の空白に前景が配置された態様であることを特徴とする請求項２に記載のマルチレイヤディスプレイ装置。
4. 　前記表示制御部は、
   　前記操作対象画面に対応した画像情報同士における、前景同士の重なり合う部分について、該画像情報のうちの最も手前側の操作対象画面に対応しているものを除く全ての画像情報の該部分を空白に修正した上で、前記合成を行うことを特徴とする請求項３に記載のマルチレイヤディスプレイ装置。
5. 　前記表示制御部は、
   　前記画像情報同士における前景同士の重なり合う部分について、該画像情報のうちの最も手前側の表示画面に対応しているものを除く全ての画像情報の該部分を空白に修正し、
   　該修正された画像情報を用いて、前記表示画面に画像を表示させることを特徴とする請求項４に記載のマルチレイヤディスプレイ装置。
6. 　前記画像情報は、
   　フレーム内の空白に前景が配置された態様であるとともに、
   　前記画像情報同士における前景同士の重なり合う部分については、該画像情報のうちの最も手前側の表示画面に対応しているものを除き、全ての画像情報の該部分が予め空白に修正されたものであり、
   　前記操作対象画面に対応した画像情報において、前記操作対象画面に対応していない画像情報との関係で前記修正のなされた部分があるときは、
   　該修正のなされた部分に、他の画像情報の全部または一部であって該部分に重なるものを、填め込む処理を行うことを特徴とする請求項１に記載のマルチレイヤディスプレイ装置。
7. 　印刷情報の印刷を行う印刷装置との通信を行う、通信部を備え、
   　該通信部は、
   　前記表示画面のうちの一つが操作対象画面に設定された場合には、該操作対象画面に対応した前記画像情報を、印刷情報として前記印刷装置に送信し、
   　前記表示画面のうちの二つ以上が操作対象画面に設定された場合には、前記表示制御部によって生成された合成画像情報を、印刷情報として前記印刷装置に送信することを特徴とする請求項１に記載のマルチレイヤディスプレイ装置。
8. 　請求項７に記載のマルチレイヤディスプレイ装置と、
   　該マルチレイヤディスプレイ装置から前記印刷情報を受信し、該印刷情報の印刷を行う印刷装置と、
   　を備えたことを特徴とする画像処理システム。

Images