JP6253417B2 - 車両情報表示制御装置 - Google Patents

Description

本発明は、運転者の視野に情報を表示する車両情報表示制御装置に関するものである。

例えばフロントガラスや運転者が車両前方を見通せる透明なスクリーンに情報を表示することによって、運転者の視野に情報を直接表示する車両情報表示装置は、「ヘッドアップディスプレイ（ＨＵＤ）」と呼ばれ、その実用化が進んでいる。

例えば、下記の特許文献１には、運転者の視線方向を検知する手段と、車両前方を撮影する手段とを備え、運転者が脇見したときに、その運転者の視線方向へ車両前方の画像を表示することにより、運転者の視線を適正な方向へと誘導する技術が開示されている。また、下記の特許文献２には、運転者の視線の近傍に任意の色のポイントを表示し、運転者の顔画像データに基づいて運転者の視線がポイントに移動するまでの時間を測定することで、運転者がそのポイントの色を視認可能か否かを判断し、視認可能と判断された色をＨＵＤの表示色に設定する技術が開示されている。

特開２００８−１６２５５０号公報 特開２０１０−２３６２１号公報

ＨＵＤの技術においては、車両前方の視認性と情報表示の視認性の両立が課題となっている。例えば、情報表示の視認性を高めるために、運転者の視線のごく近くに情報を表示すると、その表示が邪魔になって車両前方の視認性が損なわれる。逆に、運転者の視線から離れた位置に情報を表示すると、車両前方は見やすくなるが、ＨＵＤの情報表示は見えにくくなる。さらに、運転者が表示を見るために視線を大きく動かす必要が生じ、ＨＵＤの利便性も損なわれる。

本発明は以上のような課題を解決するためになされたものであり、運転者の視野に情報を表示するヘッドアップディスプレイを制御する車両情報表示制御装置において、車両前方の視認性と情報表示の視認性の両立を可能とすることを目的とする。

本発明に係る車両情報表示制御装置は、車両の運転者の視野に情報を表示するヘッドアップディスプレイを制御する車両情報表示制御装置であって、車両の状況に関する情報を取得し、車両の状況に関する情報に基づいて、ヘッドアップディスプレイで表示すべき情報を判断する情報表示判断部と、車両の前方を撮影した画像を取得する画像処理部と、運転者の視線の方向を検出する視線方向検出部と、車両の前方の画像に対し運転者の視線の方向に基づく補正処理を行うことで、運転者の視野に対応する画像である仮想視野画像を作成する仮想視野構築部と、仮想視野画像および車両の状況に基づいて、ヘッドアップディスプレイで表示する情報のレイアウトを決定する表示処理部とを備える。

本発明に係る車両情報表示制御装置によれば、運転者の視野に対応する仮想視野画像と、車両の状況に基づいて、ヘッドアップディスプレイが表示する情報のレイアウトが決定されるため、運転者から見た車両前方の視認性を考慮した、ヘッドアップディスプレイの情報表示を行うことができる。よって、車両前方の視認性と情報表示の視認性の両立が可能となる。

本発明の実施の形態に係る車両情報表示制御装置の構成を示す図である。 画像処理部の構成を示す図である。 情報表示判断部の構成を示す図である。 仮想視野構築部の構成を示す図である。 表示処理部の構成を示す図である。 本発明の実施の形態に係る車両情報表示制御装置の動作を示すフローチャートである。 ダッシュボードの画像の一例を示す図である。 ＨＵＤに割り当てられる表示情報の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。 ＨＵＤによる情報表示の例を示す図である。

図１は、本発明の実施の形態に係る車両情報表示制御装置１００の構成を示す図である。車両情報表示制御装置１００は、ヘッドアップディスプレイ（ＨＵＤ）６１および非ＨＵＤディスプレイ６２の動作を制御するものであり、図１のように、車両情報表示制御装置１００は、画像処理部１０、情報表示判断部２０、視線方向検出部３０、仮想視野構築部４０、表示処理部５０を備えている。

ＨＵＤ６１は、車両の運転者の視野に情報を表示する表示デバイスであり、非ＨＵＤディスプレイ６２は、車両のセンターパネルなどに配設される一般的な表示デバイスである。図１には、ＨＵＤ６１および非ＨＵＤディスプレイ６２が車両情報表示制御装置１００に外付けされる構成を示しているが、それらは車両情報表示制御装置１００の一部として構成されていてもよい。

車両情報表示制御装置１００はコンピュータを用いて構成されており、その各要素は、コンピュータが、プログラムに従って動作することにより実現される。また、各要素が記憶する情報は、当該コンピュータがアクセス可能なハードディスク、リムーバブルディスク、メモリなどの記憶媒体に記憶されている。

なお、本発明に係る車両情報表示制御装置１００は、車両に常時固定されるものに限られず、車両から取り外し可能な携帯型の機器でもよいが、以下では、車両情報表示制御装置１００が車両に固定された状態を仮定して説明する。また、車両情報表示制御装置１００を搭載した車両を「自車」と呼ぶこととする。

図１のように、車両情報表示制御装置１００には、前方車載カメラ１０１、運転者モニタリングカメラ１０２、車載センサ１０３、車載機器１０４、通信機器１０５が接続されている。前方車載カメラ１０１は、自車前方を撮影するカメラである。運転者モニタリングカメラ１０２は、運転者の視線の方向を検出するために、運転者を撮影するカメラである。車載センサ１０３は、車速センサ、方位センサ、温度センサなど、自車に搭載されたセンサである。車載機器１０４は、ナビゲーション装置、マルチメディア機器など、自車に搭載された機器である。通信機器１０５は、外部と通信するための機器であり、スマートフォンなど汎用の通信装置でもよい。

本実施の形態では、車両情報表示制御装置１００が通信機器１０５を用いて外部と通信する構成をとしているが、車両情報表示制御装置１００が通信機能を有していてもよい。また、車両情報表示制御装置１００は、車載機器１０４の一部分として構成されていてもよい。例えば、車両情報表示制御装置１００がナビゲーション装置の表示部として構成されていてもよい。

以下、図１に示した車両情報表示制御装置１００の構成を、図２〜図６を参照しつつ、説明する。

画像処理部１０は、前方車載カメラ１０１が撮影した自車前方の画像（前方画像）を取得すると共に、取得した前方画像から、自車前方の路面、車両、地物および歩行者の状況に関する情報を抽出する。また、画像処理部１０は、前方車載カメラ１０１が撮影した前方画像を仮想視野構築部４０へと送る。

前方車載カメラ１０１は、自車の運転者の目線に近い位置から自車前方を撮影することが好ましく、自車のフロントガラスの上部付近、例えばルームミラーの裏側などに設置される。

図２は、画像処理部１０の構成図である。図２のように、画像処理部１０は、前方画像抽出部１１、前方路面状況抽出部１２、前方車両状況抽出部１３、前方地物状況抽出部１４、前方歩行者状況抽出部１５から構成される。前方画像抽出部１１は、前方車載カメラ１０１から受信した画像信号から前方画像を抽出し、それを仮想視野構築部４０へと送る。

前方路面状況抽出部１２は、前方画像抽出部１１が抽出した前方画像から、自車前方の路面の状況を示す情報（前方路面情報）を抽出する。前方車両状況抽出部１３は、前方画像から、自車前方の車両の状況を示す情報（前方車両情報）を抽出する。前方地物状況抽出部１４は、前方画像から、自車前方の地物の状況を示す情報（前方地物情報）を抽出する。前方歩行者状況抽出部１５は、前方画像から、自車前方の歩行者の状況に関する情報（前方歩行者情報）を抽出する。

前方路面情報、前方車両情報、前方地物情報および前方歩行者情報には、少なくとも、路面、車両、地物、歩行者それぞれの位置、優先度、色および明度の情報が含まれている。これら前方画像、前方路面情報、前方車両情報、前方地物情報および前方歩行者情報は、情報表示判断部２０へと送られる。

上記の優先度は、前方画像から抽出された物体（路面、車両、地物、歩行者）の重要度または緊急度に応じて定められる。重要度の高いものとしては、例えば、歩行者、車両、信号機、交通標識、障害物、目的地の建物などが考えられ、重要度が高いものほど優先度は高くなる。また、同種の物体であっても、自車に近いものほど早期に運転者が認識する必要があるため緊急度は高くなり、緊急度が高いものほど優先度は高くなる。

情報表示判断部２０は、画像処理部１０から取得した情報と、外部の車載センサ１０３、車載機器１０４および通信機器１０５から取得した情報とに基づき、ＨＵＤ６１および非ＨＵＤディスプレイ６２に表示する情報（表示情報）とその優先度を判断し、決定する。表示情報の優先度も、その情報の重要度または緊急度に応じて定められる。例えば走行速度や燃料残量の情報は比較的低い優先度に設定され、周辺車両や歩行者に関する情報は比較的高い優先度に設定される。

上記のように、情報表示判断部２０が画像処理部１０から取得する情報は、前方画像とそれから抽出した前方路面情報、前方車両情報、前方地物情報および前方歩行者情報である。

情報表示判断部２０が車載センサ１０３から取得する情報としては、例えば、自車の走行速度、アクセルの開度、ブレーキの強さ、ハンドルの切り角（操舵角）、ギアの設定などの自車センサ情報、自車と周辺車両との距離や周辺車両の挙動を示す周辺車両情報、気温、照度、雨量等を示す天候情報などがある。

情報表示判断部２０が車載機器１０４から取得する情報（車載機器情報）としては、例えば車載機器１０４にカーナビゲーション装置が含まれていれば、自車の位置情報、走行中の道路種別の情報、経路案内情報などがある。また、車載機器１０４にマルチメディア機器が含まれていれば、再生中のコンテンツに関する情報、例えば音楽や番組のタイトルなどがある。

情報表示判断部２０が通信機器１０５から取得する情報（通信機器情報）としては、外部の情報配信サービスから受信した交通情報や天候情報などがある。また、通信機器１０５がスマートフォンの場合には、例えば電話やＥメールの着信などのイベント通知や、スマートフォン上で動作しているアプリケーションに関する情報なども通信機器情報に含まれる。

図３は、情報表示判断部２０の構成図である。情報表示判断部２０は、ＨＵＤ６１および非ＨＵＤディスプレイ６２に表示させる情報（表示情報）の内容とその優先度を、自車の外部環境に応じて判断する外部環境判断部２１と、自車の状況に応じて判断する自車状況判断部２２と、車載機器１０４および通信機器１０５の状況に応じて判断する車内機器状況判断部２３とから構成されている。

外部環境判断部２１には、情報表示判断部２０が取得した各種の情報に基づいて、自車周辺の車両の状況を判断する周辺車両状況判断部２１１、自車前方の路面の状況を判断する路面状況判断部２１２、自車前方の地物の状況を判断する地物状況判断部２１３、自車前方の歩行者の状況を判断する歩行者状況判断部２１４、および、自車周辺の天候状況を判断する天候状況判断部２１５が含まれている。なお、天候状況判断部２１５が天候状況を判断するために用いる情報は、車載センサ１０３が取得した天候情報でもよいし、通信機器１０５が受信した天候情報でもよい。

自車状況判断部２２には、運転者による運転操作の状況（アクセルの開度、ブレーキの強さ、ハンドルの切り角（操舵角）、ギアの設定、方向指示器の状態など）を判断する運転操作状況判断部２２１と、自車の走行状況（走行速度、現在位置、進行方向など）を判断する走行状況判断部２２２が含まれている。車内機器状況判断部２３には、車載機器１０４の動作状況を判断する車載機器状況判断部２３１、通信機器１０５の動作状況を判断する通信機器状況判断部２３２が含まれている。

外部環境判断部２１、自車状況判断部２２、車内機器状況判断部２３は、情報表示判断部２０が取得した各情報について優先度を判断し、それらの情報のうちから、運転者に対して伝達すべき情報を判断し、それをＨＵＤ６１または非ＨＵＤディスプレイ６２で表示させる情報（表示情報）として、優先度と共に表示処理部５０へと送る。また、情報表示判断部２０が取得した、運転操作の状況および自車の走行状況の情報（自車状況情報）も、表示処理部５０へと送られる。

図１に戻り、視線方向検出部３０は、運転者モニタリングカメラ１０２が撮影した運転者の画像から、運転者の視線の方向を検出する。視線方向検出部３０が検出した運転者の視線方向の情報（視線方向情報）は、仮想視野構築部４０および表示処理部５０へと送られる。また、視線方向検出部３０が、運転者の目や瞼の動きから、運転者の覚醒度（眠気の有無）も判断できるようにしてもよい。

仮想視野構築部４０は、画像処理部１０から取得した前方画像、および視線方向検出部３０から取得した視線方向情報に基づいて、運転者の仮想的な視野を構築する。具体的には、運転者の視野に対応する画像である仮想視野画像を生成する。

図４は、仮想視野構築部４０の構成図である。仮想視野構築部４０は、自車のダッシュボードの画像および当該ダッシュボードの寸法の情報を含む車内画像情報４１を記憶しており、画像合成部４２および補正処理部４３を備えている。図７にダッシュボードの画像の一例を示す。

車内画像情報４１は、車両情報表示制御装置１００が搭載される車種に応じて変わるため、車両情報表示制御装置１００が携帯型の装置である場合には、搭載される車種ごとに変更する必要がある。例えば、車両情報表示制御装置１００が予め複数の車種の車内画像情報４１を記憶していてもよいし、通信機器１０５を用いて外部のサーバから任意の車種の車内画像情報４１をダウンロードできるようにしてもよい。

画像合成部４２は、画像処理部１０から取得した前方画像とダッシュボードの画像とを、ダッシュボードの寸法を考慮して合成する。補正処理部４３は、画像合成部４２が作成した合成画像に対し、視線方向検出部３０から取得した視線方向情報に基づく補正処理を行って、運転者の視野に対応する仮想視野画像を生成する。

図１に戻り、表示処理部５０は、情報表示判断部２０から取得した表示情報とその優先度、並びに自車状況情報に基づいて、各表示情報をＨＵＤ６１と非ＨＵＤディスプレイ６２のどちらで表示させるかの割り当てを行う。ＨＵＤ６１と非ＨＵＤディスプレイ６２の両方に表示される情報が存在してもよい。表示処理部５０はさらに、ＨＵＤ６１で表示させる情報については、仮想視野構築部４０が生成した仮想視野画像と、視線方向検出部３０から取得した視線方向情報と、各表示情報の優先度および自車状況情報を考慮して、表示のレイアウトを最適化する。ここでいう「レイアウト」には、各情報を表示する位置だけでなく、表示のサイズや配色、表示領域の広さも含まれるものとする。

ＨＵＤ６１および非ＨＵＤディスプレイ６２は、表示処理部５０によって制御され、それぞれ割り振られた各表示情報を、表示処理部５０が決定したレイアウトで表示する。なお、表示処理部５０は、非ＨＵＤディスプレイ６２表示情報報を表示する際のレイアウトも設定するが、本発明とは関連が薄いためその説明は省略する。

図５は、表示処理部５０の構成図である。表示処理部５０は、表示割当部５１、運転者特性情報データベース５２、運転操作履歴データベース５３、レイアウト演算部５４、コントラスト演算部５５から構成される。

表示割当部５１は、各表示情報について、その優先度と自車状況情報に基づいて、ＨＵＤ６１で表示するか非ＨＵＤディスプレイ６２で表示するかの割り当てを行う。

運転者特性情報データベース５２は、運転者の特性情報（例えば年齢、嗜好など）を記憶している。運転者特性情報データベース５２に記憶される運転者の特性情報は、運転者が車両情報表示制御装置１００を操作して入力してもよいし、例えば車両情報表示制御装置１００が運転者の携帯端末（スマートフォン等）にアクセスして、その携帯端末に記録されている運転者の特性情報を自動的に取得するようにしてもよい。

運転操作履歴データベース５３は、自車に対する運転者の操作履歴を記憶する。運転操作履歴データベース５３には、運転者が自車を操作するごとにその操作内容が自動的に追加される。また、視線方向検出部３０が検出した運転者の視線の動きの履歴も、操作履歴として運転操作履歴データベース５３に記憶させてもよい。

レイアウト演算部５４は、ＨＵＤ６１で表示する各情報について、その情報の優先度、自車状況情報、仮想視野画像および視線方向情報を考慮して、ＨＵＤ６１で表示する際のレイアウトの最適化処理を行う。コントラスト演算部５５は、レイアウト演算部５４が決定したレイアウトにおける各情報の表示とその背景とのコントラスト比を求める。レイアウト演算部５４は、コントラスト演算部５５が算出するコントラスト比を考慮して、各情報の視認性を確保できるようにその色やサイズを決める。これにより、前方の景色、道路の色、天候、時間帯などに関わらず、視認性の高い表示を得ることができる。

また、レイアウト演算部５４は、各情報の表示をレイアウトする際、各表示が運転者の視野内における優先度の高い物体と重ならないようにする。さらに、車両の走行速度が速くなると運転者の視野は狭くなるため、走行速度に応じてＨＵＤ６１の表示領域の広さを変更することも有効である。

また、レイアウト演算部５４は、運転者特性情報データベース５２に記憶されている各運転者の特性情報や、運転操作履歴データベース５３に記憶されている各運転者の操作履歴（視線の動きを含む）を加味して、運転者ごとに、各情報の表示のレイアウトを変えてもよい。例えば、速度超過が多くなると速度表示のサイズを大きくすることなどが考えられる。また、高齢者と若年者とでは視野の広さや、視線の動きの速さ、視認しやすい色に違いがあるため、運転者の年齢に応じて、ＨＵＤ６１の表示領域の広さや表示色（一般に高齢者はオレンジ色を視認しにくい）を変えることが考えられる。また例えば、スピードメータを見る回数が多い運転者の場合は、スピードメータの表示を視線に近い位置にするなど、運転者の癖が考慮されるようにしてもよい。

次に、車両情報表示制御装置１００の動作を説明する。図６は、その動作を示すフローチャートである。

例えば自車のイグニッションキーが回されるなどして、車両情報表示制御装置１００が起動すると、車両情報表示制御装置１００において、情報表示判断部２０が、車載センサ１０３、車載機器１０４および通信機器１０５から、各種の情報（自車センサ情報、周辺車両情報、天候情報、車載機器情報、通信機器情報）を取得する（ステップＳ１）。

次に、画像処理部１０が、前方車載カメラ１０１から前方画像を取得する（ステップＳ２）。このとき、画像処理部１０が取得した前方画像は、仮想視野構築部４０へと送られる。また、画像処理部１０から情報表示判断部２０へ、前方画像およびそれから抽出した各種の情報（前方画像、前方路面情報、前方車両情報、前方地物情報、前方歩行者情報）が送られる。

続いて、視線方向検出部３０が、運転者モニタリングカメラ１０２が撮影した運転者の画像から、運転者の視線方向情報を取得する（ステップＳ３）。視線方向情報は、仮想視野構築部４０および表示処理部５０へ送られる。

次に、情報表示判断部２０は、取得した情報に基づいて、ＨＵＤ６１および非ＨＵＤディスプレイ６２に表示する情報（表示情報）とその優先度を判断して決定する（ステップＳ４）。決定した表情報および優先度は、自車状況情報と共に表示処理部５０へと送られる。

表示処理部５０は、表示情報ごとに、表示情報をＨＵＤ６１と非ＨＵＤディスプレイ６２のどちらで表示させるか割り当て、非ＨＵＤディスプレイ６２に割り当てられた表示情報を、非ＨＵＤディスプレイ６２で表示する（ステップＳ５）。

そして、ＨＵＤ６１に割り当てられた表示情報の有無を確認し（ステップＳ６）、無ければ（ステップＳ６でＮＯ）、ステップＳ１に戻る。

一方、ＨＵＤ６１に割り当てられた表示情報があれば（ステップＳ６でＹＥＳ）、仮想視野構築部４０が、画像処理部１０から取得した前方画像および視線方向検出部３０から取得した視線方向情報に基づいて、運転者の視野に対応する仮想視野画像を生成する（ステップＳ７）。

さらに、表示処理部５０が、仮想視野構築部４０が生成した仮想視野画像と、視線方向検出部３０から取得した視線方向情報と、各表示情報の優先度および自車状況情報を考慮して、ＨＵＤ６１に表示させる情報のレイアウトを決定し（ステップＳ８）、決定したレイアウトによりＨＵＤ６１で情報を表示する（ステップＳ９）。その後、ステップＳ１へ戻る。

このように、運転者の視野に対応する仮想視野画像と、自車状況情報に基づいて、ＨＵＤ６１が表示する情報のレイアウトが決定されるため、運転者から見た車両前方の視認性を考慮した、ヘッドアップディスプレイの情報表示を行うことができる。よって、車両前方の視認性と情報表示の視認性の両立が可能となる。

以下、本発明に係る車両情報表示制御装置１００によるＨＵＤ６１の具体的な表示例を示す。図８は、ＨＵＤ６１に割り当てられる表示情報の例を示す図である。ここでは、ＨＵＤ６１の表示情報を、常時表示させておく情報と、イベント発生時に表示させる情報と、警告発生時に表示させる情報とに分けている。常時表示させておく情報としては、走行速度、制限速度、燃料残量などがある。イベント発生時に表示させる情報としては、例えば、電話着信、経路案内の矢印、レーン案内、分岐までの距離、渋滞情報、マルチメディア機器の操作情報などがある。警告表示が知らせる情報としては、例えば、追突注意（車間距離の縮小）、車線逸脱、障害物の検知、運転者覚醒度低下、速度超過、追い越し車両注意、シートベルトの着用忘れ、パーキングブレーキの解除忘れなどがある。

ここで、警告表示が知らせる情報は優先度が最も高く、イベント発生時に表示させる情報は次に優先度が高く、常時表示させておく情報は優先度が低い、と仮定する。また、各情報の優先度は、自車が走行中の道路の種別（高速道路／一般道路）および走行状態（高速走行／低速走行）によって変化してもよい。

図９〜図１８は、ＨＵＤ６１による情報表示の例を示す図である。例えば、自車が高速道路を高速で走行しているときは、運転者の視野が狭まるため、図９のように、ＨＵＤ６１の表示領域（破線の矩形）を視野に合わせて狭くする。図９には、ＨＵＤ６１が、自車の走行速度、走行中の区間の制限速度を示すアイコン、燃料の残量を示すメータ（燃料メータ）および経路案内の矢印を表示している状態が示されている。なお、表示領域（破線の矩形）は、実際に表示されるものではない。

高速走行時には、各情報の表示位置を固定し、運転者の視線移動に対して移動しないようにするとよい。高速走行時の視線移動は一瞬の動作であり、表示が都度動くと認知が困難になるためである。ただし、自車前方で道路がカーブしている場合は、図１０のように、カーブする方向と運転者の視線方向に合わせて、ＨＵＤ６１の表示領域を移動させるとよい。また、自車前方に上り坂や下り坂がある場合も同様に、ＨＵＤ６１の表示領域を上下に移動させるとよい。

情報表示のレイアウトに関して、高速走行時は低速走行時よりも車間距離が長くとられるため、前方路面（自車と前方車両の間の道路）と重なる部分に情報を表示してもよい。また、文字のサイズを自車の走行速度に合わせてシームレスに可変表示させてもよい。例えば自車の走行速度が速くなるほど、速度表示のサイズを大きくすると、運転者が走行速度の上昇を直感的に認識できるようになり、速度超過の防止が期待できる。

高速道路を走行しているときでも、渋滞などで自車が低速で走行しているときは、運転者の視野は狭くならないため、図１１のようにＨＵＤ６１の表示領域を拡大するとよい。また、低速走行時は、各情報の表示位置を状況に応じて移動させるとよい。例えば、渋滞時には車間距離が短くなり、前方路面に情報を表示するとその表示が前方車両と重複してしまうため、図１１のように前方車両に重ならない位置へ移動させるとよい。また、表示領域を拡大すると、運転者の視線移動が大きくなるため、各表示の表示サイズは高速走行時よりも大きくするとよい。

また、前方車両との車間距離が急速に縮まったことが検出された場合には、図１２のように、前方車両を強調する警告（追突注意）を表示させる。警告表示は、他の情報よりも優先度が高いため、より目立つ態様で表示させる。例えば、図１２のように警告表示以外の情報表示を消してもよい。

市街地などの一般道路においても、ＨＵＤ６１の表示領域は自車の走行速度に応じて拡大・縮小させるとよいが、一般道路では、歩行者や自転車、信号機など、運転者が注意を払うべきものが高速道路よりも多く運転者の視野に入るため、図１３のように、ＨＵＤ６１の表示領域は高速道路走行時よりもやや広めとする。また、表示領域の拡大とともに運転者の視線移動が大きくなるため、各情報の表示サイズを高速走行時よりも大きくする。図１４には、ＨＵＤ６１が、自車の走行速度、制限速度、燃料メータおよび経路案内の矢印に加えて、歩行者への注意を促す警告を表示した状態が示されている。

自車の走行速度、制限速度、燃料メータおよび経路案内の矢印など、優先度の低い情報は、前方車両や歩行者など優先度の高い物体に重ならない位置へ移動させる。情報の表示位置を移動させるときは、その移動先となる部分と重複する風景の色に応じて、情報の表示色を変化させてコントラスト比を確保し、情報表示の視認性を高く維持する。

なお、図１２や図１４では、前方車両や歩行者への注意を促す警告表示は、注意対象を囲む矩形としたが、図１５のように、注意対象とは少しずらした位置に「吹き出し」として表示して、注意対象の視認性を確保してもよい。

また、低速走行時には、各情報の表示位置を、自車または外部の状況に応じて移動させるとよい。例えば、図１４の状態から道路の左手に歩行者が現れた場合、図１６のように、その歩行者への注意を促す警告を表示すると共に、優先度の低い情報を歩行者と重複しない位置へと移動させる。

赤信号などによる停車時には、図１７のようにＨＵＤ６１の表示領域を最大化するとよい。また、信号機の状態など自車の発進を支援する情報を表示したり、前方に見える地物の名称など、優先度は低いが前方の風景との関連性が高い情報を表示したりしてもよい。

停車時では、運転者は非ＨＵＤディスプレイ６２を見ることもできるため、図８に示されているように、常時表示させる情報とイベント発生時に表示させる情報など、前方の風景との関連性が低い情報や優先度の低い情報は、ＨＵＤ６１では表示せずに非ＨＵＤディスプレイ６２のみに表示させてもよい。ただし、警告表示のように優先度の高い情報は、停車時であってもＨＵＤ６１で表示させることが好ましい。

また、赤信号での停車時から信号が青になり前方車両が発進したにも関わらず、自車の発進操作が行われない場合に、車両情報表示制御装置１００が運転者の脇見を検知すると、発進を促す警告をＨＵＤ６１が表示したり、車両情報表示制御装置１００が音声で警告したりするようにしてもよい。

また、交差点で曲がるときに対向車が近づいている場合、運転者が視認できる歩行者や対向車の他に、対向車の後方から接近するバイクなどを検知した場合には、図１８のように、それへの注意を促す警告表示を、高い優先度で表示させることが好ましい。

本実施の形態の車両情報表示制御装置１００によれば、ＨＵＤ６１による情報表示のレイアウトを、運転者の視野に対応する仮想視野画像と、車両の状況に基づいて決定するため、車両前方の視認性と情報表示の視認性の両方を考慮した情報表示が可能である。よって、車両前方の視認性と情報表示の視認性の両立を図ることができる。

なお、本発明は、その発明の範囲内において、実施の形態を適宜、変形、省略することが可能である。

１００ 車両情報表示制御装置、１０１ 前方車載カメラ、１０２ 運転者モニタリングカメラ、１０３ 車載センサ、１０４ 車載機器、１０５ 通信機器、１０ 画像処理部、１１ 前方画像抽出部、１２ 前方路面状況抽出部、１３ 前方車両状況抽出部、１４ 前方地物状況抽出部、１５ 前方歩行者状況抽出部、２０ 情報表示判断部、２１ 外部環境判断部、２２ 自車状況判断部、２３ 車内機器状況判断部、３０ 視線方向検出部、４０ 仮想視野構築部、４１ 車内画像情報、４２ 画像合成部、４３ 補正処理部、５０ 表示処理部、５１ 表示割当部、５２ 運転者特性情報データベース、５３ 運転操作履歴データベース、５４ レイアウト演算部、５５ コントラスト演算部、６１ ＨＵＤ、６２ 非ＨＵＤディスプレイ、２１１ 周辺車両状況判断部、２１２ 路面状況判断部、２１３ 地物状況判断部、２１４ 歩行者状況判断部、２１５ 天候状況判断部、２２１ 運転操作状況判断部、２２２ 走行状況判断部、２３１ 車載機器状況判断部、２３２ 通信機器状況判断部。

Claims (12)

1. 車両の運転者の視野に情報を表示するヘッドアップディスプレイを制御する車両情報表示制御装置であって、
   前記車両の状況に関する情報を取得し、前記車両の状況に関する情報に基づいて、前記ヘッドアップディスプレイで表示すべき情報を判断する情報表示判断部と、
   前記車両の前方を撮影した画像を取得する画像処理部と、
   前記運転者の視線の方向を検出する視線方向検出部と、
   前記車両の前方の画像に対し前記運転者の視線の方向に基づく補正処理を行うことで、運転者の視野に対応する画像である仮想視野画像を作成する仮想視野構築部と、
   前記仮想視野画像および前記車両の状況に基づいて、前記ヘッドアップディスプレイで表示する情報のレイアウトを決定する表示処理部と
   を備える車両情報表示制御装置。
2. 前記表示処理部は、前記ヘッドアップディスプレイで表示する情報とその背景とのコントラスト比を考慮して、前記ヘッドアップディスプレイで表示する情報の色を決定する
   請求項１記載の車両情報表示制御装置。
3. 前記表示処理部は、前記ヘッドアップディスプレイで表示する情報が前記運転者の視野内の特定の物体と重ならないように、前記ヘッドアップディスプレイで表示する情報の位置を変化させる
   請求項１または請求項２記載の車両情報表示制御装置。
4. 前記表示処理部は、前記運転者の視線の動きに合わせて、前記ヘッドアップディスプレイが表示を行う領域を動かす
   請求項１から請求項３のいずれか一項記載の車両情報表示制御装置。
5. 前記表示処理部は、前記車両の走行速度に応じて、前記ヘッドアップディスプレイで表示する情報のレイアウトを変化させる
   請求項１から請求項４のいずれか一項記載の車両情報表示制御装置。
6. 前記表示処理部は、前記車両の走行速度が速いときほど、前記ヘッドアップディスプレイが表示を行う領域を狭くする
   請求項５記載の車両情報表示制御装置。
7. 前記表示処理部は、前記車両が走行中の道路種別に応じて、前記ヘッドアップディスプレイで表示する情報のレイアウトを変化させる
   請求項１から請求項６のいずれか一項記載の車両情報表示制御装置。
8. 前記表示処理部は、前記車両が高速道路を走行中のときは、一般道を走行中のときよりも、前記ヘッドアップディスプレイが表示を行う領域を狭くする
   請求項７記載の車両情報表示制御装置。
9. 前記表示処理部は、前記車両が高速道路を走行中のときは、前記ヘッドアップディスプレイで表示する情報の前記運転者の視線の方向に対する相対的な位置を変化させない
   請求項７または請求項８記載の車両情報表示制御装置。
10. 前記表示処理部は、さらに前記運転者の特性情報に基づいて、前記ヘッドアップディスプレイで表示する情報のレイアウトを変化させる
    請求項１から請求項９のいずれか一項記載の車両情報表示制御装置。
11. 前記表示処理部は、さらに前記運転者の運転操作履歴に基づいて、前記ヘッドアップディスプレイで表示する情報のレイアウトを変化させる
    請求項１から請求項１０のいずれか一項記載の車両情報表示制御装置。
12. 前記仮想視野構築部は、前記車両の前方の画像と前記車両のダッシュボードの画像とを前記ダッシュボードの寸法を考慮して合成し、前記車両のダッシュボードの画像が合成された前記車両の前方の画像に対して前記補正処理を行うことにより、仮想視野画像を作成する
    請求項１から請求項１１のいずれか一項記載の車両情報表示制御装置。

Images