Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7616359B2 - 車両用表示システム、車両用表示方法、及び車両用表示プログラム - Google Patents
[go: Go Back, main page]

JP7616359B2 - 車両用表示システム、車両用表示方法、及び車両用表示プログラム - Google Patents

車両用表示システム、車両用表示方法、及び車両用表示プログラム Download PDF

Info

Publication number
JP7616359B2
JP7616359B2 JP2023516388A JP2023516388A JP7616359B2 JP 7616359 B2 JP7616359 B2 JP 7616359B2 JP 2023516388 A JP2023516388 A JP 2023516388A JP 2023516388 A JP2023516388 A JP 2023516388A JP 7616359 B2 JP7616359 B2 JP 7616359B2
Authority
JP
Japan
Prior art keywords
display
occupant
displays
vehicle
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023516388A
Other languages
English (en)
Other versions
JPWO2022224754A1 (ja
JPWO2022224754A5 (ja
Inventor
浩之 三村
清貴 田口
康彦 上保
俊範 水野
玲朗 神谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Publication of JPWO2022224754A1 publication Critical patent/JPWO2022224754A1/ja
Publication of JPWO2022224754A5 publication Critical patent/JPWO2022224754A5/ja
Application granted granted Critical
Publication of JP7616359B2 publication Critical patent/JP7616359B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • B60K35/233Head-up displays [HUD] controlling the size or position in display areas of virtual images depending on the condition of the vehicle or the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • B60K35/235Head-up displays [HUD] with means for detecting the driver's gaze direction or eye points
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/182Distributing information between displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1868Displaying information according to relevancy according to driving situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Instrument Panels (AREA)

Description

関連出願の相互参照
本出願は、2021年 4月23日に出願された日本出願番号2021-073381号に基づくもので、ここにその記載内容を援用する。
本開示は、車両用表示システム、車両用表示方法、及び車両用表示プログラムに関する。
従来、コックピットシステムは、メータディスプレイ、センタディスプレイ及びヘッドアップディスプレイなどの複数のディスプレイをインストルメントパネルに設置し、メータ画像、マルチメディア画像、運転支援情報などの各種情報を表示している。近年、車両内に設置するディスプレイを大型化することが望まれているが中型ディスプレイを複数併設することが多い。これは、一つの大型ディスプレイを設置することに比較して安価に構成できるためである。これまでも、車両内に複数のディスプレイを併設したコックピットシステムを構成する技術が提供されている。
複数のディスプレイを併設した表示システムにおいて、各ディスプレイの端部には表示することができない非表示領域が存在する。このため、一枚の絵や動画を表示した場合、非表示領域により連続性が保たれず違和感を生じてしまうことがある。従来、複数のディスプレイに跨ってコンテンツを表示する際、非表示領域を考慮し表示寸法をゆがめることなく表示し、且つ、乗員の視線の位置及び目線に応じてコンテンツの表示位置を調整することにより連続性を保つ技術が提供されている。しかし、この技術では、コンテンツの表示位置やその表示位置と乗員との相対位置関係によっては、重要なコンテンツが表示されないことがあった。
なお、本願に関連する技術として特許文献1が提供されている。特許文献1には、表示効果決定部が目標座標に向けて連続表示することにより、画面をまたいだ情報処理装置間GUI移動において、実際の情報処理装置の位置に即した方向を決定する技術が開示されている。
特開2009-288839号公報
本開示は、複数のディスプレイの表示画面の間におけるコンテンツの連続性を極力維持しながら乗員に対し的確に情報を表示できるようにした車両用表示システム、車両用表示方法、及び車両用表示プログラムを提供することにある。
本開示の一態様は、非表示領域を挟んで設けられた複数のディスプレイにコンテンツを表示させるもので、車両の乗員の頭位置及び角度並びに乗員の視線を検出するための乗員状態モニタと、乗員状態モニタの検出結果に基づいてディスプレイに表示させるコンテンツの中に重要情報が含まれることを条件として重要情報を隠れ防止処理して複数のディスプレイの表示画面の何れかに表示させる表示処理部と、を備える。表示処理部は、乗員状態モニタの検出結果に基づいて乗員の視点の移動量が所定より大きいときに、一のディスプレイに重要情報を表示しても乗員から確認不能となるときには、他のディスプレイに表示する。
本開示の一態様によれば、コンテンツに重要情報が含まれているか判定し、重要情報を隠れ防止処理して複数のディスプレイの表示画面の何れかに表示しているため、複数のディスプレイの表示画面間におけるコンテンツの連続性を極力維持しながら乗員に対し的確に情報を表示できる。
本開示についての上記目的およびその他の目的、特徴や利点は、添付の図面を参照しながら下記の詳細な記述により、より明確になる。その図面は、
図1Aは、第1実施形態におけるコックピットシステムの外観構成図であり、 図1Bは、PtoPディスプレイの構成及び制御イメージを示す図のその1であり、 図1Cは、PtoPディスプレイの構成及び制御イメージを示す図のその2であり、 図2は、車両用表示システムを概略的に示すブロック図であり、 図3は、ハードウェア、ソフトウェアを概略的に示す構成図であり、 図4は、処理内容を概略的に示すフローチャートであり、 図5は、複数のディスプレイに表示する画面例のその1であり、 図6は、アプリの要求に応じて描画する仮想空間と実空間との関係性を示す図のその1であり、 図7は、仮想空間と実空間との関係性を示す図のその2であり、 図8は、仮想空間と実空間との関係性を示す図のその3であり、 図9は、複数のディスプレイに表示する画面例のその2であり、 図10は、仮想空間と実空間との関係性を示す図のその4であり、 図11は、仮想空間と実空間との関係性を示す図のその5であり、 図12は、複数のディスプレイに表示する画面例のその3であり、 図13は、第2実施形態における仮想空間と実空間との関係性を示す図のその6であり、 図14は、複数のディスプレイに表示する画面例のその4であり、 図15は、仮想空間と実空間との関係性を示す図のその7であり、 図16は、複数のディスプレイに表示する画面例のその5であり、 図17は、仮想空間と実空間との関係性を示す図のその8であり、 図18は、仮想空間と実空間との関係性を示す図のその9であり、 図19は、複数のディスプレイに表示する画面例のその6であり、 図20は、仮想空間と実空間との関係性を示す図のその10であり、 図21は、複数のディスプレイに表示する画面例のその7であり、 図22は、第3実施形態における複数のディスプレイに表示する画面例のその8であり、 図23は、複数のディスプレイに表示する画面例のその9であり、 図24は、第4実施形態における非表示領域と車外物との位置関係を模式的に説明する図のその1であり、 図25は、非表示領域と車外物との位置関係を模式的に説明する図のその2であり、 図26は、非表示領域と車外物との位置関係を模式的に説明する図のその3であり、 図27は、非表示領域と車外物との位置関係を模式的に説明する図のその4であり、 図28は、非表示領域と車外物との位置関係を模式的に説明する図のその5であり、 図29は、変形例におけるハードウェア、ソフトウェアを概略的に示す構成図である。
以下、車両用表示システム1に係る幾つかの実施形態について図面を参照しながら説明する。なお、各実施形態において実質的に共通する部位には同一の符号を付して説明する。
(第1実施形態)
第1実施形態について図1Aから図12を参照しながら説明する。図1A及び図1Bに示すように、車両用表示システム1は、ピラートゥピラーディスプレイ2、及びセンタディスプレイ3など複数の表示器を備えるコックピットシステム4により構成される。ただし、表示器の数や配置あるいは構成は一例であり、これらに限定されない。以下、ピラートゥピラーディスプレイ2を、PtoPディスプレイ2と称す。
図1A及び図1Bに示すように、PtoPディスプレイ2は、複数のディスプレイ2aを隣り合わせて横長になるように構成されている。PtoPディスプレイ2の各ディスプレイ2aは、液晶ディスプレイ又は有機ELディスプレイ等により構成され、車両の左ピラーと右ピラーとの間にかけてダッシュボードに設けられる大型ディスプレイである。PtoPディスプレイ2は、メータ画像、周辺カメラ23の撮像画像、静止画や動画のエンターテインメント画像、現在位置周辺の地図画像などの各種の画像コンテンツをフルグラフィック表示で表示可能な構成となっている。
センタディスプレイ3は、例えば液晶ディスプレイや有機ELディスプレイにより構成され、図1Aに示すように、運転席と助手席との間で且つPtoPディスプレイ2の下部に設置されている。センタディスプレイ3は、ドライバや助手席の乗員の両者が視認しやすいセンタコンソール付近に設けられると共に各種のコンテンツを表示可能になっている。センタディスプレイ3の上には操作パネル21が構成されており、PtoPディスプレイ2に表示させるコンテンツの選択や空調操作、オーディオ操作、ナビゲーション機能の入力操作できるようになっている。
PtoPディスプレイ2は、センタディスプレイ3に対し縦方向に併設して設置されている。縦方向に2画面併設して設置されていると、乗員が一度に視認可能な表示領域を増やすことができる。また、コックピットシステム4において、PtoPディスプレイ2の各ディスプレイ2aの表示画面は、センタディスプレイ3の表示画面よりも奥方向に位置するように設置されている。PtoPディスプレイ2の各ディスプレイ2aは、それぞれの外枠に黒帯状のフレーム2bを構成している。フレーム2bは、表示画面を囲うように設けられるため非表示領域となる。
また車両内には、図1B及び図2に示すように、多数のECU5が構成されており、車内ネットワーク25に接続されている。ECU5は、表示系のECU、周辺監視系のECU、走行制御系のECU、車両外部と通信接続するDCMを含む。DCMは、Data Communication Moduleの略である。走行制御系のECUは、周知の車両制御ECU、エンジン制御ECU、モータ制御ECU、ブレーキ制御ECU、ステアリング制御ECU及び統合制御ECU等である。走行制御系のECUには自動運転ECUが含まれる。自動運転ECUは、Autonomous Driving Electric Control Unitである。
自動運転ECUは、自動制御信号を入力すると、運転アクチュエータを駆動することで対応した所定のレベルの運転支援、自動運転を実行する。例えば、レベルIの運転支援では、障害物への衝突を避ける自動ブレーキ、先行車に追従して走行する追従走行、又は、両脇の車線からはみ出さないように制御するレーンはみ出し防止走行、を実行できる。レベルIIの自動運転では、レベルIの運転支援の組み合わせ、又は、特定条件下での自動運転、例えば高速道路で遅い車両が存在すれば自動で追い越したり、高速道路の分合流を自動で行ったりする自動運転モードを実行できる。なお、レベルIIの自動運転ではドライバによる自動運転時の監視義務がある。レベルIII以上の自動運転では、システムにより監視しながらシステムが全ての運転タスクを実行する。
各ECU5は、プロセッサ、キャッシュメモリ、RAM、ROMなどの各種の記憶部6、I/O、これらを接続するバスを備えたマイクロコンピュータを主体として構成される。各ECU5は、車両内に設けられる他のECU5と通信制御部7及び車内ネットワーク25を通じて通信可能に接続されている。
本実施形態では、図1Bに示すように、複数の表示系のECU5により情報処理装置10としてのHCUを構成している。表示系のECU5はその内部の物理リソースの処理能力を分担してディスプレイ2、3等に表示処理するもので、例えば図1Cに例示したように、各ECU5がPtoPディスプレイ2の各ディスプレイ2aに対し個別に表示処理する。HCUは、Human Machine Interface Control Unitの略である。表示系の複数のECU5の間も車内ネットワーク25を接続した形態を示しているが専用線により接続しても良い。前述した記憶部6は、コンピュータによって読み取り可能なプログラム及びデータを非一時的に格納する非遷移的実体的記憶媒体を示す。非遷移的実体的記憶媒体は、半導体メモリなどにより実現される。
図2に示すように、情報処理装置10は、制御装置11、演算装置12、記憶部6、表示処理部13、音声処理部14、各種装置からの入力又は出力を管理するI/O制御部15、他のECU5との間で通信管理する通信制御部7、アンテナ16aを接続して構成され無線LANやブルートゥース(登録商標)により他の携帯端末27と無線接続できるようにした無線制御部16を備える。ここでは、図2に図示した、位置検出器19、操作パネル21、乗員モニタ22、周辺カメラ23、及び距離検出センサ24など主要な構成要素の出力信号は、I/O制御部15を通じて情報処理装置10に信号入力する形態を説明するが、車内ネットワーク25を通じて、周辺監視系のECU、走行制御系のECUなどの他のECU5から入力されることもある。
無線制御部16は、車両の乗員が所持する携帯端末27との間で通信リンクする。情報処理装置10は、携帯端末27の着信を待機し、通話相手先から携帯端末27へ着信があり着信応答されると、携帯端末27を通じて通話相手先との間でスピーカ18及びマイク17を通じてハンズフリー通話を実行できる。また情報処理装置10は、マイク17を通じて入力された音声について音声認識できる。
演算装置12は、制御装置11の制御に基づいて、記憶部6に記憶された画像、文章、文字、又は記号(以下、画像等と称する)のコンテンツについて、ディスプレイ2、3の表示画面に表示させる表示領域を演算し、画像等のコンテンツをディスプレイ2、3の表示画面の何れの領域に表示させるか、また、何れの領域に重ね合わせて2Dレイヤ表示させるか演算し、画像等のコンテンツと共に表示領域を制御装置11に出力する。ここでいう記号とは、本来の意味の記号の他、交通標識などの標示をアイコンなどで表したコンテンツを総称したものであり、特にナビゲーション機能により各ディスプレイ2、3に表示される画像、文章、文字以外の情報を示している。
表示処理部13は、制御装置11の制御に基づいて、ディスプレイ2、3の表示画面の中の前述の表示領域に画像等のコンテンツを表示処理する。これにより、ディスプレイ2、3の表示画面には、表示レイヤ毎に画像等のコンテンツを重ね合わせて表示できる。
音声処理部14は、制御装置11の制御に基づいて、マイク17から入力された受話音声を入力すると共に、スピーカ18から送話音声を出力する。音声処理部14は、文章、文字のコンテンツを制御装置11から入力すると、音声に変換してスピーカ18を通じて読み上げて出力する。
位置検出器19は、図示しない周知のGPSなどのGNSS受信機、加速度センサやジャイロセンサなどの慣性センサを用いて高精度に位置を検出する。位置検出器19は、位置検出信号をI/O制御部15を通じて制御装置11に出力する。制御装置11の位置特定部11aは、地図データ入力器から入力される地図情報と位置検出器19の位置検出信号に基づいて車両の現在位置を高精度に逐次測位するADASロケータとしての機能を実現する。ADASはAdvanced Driver Assistance Systemsの略である。この場合、車両位置は、緯度および経度からなる座標系で表され、この座標系では、例えば、X軸が経度、Y軸が緯度を示す。なお、車両位置の測位は、例えば、自車両に搭載されている車速センサによるセンシング結果に基づき求められる走行距離の情報などに基づいて行うなど、自車両の位置を特定できる構成であれば、種々の構成を採用することができる。制御装置11は、自車両の現在位置に基づいて、いわゆるナビゲーション処理を行うことができる。
操作パネル21は、所定のディスプレイ、例えばディスプレイ3の上に構成されたタッチパネルであり、I/O制御部15は、乗員による操作入力があると操作入力を受け付け、制御装置11に出力する。制御装置11は、操作パネル21の操作信号に基づいた制御を実行する。
乗員モニタ22は、車両内に搭乗した乗員の状態又は操作状態を検知する。乗員モニタ22は、例えばパワースイッチ、乗員状態モニタ22a、ターンスイッチ、自動制御スイッチなどを用いて構成され、各種の信号を制御装置11に出力する。また乗員モニタ22は、ドライバによりステアリングホイールが把持されているか又は操舵されているか否かを検出するステアリングセンサ、シートに着座しているか否かを検出する着座センサ、アクセルペダル又はブレーキペダルの踏込センサなども含んでいても良い。
パワースイッチは、内燃機関又は電動モータを始動させるために車室内にてユーザによりオン操作されることで、当該操作に応じた信号を出力する。乗員状態モニタは、D席又はP席の乗員の状態を画像センサにより撮影することで当該乗員の状態を検知して撮像信号を出力するカメラを含んで構成される。ドライバの乗員状態モニタ22aはDSMと称されている。DSMは、Driver Status Monitorの略である。乗員状態モニタ22aは、ドライバの頭部に近赤外光を照射して撮影した撮像信号を取得し必要に応じて画像解析して制御装置11に出力する。乗員状態モニタ22aは、特に運転支援中や自動運転中にドライバなどの乗員の状態を検知するために使用される。ターンスイッチは、車両の方向指示器を作動させるために車室内にて乗員によりオン操作されることで、当該操作に応じて右方又は左方にターンするターン信号を出力する。
自動制御スイッチは、車両の走行状態に対する自動制御を指令するために、車室内にて乗員によりオン操作されることで、当該操作に応じた自動制御信号を出力する。制御装置11は、乗員モニタ22の信号により車両乗員の挙動、例えば視線が何れの方向を向いているかを判定でき、また、パワースイッチの操作状態、方向指示器の作動状態、車両の自動制御の指令情報などを入力できる。
周辺カメラ23は、車両の前方を撮像するフロントカメラ、車両の後部を撮像するバックカメラ、車両の前側部や後側部を撮像するコーナカメラ、又は、車両の側部を撮像するサイドカメラ、電子ミラーなどによる周辺監視センサを構成し、これらはそれぞれフロントガイドモニタ、バックガイドモニタ、コーナービューモニタ、サイドガイドモニタ、及び電子ミラーの各撮像信号としてI/O制御部15を通じて制御装置11に出力され記憶部6に記憶される。
また車両には障害物との距離を検出する距離検出センサ24が周辺監視センサとして設置されている。距離検出センサ24は、クリアランスソナー、LiDARやミリ波レーダなどにより構成され、車両前方、車両前側部、車両後側部、車両後方又は車両側部に近接する車両や人、動物、路上の落下物、ガードレール、縁石、樹木などを検知できる。また障害物への方位や障害物までの距離を検出できる。また、上記した周辺監視センサにより、自車両の周辺の道路に設けられている走行区画線、一時停止線、横断歩道、路上に表記された「止まれ」などの標示、交差点の境界に表示される停止線などの路面標示を検出できる。
情報処理装置10のハードウェア、ソフトウェア構成例を図3に示している。各ECU5、5aにはそれぞれSoC30、31が搭載され、この搭載されたSoC30、31には前述したマイクロコンピュータが組込まれている。ECU5のSoC30、31に組み込まれたマイクロコンピュータは、予めインストールされた汎用OS32、例えばLinuxOS(Linuxは登録商標)上で各種の複数のアプリケーション33(以下、アプリ33と略す)が動作するように構成されている。SoCはSystem On Chipの略である。
アプリ33は、画像処理アプリ34やその他のアプリを含む。画像処理アプリ34の描画要求に応じてSoC30に組み込まれたプロセッサが、PtoPディスプレイ2の各ディスプレイ2aの表示画面に描画処理する。
他方、ECU5aはメータ描画用途で設けられているため符号5aを付している。ECU5aのSoC31に組み込まれたマイクロコンピュータには、汎用OS32よりもリアルタイム性能高く処理できるリアルタイムOS35が組み込まれており、リアルタイムOS35上でメータアプリ36を動作させるように構成されている。以下の説明では、画像処理アプリ34やメータアプリ36などのアプリ33を主体として説明することがあることに留意する。
メータアプリ36は、車両の速度や回転数あるいは警告などをユーザに報知するものである。PtoPディスプレイ2の特定の表示領域に表示される画像コンテンツを描画する。例えば、メータアプリ36は、速度計や回転数計、シフトレンジポジション、又は、警告灯などの画像コンテンツを描画する。速度計は、車両の速度の変化を示すためにリアルタイムで表示を更新する必要がある速度画像を含む。同様に、回転数計も、回転数の変化を示すためにリアルタイムで表示を更新する必要があるため、メータ画像に含まれる。
また、メータアプリ36により描画されるコンテンツは、他のディスプレイ、ここではセンタディスプレイ3にも表示できる。メータアプリ36によって描画されるコンテンツは、他のアプリによって描画されるコンテンツよりも、相対的にリアルタイム性が要求される。
アプリ33にはナビアプリ等が含まれている。ナビアプリは、前述したナビゲーション機能を実現するものであるとともに、主にPtoPディスプレイ2又はセンタディスプレイ3に対し、地図や車両の現在位置などを含むナビゲーション画面などの画像コンテンツを描画する。
またアプリ33には画像合成アプリも含まれている。画像合成アプリは、表示器に表示する様々な画像コンテンツの大きさや種類を特定し、画像コンテンツの画像を1フレーム内に合成し、この合成された混在画像をPtoPディスプレイ2、センタディスプレイ3に出力するアプリである。画像合成アプリは、コンポジッタとも称される画像合成部としての機能や、また画像出力部としての機能を実現する。
各アプリ33、36のうち画像コンテンツを描画するアプリには、画像コンテンツを描画するための表示レイヤが割り当てられている。これらの表示レイヤは、記憶部6上に、必要となる画像のコンテンツを描画できる大きさで確保されている。
また、PtoPディスプレイ2、センタディスプレイ3に表示される画像コンテンツは、アニメーション動作可能になっている。ここで、アニメーション動作とは、コンテンツを示す画像の位置や大きさが徐々に変化したり、画像が回転したり、スワイプ操作にともなってユーザインターフェースが全体的に移動したり、画像が徐々にフェードインあるいはフェードアウトしたり、画像の色が変化したりするような表示態様である。
図2に示した制御装置11は、記憶部6に記憶された各種のアプリ33、36を実行することで各種の処理を実行するときに乗員モニタ22、特に乗員状態モニタ22aの検出結果に基づいて処理を実行する。表示処理部13は、乗員状態モニタ22aの検出結果に基づいてディスプレイ2及び3に表示させる画像コンテンツの表示位置を変更、又は、画像コンテンツを変更処理する。
表示処理部13は、アプリ33を実行することで仮想的な座標によって規定される仮想空間K1に実像又は虚像などの像Aを表現し、PtoPディスプレイ2の表示画面に2D表現又は3D表現の像Aを平面的又は立体的に映し出すことで乗員に像Aを見せる。このとき、PtoPディスプレイ2は、その表示画面及び表示画面を囲うフレーム2bも含めて仮想空間K1と車両の乗員の存在する実空間K2との間に位置しているように見える。
上記構成の作用、動作について図4以降の図面を参照しながら説明する。情報処理装置10は、表示処理部13によりPtoPディスプレイ2及びセンタディスプレイ3等に様々なコンテンツを表示させるが、このときPtoPディスプレイ2の各ディスプレイ2aに単独のコンテンツを表示処理させたり、センタディスプレイ3に単独のコンテンツを表示処理させたりすることがある。さらには、情報処理装置10は、表示処理部13により複数のディスプレイ2aの表示画面に亘り、一体の画像等のコンテンツを表示させることがある。
情報処理装置10が、複数のディスプレイ2aの表示画面に亘り、一体のコンテンツを表示させると、車両の乗員は複数のディスプレイ2a間に黒枠状のフレーム2bを確認できる。このとき、連続的な画像又は文章を表示できず途切れた表示となってしまい、表示の連続性が保たれない。そこで、情報処理装置10は、図4に示す処理を実行することでフレーム2bに隠されるコンテンツをディスプレイ2aの何れかに表示して乗員に見せると良い。
制御装置11は、図4のS1において乗員状態モニタ22aを用いて車両の乗員の頭位置及び角度並びに乗員の視線を検出する。このとき、乗員状態モニタ22aは、例えばドライバなどの乗員の身体の撮像画像を撮像した撮像信号をI/O制御部15を通じて記憶部6に記憶させる。演算装置12は、撮像画像を画像解析することで身体の中の頭部分、さらに目などの顔パーツの位置を撮像画像内に検出し、乗員の頭位置及びその角度並びに目を向ける視線の方向を検出する。なお、これら乗員の頭位置及びその角度並びに目を向ける視線の方向を画像解析する技術は、乗員状態モニタ22aに組み込んでも良い。
S1の次に又は並行して、演算装置12は、S2においてコンテンツをディスプレイ2、3へ表示させる表示領域の座標を演算する。ここでは、図6に示す仮想空間K1の中の何れの座標面又は座標空間に表示するか演算する。演算装置12が、複数のディスプレイ2aへ表示させる座標を演算した結果を制御装置11に渡すと、制御装置11は、S1にて算出される乗員の頭位置及びその角度並びに視線の方向と、S2にて演算された複数のディスプレイ2aへ表示させる領域とに基づいて、S3において乗員、例えばドライバからコンテンツを見ることができるか否かを判定する。
制御装置11は、乗員からコンテンツを全て見えると判定した場合には、S3にてNOと判定し、表示処理部13は、S4においてそのままコンテンツの画像を生成する。そして表示処理部13は、S5において複数のディスプレイ2aにそれぞれ表示させる出力画像を分割して複数の画像を生成し、S6において複数のディスプレイ2aにそれぞれ画像を出力する。これにより、複数のディスプレイ2aは、それぞれ対応したコンテンツを表示できる。例えば、互いに異なるコンテンツ、例えば地図表示画面、周辺カメラ23の撮像画像、エンタメ系画像、を各ディスプレイ2aにそれぞれ表示させる場合には、このS3→S4→S5→S6の順に処理が行われる。
制御装置11は、S7において乗員状態モニタ22aを用いたコンテンツの表示位置の変更の要否判断を必要とするか否かを判定することでシステムとして継続させるか否かを判定する。必要な場合、制御装置11はシステムを継続して処理をS1に戻して繰り返す。
逆に、制御装置11は、S3において乗員からコンテンツが見えないと判定された場合にはS3にてYESと判定し、S8において当該コンテンツが重要情報Jであるか否かを判定する。特に、乗員からコンテンツが見えないと判定されるときは、主に複数のディスプレイ2aに亘って連続的なコンテンツを表示させる場合である。
後述するが、ドライバが自車両の後方に位置する駐車スペースSpに駐車するときに、ドライバが自車両の後方を広角で確認するために、表示処理部13がバックガイドカメラの撮像画像を複数のディスプレイ2aに亘って表示することがある。この場合、制御装置11は、乗員からコンテンツを見たときに、重要情報Jと判定されたコンテンツがフレーム2bに隠れるか否かを判定することで、S3及びS8の条件を満たしているか否かを判定する。
制御装置11は、コンテンツが重要情報Jではないと判定するとS8にてNOとし、S4~S7の処理を繰り返す。すなわち、コンテンツが重要情報Jでなければ、表示処理部13は、ディスプレイ2、3の表示領域にコンテンツをそのまま表示させる。
逆に、コンテンツが重要情報Jであれば、表示処理部13は、S9において隠れ防止処理を施した上で、複数のディスプレイ2aにそれぞれ表示させる画像コンテンツを分割して複数の画像を生成し、S6において複数の画像をそれぞれのディスプレイ2aに出力する。これにより、複数のディスプレイ2aの何れかに重要情報Jを表示できる。その後、制御装置11は、S7を経てS1から処理を必要に応じて繰り返す。
以下、事例を挙げて詳細に説明する。図5には、ドライバが公共駐車場に記された枠線Wや自車両の後方に存在する塀Hを確認しながら、任意の駐車スペースSpの内側に自車両を駐車する場面を想定した例を示している。図5にハッチングを付して示した領域は、制御装置11により図4のS8にて重要情報Jと判定される領域を示している。表示処理部13は、記憶部6に記憶される全体のコンテンツの領域Rの撮像画像から中心側の部分的な領域Raの撮像画像を抽出し、図4のS2にてコンテンツを表示させる仮想空間K1の座標を演算する。そして表示処理部13は、抽出した領域Raの撮像画像を分割してPtoPディスプレイ2の各ディスプレイ2aに表示する。
PtoPディスプレイ2は、仮想空間K1と車両の乗員の存在する実空間K2との間に位置している。制御装置11が、演算装置12により乗員状態モニタ22aを用いて乗員の頭位置や視線を判定すると共に、領域Raの画像中に駐車スペースSpを囲う枠線Wを認識することで、枠線Wに囲まれた駐車スペースSpを重要情報Jと判定する。
制御装置11は、S3及びS8において乗員から重要情報Jを見たときに当該重要情報Jを一つのディスプレイ2aだけで表示可能でありフレーム2bに隠れないと判定すれば図4のS8にてNOと判定する。表示処理部13は、図4のS4において仮想空間K1の座標を各ディスプレイ2aの表示画面に投影するように画像コンテンツを生成し、S5において画像を分割して複数の画像を各ディスプレイ2aに出力する。
図6に示すように、仮想的な座標で規定される仮想空間K1の中では、表示処理部13は、PtoPディスプレイ2の実際の表示画面と平行な平面座標上、すなわち図6のXZ平面に平行な平面上の座標、に抽出した領域Raの撮像画像を表現することでバックガイドカメラの撮像画像を2D表現の像Aによって表示する。ここでは、2D表現として平面的に像Aを映し出す例を示したが、これに限定されるものではない。図7に仮想空間K1の中のXY平面をイメージ図として示すように、例えば複数のカメラを用いて立体的に撮像情報を合成しポリゴンによる描画技術を用いて仮想空間K1の中に3D表現した立体的な像Aaを映し出すようにしても良い。これにより、乗員は2D表現の像A又は3D表現の像Aaを確認できる。前述したように、重要情報Jがフレーム2bによって分割表示されることなく一つのディスプレイ2aに表示されることになり、乗員は重要情報Jを確認しやすくなる。
その後、ドライバが左に頭を傾けてディスプレイ2aを確認する場合について図8以降の図面を参照して説明する。制御装置11は、乗員状態モニタ22aにより頭位置の移動や、頭位置の角度の変化、乗員の視線の移動を検出する。制御装置11は、乗員状態モニタ22aの検出情報に基づいて図4のS3及びS8において乗員から重要情報Jとなるコンテンツを見えないと判定すると、図4のS9において隠れ防止処理を施した画像コンテンツを生成する。
具体的に、表示処理部13は、前述した基準の像Aについて仮想空間K1の中で座標変換し、図8に示すように仮想空間K1の中で傾斜させながら描画する。図8及び図9に具体例を示したように、表示処理部13は、例えば仮想空間K1の中でドライバの視線と座標変換後の像A2との関係を直交するように描画することで、描画した像A2をドライバの視線に合わせて表現できる。このように、表示処理部13が画像コンテンツを3D的に描画することで一つのディスプレイ2aに重要情報Jを表示できるようになり、乗員は重要情報Jを見やすくなる。2D表現の像Aを3D的に描画する例を示したが、図10に示したように、ポリゴンによる3D表現の像Aaについても、仮想空間K1の中で傾斜させて3D的に像Aa2を描画することで同様の効果を得られる。
また、以下のように重要情報Jを描画しても良い。乗員が左に頭を傾けてディスプレイ2aを確認した場合、制御装置11が、図4のS9において隠れ防止処理を実行するときに、図11及び図12に示すように、領域Raの画像コンテンツを右方向にずらしつつ縦横等倍で縮小処理した新たな領域Rbの画像コンテンツを用いて表示するようにしても良い。このとき、表示処理部13は、領域Rbの画像コンテンツの像A2を仮想空間K1における像Aと同一のXZ平面に描画しても、図12に示すように、重要情報Jを一つのディスプレイ2aに表示できる。乗員が頭位置をずらして覗き込む動作をしたときにも、制御装置11が隠れ防止処理を実行して一のディスプレイ2aに表示できるため、乗員がフレーム2bの境界付近のコンテンツまで確認できる。
なお重要情報Jは、安全、安心というキーワードに関係する車両用のコンテンツを対象とすると良い。重要情報Jとしては、例えば衝突回避を必要とする塀Hなどによる障害物、また同様に衝突回避を必要とする車外を移動する自動車や自転車などの他車両や歩行者、前述した枠線Wなどの車両の到達目標、など、PtoPディスプレイ2の複数のディスプレイ2aに表示させる画像のコンテンツの中で車両制御に関係する一部領域を画像認識して抽出した車両用のコンテンツを対象とすると良い。このような一部領域は、全体の画像のコンテンツの中でも重要度が比較的高い領域であるため重要情報Jと位置付けると良い。特に、逐次変化して入力される車両制御用の様々な情報に合わせて重要情報Jを変化させても良い。重要情報Jは、バックガイドモニタ、フロントガイドモニタ、コーナービューモニタ、サイドガイドモニタの中の特定の一部分に表示させる情報を挙げることができる。
本実施形態によれば、乗員状態モニタ22aにより検出される乗員の頭位置及び角度と、画像コンテンツに対して設定される仮想空間K1の3D座標を用いることにより、乗員の頭位置と画像コンテンツを表示するディスプレイ2aとの間の相対位置を定義でき、乗員が画像コンテンツを見ているか否かを判定できる。この結果、乗員の頭位置及び角度に応じて各画像コンテンツの見え隠れを実現できる。
従来技術では、複数のディスプレイ2a間をまたがって表示される重要情報Jは、定常的に一部非表示とせざるを得なかった。しかし本実施形態においては、フレーム2bの境界付近にたとえ重要情報Jが存在しても乗員は確実に視認できる。このことから乗員は画像コンテンツの一体感を感じることができる。本実施形態では、水平方向に連続する複数のディスプレイ2aを例示しているが、それ以外の物理配置において、例えば縦方向に連携するディスプレイ2a、3の間でも適用可能である。
乗員が頭位置を左右移動する場合を例示したが、これに限らず、前後・上下にずらした場合にも対応できる。例えば、前後に移動する場合、乗員状態モニタ22aによりこの移動が検出されると、表示処理部13は、仮想空間K1に描画する画像を拡大又は縮小したり、仮想空間K1に描画する画像の座標の位置を調整したりすることで乗員の頭位置の移動に合わせて画像コンテンツの表示状態を変更できる。これにより、前述と同様の効果を得られる。
(第2実施形態)
第2実施形態について図13から図21を参照しながら説明する。情報処理装置10は、ナビアプリを実行することでナビゲーション地図画面G2をPtoPディスプレイ2に表示すると共に、地図画面G2上に現在位置マークM1及び目的地マークM2を逐次更新することでナビゲーション機能を実行する。このとき、PtoPディスプレイ2は、横長大画面で地図画面G2を表示できるため、乗員は地図を確認しやすい。
しかし図13に示すように、表示処理部13が、仮想空間K1の中でデフォルト座標位置に地図画面G2の像A3を表示することで、図14に示すように複数のディスプレイ2aに亘り地図画面G2を表示しても、現在位置マークM1がフレーム2bに隠れて乗員が確認できないと、自車両の現在位置が地図画面G2のどの位置に存在するか乗員が瞬時に判断することが難しい。
そこで情報処理装置10は、現在位置マークM1や目的地マークM2、目的地に至るまでの分岐案内表示などの情報を重要情報Jと位置付け、PtoPディスプレイ2の中の何れかのディスプレイ2aに表示させ続けると良い。上記の例では、表示処理部13が、乗員の頭位置及び視線を検出した検出情報に基づいて、乗員が現在位置マークM1を確実に見える位置に移動させるよう、仮想空間K1の中で地図画面G2の像A3の座標位置を移動させる。図15に示す例では像A3をX軸方向に沿って平行に移動させている。移動後の像A4参照。乗員は、仮想空間K1の中の像A4を見ることで現在位置マークM1を確認できる。
また制御装置11は、乗員モニタ22の検出結果及び表示処理部13によるディスプレイ2aへの表示状態に基づいて、乗員により重要情報Jを含むコンテンツが確認されたことを検出できる。この後、表示処理部13は、重要情報Jを含むコンテンツを見続けられるようにコンテンツの表示位置を維持又は変更することが望ましい。
すなわち、制御装置11が、重要情報Jを含むコンテンツを乗員が見たことを検知した後には、乗員の頭位置と重要情報Jの表示位置とを結合することで重要情報Jがフレーム2bに遮られることなく乗員の視界に入り続けるように表示位置を変更制御する。これにより、乗員がディスプレイ2aを見続けている限り、重要情報Jを含むコンテンツを見続けられるようにすると良い。乗員状態モニタ22aによりディスプレイ2aから視線が外されたことを検知した場合にはこの限りではない。また制御装置11は、瞬間的な所定時間(例えば、0.数秒)だけ乗員が視線をディスプレイ2aから外したものの再度同一のディスプレイ2aに視線を向けたことを検知した場合には、例外的に重要情報Jを含むコンテンツを見続けられるようにしても良い。
例えば、図15に示すように、制御装置11は、乗員により現在位置マークM1が見られたことが検知された場合、その後、図17の上図に示すように、乗員状態モニタ22aにより乗員の頭位置が移動したことが検知された場合、表示処理部13は、像A4の表示座標を移動することで乗員から現在位置マークM1を見続けられるようにすると良い。また、その後、乗員状態モニタ22aにより乗員の頭位置が元の位置に戻ったことが検知された場合、図17の下図に示すように、表示処理部13は、この乗員の頭位置に基づいて仮想空間K1の中の像A4の座標を維持又は変更することでディスプレイ2aへの表示位置を設定する。これにより、乗員は、重要情報Jである現在位置マークM1を見続けることができる。
また、表示処理部13は、乗員状態モニタ22aの検出結果に基づいて乗員の視点の移動量が所定より大きいと検出したときに一のディスプレイ2aに重要情報Jを表示しても乗員から確認不能となるときには、例えば隣接した他のディスプレイ2aに表示することが望ましい。
図18の上図に仮想空間K1を示すが、乗員の頭位置が左に移動した場合、その移動量が所定より大きく、制御装置11が、図18中の右側のディスプレイ2aに現在位置マークM1を表示すると乗員から確認できないと判定したときには、表示処理部13は仮想空間K1の中で地図画面G2の表示位置の像A3を像A5のように移動することで、図19に示すように左側のディスプレイ2aに表示させると良い。これにより、乗員の頭位置が大きく移動したとしても、乗員は重要情報Jである現在位置マークM1を確認できる。
また、その後、乗員状態モニタ22aにより乗員の頭位置が元位置に戻ったことを検知した場合においても、表示処理部13は、この乗員の頭位置に基づいて仮想空間K1の中の像A5の座標を維持又は変更することでディスプレイ2aへの表示位置を設定する。これにより、乗員は重要情報Jである現在位置マークM1を確認し続けることができる。
第2実施形態でも同様に、表示処理部13が、仮想空間K1の中で3D的に描画しても良い。つまり表示処理部13は、前述した基準の像A3について仮想空間K1の中で座標変換し、図20に示すように仮想空間K1の中で傾斜させて描画するようにしても良い。図20及び図21に具体例を示したように、表示処理部13は、例えば仮想空間K1の中でドライバの視線と座標変換後の像A6との関係を直交するように描画することで描画面をドライバの視線に合わせて表現できる。このように、表示処理部13が画像コンテンツを3D的に描画することで一つのディスプレイ2aに重要情報Jを表示できるようになり、ドライバは重要情報Jを見やすくなる。
本実施形態によれば、ナビゲーションに係る地図画面G2の場合、注目している箇所が重要情報Jである現在位置マークM1であるかどうかに基づいて、仮想空間K1の座標位置を維持したり変更したりしている。本実施形態においても、前述実施形態と同様の効果を奏する。
(第3実施形態)
第3実施形態について図22及び図23を参照しながら説明する。図22又は図23に示すように、表示処理部13がメータ画像G3をディスプレイ2aに表示させるときにも前述実施形態と同様の技術を適用しても良い。
メータ画像G3としては、実速度M2、運転支援又は自動運転時の目標速度M3、方向指示器のターン方向M4の点滅表示、燃料残量M5、警告類M6、シフトレンジポジション状態M7、追従走行による運転支援機能を使用したときの先行車への追従状態M8などを表示する。
表示処理部13は、これらの画像コンテンツM2~M8をディスプレイ2aに表示させるときに、乗員状態モニタ22aの検出結果に基づいて仮想空間K1の中で描画する座標を変化させることで、乗員が画像コンテンツM2~M8を全て見続けられるようにディスプレイ2aに表示すると良い。
例えば図22に示したように、表示処理部13は、フレーム2bに近接した位置に実速度M2「57km/h」を表示すると共に方向指示器のターン方向M4を表示しているが、この場合、左右のディスプレイ2aの何れかに寄せて実速度M2及びターン方向M4を表示処理すると良い。また、目標速度M3、燃料残量M5、警告類M6、シフトレンジポジション状態M7、先行車への追従状態M8についても同様である。本実施形態においても、前述実施形態と同様の効果を奏する。
(第4実施形態)
第4実施形態について図24から図28を参照しながら説明する。本実施形態においては、車両の外部を撮像する周辺カメラ23、又は、障害物までの距離を検出する距離検出センサ24などから構成される特徴検出部により特定の車外物B1をコンテンツから検出し、表示処理部13が車外物B1をフレームB2に合わせて表示処理する。特定の車外物B1としては任意に適宜設定すれば良いが、視線の死角を構成する車外障害物B2とすると良い。車外障害物B2としては、図24に示すように、電柱B3、高層ビルB4、路上の駐車車両などを一例として挙げることができ、その他の任意の車外物B1としては、その他の建物B5、マンホールB6(図25参照)などであっても良い。
このような場合、表示処理部13は、乗員状態モニタ22aの検出結果に基づいて、車両の乗員の視線移動に伴い車外物B1をフレーム2bに重ね合わせるようにコンテンツを変形して複数のディスプレイ2aに表示処理することがさらに望ましい。
図24に通常時の表示イメージ例を示している。2D表現の像によりコンテンツを表示処理する際、表示処理部13は、乗員状態モニタ22aにより乗員の視線移動を検出しつつ、当該乗員の視線移動に伴い車外障害物B2となる電柱B3をフレーム2bの延長線n上に重ね合わせるように表示領域を、二次元平面、ここではXZ平面上で移動させて表示処理する。
また、車両が走行すると周辺カメラ23の撮像画像が変化し、表示処理部13が表示処理するコンテンツも随時変化する。このような場合には、図25に表示イメージを例示したように、表示処理部13は、当該コンテンツの画像を縮小(又は拡大)したり、図26に表示イメージを例示したように、フレーム2bの位置を中心とした回転、又は、画像を歪ませることでコンテンツを変形し、乗員の視点から見てフレーム2bに車外物B1を合わせて表示処理することが望ましい。表示処理部13が、複数のディスプレイ2aの間に存在するフレーム2bに対し、乗員による視認不要なコンテンツを合わせて表示することで、フレーム2bによる非表示領域を活用しつつ、二次元表示としても違和感のないように表示処理できる。
また、例えば、周辺カメラ23としてADASステレオカメラなどのように複数のカメラを使用して車両の周辺情報、撮像情報を取得している場合、表示処理部13は、車外障害物B2から車両の進行方向側で車両の乗員から死角となる領域の画像を車両の周辺情報から取得し、当該取得した画像コンテンツを複数のディスプレイ2aのうち少なくとも何れかのディスプレイ2aに表示処理することが望ましい。
周辺カメラ23が、複数のカメラにより撮像することで、車両の走行に伴う撮像画像を合成したり、AI処理などの周知技術を使用し、極力死角のない画像を取得できる。このため、表示処理部13は、車外障害物B2、例えば電柱B3や高層ビルB4、路上の駐車車両など、の陰に隠れた歩行者や自転車などをコンテンツとして表示処理でき、乗員に注意を促すことができる。
また図27に例示したように、隣接する複数のディスプレイ2a-2a、2a-2aの間にフレーム2bが存在するPtoPディスプレイ2に適用し、車両の走行中において周辺カメラ23による画像のコンテンツに車外物B1として車外障害物B2、例えば電柱B3が複数検出された場合について説明する。
このような場合、図28に例示したように、表示処理部13は、コンテンツの縮尺を変更、例えば拡大することで、複数の電柱B3をそれぞれ対応するフレーム2bに合わせて表示処理することが望ましい。この例では、拡大する例を例示したが、縮小するようにしても良い。
また例えば、このようなとき、図27に示すように、電柱B3以外に高層ビルB4や建物B5、マンホールB6などの車外物B1がさらに検出されることもある。このような場合、情報処理装置10が、距離検出センサ24により車両に近接する障害物までの方位や距離を検出し、これらの検出結果に基づいて、表示処理部13が、車両に近い側に位置する車外物B1をフレーム2bに合わせて表示処理することが望ましい。図27の例では、車両に一番近い車外物B1は電柱B3と検出されるため、表示処理部13は、電柱B3をフレーム2bに合わせて表示処理する。
すると、表示処理部13は、必要以上に画角を狭くすることなく表示処理でき、車両の乗員に違和感を生じさせることなく表示処理できる。図28の例では、電柱B3に合わせた例を示しているが、車両が前方に進行することで、周辺カメラ23の撮像画像から電柱B3が外れると、高層ビルB4や他の建物B5にフレーム2bを合わせて表示処理すると良い。このような実施形態によれば、乗員に違和感を生じさせないように表示処理できる。
(他の実施形態)
本開示は、前述した実施形態に限定されるものではなく、種々変形して実施することができ、その要旨を逸脱しない範囲で種々の実施形態に適用可能である。
第1実施形態では、図8及び図9に具体例を示したように、仮想空間K1の中で傾斜させながら描画するようにしたが、表示処理部13は、例えば仮想空間K1の中でドライバの視線と座標変換後の像A2との関係を直交させなくてもよい。
第2実施形態でも図20及び図21に具体例を示したように、例えば仮想空間K1の中でドライバの視線と座標変換後の像A6との関係を直交するように描画することで描画面をドライバの視線に合わせて表現したが、ドライバの視線と座標変換後の像A6との関係を直交させなくてもよい。
前述実施形態では、複数のECU5により表示系のECU5を構成した形態を示したが、表示系のECU5を1つのECU5によりHCUとして構成しても良い。このときのハードウェア、ソフトウェア構成例を図29に示している。各ECU5にはそれぞれSoC230が搭載され、この搭載されたSoC230にはマイクロコンピュータが組込まれている。ECU5のSoC230に組み込まれたマイクロコンピュータは、ハイパーバイザ231上に汎用OS32及びリアルタイムOS35が構成されている。汎用OS32上には各種の複数のアプリ33が動作するように構成されている。またリアルタイムOS35は、汎用OS32よりもリアルタイム性能高く処理できる。リアルタイムOS35上でメータアプリ36を動作させるように構成されている。このような構成を採用した場合であっても前述実施形態と同様の構成、作用効果を奏する。
図面中、2はPtoPディスプレイ、2aはディスプレイ、2bはフレーム(非表示領域)、13は表示処理部、22aは乗員状態モニタ、を示す。
本開示に記載の制御装置11、表示処理部13による手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサ及びメモリを構成することにより提供された専用コンピュータにより実現されても良い。或いは、本開示に記載の制御装置11、表示処理部13及びその手法は、一つ以上の専用ハードウェア論理回路によりプロセッサを構成することにより提供された専用コンピュータにより実現されても良い。若しくは、本開示に記載の制御装置11、表示処理部13及びその手法は、一つ乃至は複数の機能を実行するようにプログラムされたプロセッサ及びメモリと一つ以上のハードウェア論理回路により構成されたプロセッサとの組み合わせにより構成された一つ以上の専用コンピュータにより実現されても良い。又、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていても良い。
本開示は、前述した実施形態に準拠して記述したが、本開示は当該実施形態や構造に限定されるものではないと理解される。本開示は、様々な変形例や均等範囲内の変形をも包含する。加えて、様々な組み合わせや形態、さらには、それらに一要素、それ以上、あるいはそれ以下、を含む他の組み合わせや形態をも、本開示の範畴や思想範囲に入るものである。

Claims (16)

  1. 非表示領域(2b)を挟んで設けられた複数のディスプレイ(2a)にコンテンツを表示させる車両用表示システムであって、
    車両の乗員の頭位置及び角度並びに前記乗員の視線を検出するための乗員状態モニタ(22a)と、
    前記乗員状態モニタの検出結果に基づいて前記ディスプレイに表示させる前記コンテンツの中に重要情報が含まれることを条件として前記重要情報を隠れ防止処理して前記複数のディスプレイの表示画面の何れかに表示させる表示処理部(13)と、を備え、
    前記表示処理部は、前記乗員状態モニタの検出結果に基づいて前記乗員の視点の移動量が所定より大きいときに、一の前記ディスプレイに前記重要情報を表示しても前記乗員から確認不能となるときには、他の前記ディスプレイに表示する車両用表示システム。
  2. 非表示領域(2b)を挟んで設けられた複数のディスプレイ(2a)にコンテンツを表示させる車両用表示システムであって、
    車両の乗員の頭位置及び角度並びに前記乗員の視線を検出するための乗員状態モニタ(22a)と、
    前記乗員状態モニタの検出結果に基づいて前記ディスプレイに表示させる前記コンテンツの中に重要情報が含まれることを条件として前記重要情報を隠れ防止処理して前記複数のディスプレイの表示画面の何れかに表示させる表示処理部(13)と、を備え、
    前記車両の乗員から見た特定の車外物を前記コンテンツから検出する特徴検出部(23)を接続して構成され、
    前記表示処理部は、前記特徴検出部により前記車外物が検出されたときには、前記乗員状態モニタの検出結果に基づいて、前記車両の乗員の視線移動に伴い前記車外物を前記非表示領域に重ね合わせるように前記コンテンツを変形して前記複数のディスプレイに表示処理する車両用表示システム。
  3. 前記表示処理部は、前記コンテンツの画像を拡大、縮小、回転、又は、歪ませることで前記コンテンツを変形する請求項2記載の車両用表示システム。
  4. 前記特徴検出部が、複数のカメラを使用して車両の周辺情報を取得する場合、
    前記表示処理部は、前記車外物から車両の進行方向側で前記車両の乗員から死角となる領域の画像を前記車両の周辺情報から取得し前記ディスプレイに表示処理する請求項2又は3記載の車両用表示システム。
  5. 隣接する前記複数のディスプレイの間に前記非表示領域をそれぞれ備えている場合に、前記コンテンツに前記車外物が複数検出された場合には、
    前記表示処理部は、縮尺を変更することで前記複数の車外物をそれぞれの前記非表示領域に合わせて表示処理する請求項2記載の車両用表示システム。
  6. 前記コンテンツに車外物が複数検出される場合、
    前記表示処理部は、前記車両に近い側に位置する前記車外物を前記非表示領域に合わせて表示処理する請求項2記載の車両用表示システム。
  7. 前記表示処理部は、仮想的な座標で規定される仮想空間に像を表現し前記ディスプレイの前記表示画面に前記像を映し出すように構成され、
    前記非表示領域は、前記仮想空間と前記乗員の存在する実空間との間に位置するフレームにより構成される請求項1又は2記載の車両用表示システム。
  8. 前記重要情報は、前記複数のディスプレイに表示させる前記コンテンツの中で車両制御に関係する一部領域を画像認識して抽出した車両用のコンテンツを対象としている請求項1又は2記載の車両用表示システム。
  9. 前記表示処理部は、前記乗員状態モニタの検出結果に基づいて前記乗員により前記コンテンツが見られたことが検出された後には、前記コンテンツを見続けられるように前記コンテンツの表示位置を維持又は変更して前記隠れ防止処理する請求項1又は2記載の車両用表示システム。
  10. 前記表示処理部は、前記仮想空間の中で前記像を平行に移動させることで前記隠れ防止処理する請求項7記載の車両用表示システム。
  11. 前記表示処理部は、2D表現の像を3D的に描画することで前記複数のディスプレイのうち何れかの前記ディスプレイに前記重要情報を表示する請求項1から10の何れか一項に記載の車両用表示システム。
  12. 前記表示処理部は、拡大又は縮小処理を施して前記複数のディスプレイのうち何れかの前記ディスプレイに表示する請求項1から11の何れか一項に記載の車両用表示システム。
  13. 表示画面の間に非表示領域を挟んで設けられた複数のディスプレイ(2a)にコンテンツを表示させる車両用表示方法であって、
    乗員状態モニタ(22a)により車両の乗員の頭位置及び角度並びに前記乗員の視線を検出する過程と、
    前記乗員状態モニタの検出結果に基づいて前記ディスプレイに表示させる前記コンテンツの中に重要情報が含まれることを条件として、表示処理部(13)により前記重要情報を隠れ防止処理して前記複数のディスプレイの前記表示画面の何れかに表示させる過程と、を備え
    前記複数のディスプレイの前記表示画面の何れかに表示させる過程では、前記乗員状態モニタの検出結果に基づいて前記乗員の視点の移動量が所定より大きいときに、前記表示処理部が一の前記ディスプレイに前記重要情報を表示しても前記乗員から確認不能となるときには、他の前記ディスプレイに表示する車両用表示方法。
  14. 表示画面の間に非表示領域を挟んで設けられた複数のディスプレイ(2a)にコンテンツを表示させる車両用表示方法であって、
    乗員状態モニタ(22a)により車両の乗員の頭位置及び角度並びに前記乗員の視線を検出する過程と、
    前記乗員状態モニタの検出結果に基づいて前記ディスプレイに表示させる前記コンテンツの中に重要情報が含まれることを条件として、表示処理部(13)により前記重要情報を隠れ防止処理して前記複数のディスプレイの前記表示画面の何れかに表示させる過程と、を備え
    前記車両の乗員から見た特定の車外物を前記コンテンツから検出する特徴検出部(23)を接続して構成され、
    前記特徴検出部により前記車外物が検出されたときには、
    前記複数のディスプレイの前記表示画面の何れかに表示させる過程では、前記表示処理部は、前記乗員状態モニタの検出結果に基づいて、前記車両の乗員の視線移動に伴い前記車外物を前記非表示領域に重ね合わせるように前記コンテンツを変形して前記複数のディスプレイに表示処理する車両用表示方法。
  15. 表示画面の間に非表示領域を挟んで設けられた複数のディスプレイ(2a)にコンテンツを表示させる車両用表示プログラムであって、
    乗員状態モニタ(22a)により車両の乗員の頭位置及び角度並びに前記乗員の視線を検出させる手順と、
    前記乗員状態モニタの検出結果に基づいて前記ディスプレイに表示させる前記コンテンツの中に重要情報が含まれることを条件として、表示処理部(13)により前記重要情報を隠れ防止処理して前記複数のディスプレイの前記表示画面の何れかに表示させる手順と、を実行させ、
    前記複数のディスプレイの前記表示画面の何れかに表示させる手順では、前記乗員状態モニタの検出結果に基づいて前記乗員の視点の移動量が所定より大きいときに、前記表示処理部により一の前記ディスプレイに前記重要情報を表示しても前記乗員から確認不能となるときには、他の前記ディスプレイに表示する車両用表示プログラム。
  16. 表示画面の間に非表示領域を挟んで設けられた複数のディスプレイ(2a)にコンテンツを表示させる車両用表示プログラムであって、
    乗員状態モニタ(22a)により車両の乗員の頭位置及び角度並びに前記乗員の視線を検出させる手順と、
    前記乗員状態モニタの検出結果に基づいて前記ディスプレイに表示させる前記コンテンツの中に重要情報が含まれることを条件として、表示処理部(13)により前記重要情報を隠れ防止処理して前記複数のディスプレイの前記表示画面の何れかに表示させる手順と、を実行させ、
    前記車両の乗員から見た特定の車外物を前記コンテンツから検出する特徴検出部(23)を接続して構成され、
    前記表示処理部は、前記特徴検出部により前記車外物が検出されたときには、前記乗員状態モニタの検出結果に基づいて、前記車両の乗員の視線移動に伴い前記車外物を前記非表示領域に重ね合わせるように前記コンテンツを変形して前記複数のディスプレイに表示処理する車両用表示プログラム。
JP2023516388A 2021-04-23 2022-03-29 車両用表示システム、車両用表示方法、及び車両用表示プログラム Active JP7616359B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021073381 2021-04-23
JP2021073381 2021-04-23
PCT/JP2022/015569 WO2022224754A1 (ja) 2021-04-23 2022-03-29 車両用表示システム、車両用表示方法、及び車両用表示プログラム

Publications (3)

Publication Number Publication Date
JPWO2022224754A1 JPWO2022224754A1 (ja) 2022-10-27
JPWO2022224754A5 JPWO2022224754A5 (ja) 2023-08-18
JP7616359B2 true JP7616359B2 (ja) 2025-01-17

Family

ID=83722161

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023516388A Active JP7616359B2 (ja) 2021-04-23 2022-03-29 車両用表示システム、車両用表示方法、及び車両用表示プログラム

Country Status (3)

Country Link
US (1) US12515520B2 (ja)
JP (1) JP7616359B2 (ja)
WO (1) WO2022224754A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230094477A (ko) * 2021-12-21 2023-06-28 현대자동차주식회사 롤러블 디스플레이 시스템 및 운전자에 따라 적응적으로 롤러블 모니터의 뷰 범위를 조정하는 방법
US12122416B2 (en) * 2022-07-07 2024-10-22 Gm Cruise Holdings Llc System and method for using virtual figures to support users of autonomous vehicles
JP7708077B2 (ja) * 2022-11-16 2025-07-15 トヨタ自動車株式会社 情報処理装置およびシステム
JP2024084885A (ja) 2022-12-14 2024-06-26 フォルシアクラリオン・エレクトロニクス株式会社 表示制御装置及び表示制御方法
JP2025168027A (ja) * 2024-04-26 2025-11-07 トヨタ自動車株式会社 後方車両接近通知装置及び後方車両接近通知装置の通知方法
WO2025243719A1 (ja) * 2024-05-23 2025-11-27 株式会社デンソー テスト実施装置、テスト実施方法、テスト実施プログラム及びサーバ

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008090617A (ja) 2006-10-02 2008-04-17 Toshiba Corp 立体画像生成装置、方法およびプログラム
CN101334725A (zh) 2007-06-29 2008-12-31 联想(北京)有限公司 提高窗口显示性能的方法与装置
JP2017054221A (ja) 2015-09-08 2017-03-16 シャープ株式会社 マルチ画面表示システムおよび表示制御プログラム
JP2020079879A (ja) 2018-11-13 2020-05-28 アイシン精機株式会社 表示制御装置

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02244880A (ja) * 1989-03-17 1990-09-28 Hitachi Ltd 合成画面表示装置とそれを用いて構成した電子ビューファインダ並びに平面型テレビ受像機
JP2009288839A (ja) 2008-05-27 2009-12-10 Panasonic Corp 情報処理装置、情報処理方法、情報処理プログラム、情報処理プログラムを記録した記録媒体および情報処理集積回路
EP2168815B1 (en) * 2008-09-24 2014-06-04 Robert Bosch GmbH Method and device for detecting possibly colliding objects in a blind spot area
TWI441140B (zh) * 2011-07-18 2014-06-11 Ampower Technology Co Ltd 發光二極體驅動系統及使用其的顯示裝置
WO2014093100A1 (en) * 2012-12-14 2014-06-19 Johnson Controls Technology Company System and method for automatically adjusting an angle of a three-dimensional display within a vehicle
DE112015001685T5 (de) * 2014-04-30 2016-12-22 Ankit Singh System und Verfahren zum Kalibrieren der Ausrichtung eines dreidimensionalen Displays innerhalb eines Fahrzeuges
EP3487172A4 (en) * 2016-07-13 2019-07-10 Sony Corporation PICTURE GENERATING DEVICE, PICTURE PRODUCTION PROCESS AND PROGRAM
US10430641B2 (en) * 2017-03-08 2019-10-01 GM Global Technology Operations LLC Methods and systems for object tracking using bounding boxes
DE102017113781B4 (de) * 2017-06-21 2023-10-05 SMR Patents S.à.r.l. Verfahren zum Betreiben einer Anzeigevorrichtung für einen Kraftwagen, sowie Kraftwagen
US10872254B2 (en) * 2017-12-22 2020-12-22 Texas Instruments Incorporated Digital mirror systems for vehicles and methods of operating the same
WO2020255287A1 (ja) * 2019-06-19 2020-12-24 三菱電機株式会社 自動運転支援装置、自動運転支援システムおよび自動運転支援方法
JP2021149319A (ja) * 2020-03-17 2021-09-27 本田技研工業株式会社 表示制御装置、表示制御方法およびプログラム
CN111522443B (zh) * 2020-04-13 2024-04-05 京东方科技集团股份有限公司 车辆a柱显示组件的显示方法、系统、设备和存储介质
JP7551228B2 (ja) * 2020-12-14 2024-09-17 パナソニックオートモーティブシステムズ株式会社 安全確認支援システム及び安全確認支援方法
US12086308B2 (en) * 2021-01-20 2024-09-10 Magna Electronics Inc. Vehicular driver assist system with adjustable display
JP7288472B2 (ja) * 2021-02-26 2023-06-07 矢崎総業株式会社 車両用表示装置
IL289169A (en) * 2021-12-20 2025-01-01 Israel Aerospace Ind Ltd Enhanced display using virtual optics
US12443278B2 (en) * 2022-01-31 2025-10-14 Nissan Motor Co., Ltd. Display control method and display control device
US12134318B2 (en) * 2022-04-01 2024-11-05 Ford Global Technologies, Llc Guided driver positioning systems and methods
WO2023199896A1 (ja) * 2022-04-11 2023-10-19 日本精機株式会社 表示装置
KR20240019423A (ko) * 2022-08-03 2024-02-14 현대모비스 주식회사 차량의 필러 디스플레이 장치 및 이의 동작 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008090617A (ja) 2006-10-02 2008-04-17 Toshiba Corp 立体画像生成装置、方法およびプログラム
CN101334725A (zh) 2007-06-29 2008-12-31 联想(北京)有限公司 提高窗口显示性能的方法与装置
JP2017054221A (ja) 2015-09-08 2017-03-16 シャープ株式会社 マルチ画面表示システムおよび表示制御プログラム
JP2020079879A (ja) 2018-11-13 2020-05-28 アイシン精機株式会社 表示制御装置

Also Published As

Publication number Publication date
JPWO2022224754A1 (ja) 2022-10-27
US12515520B2 (en) 2026-01-06
WO2022224754A1 (ja) 2022-10-27
US20240042857A1 (en) 2024-02-08

Similar Documents

Publication Publication Date Title
JP7616359B2 (ja) 車両用表示システム、車両用表示方法、及び車両用表示プログラム
JP7613521B2 (ja) 表示制御装置
JP6990248B2 (ja) 表示制御装置、表示制御方法およびプログラム
WO2018012299A1 (ja) 画像生成装置、画像生成方法、及び、プログラム
CN102933428A (zh) 驾驶支援装置
US12552320B2 (en) Camera module, information processing system, information processing method, and information processing apparatus
JP2022095303A (ja) 周辺画像表示装置、表示制御方法
CN113165510B (zh) 显示控制装置、方法和计算机程序
JP7342926B2 (ja) 表示制御装置及び表示制御プログラム
CN111034186A (zh) 周围车辆显示方法及周围车辆显示装置
CN119723931A (zh) 停车位学习方法和设备
WO2023145852A1 (ja) 表示制御装置、表示システム、及び表示制御方法
US12600231B2 (en) Vehicle display system, vehicle display method, and storage medium storing vehicle display program
JP7318431B2 (ja) 表示制御装置及び表示制御プログラム
US20240017616A1 (en) Display system for vehicle, display method for vehicle, and non-transitory computer-readable storage medium for display system
US12511090B2 (en) Vehicle display system, display system, display method, and non-transitory computer readable storage medium
US20240001763A1 (en) Vehicle display system, vehicle display method, and computer-readable non-transitory storage medium storing vehicle display program
US20250218065A1 (en) Information processing apparatus and information processing method
JP7616372B2 (ja) 車両用表示システム、車両用表示方法、及び車両用表示プログラム
CN117863873B (zh) 抬头显示装置、显示控制方法、装置及存储介质
US20250319769A1 (en) Vehicle surrounding environment display apparatus and method for controlling vehicle surrounding environment display apparatus
JP2026053891A (ja) 複合現実又は拡張現実の表示方法及びコンテンツ提示装置
WO2022250117A1 (ja) 車両用表示システム、車両用表示方法、及び車両用表示プログラム
WO2025211118A1 (ja) 車両用表示制御装置、車両用表示制御システム、車両用表示制御方法、及び車両用表示制御プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230530

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240618

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20241203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241216

R150 Certificate of patent or registration of utility model

Ref document number: 7616359

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150