[go: up one dir, main page]

JP2018157403A - 車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラム - Google Patents

車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラム Download PDF

Info

Publication number
JP2018157403A
JP2018157403A JP2017053306A JP2017053306A JP2018157403A JP 2018157403 A JP2018157403 A JP 2018157403A JP 2017053306 A JP2017053306 A JP 2017053306A JP 2017053306 A JP2017053306 A JP 2017053306A JP 2018157403 A JP2018157403 A JP 2018157403A
Authority
JP
Japan
Prior art keywords
image
display
vehicle
display area
imaging unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017053306A
Other languages
English (en)
Other versions
JP6665819B2 (ja
Inventor
昌志 河本
Masashi Kawamoto
昌志 河本
青木　隆行
Takayuki Aoki
隆行 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2017053306A priority Critical patent/JP6665819B2/ja
Priority to DE102018101542.9A priority patent/DE102018101542B4/de
Priority to US15/888,784 priority patent/US10843628B2/en
Priority to CN201810118670.1A priority patent/CN108621937B/zh
Publication of JP2018157403A publication Critical patent/JP2018157403A/ja
Application granted granted Critical
Publication of JP6665819B2 publication Critical patent/JP6665819B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
    • B60R2300/605—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint the adjustment being automatic
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Mechanical Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Image Processing (AREA)

Abstract

【課題】表示する映像の見易さを向上させることができる車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラムを得る。【解決手段】表示制御部は、第二撮像部（第二カメラ１８）により撮像された第二画像を、第一撮像部（第一カメラ１４）の配置位置を仮想視点として見た視点変換画像に変換し、第一撮像部により撮像された第一画像と、前記視点変換画像において第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成する。また、表示制御部は、合成画像から、第一表示領域３４Ａに対応する画像領域を切り出して第一トリミング画像を生成すると共に第二表示領域３６Ａに対応する画像領域を切り出して第二トリミング画像を生成する。更に、表示制御部は、表示部を制御し、第一トリミング画像を第一表示領域３４Ａに表示させ、第二トリミング画像を第二表示領域３６Ａに表示させる。【選択図】図３

Description

本発明は、車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラムに関する。
車両の運転を支援する技術が知られている（特許文献１〜特許文献４参照）。例えば、下記特許文献１には、車外の映像を車内に表示する装置に関する技術が開示されている。簡単に説明すると、この先行技術では、車両に搭載された複数のカメラで撮像した映像を例えばダッシュボードの上のディスプレイの複数の表示領域に複数の表示モードで表示している。ディスプレイは、一例として運転席の左斜め前方で助手席の前方側を含む範囲に配置され、例えば、助手席側のドアに設けられた左カメラで撮像した左後側方領域の映像と、車両後端に設けられた後カメラで撮像された後方中央領域の映像とは、この順に左から並べられて表示されている。
特開２０１４−２０４１３２号公報 特開２０１２−１１３６７２号公報 特開２００８−１１２０号公報 特開２００３−８１０１４号公報
しかしながら、上記先行技術では、例えば左後側方領域の映像と後方中央領域の映像との位置関係が分かり難い場合があり、見易さの点で改善の余地がある。
本発明は、上記事実を考慮して、表示する映像の見易さを向上させることができる車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラムを得ることが目的である。
請求項１に記載する本発明の車載表示装置は、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能な表示部と、前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、更に、前記合成画像を前記映像として前記表示領域に表示させるように前記表示部を制御する表示制御部と、を有する。
上記構成によれば、表示部は、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域に映像を表示可能となっている。また、助手席側の車両側部に配置された第一撮像部が車両後方側を撮像し、車両後端部に配置された第二撮像部が第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する。
ここで、表示制御部は、第二撮像部により撮像された第二画像を、第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、第一撮像部により撮像された第一画像と、視点変換画像において第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成する。そして、表示制御部は、その合成画像を映像として表示領域に表示させるように表示部を制御する。これにより、第二撮像部により撮像された範囲についてもあたかも第一撮像部の配置位置で撮像されたかのように見えるので、表示する映像の見易さが向上する。
請求項２に記載する本発明の車載表示装置は、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能とされ、前記表示領域として、第一表示領域と、前記第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置された第二表示領域と、を含む表示部と、前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、前記合成画像の全体領域を前記第一表示領域と前記非表示領域と前記第二表示領域とを合わせた領域に対応させ、前記合成画像から、前記第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に前記第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成し、更に、前記第一トリミング画像を前記映像として前記第一表示領域に表示させるように前記表示部を制御すると共に、前記第二トリミング画像を前記映像として前記第二表示領域に表示させるように前記表示部を制御する表示制御部と、を有する。
上記構成によれば、表示部は、車室前面側において車両幅方向中央位置よりも助手席側にそれぞれ設定された第一表示領域及び第二表示領域に映像を表示可能となっており、第二表示領域は、第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置されている。また、助手席側の車両側部に配置された第一撮像部が車両後方側を撮像し、車両後端部に配置された第二撮像部が第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する。
ここで、表示制御部は、第二撮像部により撮像された第二画像を、第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、第一撮像部により撮像された第一画像と、視点変換画像において第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成する。そして、表示制御部は、合成画像の全体領域を第一表示領域と非表示領域と第二表示領域とを合わせた領域に対応させ、合成画像から、第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成する。更に、表示制御部は、第一トリミング画像を映像として第一表示領域に表示させるように表示部を制御すると共に、第二トリミング画像を映像として第二表示領域に表示させるように表示部を制御する。これにより、第二撮像部により撮像された範囲についてもあたかも第一撮像部の配置位置で撮像されたかのように見えるので、表示する映像の見易さが向上する。
請求項３に記載する本発明の車載表示装置は、請求項１又は請求項２に記載の構成において、車両平面視において、運転者のアイポイントとして想定される位置と、車両用内装天井の前端において前記助手席の車両幅方向内側の端末位置に対応する車両幅方向の位置と、を通る仮想直線が、前記第一画像に基づく前記映像を表示する第一範囲の車両幅方向内側の端部から前記第二画像に基づく前記映像を表示する第二範囲の車両幅方向外側の端部までの範囲を通るように、前記表示領域が設定されている。
なお、請求項３に記載の「運転者のアイポイントとして想定される位置」とは、本発明の車載表示装置が使用される国における標準的な体格の運転者が運転時における標準的な着座位置及び標準的な着座姿勢で運転席に着座した場合に当該運転者の視点が存在するものと想定される位置をいう。
上記構成によれば、第二画像に基づく映像を表示する第二範囲を見る場合の車両平面視での運転者の視線方向が、車両用内装天井の前端側の車両幅方向中央部付近にインナミラーが設けられていたと仮定して当該インナミラーを見る場合の車両平面視での運転者の視線方向と略等しくなる。よって、第二画像に基づいて表示された映像を違和感なく確認することができる。
請求項４に記載する本発明の車載表示装置は、請求項１〜請求項３のいずれか１項に記載の構成において、前記表示領域の表面側には、前記表示領域の前記映像を運転席側からのみ視認可能とするライトコントロールフィルムが配置されている。
上記構成によれば、表示領域の映像は、表示領域の表面側に配置されたライトコントロールフィルムによって、運転席側からのみ視認することができる。このため、助手席の乗員の視野に表示領域の映像が入るのを防ぐことができるので、助手席の乗員は、表示領域の映像を煩わしく感じないで済む。
請求項５に記載する本発明の車載表示装置は、請求項１〜請求項４のいずれか１項に記載の構成において、車両の運転者の視線方向を検出する視線方向検出部を有し、前記表示制御部は、前記視線方向検出部によって検出される前記車両の運転者の視線方向が前記表示領域に向かう場合に、前記映像を前記表示領域の全域に表示させるように前記表示部を制御し、前記視線方向検出部によって検出される前記車両の運転者の視線方向が前記表示領域に向かう場合以外の場合に、前記映像を前記表示領域の予め定めた一部領域に縮小表示させるように前記表示部を制御する。
上記構成によれば、車両の運転者の視線方向が視線方向検出部によって検出される。表示制御部は、視線方向検出部によって検出される車両の運転者の視線方向が表示領域に向かう場合に、映像を表示領域の全域に表示させるように表示部を制御し、視線方向検出部によって検出される車両の運転者の視線方向が表示領域に向かう場合以外の場合に、映像を表示領域の予め定めた一部領域に縮小表示させるように表示部を制御する。これにより、運転者が表示領域の映像を目視していない場合には、表示領域の映像を目立たせないことができる。
請求項６に記載する本発明の車載表示装置の制御方法は、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能な表示部と、前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、を有する車載表示装置において、前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、更に、前記合成画像を前記映像として前記表示部によって前記表示領域に表示させる、ことを含む。このため、請求項１記載の発明と同様に、表示する映像の見易さを向上させることができる。
請求項７に記載する本発明の車載表示装置の制御方法は、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能とされ、前記表示領域として、第一表示領域と、前記第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置された第二表示領域と、を含む表示部と、前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、を有する車載表示装置において、前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、前記合成画像の全体領域を前記第一表示領域と前記非表示領域と前記第二表示領域とを合わせた領域に対応させ、前記合成画像から、前記第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に前記第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成し、更に、前記第一トリミング画像を前記映像として前記表示部によって前記第一表示領域に表示させると共に、前記第二トリミング画像を前記映像として前記表示部によって前記第二表示領域に表示させる、ことを含む。このため、請求項２記載の発明と同様に、表示する映像の見易さを向上させることができる。
請求項８に記載する本発明の車載表示装置の制御プログラムは、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能な表示部と、前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、を有する車載表示装置に含まれるコンピュータに、前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、更に、前記合成画像を前記映像として前記表示部によって前記表示領域に表示させることを含む処理を行わせる。このため、コンピュータが請求項８記載の発明に係る車載表示装置の制御プログラムを実行することで、コンピュータによって請求項６に記載の車載表示装置の制御方法が実施されることになり、請求項１、６記載の発明と同様に、表示する映像の見易さを向上させることができる。
請求項９に記載する本発明の車載表示装置の制御プログラムは、車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能とされ、前記表示領域として、第一表示領域と、前記第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置された第二表示領域と、を含む表示部と、前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、を有する車載表示装置に含まれるコンピュータに、前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、前記合成画像の全体領域を前記第一表示領域と前記非表示領域と前記第二表示領域とを合わせた領域に対応させ、前記合成画像から、前記第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に前記第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成し、更に、前記第一トリミング画像を前記映像として前記表示部によって前記第一表示領域に表示させると共に、前記第二トリミング画像を前記映像として前記表示部によって前記第二表示領域に表示させることを含む処理を行わせる。このため、コンピュータが請求項９記載の発明に係る車載表示装置の制御プログラムを実行することで、コンピュータによって請求項７に記載の車載表示装置の制御方法が実施されることになり、請求項２、７記載の発明と同様に、表示する映像の見易さを向上させることができる。
以上説明したように、本発明によれば、表示する映像の見易さを向上させることができるという優れた効果を有する。
第１の実施形態に係る車載表示装置の概略構成の一例を示すブロック図である。 第１の実施形態に係る車載表示装置の制御装置の概略構成及び制御装置に接続される外部装置の一例を示すブロック図である。 第１の実施形態に係る車載表示装置のカメラ及びディスプレイ等の配置位置の一例を示す模式的な平面図である。 第１の実施形態に係る車載表示装置のカメラの撮像範囲を示す模式的な平面図である。 第１の実施形態に係る車載表示装置のディスプレイの配置位置の一例を示す模式的な側面図である。 第１の実施形態に係る車載表示装置の制御装置で実行される処理の流れの一例を示すフローチャートである。 図７（Ａ）は合成画像の一例を示すイメージ図である。図７（Ｂ）は第一表示領域及び第二表示領域の各全域に表示された映像の一例を示すイメージ図である。図７（Ｃ）は第一表示領域及び第二表示領域の各一部領域に縮小表示された映像の一例を示すイメージ図である。 第２の実施形態に係る車載表示装置の制御装置の概略構成及び制御装置に接続される外部装置の一例を示すブロック図である。 第２の実施形態に係る車載表示装置のディスプレイ等の配置位置の一例を示す模式的な平面図である。 第２の実施形態に係る車載表示装置の制御装置で実行される処理の流れの一例を示すフローチャートである。 図１１（Ａ）は、第３の実施形態に係る車載表示装置のディスプレイ等の配置位置の一例を示す模式的な平面図である。図１１（Ｂ）は、第４の実施形態に係る車載表示装置のディスプレイ等の配置位置の一例を示す模式的な平面図である。
［第１の実施形態］
本発明の第１の実施形態に係る車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラムについて図１〜図７を用いて説明する。図１には、本実施形態に係る車載表示装置１０の概略構成がブロック図で示されている。また、図３には、車載表示装置１０の構成部等の配置位置が模式的な平面図で示されている。なお、図３において矢印ＦＲは車両前方側を示しており、矢印Ｗは車両幅方向を示している。
車載表示装置１０は、車両に搭載され、運転者による車両の運転を支援するために、車両後方側を撮像した画像に基づく映像を表示する装置である。図１に示されるように、車載表示装置１０は、第一撮像部１２、第二撮像部１６、第三撮像部２０、視線方向検出部２４、表示制御部３０及び表示部３２を含んで構成されている。
第一撮像部１２は、図３に示される助手席Ｓ２側の車両側部６０Ａ（一例として通常左ドアミラーが設けられる位置）に配置された第一カメラ１４を含んでおり、第一カメラ１４によって車両後方側を撮像すると共に撮像した画像を出力する機能部である。図１に示される第二撮像部１６は、図３に示される車両後端部６０Ｂ（一例として後側のナンバープレートの上側）に配置された第二カメラ１８を含んでおり、第二カメラ１８によって車両後方側を撮像すると共に撮像した画像を出力する機能部である。図１に示される第三撮像部２０は、図３に示される運転席Ｓ１側の車両側部６０Ｃ（一例として通常右ドアミラーが設けられる位置）に配置された第三カメラ２２を含んでおり、第三カメラ２２によって車両後方側を撮像すると共に撮像した画像を出力する機能部である。
図４には、第一カメラ１４、第二カメラ１８及び第三カメラ２２の各撮像範囲（言い換えれば各視野）の一例が模式的な平面図で示されている。この図４においては、第一カメラ１４の撮像範囲を符号１４Ａで示し、第二カメラ１８の撮像範囲を符号１８Ａで示し、第三カメラ２２の撮像範囲を符号２２Ａで示している。図４に示されるように、第二カメラ１８（第二撮像部１６（図１参照））の撮像範囲１８Ａは、第一カメラ１４（第一撮像部１２（図１参照））の撮像範囲１４Ａと一部重なるように設定されている。また、第二カメラ１８の撮像範囲１８Ａは、第三カメラ２２（第三撮像部２０（図１参照））の撮像範囲２２Ａと一部重なるように設定されている。
図１に示される視線方向検出部２４は、車両の運転者の視線方向を検出する機能部であり、本実施形態では一例として、瞳の回転運動および角膜の反射率変化から運転者の視線方向を検出することができるアイトラッカ２６（図２参照）を含んでいる。なお、本実施形態では一例として、アイトラッカ２６（図２参照）を用いて運転者の視線方向を検出するが、運転者の視線方向は画像認識により検出することもできる。例えば、車載カメラにより撮像した画像の画像認識により運転者の視線を検出してもよい。
第一撮像部１２、第二撮像部１６、第三撮像部２０及び視線方向検出部２４は、表示制御部３０に接続されている。表示制御部３０については詳細後述する。表示制御部３０には、表示部３２が接続されている。
表示部３２は、図３に示される車室前面側に設定された第一表示領域３４Ａ、第二表示領域３６Ａ及び第三表示領域３８Ａに映像を表示可能な機能部である。第一表示領域３４Ａは第一ディスプレイ３４に設定され、第二表示領域３６Ａは第二ディスプレイ３６に設定され、第三表示領域３８Ａは第三ディスプレイ３８に設定されている。第一ディスプレイ３４、第二ディスプレイ３６及び第三ディスプレイ３８は、いずれもインストルメントパネル５４（図５参照）に設置されている。
第三ディスプレイ３８の第三表示領域３８Ａは、車室前面側において車両幅方向中央位置よりも運転席Ｓ１側で車両側部６０Ｃに近い位置に設定され、第三カメラ２２（第三撮像部２０（図１参照））により撮像された第三画像に基づく映像の表示用とされている。また、互いに隣り合う第一ディスプレイ３４の第一表示領域３４Ａ及び第二ディスプレイ３６の第二表示領域３６Ａは、車室前面側において車両幅方向中央位置よりも助手席Ｓ２側に設定されている。第一表示領域３４Ａ（図７（Ｂ）参照）は、助手席Ｓ２側の車両側部６０Ａに近い位置に設定され、第一カメラ１４（第一撮像部１２（図１参照））により撮像された第一画像に基づく映像（詳細後述）の表示用とされている。また、第二表示領域３６Ａ（図７（Ｂ）参照）は、第一表示領域３４Ａの車両幅方向内側に非表示領域３５Ａ（図７（Ｂ）参照）を挟んで並ぶように配置され、第二カメラ１８（第二撮像部１６（図１参照））により撮像された第二画像に基づく映像（詳細後述）の表示用とされている。なお、図３では、図を見易くするために、第一表示領域３４Ａと第二表示領域３６Ａとの間の非表示領域３５Ａを誇張して大きめに示している。
また、車両平面視において、運転者のアイポイントとして想定される位置６２と、車両用内装天井の前端６４において助手席Ｓ２の車両幅方向内側の端末位置に対応する車両幅方向の位置６４Ａと、を通る仮想直線Ｌ１が、第一ディスプレイ３４の第一表示領域３４Ａ（第一画像に基づく映像を表示する第一範囲）の車両幅方向内側の端部から第二ディスプレイ３６の第二表示領域３６Ａ（第二画像に基づく映像を表示する第二範囲）の車両幅方向外側の端部までの範囲を通るように、第一表示領域３４Ａ及び第二表示領域３６Ａが設定されている。なお、仮想直線Ｌ１は、車両平面視において、運転者のアイポイントとして想定される位置６２と、従来構成におけるインナミラー６８（車両用内装天井の前端６４側の車両幅方向中央部付近に設けられるミラー）の車両幅方向内側端と、を通る直線と近似している。
図５には、車載表示装置１０の第二ディスプレイ３６の配置位置の一例が模式的な側面図で示されている。なお、図５において矢印ＦＲは車両前方側を示しており、矢印ＵＰは車両上方側を示している。図５に示されるように、運転者のアイポイントとして想定される位置６２からインストルメントパネル５４に設定された第二表示領域３６Ａ等の各表示領域までの視距離（Ｌ１参照）は、運転者のアイポイントとして想定される位置６２から従来構成のインナミラー６８までの視距離（Ｌ２参照）よりも長くなっている。
なお、図３に示される車室前面側における車両幅方向中央部には、カーナビゲーション用のセンタディスプレイ５６が配置されている。このセンタディスプレイ５６の表示領域５６Ａには、地図画像等が表示される。
図１に示される表示部３２と接続された表示制御部３０は、コンピュータとしての制御装置４０（図２参照）によって、表示部３２での映像の表示に関する制御をする機能部である。
図２には、本実施形態に係る制御装置４０の概略構成及び制御装置４０に接続される外部装置が示されている。図２に示されるように、制御装置４０は、ＣＰＵ４２、ＲＡＭ４４、ＲＯＭ４６及び入出力インタフェース部（Ｉ／Ｏ）５０を備え、これらがバス５２を介して互いに接続されている。ＲＯＭ４６は、不揮発性の記憶部であり、このＲＯＭ４６には、表示制御プログラム４８（本発明に係る車載表示装置の制御プログラムの一例）が記憶されている。Ｉ／Ｏ５０は、外部の装置との通信を行う。Ｉ／Ｏ５０には、第一カメラ１４、第二カメラ１８、第三カメラ２２、アイトラッカ２６、第一ディスプレイ３４、第二ディスプレイ３６、第三ディスプレイ３８及びイグニッションスイッチ２８が接続される。制御装置４０は、表示制御プログラム４８がＲＯＭ４６から読み出されてＲＡＭ４４に展開され、ＲＡＭ４４に展開された表示制御プログラム４８がＣＰＵ４２によって実行されることで、表示制御部３０（図１参照）として機能する。
イグニッションスイッチ２８は、車両の始動や、車内機器への通電をオンオフするためのスイッチである。イグニッションスイッチ２８のオンオフ信号は制御装置４０に入力される。
次に、本実施形態の作用として、図１等に示される車載表示装置１０が搭載された車両において表示制御部３０（制御装置４０（図２参照））で実行される表示制御処理について、図６に示すフローチャートを参照して説明する。本実施形態では、一例として、図２に示されるイグニッションスイッチ２８がオンされてその信号が制御装置４０（表示制御部３０（図１参照））に入力されると、図６に示される表示制御処理の実行が開始される。なお、図１に示される表示制御部３０は、第三撮像部２０により撮像された第三画像を映像として図３に示される第三ディスプレイ３８の第三表示領域３８Ａに表示させるように図１に示される表示部３２を制御しているが、そのような表示制御処理については、図６及び以下の説明では省略する。
図６に示される表示制御処理のステップ１００において、表示制御部３０は、自車両の外部の画像（後方撮像画像）を第一撮像部１２及び第二撮像部１６から取得したうえで、第二撮像部１６により撮像された第二画像を、第一撮像部１２の配置位置を仮想視点として見た視点変換画像に変換すると共に、第一撮像部１２により撮像された第一画像と、前記視点変換画像において第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成する。なお、原画像をその撮像視点位置以外の仮想視点位置から見た視点変換画像に変換する処理（視点変換処理）については、種々の手法が周知であるため、ここでは説明を省略する。
図７（Ａ）には、ステップ１００で生成した合成画像１００Ａの一例が示されている。図７（Ａ）に示される合成画像１００Ａにおいて、第一画像に基づく部分は、符号１００Ｌで示される左右方向の範囲に形成され、前記視点変換画像のうち第一画像と重複しない範囲の画像に基づく部分は、符号１００Ｒで示される左右方向の範囲に形成されている。なお、図７（Ａ）の右下側において符号ａで示される矩形状の部分は、車外映像がないエリア、すなわち自車両及び若干の死角に対応するエリアを、図示の便宜上簡略化して示したものである。
次に、表示制御部３０（図１参照）は、図６に示されるステップ１０２において、合成画像１００Ａの全体領域を第一表示領域３４Ａと非表示領域３５Ａと第二表示領域３６Ａとを合わせた領域に対応させ、合成画像１００Ａから、第一表示領域３４Ａに対応する画像領域を切り出して第一トリミング画像を生成すると共に第二表示領域３６Ａに対応する画像領域を切り出して第二トリミング画像を生成する。
次に、表示制御部３０は、ステップ１０４において、運転者の視線方向を示す情報を視線方向検出部２４から取得する。次に、表示制御部３０は、ステップ１０６において、視線方向検出部２４によって検出される車両の運転者の視線方向が第一表示領域３４Ａ及び第二表示領域３６Ａのいずれかに向かっているか否かを判定する。ステップ１０６の判定は、運転者の視線と、第一表示領域３４Ａ及び第二表示領域３６Ａを含む平面と、の交点が第一表示領域３４Ａ内及び第二表示領域３６Ａ内のいずれかに位置するか否かを判別することで行う。ステップ１０６の判定が肯定された場合はステップ１０８へ移行し、ステップ１０６の判定が否定された場合はステップ１１０へ移行する。
ステップ１０８において、表示制御部３０は、表示部３２を制御することで、第一トリミング画像を映像として表示部３２によって第一表示領域３４Ａの全域に表示させると共に、第二トリミング画像を映像として表示部３２によって第二表示領域３６Ａの全域に表示させる。図７（Ｂ）には、ステップ１０８で第一表示領域３４Ａに表示された映像１０８Ｌ及び第二表示領域３６Ａに表示された映像１０８Ｒの一例がイメージ図で示されている。この図に示されるように、映像１０８Ｌ、１０８Ｒは、第二カメラ１８（図３参照）により撮像された範囲（第二表示領域３６Ａ参照）についてもあたかも第一カメラ１４（図３参照）の配置位置で撮像されたかのように見えるので、表示する映像の見易さが向上する。また、第一表示領域３４Ａと第二表示領域３６Ａとは並ぶように配置されているので、運転者は、焦点距離を大きく変えることなく第一表示領域３４Ａの映像１０８Ｌ及び第二表示領域３６Ａの映像１０８Ｒを視認することができる。
一方、図６に示されるステップ１１０においては、表示制御部３０は、表示部３２を制御することで、第一トリミング画像を映像として表示部３２によって第一表示領域３４Ａの予め定めた一部領域に縮小表示させると共に、第二トリミング画像を映像として表示部３２によって第二表示領域３６Ａの予め定めた一部領域に縮小表示させる。これにより、運転者が第一表示領域３４Ａ及び第二表示領域３６Ａのいずれの映像も目視していない場合には、図７（Ｃ）に示されるように、第一表示領域３４Ａの映像１０８Ｓ及び第二表示領域３６Ａの映像１０８Ｔを目立たせないことができ、例えば、助手席の乗員は、第一表示領域３４Ａの映像１０８Ｓ及び第二表示領域３６Ａの映像１０８Ｔをさほど煩わしく感じないで済む。
図６に示される次のステップ１１２では、表示制御部３０は、自車両のイグニッションスイッチ（ＩＧ）２８がオフされたか否かを判定する。ステップ１１２の判定が否定された場合はステップ１００に戻り、ステップ１１２の判定が肯定されるまで、ステップ１００〜ステップ１１２を繰り返す。ステップ１１２の判定が肯定された場合はステップ１１４へ移行する。
ステップ１１４では、表示制御部３０は、イグニッションスイッチ２８がオフされてから予め定めた時間を経過したか否かを判定する。ステップ１１４の判定が否定された場合はステップ１００に戻り、ステップ１１４の判定が肯定されるまで、ステップ１００〜ステップ１１４を繰り返す。これにより、イグニッションスイッチ２８がオフされても予め定めた時間以内であれば、第一表示領域３４Ａ及び第二表示領域３６Ａに後方確認用の映像が表示されているので、降車時に運転者はそれらの映像を視認することで後方確認をすることができる。一方、ステップ１１４の判定が肯定されると、表示制御部３０は、図６に示される表示制御処理を終了し、前記映像の表示はオフされる。
以上説明したように、本実施形態では、表示する映像の見易さを向上させることができる。また、本実施形態では、図３に示されるように、大型ディスプレイを設ける必要もないので、コストを抑えることもできる。
また、本実施形態では、車両平面視において、運転者のアイポイントとして想定される位置６２と、車両用内装天井の前端６４において助手席Ｓ２の車両幅方向内側の端末位置に対応する車両幅方向の位置６４Ａと、を通る仮想直線Ｌ１が、第一ディスプレイ３４の第一表示領域３４Ａ（第一画像に基づく映像を表示する第一範囲）の車両幅方向内側の端部から第二ディスプレイ３６の第二表示領域３６Ａ（第二画像に基づく映像を表示する第二範囲）の車両幅方向外側の端部までの範囲を通るように、第一表示領域３４Ａ及び第二表示領域３６Ａが設定されている。このため、第二ディスプレイ３６の第二表示領域３６Ａを見る場合の車両平面視での運転者の視線方向が、車両用内装天井の前端６４側の車両幅方向中央部付近にインナミラー６８が設けられていたと仮定して当該インナミラー６８を見る場合の車両平面視での運転者の視線方向と略等しくなる。よって、第二ディスプレイ３６の第二表示領域３６Ａの映像を違和感なく確認することができる。
また、対比構造を例に挙げてさらに説明すると、例えば、インストルメントパネル５４の車両幅方向中央部のセンタディスプレイ５６の位置に、車両後方側を撮像した画像が映像として表示されるような構成では、当該映像を運転者が見る場合の視線角度θ１が小さいため、運転中は常に映像の動画が運転者の視野に入ってしまう。このため、運転者は、表示されている映像を煩わしく感じる可能性がある。これに対して、仮想直線Ｌ１を視線とした場合の視線角度θ２は、視線角度θ１よりもかなり大きく、第一表示領域３４Ａ及び第二表示領域３６Ａは、運転中に常に運転者の視野に入るような位置にはない。このため、第一表示領域３４Ａ及び第二表示領域３６Ａに表示されている映像を運転者が煩わしく感じるのを抑えることができる。なお、視線角度とは、車両平面視において運転者のアイポイントから車両前方側に車両前後方向に沿って引いた基準線ＬＳに対する運転者の視線の角度を指す。
さらに、図５に示されるように、運転者のアイポイントとして想定される位置６２からインストルメントパネル５４に設定された第二表示領域３６Ａ等の各表示領域までの視距離は、運転者のアイポイントとして想定される位置６２から従来構成のインナミラー６８までの視距離よりも長くなっている。ここで、従来構成のインナミラー６８が電子ミラーの場合、運転者が車両の前方側を見ている状態からインナミラー６８（電子ミラー）の映像を見ると、視距離が近いため、焦点を合わせにくい。これに対して、本実施形態の構成では、運転者が車両の前方側を見ている状態からインストルメントパネル５４に設定された第二表示領域３６Ａ等の各表示領域の映像を見た場合、焦点が合わせ易い。
補足すると、光学ミラーとは異なり電子ミラーでは、表示面に焦点を合わせる必要があるため、運転者のアイポイントから表示面までの距離が短いと焦点を合わせ難い。しかしながら、本実施形態では、インナミラー６８を電子ミラーとする場合に比べて、アイポイントから表示面までの距離が長く確保されているので、運転者は焦点を合わせ易い。
また、図３に示されるように、本実施形態では、第二ディスプレイ３６が車両幅方向中央部からずらされた位置に配置されているので、車両幅方向中央部に配置されるカーナビゲーション用のセンタディスプレイ５６と、車両後方側の中央領域の映像を表示する第二ディスプレイ３６と、を併存させることができる。
これら説明したように、本実施形態では、車室内に散在した電子化情報を無理なく視認することができる。
［第１の実施形態の変形例］
上記第１の実施形態では、図１に示される表示制御部３０（制御装置４０（図２参照））で実行される図６に示される表示制御処理に、ステップ１０４〜ステップ１１０が含まれているが、表示制御処理は、ステップ１０４〜ステップ１１０に代えてステップ１０８が実行されるようなものとすることも可能である。
また、表示制御処理として図６のステップ１０４〜ステップ１１０に代えてステップ１０８が実行されるような構成が採られる場合、図３に示される第一表示領域３４Ａ及び第二表示領域３６Ａの各表面側に、第一表示領域３４Ａ及び第二表示領域３６Ａの各映像を運転席Ｓ１側からのみ視認可能とするライトコントロールフィルム６６が配置されている構成が採られてもよい。ライトコントロールフィルム６６は、光の拡散を制限する複数のルーバー（図示省略）が車両後方側へ向けて運転席Ｓ１側に傾斜している。このようにライトコントロールフィルム６６が配置された変形例では、第一表示領域３４Ａ及び第二表示領域３６Ａの各映像は、第一表示領域３４Ａ及び第二表示領域３６Ａの各表面側に配置されたライトコントロールフィルム６６によって、運転席Ｓ１側からのみ視認することができる。このため、助手席Ｓ２の乗員の視野に第一表示領域３４Ａ及び第二表示領域３６Ａの各映像が入るのを防ぐことができるので、助手席Ｓ２の乗員は、第一表示領域３４Ａ及び第二表示領域３６Ａにそれぞれ表示されている映像を煩わしく感じないで済む。
また、上記第１の実施形態では、図１に示される表示制御部３０（制御装置４０（図２参照））で実行される図６に示される表示制御処理に、ステップ１１０が含まれているが、例えば、ドアミラー等が併設されている場合、表示制御処理は、図６のステップ１１０に代えて第一トリミング画像及び第二トリミング画像の各映像の表示をオフさせる（つまり表示しない）ステップが実行されるようなものとすることも可能である。
さらに他の変形例として、運転者が降車したか否かを検出するための検出装置を設けると共に、図６のステップ１１２、１１４に代えて、運転者が降車したか否かを判定する降車判定ステップを設け、前記降車判定ステップの判定が否定された場合はステップ１００に戻って前記降車判定ステップの判定が肯定されるまで、ステップ１００〜前記降車判定ステップを繰り返し、前記降車判定ステップの判定が肯定された場合には表示制御部（３０）が表示制御処理を終了するようにしてもよい。
［第２の実施形態］
次に、本発明の第２の実施形態について図８〜図１０を参照しながら図１及び図７（Ａ）を援用して説明する。図８には、本実施形態に係る車載表示装置７０の制御装置８０の概略構成及び制御装置８０に接続される外部装置がブロック図（第１の実施形態の図２に相当する図）で示されている。図９には、本実施形態に係る車載表示装置７０のディスプレイ等の配置位置が模式的な平面図で示されている（第１の実施形態の図３に相当する図）。また、図１０には、本実施形態に係る車載表示装置７０の制御装置８０で実行される処理の流れがフローチャート（第１の実施形態の図６に相当する図）で示されている。
車載表示装置７０は、第１の実施形態の車載表示装置１０（図１等参照）と同様に、車両に搭載され、運転者による車両の運転を支援するために、車両後方側を撮像した画像に基づく映像を表示する装置である。また、図１を援用して説明すると、本実施形態において、第一撮像部１２、第二撮像部１６、第三撮像部２０、及び視線方向検出部２４は、第１の実施形態と同様とされている。また、本実施形態において、表示制御部３０及び表示部３２は、第１の実施形態とは詳細構成は異なるが、他の機能ブロックとの接続構成が図１と同様であるため便宜上第１の実施形態と同一符号とする。以下、本実施形態の説明中における表示制御部３０及び表示部３２は、第１の実施形態ではなく本実施形態における表示制御部３０及び表示部３２を指している。なお、本実施形態は、以下に説明する点以外の点は第１の実施形態と実質的に同様の構成となっている。よって、第１の実施形態と実質的に同様の構成部については、同一符号を付して説明を省略する。
図８及び図９に示されるように、本実施形態では、図２及び図３に示される第１の実施形態の第一ディスプレイ３４及び第二ディスプレイ３６に代えて、図８及び図９に示される左側ディスプレイ７４が設置されている。なお、本実施形態の右側ディスプレイ７６は、図２及び図３に示される第１の実施形態の第三ディスプレイ３８と名称及び符号が異なっているが、第三ディスプレイ３８と同様の構成部である。図９に示されるように、左側ディスプレイ７４は左側表示領域７４Ａを備え、右側ディスプレイ７６は右側表示領域７６Ａを備えている。
本実施形態では、表示部３２（図１参照）は、図８及び図９に示される左側ディスプレイ７４及び右側ディスプレイ７６を含んでおり、図９に示される車室前面側に設定された左側表示領域７４Ａ及び右側表示領域７６Ａに映像を表示可能な機能部である。
図９に示されるように、右側ディスプレイ７６の右側表示領域７６Ａは、図３に示される第１の実施形態における第三ディスプレイ３８の第三表示領域３８Ａと同様の位置に設定されている。一方、図９に示される左側ディスプレイ７４の左側表示領域７４Ａは、図３に示される第１の実施形態における第一表示領域３４Ａ、非表示領域３５Ａ及び第二表示領域３６Ａを合わせた領域に対応する範囲に設定されている。すなわち、図９に示される左側ディスプレイ７４の左側表示領域７４Ａは、車室前面側において車両幅方向中央位置よりも助手席Ｓ２側に設定された表示領域とされている。
また、車両平面視において、運転者のアイポイントとして想定される位置６２と、車両用内装天井の前端６４において助手席Ｓ２の車両幅方向内側の端末位置に対応する車両幅方向の位置６４Ａと、を通る仮想直線Ｌ１が、第一カメラ１４（第一撮像部１２（図１参照））により撮像された第一画像に基づく映像を表示する第一範囲７４Ｘの車両幅方向内側の端部から第二カメラ１８（第二撮像部１６（図１参照））により撮像された第二画像に基づく映像を表示する第二範囲７４Ｙの車両幅方向外側の端部までの範囲を通るように、左側表示領域７４Ａが設定されている。
また、本実施形態では、表示制御部３０（図１参照）は、図８に示されるコンピュータとしての制御装置８０によって、表示部３２（図１参照）での映像の表示に関する制御をする機能部である。
図８に示されるように、制御装置８０は、第１の実施形態のＲＯＭ４６（図２参照）に代えて、表示制御プログラム７８（本発明に係る車載表示装置の制御プログラムの一例）が記憶されているＲＯＭ４７を有する。なお、ＲＯＭ４７は、第１の実施形態のＲＯＭ４６（図２参照）と同様に不揮発性の記憶部である。また、制御装置８０のＩ／Ｏ５０には、第一カメラ１４、第二カメラ１８、第三カメラ２２、アイトラッカ２６、左側ディスプレイ７４、右側ディスプレイ７６及びイグニッションスイッチ２８が接続される。制御装置８０は、上記以外の点については第１の実施形態における制御装置４０（図２参照）と同様とされている。この制御装置８０は、表示制御プログラム７８がＲＯＭ４７から読み出されてＲＡＭ４４に展開され、ＲＡＭ４４に展開された表示制御プログラム７８がＣＰＵ４２によって実行されることで、本実施形態における表示制御部３０（図１参照）として機能する。
次に、本実施形態の作用として、図８等に示される車載表示装置７０が搭載された車両において表示制御部３０（図１参照、制御装置８０）で実行される表示制御処理について、図１０に示すフローチャートを参照して説明する。本実施形態では、一例として、図８に示されるイグニッションスイッチ２８がオンされてその信号が制御装置８０（表示制御部３０（図１参照））に入力されると、図１０に示される表示制御処理の実行が開始される。なお、表示制御部３０（図１参照、制御装置８０）は、第三撮像部２０（図１参照）により撮像された第三画像を映像として図９に示される右側ディスプレイ７６の右側表示領域７６Ａに表示させるように表示部３２（図１参照）を制御しているが、そのような表示制御処理については、図１０及び以下の説明では省略する。
図１０に示される表示制御処理のステップ２００において、表示制御部３０は、自車両の外部の画像（後方撮像画像）を第一撮像部１２及び第二撮像部１６から取得したうえで、第二撮像部１６により撮像された第二画像を、第一撮像部１２の配置位置を仮想視点として見た視点変換画像に変換すると共に、第一撮像部１２により撮像された第一画像と、前記視点変換画像において第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像１００Ａ（図７（Ａ）参照）を生成する。
次に、表示制御部３０は、ステップ２０２において、運転者の視線方向を示す情報を視線方向検出部２４から取得する。次に、表示制御部３０は、ステップ２０４において、視線方向検出部２４によって検出される車両の運転者の視線方向が左側表示領域７４Ａに向かっているか否かを判定する。ステップ２０４の判定は、運転者の視線と、左側表示領域７４Ａを含む平面と、の交点が左側表示領域７４Ａ内に位置するか否かを判別することで行う。ステップ２０４の判定が肯定された場合はステップ２０６へ移行し、ステップ２０４の判定が否定された場合はステップ２０８へ移行する。
ステップ２０６において、表示制御部３０は、表示部３２を制御することで、合成画像１００Ａ（図７（Ａ）参照）を映像として表示部３２によって左側表示領域７４Ａの全域に表示させる。これにより、第二撮像部１６により撮像された範囲についてもあたかも第一撮像部１２の配置位置で撮像されたかのように見えるので、表示する映像の見易さが向上する。また、第一撮像部１２により撮像された範囲と、第二撮像部１６により撮像された範囲とは、左側表示領域７４Ａに連続的に表示されるので、運転者は、焦点距離を大きく変えることなく、第一撮像部１２により撮像された範囲及び第二撮像部１６により撮像された範囲の各映像を視認することができる。
一方、ステップ２０８においては、表示制御部３０は、表示部３２を制御することで、合成画像１００Ａ（図７（Ａ）参照）を映像として表示部３２によって左側表示領域７４Ａの予め定めた一部領域に縮小表示させる。これにより、運転者が左側表示領域７４Ａの映像を目視していない場合には、左側表示領域７４Ａの映像を目立たせないことができ、例えば、助手席の乗員は、左側表示領域７４Ａの映像をさほど煩わしく感じないで済む。
次のステップ２１０では、表示制御部３０は、自車両のイグニッションスイッチ（ＩＧ）２８がオフされたか否かを判定する。ステップ２１０の判定が否定された場合はステップ２００に戻り、ステップ２１０の判定が肯定されるまで、ステップ２００〜ステップ２１０を繰り返す。ステップ２１０の判定が肯定された場合はステップ２１２へ移行する。
ステップ２１２では、表示制御部３０は、イグニッションスイッチ２８がオフされてから予め定めた時間を経過したか否かを判定する。ステップ２１２の判定が否定された場合はステップ２００に戻り、ステップ２１２の判定が肯定されるまで、ステップ２００〜ステップ２１２を繰り返す。これにより、イグニッションスイッチ２８がオフされても予め定めた時間以内であれば、左側表示領域７４Ａに後方確認用の映像が表示されているので、降車時に運転者はその映像を視認することで後方確認をすることができる。一方、ステップ２１２の判定が肯定されると、表示制御部３０は、図１０に示される表示制御処理を終了し、前記映像の表示はオフされる。
以上説明したように、本実施形態では、表示する映像の見易さを向上させることができる。
また、本実施形態では、図９に示されるように、車両平面視において、運転者のアイポイントとして想定される位置６２と、車両用内装天井の前端６４において助手席Ｓ２の車両幅方向内側の端末位置に対応する車両幅方向の位置６４Ａと、を通る仮想直線Ｌ１が、第一カメラ１４（第一撮像部１２（図１参照））により撮像された第一画像に基づく映像を表示する第一範囲７４Ｘの車両幅方向内側の端部から第二カメラ１８（第二撮像部１６（図１参照））により撮像された第二画像に基づく映像を表示する第二範囲７４Ｙの車両幅方向外側の端部までの範囲を通るように、左側表示領域７４Ａが設定されている。このため、左側ディスプレイ７４の左側表示領域７４Ａにおいて第二画像に基づく映像を表示する第二範囲７４Ｙを見る場合の車両平面視での運転者の視線方向が、車両用内装天井の前端６４側の車両幅方向中央部付近にインナミラー６８が設けられていたと仮定して当該インナミラー６８を見る場合の車両平面視での運転者の視線方向と略等しくなる。よって、左側ディスプレイ７４の左側表示領域７４Ａの第二範囲７４Ｙに表示された映像を違和感なく確認することができる。
また、本実施形態では、左側ディスプレイ７４が車両幅方向中央部からずらされた位置に配置されているので、車両幅方向中央部に配置されるカーナビゲーション用のセンタディスプレイ５６と、車両後方側の中央領域の映像を表示領域の一部（具体的には左側表示領域７４Ａの第二範囲７４Ｙ）に表示する左側ディスプレイ７４と、を併存させることができる。
［第２の実施形態の変形例］
上記第２の実施形態では、表示制御部３０（図１参照、制御装置８０（図８参照））で実行される図１０に示される表示制御処理に、図１０のステップ２０２〜ステップ２０８が含まれているが、表示制御処理は、ステップ２０２〜ステップ２０８に代えてステップ２０６が実行されるようなものとすることも可能である。
また、表示制御処理として図１０のステップ２０２〜ステップ２０８に代えてステップ２０６が実行されるような構成が採られる場合、図９に示される左側表示領域７４Ａの表面側に、左側表示領域７４Ａの映像を運転席Ｓ１側からのみ視認可能とするライトコントロールフィルム８２が配置されている構成が採られてもよい。ライトコントロールフィルム８２は、光の拡散を制限する複数のルーバー（図示省略）が車両後方側へ向けて運転席Ｓ１側に傾斜している。このようにライトコントロールフィルム８２が配置された変形例では、左側表示領域７４Ａの映像は、左側表示領域７４Ａの表面側に配置されたライトコントロールフィルム８２によって、運転席Ｓ１側からのみ視認することができる。このため、助手席Ｓ２の乗員の視野に左側表示領域７４Ａの映像が入るのを防ぐことができるので、助手席Ｓ２の乗員は、左側表示領域７４Ａに表示されている映像を煩わしく感じないで済む。
また、上記第２の実施形態では、表示制御部３０（図１参照、制御装置８０（図８参照））で実行される図１０に示される表示制御処理に、ステップ２０８が含まれているが、例えば、ドアミラー等が併設されている場合、表示制御処理は、図１０のステップ２０８に代えて合成画像１００Ａ（図７（Ａ）参照）の映像の表示をオフさせる（つまり表示しない）ステップが実行されるようなものとすることも可能である。
さらに他の変形例として、運転者が降車したか否かを検出するための検出装置を設けると共に、図１０のステップ２１０、２１２に代えて、運転者が降車したか否かを判定する降車判定ステップを設け、前記降車判定ステップの判定が否定された場合はステップ２００に戻って前記降車判定ステップの判定が肯定されるまで、ステップ２００〜前記降車判定ステップを繰り返し、前記降車判定ステップの判定が肯定された場合には表示制御部（３０）が表示制御処理を終了するようにしてもよい。
［第３の実施形態］
次に、本発明の第３の実施形態について図１１（Ａ）を参照しながら説明する。図１１（Ａ）には、本実施形態に係る車載表示装置９０のディスプレイ９２等の配置位置が模式的な平面図で示されている。この図に示されるように、本実施形態は、図９に示される左側ディスプレイ７４、センタディスプレイ５６及び右側ディスプレイ７６に代えて、それらを一体化したような図１１（Ａ）に示される大型のディスプレイ９２を設置している点で、第２の実施形態とは異なる。
なお、本実施形態は、以下に説明する点以外の点は第２の実施形態と実質的に同様の構成となっている。よって、第２の実施形態と実質的に同様の構成部については、同一符号を付して説明を省略する。
ディスプレイ９２は、第２の実施形態の左側表示領域７４Ａ（図９参照）に相当する左側表示領域９２Ａと、第２の実施形態の中央側の表示領域５６Ａ（図９参照）に相当する中央表示領域９２Ｂと、第２の実施形態の右側表示領域７６Ａ（図９参照）に相当する右側表示領域９２Ｃと、が隣接配置されている。
本実施形態の構成によっても、表示する映像の見易さを向上させることができる。
なお、第３の実施形態の変形例として、シフトレンジがリバースレンジとされた場合以外の所定の場合に右側表示領域９２Ｃに第三カメラ２２によって撮像した画像を映像として表示すると共に、シフトレンジがリバースレンジとされた場合に、中央表示領域９２Ｂに、カーナビゲーションの映像に代えて、第三カメラ２２によって撮像した画像を映像として、（一例として左側表示領域９２Ａと隣接するように）表示するような構成としてもよい。また、第３の実施形態の他の変形例として、シフトレンジがリバースレンジとされた場合以外の所定の場合に左側表示領域９２Ａに合成画像１００Ａ（図７（Ａ）参照）を映像として表示すると共に、シフトレンジがリバースレンジとされた場合には、中央表示領域９２Ｂに、カーナビゲーションの映像に代えて、合成画像１００Ａ（図７（Ａ）参照）を映像として、中央表示領域９２Ｂに収まるサイズに縮小する等して表示するような構成としてもよい。
［第４の実施形態］
次に、本発明の第４の実施形態について図１１（Ｂ）を参照しながら説明する。図１１（Ｂ）には、本実施形態に係る車載表示装置９４のディスプレイ等の配置位置が模式的な平面図で示されている。この図に示されるように、本実施形態は、図９に示される左側ディスプレイ７４及びセンタディスプレイ５６に代えて、それらを一体化したような図１１（Ｂ）に示されるディスプレイ９６を設置している点で、第２の実施形態とは異なる。
なお、本実施形態は、以下に説明する点以外の点は第２の実施形態と実質的に同様の構成となっている。よって、第２の実施形態と実質的に同様の構成部については、同一符号を付して説明を省略する。
ディスプレイ９６は、第２の実施形態の左側表示領域７４Ａ（図９参照）に相当する左側表示領域９６Ａと、第２の実施形態の中央側の表示領域５６Ａ（図９参照）に相当する中央表示領域９６Ｂと、が隣接配置されている。
本実施形態の構成によっても、前述した第２の実施形態と同様の作用及び効果が得られる。
なお、第４の実施形態の変形例として、シフトレンジがリバースレンジとされた場合以外の所定の場合に右側表示領域７６Ａに第三カメラ２２によって撮像した画像を映像として表示すると共に、シフトレンジがリバースレンジとされた場合には、中央表示領域９６Ｂに、カーナビゲーションの映像に代えて、第三カメラ２２によって撮像した画像を映像として表示するような構成としてもよい。また、第４の実施形態の他の変形例として、シフトレンジがリバースレンジとされた場合以外の所定の場合に左側表示領域９６Ａに合成画像１００Ａ（図７（Ａ）参照）を映像として表示すると共に、シフトレンジがリバースレンジとされた場合には、中央表示領域９６Ｂに、カーナビゲーションの映像に代えて、合成画像１００Ａ（図７（Ａ）参照）を映像として、中央表示領域９６Ｂに収まるサイズに縮小する等して表示するような構成としてもよい。
本実施形態の構成によっても、表示する映像の見易さを向上させることができる。
［実施形態の補足説明］
なお、上記実施形態の変形例として、表示部は、例えば、ヘッドアップディスプレイを含んで車室前面側のフロントガラス９８（図５参照）上の表示領域に映像を表示可能な表示部等のように、車室前面側のインストルメントパネル５４に設置されたディスプレイの表示領域以外の表示領域に映像を表示可能な表示部としてもよい。
また、上記実施形態の変形例として、第一撮像部は、助手席側（Ｓ２）の車両側部（６０Ａ）で通常ドアミラーが設けられる位置以外の部分に配置されてもよく、第二撮像部は、車両後端部（６０Ｂ）でナンバープレート上側以外の部分に配置されてもよい。
また、表示部の表示領域において、第一画像に基づく映像を表示する第一範囲と第二画像に基づく映像を表示する第二範囲の設定位置は、上記第１、第２の実施形態の例に限定されない。
また、図２に示される表示制御プログラム４８及び図８に示される表示制御プログラム７８は、記憶媒体等に記憶して流通可能にしてもよい。
なお、上記実施形態及び上述の変形例は、適宜組み合わされて実施可能である。
以上、本発明の一例について説明したが、本発明は、上記に限定されるものでなく、上記以外にも、その主旨を逸脱しない範囲内において種々変形して実施可能であることは勿論である。
なお、本発明の実施形態ではない参考例として、撮像部を構成するカメラが車両ルーフの上面部側に配置されて３６０°全周を撮像可能とされ、当該カメラで撮像された画像を表示部が車室前面側の表示領域に表示する構成も採り得る。
１０ 車載表示装置
１２ 第一撮像部
１４Ａ 第一カメラの撮像範囲（第一撮像部の撮像範囲）
１６ 第二撮像部
１８Ａ 第二カメラの撮像範囲（第二撮像部の撮像範囲）
２４ 視線方向検出部
３０ 表示制御部
３２ 表示部
３４Ａ 第一表示領域（第一範囲（表示領域））
３５Ａ 非表示領域
３６Ａ 第二表示領域（第二範囲（表示領域））
４０ 制御装置（コンピュータ）
４８ 表示制御プログラム（制御プログラム）
６０Ａ 助手席側の車両側部
６０Ｂ 車両後端部
６２ 運転者のアイポイントとして想定される位置
６４ 車両用内装天井の前端
６６ ライトコントロールフィルム
７０ 車載表示装置
７４Ａ 左側表示領域（表示領域）
７４Ｘ 第一範囲
７４Ｙ 第二範囲
７８ 表示制御プログラム（制御プログラム）
８２ ライトコントロールフィルム
９０ 車載表示装置
９２Ａ 左側表示領域（表示領域）
９４ 車載表示装置
９６Ａ 左側表示領域（表示領域）
１００Ａ 合成画像
Ｌ１ 仮想直線
Ｓ１ 運転席
Ｓ２ 助手席

Claims (9)

  1. 車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能な表示部と、
    前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、
    車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、
    前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、更に、前記合成画像を前記映像として前記表示領域に表示させるように前記表示部を制御する表示制御部と、
    を有する車載表示装置。
  2. 車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能とされ、前記表示領域として、第一表示領域と、前記第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置された第二表示領域と、を含む表示部と、
    前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、
    車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、
    前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、前記合成画像の全体領域を前記第一表示領域と前記非表示領域と前記第二表示領域とを合わせた領域に対応させ、前記合成画像から、前記第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に前記第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成し、更に、前記第一トリミング画像を前記映像として前記第一表示領域に表示させるように前記表示部を制御すると共に、前記第二トリミング画像を前記映像として前記第二表示領域に表示させるように前記表示部を制御する表示制御部と、
    を有する車載表示装置。
  3. 車両平面視において、運転者のアイポイントとして想定される位置と、車両用内装天井の前端において前記助手席の車両幅方向内側の端末位置に対応する車両幅方向の位置と、を通る仮想直線が、前記第一画像に基づく前記映像を表示する第一範囲の車両幅方向内側の端部から前記第二画像に基づく前記映像を表示する第二範囲の車両幅方向外側の端部までの範囲を通るように、前記表示領域が設定されている、請求項１又は請求項２に記載の車載表示装置。
  4. 前記表示領域の表面側には、前記表示領域の前記映像を運転席側からのみ視認可能とするライトコントロールフィルムが配置されている、請求項１〜請求項３のいずれか１項に記載の車載表示装置。
  5. 車両の運転者の視線方向を検出する視線方向検出部を有し、
    前記表示制御部は、前記視線方向検出部によって検出される前記車両の運転者の視線方向が前記表示領域に向かう場合に、前記映像を前記表示領域の全域に表示させるように前記表示部を制御し、前記視線方向検出部によって検出される前記車両の運転者の視線方向が前記表示領域に向かう場合以外の場合に、前記映像を前記表示領域の予め定めた一部領域に縮小表示させるように前記表示部を制御する、請求項１〜請求項４のいずれか１項に記載の車載表示装置。
  6. 車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能な表示部と、
    前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、
    車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、
    を有する車載表示装置において、
    前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、更に、前記合成画像を前記映像として前記表示部によって前記表示領域に表示させる、
    ことを含む車載表示装置の制御方法。
  7. 車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能とされ、前記表示領域として、第一表示領域と、前記第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置された第二表示領域と、を含む表示部と、
    前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、
    車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、
    を有する車載表示装置において、
    前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、前記合成画像の全体領域を前記第一表示領域と前記非表示領域と前記第二表示領域とを合わせた領域に対応させ、前記合成画像から、前記第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に前記第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成し、更に、前記第一トリミング画像を前記映像として前記表示部によって前記第一表示領域に表示させると共に、前記第二トリミング画像を前記映像として前記表示部によって前記第二表示領域に表示させる、
    ことを含む車載表示装置の制御方法。
  8. 車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能な表示部と、
    前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、
    車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、
    を有する車載表示装置に含まれるコンピュータに、
    前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、更に、前記合成画像を前記映像として前記表示部によって前記表示領域に表示させることを含む処理を行わせるための車載表示装置の制御プログラム。
  9. 車室前面側において車両幅方向中央位置よりも助手席側に設定された表示領域を備え、前記表示領域に映像を表示可能とされ、前記表示領域として、第一表示領域と、前記第一表示領域の車両幅方向内側に非表示領域を挟んで並ぶように配置された第二表示領域と、を含む表示部と、
    前記助手席側の車両側部に配置され、車両後方側を撮像する第一撮像部と、
    車両後端部に配置され、前記第一撮像部の撮像範囲と一部重なる撮像範囲で車両後方側を撮像する第二撮像部と、
    を有する車載表示装置に含まれるコンピュータに、
    前記第二撮像部により撮像された第二画像を、前記第一撮像部の配置位置を仮想視点として見た視点変換画像に変換すると共に、前記第一撮像部により撮像された第一画像と、前記視点変換画像において前記第一画像と重複しない範囲の画像と、を繋ぎ合わせて合成画像を生成し、前記合成画像の全体領域を前記第一表示領域と前記非表示領域と前記第二表示領域とを合わせた領域に対応させ、前記合成画像から、前記第一表示領域に対応する画像領域を切り出して第一トリミング画像を生成すると共に前記第二表示領域に対応する画像領域を切り出して第二トリミング画像を生成し、更に、前記第一トリミング画像を前記映像として前記表示部によって前記第一表示領域に表示させると共に、前記第二トリミング画像を前記映像として前記表示部によって前記第二表示領域に表示させることを含む処理を行わせるための車載表示装置の制御プログラム。
JP2017053306A 2017-03-17 2017-03-17 車載表示装置 Active JP6665819B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2017053306A JP6665819B2 (ja) 2017-03-17 2017-03-17 車載表示装置
DE102018101542.9A DE102018101542B4 (de) 2017-03-17 2018-01-24 Bordanzeigevorrichtung, Steuerverfahren für Bordanzeigevorrichtung und Steuerprogramm für Bordanzeigevorrichtung
US15/888,784 US10843628B2 (en) 2017-03-17 2018-02-05 Onboard display device, control method for onboard display device, and control program for onboard display device
CN201810118670.1A CN108621937B (zh) 2017-03-17 2018-02-06 车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017053306A JP6665819B2 (ja) 2017-03-17 2017-03-17 車載表示装置

Publications (2)

Publication Number Publication Date
JP2018157403A true JP2018157403A (ja) 2018-10-04
JP6665819B2 JP6665819B2 (ja) 2020-03-13

Family

ID=63372121

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017053306A Active JP6665819B2 (ja) 2017-03-17 2017-03-17 車載表示装置

Country Status (4)

Country Link
US (1) US10843628B2 (ja)
JP (1) JP6665819B2 (ja)
CN (1) CN108621937B (ja)
DE (1) DE102018101542B4 (ja)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10678244B2 (en) 2017-03-23 2020-06-09 Tesla, Inc. Data synthesis for autonomous control systems
US10671349B2 (en) 2017-07-24 2020-06-02 Tesla, Inc. Accelerated mathematical engine
US11157441B2 (en) 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system using non-consecutive data formatting
US11893393B2 (en) 2017-07-24 2024-02-06 Tesla, Inc. Computational array microprocessor system with hardware arbiter managing memory requests
US11409692B2 (en) 2017-07-24 2022-08-09 Tesla, Inc. Vector computational unit
US12307350B2 (en) 2018-01-04 2025-05-20 Tesla, Inc. Systems and methods for hardware-based pooling
US11561791B2 (en) 2018-02-01 2023-01-24 Tesla, Inc. Vector computational unit receiving data elements in parallel from a last row of a computational array
JP2019154018A (ja) * 2018-03-06 2019-09-12 パナソニックＩｐマネジメント株式会社 車両周辺表示システム、表示制御装置およびコンピュータプログラム
JP6890288B2 (ja) * 2018-03-28 2021-06-18 パナソニックＩｐマネジメント株式会社 画像処理装置、画像表示システムおよび画像処理方法
US11215999B2 (en) 2018-06-20 2022-01-04 Tesla, Inc. Data pipeline and deep learning system for autonomous driving
US11361457B2 (en) 2018-07-20 2022-06-14 Tesla, Inc. Annotation cross-labeling for autonomous control systems
US11636333B2 (en) 2018-07-26 2023-04-25 Tesla, Inc. Optimizing neural network structures for embedded systems
US11562231B2 (en) 2018-09-03 2023-01-24 Tesla, Inc. Neural networks for embedded devices
CA3115784A1 (en) 2018-10-11 2020-04-16 Matthew John COOPER Systems and methods for training machine models with augmented data
JP7022044B2 (ja) * 2018-10-12 2022-02-17 本田技研工業株式会社 後方視認装置
US11196678B2 (en) 2018-10-25 2021-12-07 Tesla, Inc. QOS manager for system on a chip communications
JP7338146B2 (ja) * 2018-11-27 2023-09-05 ソニーグループ株式会社 表示制御装置、表示制御方法及び表示制御プログラム
US11816585B2 (en) 2018-12-03 2023-11-14 Tesla, Inc. Machine learning models operating at different frequencies for autonomous vehicles
US11537811B2 (en) 2018-12-04 2022-12-27 Tesla, Inc. Enhanced object detection for autonomous vehicles based on field view
US11610117B2 (en) 2018-12-27 2023-03-21 Tesla, Inc. System and method for adapting a neural network model on a hardware platform
DE102020101539B4 (de) 2019-01-28 2024-11-07 Panasonic Automotive Systems Co., Ltd. Bildsynthesevorrichtung und Steuerverfahren
US11150664B2 (en) 2019-02-01 2021-10-19 Tesla, Inc. Predicting three-dimensional features for autonomous driving
US10997461B2 (en) 2019-02-01 2021-05-04 Tesla, Inc. Generating ground truth for machine learning from time series elements
US11567514B2 (en) 2019-02-11 2023-01-31 Tesla, Inc. Autonomous and user controlled vehicle summon to a target
US10956755B2 (en) 2019-02-19 2021-03-23 Tesla, Inc. Estimating object properties using visual image data
JP2020138553A (ja) * 2019-02-26 2020-09-03 本田技研工業株式会社 車両用表示器の配置構造
GB2582541B (en) * 2019-03-12 2022-03-09 Jaguar Land Rover Ltd Driver assistance method and apparatus
JP7005115B2 (ja) * 2019-04-05 2022-01-21 矢崎総業株式会社 車両用表示装置
KR102650436B1 (ko) * 2019-07-01 2024-03-26 엘지전자 주식회사 차량 제어 장치 및 그것을 포함하는 차량
CN112406727B (zh) * 2019-08-23 2022-06-10 比亚迪股份有限公司 车辆及多屏系统的控制方法、装置
EP4049877A4 (en) * 2019-10-23 2022-12-21 Sony Group Corporation INDICATION SYSTEM, INDICATION DEVICE, INDICATION METHOD AND MOVEMENT DEVICE
US11340701B2 (en) * 2019-12-16 2022-05-24 Nvidia Corporation Gaze determination using glare as input
CN111409556B (zh) * 2020-04-13 2022-05-10 京东方科技集团股份有限公司 车辆a柱显示组件的显示方法、系统、设备和存储介质
CN111477100B (zh) * 2020-04-21 2022-08-09 京东方科技集团股份有限公司 光控膜及制作方法、车载显示装置
JP7498053B2 (ja) * 2020-07-28 2024-06-11 京セラ株式会社 カメラシステムおよび運転支援システム
US11617941B2 (en) * 2020-09-01 2023-04-04 GM Global Technology Operations LLC Environment interactive system providing augmented reality for in-vehicle infotainment and entertainment
EP4304897A1 (en) * 2021-03-12 2024-01-17 Stoneridge, Inc. Vehicle camera mirror system with adjustable video feed
US12462575B2 (en) 2021-08-19 2025-11-04 Tesla, Inc. Vision-based machine learning model for autonomous driving with adjustable virtual camera
EP4388510A1 (en) 2021-08-19 2024-06-26 Tesla, Inc. Vision-based system training with simulated content
DE102021122159A1 (de) 2021-08-26 2023-03-02 Bayerische Motoren Werke Aktiengesellschaft Kompaktes Doppel-Head-up-Display für zwei Insassen in einem Fahrzeug
CN115206197A (zh) * 2022-07-22 2022-10-18 智己汽车科技有限公司 一种车载前排的拼接显示屏组
JP7694515B2 (ja) * 2022-09-14 2025-06-18 トヨタ自動車株式会社 画像処理装置および画像処理方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04139974A (ja) * 1990-09-29 1992-05-13 Sanyo Electric Co Ltd 多画面表示装置の表示補正方法
JP2009042356A (ja) * 2007-08-07 2009-02-26 Panasonic Corp プラズマディスプレイ装置およびプラズマディスプレイパネルの駆動方法
JP2011213186A (ja) * 2010-03-31 2011-10-27 Equos Research Co Ltd 電子サイドミラー装置
JP2014229997A (ja) * 2013-05-20 2014-12-08 日本精機株式会社 車両用表示装置
JP2016055801A (ja) * 2014-09-11 2016-04-21 トヨタ自動車株式会社 車載表示装置
JP2016060411A (ja) * 2014-09-19 2016-04-25 株式会社Ｊｖｃケンウッド 確認支援装置および確認支援システム
JP2016074290A (ja) * 2014-10-06 2016-05-12 株式会社デンソー 車両用モニタシステム
JP2016172526A (ja) * 2015-03-18 2016-09-29 マツダ株式会社 車両用表示装置
JP2016175586A (ja) * 2015-03-20 2016-10-06 株式会社デンソーアイティーラボラトリ 車両周辺監視装置、車両周辺監視方法、及びプログラム
JP2016220011A (ja) * 2015-05-20 2016-12-22 株式会社デンソー 画像処理装置、電子ミラーシステム、及び画像処理方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6891563B2 (en) 1996-05-22 2005-05-10 Donnelly Corporation Vehicular vision system
JP3711864B2 (ja) 2000-12-01 2005-11-02 日産自動車株式会社 車両用表示装置
JP4786076B2 (ja) * 2001-08-09 2011-10-05 パナソニック株式会社 運転支援表示装置
JP2003081014A (ja) 2001-09-14 2003-03-19 Auto Network Gijutsu Kenkyusho:Kk 車両周辺監視装置
US6905219B2 (en) * 2002-05-09 2005-06-14 3M Innovative Properties Company Display device
EP1723007A4 (en) * 2004-02-20 2010-01-20 Sharp Kk On-board display device, on-board display system and vehicle
JP2006106254A (ja) * 2004-10-04 2006-04-20 Denso Corp 車両用ヘッドアップディスプレイ
JP2008001120A (ja) 2006-06-20 2008-01-10 Nissan Motor Co Ltd 車両用表示制御装置
US20090256813A1 (en) * 2008-04-09 2009-10-15 Amici Alan J Vehicle moving-image interface
US20110181728A1 (en) * 2008-12-19 2011-07-28 Delphi Technologies, Inc. Electronic side view display system
JP5745827B2 (ja) 2010-11-29 2015-07-08 パイオニア株式会社 車両表示装置
US20120215403A1 (en) * 2011-02-20 2012-08-23 General Motors Llc Method of monitoring a vehicle driver
JP6247450B2 (ja) 2013-03-31 2017-12-13 株式会社村上開明堂 運転支援装置
US10029621B2 (en) * 2013-05-16 2018-07-24 Ford Global Technologies, Llc Rear view camera system using rear view mirror location
US9580081B2 (en) * 2014-01-24 2017-02-28 Tobii Ab Gaze driven interaction for a vehicle
US10247941B2 (en) * 2015-01-19 2019-04-02 Magna Electronics Inc. Vehicle vision system with light field monitor
KR102510395B1 (ko) * 2015-12-01 2023-03-16 삼성디스플레이 주식회사 표시 장치 시스템
KR20190009801A (ko) * 2016-05-24 2019-01-29 젠텍스 코포레이션 선택적 이미지 데이터 디스플레이를 갖는 차량 디스플레이
KR20170141484A (ko) * 2016-06-15 2017-12-26 엘지전자 주식회사 차량용 제어장치 및 그것의 제어방법

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04139974A (ja) * 1990-09-29 1992-05-13 Sanyo Electric Co Ltd 多画面表示装置の表示補正方法
JP2009042356A (ja) * 2007-08-07 2009-02-26 Panasonic Corp プラズマディスプレイ装置およびプラズマディスプレイパネルの駆動方法
JP2011213186A (ja) * 2010-03-31 2011-10-27 Equos Research Co Ltd 電子サイドミラー装置
JP2014229997A (ja) * 2013-05-20 2014-12-08 日本精機株式会社 車両用表示装置
JP2016055801A (ja) * 2014-09-11 2016-04-21 トヨタ自動車株式会社 車載表示装置
JP2016060411A (ja) * 2014-09-19 2016-04-25 株式会社Ｊｖｃケンウッド 確認支援装置および確認支援システム
JP2016074290A (ja) * 2014-10-06 2016-05-12 株式会社デンソー 車両用モニタシステム
JP2016172526A (ja) * 2015-03-18 2016-09-29 マツダ株式会社 車両用表示装置
JP2016175586A (ja) * 2015-03-20 2016-10-06 株式会社デンソーアイティーラボラトリ 車両周辺監視装置、車両周辺監視方法、及びプログラム
JP2016220011A (ja) * 2015-05-20 2016-12-22 株式会社デンソー 画像処理装置、電子ミラーシステム、及び画像処理方法

Also Published As

Publication number Publication date
JP6665819B2 (ja) 2020-03-13
CN108621937B (zh) 2021-11-26
DE102018101542A1 (de) 2018-09-20
DE102018101542B4 (de) 2022-12-08
US20180265002A1 (en) 2018-09-20
CN108621937A (zh) 2018-10-09
US10843628B2 (en) 2020-11-24

Similar Documents

Publication Publication Date Title
JP2018157403A (ja) 車載表示装置、車載表示装置の制御方法及び車載表示装置の制御プログラム
JP6413207B2 (ja) 車両用表示装置
JP3511892B2 (ja) 車両用周囲モニタ装置
JP5329582B2 (ja) 車両用周辺監視装置
US20120257058A1 (en) Image processing device, image processing system, and image processing method
JP4222183B2 (ja) 車両周辺画像表示装置
KR20120118074A (ko) 차량 주변 감시 장치
JP2014197818A (ja) 画像処理装置、画像処理方法、及び、画像処理システム
CN102958754A (zh) 图像处理装置、图像处理系统和图像处理方法
JP2010130647A (ja) 車両周辺確認装置
JP2010208359A (ja) 車両用表示装置
JP2019116220A (ja) 車両用視認装置
US20100156782A1 (en) Hand Control Image For Replication
JP2017117120A (ja) 運転支援装置、運転支援方法及び運転支援プログラム
JP2010105443A (ja) 視覚支援装置
JP2006219000A (ja) 車両用操作装置
JP4849333B2 (ja) 車両用視覚補助装置
JP4679816B2 (ja) 車両周辺表示制御装置
JP7037896B2 (ja) 視認補助装置
JP4720979B2 (ja) 車両用監視装置
JP3898056B2 (ja) 車両周辺監視システム
JP6971087B2 (ja) 視認補助装置
CN112532915A (zh) 车外监视装置
JP6878109B2 (ja) 画像表示装置
JP4285229B2 (ja) 車両用表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190805

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190926

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200121

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200203

R151 Written notification of patent or utility model registration

Ref document number: 6665819

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151