[go: up one dir, main page]

JP2008001179A - In-vehicle driving assistance camera device - Google Patents

In-vehicle driving assistance camera device Download PDF

Info

Publication number
JP2008001179A
JP2008001179A JP2006171176A JP2006171176A JP2008001179A JP 2008001179 A JP2008001179 A JP 2008001179A JP 2006171176 A JP2006171176 A JP 2006171176A JP 2006171176 A JP2006171176 A JP 2006171176A JP 2008001179 A JP2008001179 A JP 2008001179A
Authority
JP
Japan
Prior art keywords
camera
vehicle
driving assistance
camera device
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006171176A
Other languages
Japanese (ja)
Other versions
JP4929869B2 (en
Inventor
Noriyuki Komori
教之 小守
Kazuki Sakata
一樹 阪田
Yoshiyuki Fujii
善行 藤井
Takuto Yano
拓人 矢野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2006171176A priority Critical patent/JP4929869B2/en
Publication of JP2008001179A publication Critical patent/JP2008001179A/en
Application granted granted Critical
Publication of JP4929869B2 publication Critical patent/JP4929869B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】 車載カメラを各用途に応じて車両に搭載した場合、カメラの搭載台数が多くなり、車体への取付け、カメラの制御などが困難となる。
【解決手段】 カメラの撮影方向を略90度移動できるカメラ1L、1Rを車両の前方または後方の両端付近に搭載し、カメラ1L、1Rが車両の進行方向を撮影する場合は切替スイッチ7によりカメラ1L、1Rの何れか一方の画像を選択し、また、側面方向を撮影する場合はカメラ1L、1Rの画像を左右画像合成部6で合成した左右画面合成画像を切替スイッチ7により選択して表示装置20に表示する。
【選択図】 図1
PROBLEM TO BE SOLVED: To mount an in-vehicle camera on a vehicle according to each application, the number of cameras mounted is increased, and it becomes difficult to attach to a vehicle body and to control the camera.
When a camera 1L, 1R capable of moving the shooting direction of the camera approximately 90 degrees is mounted in the vicinity of both front and rear ends of the vehicle, and the camera 1L, 1R captures the traveling direction of the vehicle, the switch 7 switches the camera. When one of the images 1L and 1R is selected and the side direction is photographed, the left and right screen synthesized image obtained by synthesizing the images of the cameras 1L and 1R by the left and right image synthesizing unit 6 is selected by the changeover switch 7 and displayed. Display on the device 20.
[Selection] Figure 1

Description

本発明は、車載運転支援カメラ装置に関し、車両の前方の走行状況を認識するためのステレオカメラ装置、及び、見通しの悪い交差点などで、車両の前部の左右方向(前部側方)の視界を車内モニターに映し出すためのブラインドコーナーモニターカメラ装置の両方に使用される車載運転支援カメラ装置に関するものである。   The present invention relates to an in-vehicle driving assistance camera device, a stereo camera device for recognizing a traveling situation ahead of the vehicle, and a field of view in the left-right direction (front side) of the front portion of the vehicle at an intersection with poor visibility. It is related with the vehicle-mounted driving assistance camera apparatus used for both the blind corner monitor camera apparatus for projecting to a vehicle interior monitor.

従来のステレオカメラ装置は、2台のカメラを車両前方に向けて固定し、三角測量の原理を用いて車両の前方の走行状況を認識し、必要に応じてドライバーに注意喚起し、またシフトダウンによる減速などの車両制御を行っていた。(特許文献1)   A conventional stereo camera device fixes two cameras facing the front of the vehicle, recognizes the driving situation ahead of the vehicle using the principle of triangulation, alerts the driver as necessary, and shifts down Vehicle control such as deceleration by was performed. (Patent Document 1)

また、ブラインドコーナーモニターカメラ装置は、車両の前部にその左右を撮像するカメラを取り付け、見通しの悪い交差点において、交差点の左右の画像を撮影し、車内のモニター等に表示することで、ドライバーが交差点の状況を確認するものである。(特許文献2)   In addition, the blind corner monitor camera device attaches a camera that captures the left and right of the vehicle to the front of the vehicle, captures the left and right images of the intersection at an unsightly intersection, and displays it on the monitor in the vehicle. This is to check the situation of the intersection. (Patent Document 2)

特開2004−32793号公報(段落0002、段落0033、段落0034、段落0040、図17、図18)JP 2004-32793 A (paragraph 0002, paragraph 0033, paragraph 0034, paragraph 0040, FIG. 17, FIG. 18) 特開平9−58342号公報(段落0012、段落0021、図1、図7)JP-A-9-58342 (paragraph 0012, paragraph 0021, FIG. 1, FIG. 7)

ところで、ステレオカメラ装置は、車両の前方の車両などとの距離を認識して、危険を事前に認識するためのもので、車両の走行中に使用される。また、ブラインドコーナーモニターカメラ装置は、見通しの悪い左右の状況を確認するためのもので、交差点などで一時停止した時に使用される。このため、両者のカメラ装置は、同時に使用される場面は少なく、ステレオカメラ装置を使用している時はブラインドコーナーモニターカメラ装置を使用することはなく、ブラインドコーナーモニターカメラ装置を使用している時はステレオカメラ装置を使用していない場合が大半である。   By the way, the stereo camera device is for recognizing a danger in advance by recognizing a distance from a vehicle in front of the vehicle, and is used while the vehicle is traveling. The blind corner monitor camera device is used to check the left and right situation with poor visibility, and is used when the vehicle is temporarily stopped at an intersection or the like. For this reason, both camera devices are rarely used at the same time, and when using a stereo camera device, do not use a blind corner monitor camera device, but use a blind corner monitor camera device. In most cases, stereo camera devices are not used.

従来、車両の走行制御や、死角の監視補助など用途毎に複数台のカメラが車両に搭載されていたが、その用途毎にカメラを設置すると車両に搭載されるカメラの数が増加し、配線の複雑化、費用の増大、及びデザイン上の制約を招いていた。本発明は、カメラを複数の用途に共用化することで、車両に搭載されるカメラの台数を減らすものである。   Conventionally, multiple cameras have been mounted on the vehicle for each application, such as vehicle driving control and blind spot monitoring assistance. However, if a camera is installed for each application, the number of cameras mounted on the vehicle increases and wiring is performed. Complexity, increased costs, and design constraints. The present invention reduces the number of cameras mounted on a vehicle by sharing the camera for a plurality of uses.

本発明による車載運転支援カメラ装置は、車両の前部または後部の左右に各々取り付けられた少なくとも2台のカメラと、前記カメラの撮影方向を変更するカメラ制御機構と、前記カメラ制御機構を駆動することにより、前記カメラの撮影方向を前記車両の略進行方向及び略側面方向に変更するカメラ制御手段と前記カメラによる左右の撮影画像信号から左右の画像を一つの画面に表示するための左右表示画面信号に合成する左右画面合成手段と、前記左右表示画面信号、前記左右の撮影画像信号の何れかを選択する画像選択手段とを備え、
前記画像選択手段が、前記カメラが略側面方向を撮影しているときは前記左右表示画面信号を、略進行方向を撮影しているときは前記左右の撮影画像信号の何れか一方を表示画像信号として出力することを特徴とする。
An in-vehicle driving assistance camera device according to the present invention drives at least two cameras respectively attached to the left and right of a front part or a rear part of a vehicle, a camera control mechanism that changes a shooting direction of the camera, and the camera control mechanism. Accordingly, the left and right display screen for displaying the left and right images on one screen from the left and right captured image signals by the camera and the camera control means for changing the photographing direction of the camera to the substantially traveling direction and the substantially lateral direction of the vehicle. Left and right screen combining means for combining with a signal; and image selecting means for selecting any of the left and right display screen signals and the left and right captured image signals,
The image selection means displays the left and right display screen signal when the camera is capturing a substantially lateral direction, and displays either the left or right captured image signal when the camera is capturing a substantially traveling direction. Is output as

本発明による車載運転支援カメラ装置は、車両前部に撮像方向を略90度の範囲で可変できるカメラを少なくとも2台搭載し、車両が通常の走行をしている時はステレオカメラ装置として機能し、車両が交差点等に近づき、停止又は微速走行している時はブラインドコーナーモニターカメラ装置として機能するようにしたので、車両へのカメラ搭載台数を減らすことができる。   The in-vehicle driving assistance camera device according to the present invention is equipped with at least two cameras whose imaging direction can be changed within a range of approximately 90 degrees at the front of the vehicle, and functions as a stereo camera device when the vehicle is traveling normally. Since the vehicle functions as a blind corner monitor camera device when the vehicle approaches an intersection or the like and stops or travels at a slow speed, the number of cameras mounted on the vehicle can be reduced.

実施の形態1.
図1は、この発明の実施の形態1による車載運転支援カメラ装置10の構成を示すブロック図である。図1において、車両(図示せず)の前方左右に取り付けられたカメラユニット1Lと1Rは、カメラ制御部2の制御により前方または前方左右方向の画像信号を画像処理ユニット4に送出する。この左右の画像信号に基づいて、左右画像合成部6により左右の画像信号の合成が行われ、障害物認識部5により障害物の認識が行われる。左右画像合成部6から出力される左右画像信号と障害物認識部5から出力される前方画像信号が切替スイッチ7により選択され、表示装置20に出力される。
なお、マイクロコンピュータ3は、操作スイッチ8、車速センサ21、ステアリング蛇角センサ22、カーナビゲーション装置23から出力される制御信号等に基づいて、カメラ制御部2、画像処理ユニット4等の車載運転支援カメラ装置10の構成部を制御する。
Embodiment 1 FIG.
FIG. 1 is a block diagram showing a configuration of an in-vehicle driving assistance camera device 10 according to Embodiment 1 of the present invention. In FIG. 1, camera units 1 </ b> L and 1 </ b> R attached to the front left and right of a vehicle (not shown) send forward or front left and right image signals to the image processing unit 4 under the control of the camera control unit 2. Based on the left and right image signals, the left and right image combining unit 6 combines the left and right image signals, and the obstacle recognizing unit 5 recognizes the obstacle. The left and right image signals output from the left and right image combining unit 6 and the front image signal output from the obstacle recognition unit 5 are selected by the changeover switch 7 and output to the display device 20.
The microcomputer 3 supports on-board driving of the camera control unit 2, the image processing unit 4, and the like based on control signals output from the operation switch 8, the vehicle speed sensor 21, the steering snake angle sensor 22, and the car navigation device 23. Controls the components of the camera device 10.

また、図2は車載運転支援カメラ装置10のカメラユニット1の構成例を示す図、図3は車載運転支援カメラ装置10のブラインドコーナーモニターカメラ動作を説明する図、図4はそのブラインドコーナーモニターカメラ動作時の画像の一例を示す図、図5は、車載運転支援カメラ装置10のステレオカメラ動作を説明する図、図6は、そのステレオカメラ動作時の画像の一例を示す図である。   2 is a diagram showing a configuration example of the camera unit 1 of the in-vehicle driving assistance camera device 10, FIG. 3 is a diagram for explaining the operation of the blind corner monitoring camera of the in-vehicle driving assistance camera device 10, and FIG. 4 is the blind corner monitoring camera. FIG. 5 is a diagram illustrating an example of an image during operation, FIG. 5 is a diagram illustrating a stereo camera operation of the in-vehicle driving assistance camera device 10, and FIG. 6 is a diagram illustrating an example of an image during the stereo camera operation.

図1により、カメラユニット1Lとカメラユニット1Rの駆動の制御方法を説明する。図1において、カメラユニット1Lとカメラユニット1Rは、各々カメラ制御部2によりカメラ動作と撮影方向が制御される。カメラ制御部2は、マイクロコンピュータ3に接続されており、マイクロコンピュータ3から送出される制御信号に基づいてカメラユニット1L、1Rを駆動制御する。カメラユニット1L、1Rで撮影された画像信号は、画像処理ユニット4の左右画像合成部6と障害物認識部5に送出される。   A driving control method for the camera unit 1L and the camera unit 1R will be described with reference to FIG. In FIG. 1, the camera operation and the shooting direction of the camera unit 1L and the camera unit 1R are controlled by the camera control unit 2, respectively. The camera control unit 2 is connected to the microcomputer 3 and drives and controls the camera units 1L and 1R based on a control signal sent from the microcomputer 3. Image signals photographed by the camera units 1L and 1R are sent to the left and right image synthesis unit 6 and the obstacle recognition unit 5 of the image processing unit 4.

図2により、カメラユニット1(1Lまたは1R)動作を説明する。図において、カメラ1aは、垂直方向を軸としてある決められた角度(例えば略90度)の範囲で回転するモータ1bの駆動軸1cに固定されたカメラ取り付け台1dに取り付けられている。モータ1bは、たとえばステッピングモータであり、事前に決められたパルス数回転することによりカメラ1aを所定の方向に精度良く向けることができる。ステッピングモータの他に、エンコーダを備えたDCモータでも可能である。また、モータ1bの回転方向の角度の基準位置は、図示しないセンサ等で認識することができる。   The operation of the camera unit 1 (1L or 1R) will be described with reference to FIG. In the figure, a camera 1a is attached to a camera mount 1d fixed to a drive shaft 1c of a motor 1b that rotates within a range of a predetermined angle (for example, approximately 90 degrees) with a vertical direction as an axis. The motor 1b is a stepping motor, for example, and can turn the camera 1a in a predetermined direction with high accuracy by rotating a predetermined number of pulses. In addition to the stepping motor, a DC motor provided with an encoder is also possible. Moreover, the reference position of the angle in the rotation direction of the motor 1b can be recognized by a sensor or the like (not shown).

次に、ブラインドコーナーモニターカメラ機能動作について説明する。例えば図3に示すように、車両30の前部の左右両端部にカメラユニット1L、1Rが各々搭載されている。カメラユニット1Lは、車両30の進行方向に対して左側を向いており、車両の進行方向に対して略90度左の方向を撮影している。また、カメラユニット1Rは、車両30の進行方向に対して右側を向いており、車両の進行方向に対して略90度右の方向を撮影している。カメラユニット1L、1Rの撮影する水平画角は、カメラユニット1LがLh、カメラユニット1RがRhである。   Next, the operation of the blind corner monitor camera function will be described. For example, as shown in FIG. 3, camera units 1 </ b> L and 1 </ b> R are mounted on both left and right ends of the front portion of the vehicle 30. The camera unit 1L faces the left side with respect to the traveling direction of the vehicle 30, and captures a direction approximately 90 degrees to the left with respect to the traveling direction of the vehicle. The camera unit 1R faces the right side with respect to the traveling direction of the vehicle 30, and captures a direction approximately 90 degrees to the right with respect to the traveling direction of the vehicle. The horizontal angles of view taken by the camera units 1L and 1R are Lh for the camera unit 1L and Rh for the camera unit 1R.

カメラユニット1L、1Rで撮影された画像信号は、例えば図4に示すように、左右画像合成部6おいて、左半分にカメラユニット1Lの画像L(S)を、右半分にカメラユニット1Rの画像R(S)を並べて表示する左右画面表示画像信号として合成される。この左右画面表示画像信号は、切替スイッチ7により選択され、表示装置20に表示される。これにより、ドライバーは車両30を交差点に大きく侵入させることなく、交差点の左右の状況を表示装置20で確認できる。   For example, as shown in FIG. 4, the left and right image synthesis unit 6 receives the image signal L (S) of the camera unit 1L on the left half and the camera unit 1R on the right half. The left and right screen display image signals for displaying the images R (S) side by side are combined. The left and right screen display image signals are selected by the changeover switch 7 and displayed on the display device 20. Accordingly, the driver can check the left and right situation of the intersection on the display device 20 without causing the vehicle 30 to greatly enter the intersection.

次に、ステレオカメラ機能動作について説明する。例えば図5は、車両30が走行している場合の図で、カメラユニット1Lとカメラユニット1Rは各々車両30の進行方向の前方を向いている。カメラユニット1Lとカメラユニット1Rは、各々車両の左右端に取り付けられているため、その撮影画像は、その取付け位置の差の分だけ位置がずれた画像を撮影する。図6は、カメラユニット1Lとカメラユニット1Rで撮影した画像を示した図である。カメラユニット1Lで撮影した画像が画像L(F)であり、カメラユニット1Rで撮影した画像が画像R(F)である。各々の撮影された画像は、カメラユニット1Lとカメラユニット1Rの取付け位置の差により視差が生じる。   Next, the stereo camera function operation will be described. For example, FIG. 5 is a diagram when the vehicle 30 is traveling, and the camera unit 1 </ b> L and the camera unit 1 </ b> R each face forward in the traveling direction of the vehicle 30. Since the camera unit 1L and the camera unit 1R are respectively attached to the left and right ends of the vehicle, the photographed images are images that are shifted in position by the difference between the attachment positions. FIG. 6 is a diagram showing images taken by the camera unit 1L and the camera unit 1R. An image captured by the camera unit 1L is an image L (F), and an image captured by the camera unit 1R is an image R (F). Each photographed image has a parallax due to a difference in mounting position between the camera unit 1L and the camera unit 1R.

障害物認識部5は、この視差に基づいて前方の車両等の障害物までの距離を算出し、その結果をマイクロコンピュータ3に送出する。ステレオカメラ機能動作時は、車両が通常走行時であるので、カメラユニット1Lまたはカメラユニット1Rのどちらかの画像が前方画像信号として障害物認識部6から送出され、切替スイッチ7により選択され、表示装置20に表示される。なお、障害物認識部5にて障害物として認識された画像の輪郭を強調したり、着色、マーキングするなどの、注意喚起のための画像処理を行ったものを前方画像信号として出力することにより、視認性の良い前方画像が得られる。   The obstacle recognition unit 5 calculates a distance to an obstacle such as a vehicle ahead based on this parallax, and sends the result to the microcomputer 3. When the stereo camera function is operating, the vehicle is in a normal running state, so either image of the camera unit 1L or the camera unit 1R is sent from the obstacle recognition unit 6 as a forward image signal, selected by the changeover switch 7, and displayed. Displayed on the device 20. By outputting as a forward image signal what has been subjected to image processing for alerting, such as emphasizing, coloring or marking the contour of an image recognized as an obstacle by the obstacle recognition unit 5 A front image with good visibility can be obtained.

また、マイクロコンピュータ3には、操作スイッチ8からの操作信号、車速センサ21からの車速情報、ステアリング蛇角センサ22からの蛇角情報、カーナビゲーション装置23からの位置情報、地図情報等が送られる。マイクロコンピュータ3はこれらの情報に基づいて、切替スイッチ7により左右画像合成部6からの左右画面表示画像信号、または障害物認識部5から送られる前方画像信号を選択して、表示装置20に表示する画像信号として出力するようにすることができる。   Further, an operation signal from the operation switch 8, vehicle speed information from the vehicle speed sensor 21, snake angle information from the steering snake angle sensor 22, position information from the car navigation device 23, map information, and the like are sent to the microcomputer 3. . Based on this information, the microcomputer 3 selects the left and right screen display image signal from the left and right image synthesis unit 6 or the forward image signal sent from the obstacle recognition unit 5 by the changeover switch 7 and displays it on the display device 20. Can be output as an image signal.

例えば、車速センサ21から出力される車速情報が、徐行若しくは停止を示すような所定の速度以下の場合には、切替スイッチ7が左右画像合成部6の出力、即ち、左右画面表示画像信号を選択するようにし、ブラインドコーナーモニターカメラとして動作させることができる。   For example, when the vehicle speed information output from the vehicle speed sensor 21 is equal to or less than a predetermined speed indicating slow running or stop, the changeover switch 7 selects the output of the left and right image combining unit 6, that is, the left and right screen display image signal. And can be operated as a blind corner monitor camera.

また、渋滞時の徐行ではブラインドコーナーモニターとして動作させる必要がないので、カーナビゲーション装置23の位置情報、地図情報に基づいて、ステレオカメラとして動作を継続させることができる。   Moreover, since it is not necessary to operate as a blind corner monitor at slow speed in a traffic jam, the operation as a stereo camera can be continued based on the position information and map information of the car navigation device 23.

また、ステレオカメラ機能動作時に、ステアリング蛇角センサ22から送られる蛇角情報に基づいて、カメラ制御部2に対して、カメラユニット1L、1Rの撮影方向を指示することができる。なお、ドライバーは操作スイッチ8を使用して、ドライバーの手動により、カメラユニット1L、1Rの撮影方向を変えることも可能である。   In addition, when the stereo camera function is operated, the camera control unit 2 can be instructed in the shooting direction of the camera units 1L and 1R based on the snake angle information sent from the steering snake angle sensor 22. The driver can also change the shooting direction of the camera units 1L and 1R by using the operation switch 8 and manually by the driver.

また、表示装置20は、カーナビゲーション装置23の表示装置と共用することは可能であり、その場合、図示しない切替スイッチによりカメラ画像とカーナビゲーション装置23の画像を切り替えたり、また、一画面に同時に表示することができる。   Further, the display device 20 can be shared with the display device of the car navigation device 23. In this case, the camera image and the image of the car navigation device 23 are switched by a changeover switch (not shown), or simultaneously on one screen. Can be displayed.

図3で示したブラインドコーナーモニターカメラ装置としての機能と、図5で示したステレオカメラ装置としての機能を基本的に満足するためには、カメラユニット1Lとカメラユニット1Rの駆動は、車両30に対して水平方向(パン方向)に略90度だけカメラユニット1Lとカメラユニット1Rの撮影方向を変えることで足りる。また、カメラユニット1Lとカメラユニット1Rは、車両30の進行方向に対して左右対称に動作することで、その機能を満足することができる。   In order to basically satisfy the function as the blind corner monitor camera device shown in FIG. 3 and the function as the stereo camera device shown in FIG. 5, the driving of the camera unit 1L and the camera unit 1R is performed by the vehicle 30. On the other hand, it is sufficient to change the shooting direction of the camera unit 1L and the camera unit 1R by about 90 degrees in the horizontal direction (pan direction). Further, the camera unit 1L and the camera unit 1R can satisfy their functions by operating symmetrically with respect to the traveling direction of the vehicle 30.

このようにカメラユニット1L、1Rを車両前方の左右の位置に取り付けることにより、その2台のカメラを、車両の走行時はステレオカメラ装置として、また、見通しの悪い交差点などでの一時停止の際はブラインドコーナーモニターカメラ装置として機能させ、ドライバーに対する車両走行の補助や交差点などの左右の状況確認の補助を可能にする。これにより、ステレオカメラ装置とブラインドコーナーモニターカメラ装置の各々専用のカメラを搭載する必要はなくなり、車両へのカメラ搭載台数を削減することができ、車両30の車体への取付け、各カメラの制御が容易となる。また、上記用途から考えて、カメラユニット1Lとカメラユニット1Rは、車両30の前部の両端付近に搭載されることが最も適している。   By attaching the camera units 1L and 1R to the left and right positions in front of the vehicle in this way, the two cameras can be used as a stereo camera device when the vehicle is traveling, or when the vehicle is temporarily stopped at an intersection where visibility is poor. Will function as a blind corner monitor camera device, allowing the driver to assist in driving the vehicle and confirming left and right conditions such as intersections. As a result, there is no need to mount dedicated cameras for the stereo camera device and the blind corner monitor camera device, the number of cameras mounted on the vehicle can be reduced, and the mounting of the vehicle 30 on the vehicle body and the control of each camera can be performed. It becomes easy. In view of the above application, it is most suitable that the camera unit 1L and the camera unit 1R are mounted near both ends of the front portion of the vehicle 30.

実施の形態2.
図7は、この発明の実施の形態2による車載運転支援カメラ装置10のブラインドコーナーモニターカメラ動作を説明する図であり、直行していないT字路に進入した車両30が一旦停止した状態を示し、図8は、道路がカーブしている際の車載運転支援カメラ装置10のステレオカメラ動作を説明する図である。この実施の形態2では、カメラユニットの撮影方向を、実施の形態1のように車両30の進行方向に略90度とせずに、進入する道路を監視できる方向に向ける場合を示したものである。なお、実施の形態1の車載運転支援カメラ装置と共通する部分には同符号を付す。
Embodiment 2. FIG.
FIG. 7 is a diagram for explaining the operation of the blind corner monitor camera of the in-vehicle driving assistance camera device 10 according to the second embodiment of the present invention, and shows a state where the vehicle 30 that has entered the T-junction that is not going straight has stopped. FIG. 8 is a diagram for explaining the stereo camera operation of the in-vehicle driving assistance camera device 10 when the road is curved. In the second embodiment, the shooting direction of the camera unit is directed to the direction in which the approaching road can be monitored without being approximately 90 degrees in the traveling direction of the vehicle 30 as in the first embodiment. . In addition, the same code | symbol is attached | subjected to the part which is common in the vehicle-mounted driving assistance camera apparatus of Embodiment 1. FIG.

通常の場合、ステレオカメラ装置として車載運転支援カメラ装置を使用する際は、車両30の進行方向にカメラユニット1L、1Rの撮影方向を向ければ良く、また、ブラインドコーナーモニターカメラ装置として使用する際は、車両30の進行方向に対して略90度の方向に向ければ良い。   In a normal case, when using the in-vehicle driving support camera device as a stereo camera device, the shooting direction of the camera units 1L and 1R may be directed to the traveling direction of the vehicle 30, and when used as a blind corner monitor camera device. The direction may be approximately 90 degrees with respect to the traveling direction of the vehicle 30.

しかしながら、図7に示すように直行していないT字路においては、カメラユニットの撮影方向は車両30の進行方向に略90度とはならず、また、車両30の道路への進入量が車両30の左右で異なるため、必ずしもカメラユニット1L、1Rの撮影方向が道路と平行とならない。この例では、カメラユニット1Lを進行方向に対して略45度に向け、カメラユニット1Rを略120度の方向に向けることにより、ドライバーにとって有用な画像を得ることができる。   However, as shown in FIG. 7, in a T-shaped road that is not orthogonal, the shooting direction of the camera unit is not approximately 90 degrees in the traveling direction of the vehicle 30, and the amount of vehicle 30 entering the road is Since the left and right of 30 are different, the shooting directions of the camera units 1L and 1R are not necessarily parallel to the road. In this example, the camera unit 1L is oriented at approximately 45 degrees with respect to the traveling direction, and the camera unit 1R is oriented at approximately 120 degrees, whereby an image useful for the driver can be obtained.

また、図8に示すように、道路がカーブしている場合には、カメラユニット1Lとカメラユニット1Rは、道路のカーブに合わせて車両30の進行方向に対して少し道路のカーブしている方向を向いた方が、先行車両等の状況を適切に把握することができる。この場合、例えば、障害物認識部5により認識された先行車両の方向にカメラユニット1L、1Rの撮影方向を決めることにより、先行車両の状況把握ができる。また、ステアリング蛇角センサ22からの車輪の向き情報に基づいて車両の進行方向を検出して、カメラユニット1L、1Rの撮影方向を決めることも可能である。あるいは、カーナビゲーション装置23の地図データと車両30の現在位置から、道路の状況を把握して、カメラユニット1L、1Rの撮影方向を決めることも可能である。   Further, as shown in FIG. 8, when the road is curved, the camera unit 1L and the camera unit 1R are slightly curved with respect to the traveling direction of the vehicle 30 in accordance with the road curve. Those who faced can better grasp the situation of the preceding vehicle or the like. In this case, for example, by determining the shooting direction of the camera units 1L and 1R in the direction of the preceding vehicle recognized by the obstacle recognition unit 5, the situation of the preceding vehicle can be grasped. It is also possible to determine the shooting direction of the camera units 1L and 1R by detecting the traveling direction of the vehicle based on the wheel direction information from the steering snake angle sensor 22. Alternatively, it is also possible to determine the shooting direction of the camera units 1L and 1R by grasping the road conditions from the map data of the car navigation device 23 and the current position of the vehicle 30.

以上のように、車両30の置かれている状況を把握し、カメラユニット1L、1Rの最適な撮影方向を決定することにより、ステレオカメラ装置、ブラインドコーナーモニターカメラ装置として、より適切な画像を撮影することができる。   As described above, by grasping the situation where the vehicle 30 is placed and determining the optimum shooting direction of the camera units 1L and 1R, a more appropriate image can be taken as a stereo camera device or a blind corner monitor camera device. can do.

実施の形態3.
図9は、この発明の実施の形態3による車載運転支援カメラ装置10のステレオカメラ動作を説明する図であり、車両30が上り坂にさしかかった場合を示している。図10は、車載運転支援カメラ装置10のカメラユニットの構成例を示す図である。この実施の形態3では、カメラユニット1L、1Rの撮影方向を車両30に対して水平方向(パン方向)のみならず、仰角方向(チルト方向)にも制御可能にしたものである。なお、実施の形態1の車載運転支援カメラ装置と共通する部分には同符号を付す。
Embodiment 3 FIG.
FIG. 9 is a diagram for explaining the stereo camera operation of the in-vehicle driving assistance camera device 10 according to the third embodiment of the present invention, and shows a case where the vehicle 30 has come uphill. FIG. 10 is a diagram illustrating a configuration example of the camera unit of the in-vehicle driving assistance camera device 10. In the third embodiment, the shooting direction of the camera units 1L and 1R can be controlled not only in the horizontal direction (pan direction) but also in the elevation direction (tilt direction) with respect to the vehicle 30. In addition, the same code | symbol is attached | subjected to the part which is common in the vehicle-mounted driving assistance camera apparatus of Embodiment 1. FIG.

通常、平地を運転する場合に、ステレオカメラ装置として車載運転支援カメラ装置10を使用する際は、車両30の水平方向にカメラユニット1L,1Rの撮影方向を向ければ良い。しかしながら、図9に示すように、前方が急な上り坂で、道路に勾配がある場合などは、カメラユニット1L、1Rを車両30の水平方向に対して、上方を向けて撮影した方が、運転支援としては有用な画像を得られることがある。この場合、カメラユニット1L、1Rが車両30の水平方向に対して、仰角方向にも駆動できる構成であることが必要である。   In general, when driving on the flat ground, when using the in-vehicle driving assistance camera device 10 as a stereo camera device, the shooting direction of the camera units 1L and 1R may be oriented in the horizontal direction of the vehicle 30. However, as shown in FIG. 9, when the front is a steep uphill and the road has a gradient, it is better to shoot the camera units 1L and 1R with the camera 30 facing the horizontal direction of the vehicle 30 upward. Useful images may be obtained as driving assistance. In this case, the camera units 1 </ b> L and 1 </ b> R need to be configured to be able to be driven in the elevation direction with respect to the horizontal direction of the vehicle 30.

図10は、カメラユニット1にカメラ1aを車両30の仰角方向に対して回転させるためのモータ1eを取り付けた図である。カメラ1aを車両30の上方または下方を向ける場合、カメラ1aの駆動は、図1で示した1軸の駆動のみではなく、図10で示すような2軸の駆動となる。
図10で示す取付け台1gは、車両30の垂直方向に回転軸1cを持つモータ1bの回転軸1cに取り付けられている。また、取付け台1gには、車両30の水平方向に回転軸1fを持つモータ1eが固定されている。モータ1eの回転軸1fには、カメラ取付け台1dが取り付けられ、カメラ取付け台1dにはカメラ1aが固定されている。これにより、モータ1bを回転させると、カメラ1aは車両30の水平方向に撮影方向を変え、モータ1eを回転させると、カメラ1aは車両30の仰角方向に撮影方向を変えることができる。
FIG. 10 is a view in which a motor 1 e for rotating the camera 1 a with respect to the elevation angle direction of the vehicle 30 is attached to the camera unit 1. When the camera 1a is directed upward or downward of the vehicle 30, the driving of the camera 1a is not only the one-axis driving shown in FIG. 1, but the two-axis driving as shown in FIG.
A mounting base 1g shown in FIG. 10 is attached to a rotating shaft 1c of a motor 1b having a rotating shaft 1c in the vertical direction of the vehicle 30. A motor 1e having a rotating shaft 1f in the horizontal direction of the vehicle 30 is fixed to the mounting base 1g. A camera mount 1d is attached to the rotation shaft 1f of the motor 1e, and the camera 1a is fixed to the camera mount 1d. Thus, when the motor 1 b is rotated, the camera 1 a can change the shooting direction in the horizontal direction of the vehicle 30, and when the motor 1 e is rotated, the camera 1 a can change the shooting direction in the elevation angle direction of the vehicle 30.

このようにモータ1b、1eを取り付けたカメラユニット1を車両前方の左右の位置に取り付けることにより、急な上り坂のみならず、急な下り坂などの起伏のある道路等においても、2台のカメラユニット1L、1Rにより、ステレオカメラ装置として、ドライバーに対して車両走行の補助として機能する。これにより、ステレオカメラ装置とブラインドコーナーモニターカメラ装置の各々専用のカメラを搭載する必要はなくなり、車両へのカメラ搭載台数を削減することができ、車両30の車体への取付け、各カメラの制御が容易となる。なお、上記用途から考えて、カメラユニット1L、1Rは、車両30の前部の両端付近に搭載されることが最も適している。   By attaching the camera unit 1 with the motors 1b and 1e attached to the left and right positions in front of the vehicle in this way, not only on a steep uphill, but also on a road with ups and downs such as a steep downhill, The camera units 1L and 1R function as a vehicle driving assistance for the driver as a stereo camera device. As a result, there is no need to mount dedicated cameras for the stereo camera device and the blind corner monitor camera device, the number of cameras mounted on the vehicle can be reduced, and the mounting of the vehicle 30 on the vehicle body and the control of each camera can be performed. It becomes easy. In view of the above application, it is most suitable that the camera units 1L and 1R are mounted near both ends of the front portion of the vehicle 30.

実施の形態4.
図11は、この発明の実施の形態4による車載運転支援カメラ装置11の構成を示すブロック図である。図において、車両(図示せず)の前方左右に取り付けられたカメラユニット1Lと1Rと後方左右に取り付けられたカメラユニット2Lと2Rは、カメラ制御部2の制御により画像信号を、切替スイッチ25を経由して画像処理ユニット4に送出する。切替スイッチ25はカメラユニット1Lと1Rの画像信号またはカメラユニット2Lと2Rの画像信号を選択して、左右画像合成部6または、障害物認識部5に送出することができる。また、必要に応じて、カメラユニット1Lと1Rの画像信号とカメラユニット2Lと2Rの画像信号の両方を左右画像合成部6または、障害物認識部5に送出することができる。この場合は、例えば各カメラユニットがステレオカメラとして機能している場合、車両前方の障害物と、車両後方の障害物を同時に検出する場合が考えられる。左右画像合成部6は左右の画像信号の合成を行い、障害物認識部5は障害物の認識を行う。更に、左右画像合成部6から出力される左右画像信号と障害物認識部5から出力される障害物を示す画像信号は切替スイッチ7により選択され、表示装置20に出力される。カメラユニットは車両30の前部と後部の両方に取付けられているため、障害物認識部5からの画像は、車両30の前方と後方の両方の画像を同時に表示装置20に表示することができる。
なお、マイクロコンピュータ3は、操作スイッチ8、車速センサ21、ステアリング蛇角センサ22、カーナビゲーション装置23、シフトポジションセンサ24から出力される制御信号等に基づいてカメラ制御部2、画像処理ユニット4等の車載運転支援カメラ装置10の構成部を制御する。
Embodiment 4 FIG.
FIG. 11 is a block diagram showing a configuration of an in-vehicle driving assistance camera device 11 according to Embodiment 4 of the present invention. In the figure, the camera units 1L and 1R attached to the front left and right of the vehicle (not shown) and the camera units 2L and 2R attached to the rear left and right are controlled by the camera control unit 2 to switch the image signal. Via the image processing unit 4. The changeover switch 25 can select the image signals of the camera units 1L and 1R or the image signals of the camera units 2L and 2R and send them to the left and right image synthesis unit 6 or the obstacle recognition unit 5. Moreover, both the image signals of the camera units 1L and 1R and the image signals of the camera units 2L and 2R can be sent to the left and right image synthesis unit 6 or the obstacle recognition unit 5 as necessary. In this case, for example, when each camera unit is functioning as a stereo camera, an obstacle in front of the vehicle and an obstacle in the rear of the vehicle may be detected at the same time. The left and right image synthesizing unit 6 synthesizes the left and right image signals, and the obstacle recognizing unit 5 recognizes the obstacle. Further, the left and right image signals output from the left and right image combining unit 6 and the image signal indicating the obstacle output from the obstacle recognition unit 5 are selected by the changeover switch 7 and output to the display device 20. Since the camera unit is attached to both the front part and the rear part of the vehicle 30, the image from the obstacle recognition unit 5 can simultaneously display both the front and rear images of the vehicle 30 on the display device 20. .
The microcomputer 3 includes a camera control unit 2, an image processing unit 4, and the like based on control signals output from the operation switch 8, the vehicle speed sensor 21, the steering snake angle sensor 22, the car navigation device 23, and the shift position sensor 24. The components of the in-vehicle driving assistance camera device 10 are controlled.

図12は、後方発進で、駐車場などから道路などに進入する車両30を示す図であり、図13は、車両30の後方に搭載されたカメラユニット2L、2Rが、車両30の後方を撮影し、ステレオカメラ装置として機能していることを示す図である。図14、図15、図16は、車両30の後方に搭載されたカメラユニット2L、2Rが、車両30の後方を撮影し、車両30が車両後方に進行して駐車場などに停車する際に、車両30の後方の状況を確認する場合を示す図である。実施の形態1の車載運転支援カメラ装置10と共通する部分には同符号を付す。   FIG. 12 is a diagram showing the vehicle 30 entering the road or the like from a parking lot or the like by starting backward, and FIG. 13 is an image of the rear of the vehicle 30 taken by the camera units 2L and 2R mounted on the rear of the vehicle 30. It is a diagram showing that the camera functions as a stereo camera device. 14, 15, and 16, when the camera units 2 </ b> L and 2 </ b> R mounted on the rear side of the vehicle 30 photograph the rear side of the vehicle 30, the vehicle 30 travels rearward and stops at a parking lot or the like. FIG. 3 is a diagram showing a case where a situation behind a vehicle 30 is confirmed. Portions common to the in-vehicle driving assistance camera device 10 of Embodiment 1 are denoted by the same reference numerals.

図11により、カメラユニット2Lとカメラユニット2Rの駆動制御について説明する。図11において、カメラユニット2L、2Rは、図1に示す実施の形態1のカメラユニット1L、1Rと同様に、各々カメラ制御部2によりカメラ動作と撮像方向が制御される。マイクロコンピュータ3にはシフトポジションセンサ24からシフトポジション情報が入力されているので、シフトポジションが後進状態の場合に、マイクロコンピュータ3は、切替スイッチ25に対してカメラユニット2L、2Rから出力される画像信号を選択する制御信号を出力する。選択された後方の左右の画像信号は、画像処理ユニット4において、図1と同様の処理がなされる。   The drive control of the camera unit 2L and the camera unit 2R will be described with reference to FIG. In FIG. 11, the camera operation and the imaging direction are controlled by the camera control unit 2 in the camera units 2L and 2R, respectively, similarly to the camera units 1L and 1R of the first embodiment shown in FIG. Since the shift position information is input to the microcomputer 3 from the shift position sensor 24, the microcomputer 3 outputs images output from the camera units 2L and 2R to the changeover switch 25 when the shift position is in the reverse drive state. A control signal for selecting a signal is output. The selected left and right image signals are processed in the image processing unit 4 in the same manner as in FIG.

図12において、車両30の後方の左右両側にカメラユニット2L、2Rが各々搭載されている。カメラユニット2Lは、車両30の進行方向(車両30は後方に進行)に対して右側を向いており、車両30の進行方向に対して略90度の方向を撮影している。また、カメラユニット2Rは、車両30の進行方向(車両30は後方に進行)に対して左側を向いており、車両30の進行方向に対して略90度の方向を撮影している。これにより、ドライバーは車両30を後方に進行させながら、駐車場などから道路に侵入する際、道路に大きく侵入することなく、道路の左右の状況を車両30内の表示装置20で確認することができる。   In FIG. 12, camera units 2 </ b> L and 2 </ b> R are mounted on the left and right sides behind the vehicle 30, respectively. The camera unit 2L faces the right side with respect to the traveling direction of the vehicle 30 (the vehicle 30 travels backward), and captures a direction of approximately 90 degrees with respect to the traveling direction of the vehicle 30. The camera unit 2 </ b> R faces the left side with respect to the traveling direction of the vehicle 30 (the vehicle 30 travels backward), and captures a direction of approximately 90 degrees with respect to the traveling direction of the vehicle 30. Thus, when the driver advances the vehicle 30 backward and enters the road from a parking lot or the like, the driver can check the left and right conditions of the road with the display device 20 in the vehicle 30 without greatly entering the road. it can.

図13は、車両30が前方に走行している場合の図で、車両30の後方に取り付けられたカメラユニット2L、2Rは各々車両30の後方を向いている。カメラユニット2L、2Rは、各々車両30の左右端に取り付けられているため、その撮影画像は、その取付け位置の差の分だけ位置がずれた画像を撮影する。各々の撮影された画像は、カメラユニット2L、2Rの取付け位置の差により視差が生じており、この視差の生じた画像により、後方の車両等の距離を算出することができる。これにより、ドライバーが車線変更する際などに、車両後方から接近してくる他の車両を認識して、車両が危険状態の場合は、警告などの注意喚起や、また、衝突が避けられない場合には事故回避のため、アンチロックブレーキングシステム(ABS)や操縦安定性制御(スタビリティコントロール)などの適正な制御で被害を軽減する働きをすることができる。   FIG. 13 is a diagram when the vehicle 30 is traveling forward, and the camera units 2L and 2R attached to the rear of the vehicle 30 face the rear of the vehicle 30, respectively. Since the camera units 2L and 2R are attached to the left and right ends of the vehicle 30, respectively, the captured images are images that are shifted in position by the difference in the attachment positions. Each photographed image has a parallax due to the difference in the mounting position of the camera units 2L and 2R, and the distance of the vehicle behind and the like can be calculated from the image having the parallax. As a result, when a driver changes lanes, other vehicles approaching from the rear of the vehicle are recognized, and if the vehicle is in a dangerous state, warnings or other warnings or collisions cannot be avoided. In order to avoid accidents, it can work to reduce damage by appropriate control such as anti-lock braking system (ABS) and steering stability control (stability control).

次に、駐車場などにおいて車両30が後方に進行して停車(後進停車)する場合について述べる。一般的に、駐車支援の目的で設置されるカメラは広角レンズを搭載したものが使用されるが、本実施の形態のように、走行時に後方確認のためのステレオカメラ装置として使用する場合には広角レンズのものは不向きである。そのため、図13に示す例では、カメラユニット2L、2Rの画角の関係で、停車直前に確認したい画像、特に、車両後端に近接する部分の画像が撮影できない場合が生じる。   Next, the case where the vehicle 30 travels backward and stops (reversely stops) in a parking lot or the like will be described. In general, a camera installed with a wide-angle lens is used for parking support purposes, but when used as a stereo camera device for backward confirmation during driving as in this embodiment, A wide-angle lens is not suitable. For this reason, in the example shown in FIG. 13, there may be a case where an image to be confirmed immediately before stopping, in particular, an image close to the rear end of the vehicle cannot be captured due to the angle of view of the camera units 2L and 2R.

図14は、車両後端に近接する部分の画像撮影を説明する図であり、車両30の後方に取り付けられたカメラユニット2L、2Rは各々車両30の後方に対して内側を向いている。これにより、カメラユニット2L、2Rは特に広角のレンズを使用することなく、車両30の後方の車両後端に近接する部分の画像を撮影するバックビューモニタカメラとして使用することができる。また、ステレオカメラ機能は、視差が大きくなる近距離に有利であることより、駐車時の場合もステレオカメラとして機能させ、停車位置までの距離を測定し、ドライバーの駐車支援をすることができる。この機能は、渋滞の際の徐行運転の場合、車間距離の短い前方車両との距離を測定する時にも有効な機能として使用できる。つまり、図5でのカメラユニット1L、1Rを車両前方に対して内側を向け、両方のカメラユニットの撮影範囲に、近接する前方車両を入れて、前方の車両画像を撮影することにより、渋滞の際の先行車両との距離を認識することが可能となる。   FIG. 14 is a diagram for explaining image capturing in a portion close to the rear end of the vehicle, and the camera units 2L and 2R attached to the rear of the vehicle 30 face inward with respect to the rear of the vehicle 30, respectively. Accordingly, the camera units 2L and 2R can be used as a back view monitor camera that captures an image of a portion close to the rear end of the vehicle 30 behind the vehicle 30 without using a wide-angle lens. Further, since the stereo camera function is advantageous for a short distance where the parallax increases, it can function as a stereo camera even in parking, measure the distance to the stop position, and assist the driver in parking. This function can be used as an effective function when measuring a distance from a preceding vehicle with a short inter-vehicle distance in the case of slow driving in a traffic jam. That is, the camera units 1L and 1R in FIG. 5 are directed inward with respect to the front of the vehicle, and a front vehicle in the vicinity is put in the shooting range of both camera units, and a vehicle image of the front is shot. It becomes possible to recognize the distance from the preceding vehicle.

図15及び図16は、後進停車時のカメラユニットの撮影方向制御を説明する図であり、それぞれ水平方向と仰角方向の揺動を示す図である。駐車場等で、車両30が後方に進行して停車する際、図15に示すように、カメラユニット2L、2Rの水平画角Lh、Rhが小さいので、車両30が後進するにつれて、例えば、照明灯のポール31が撮影できなくなる場合が生じる。そのため、カメラユニット2L、2Rを水平方向に揺動して、撮影範囲Lh,RhをL’h、R’hの間で変えることにより、必要な後方の範囲を撮影してドライバーに示すことができる。また、図16に示すように、カメラユニット2L、2Rの垂直画角Lv(Rvも同様)が小さいので、車両30が後進するにつれて、例えば、ガードレール32が撮影できなくなる場合が生じる。そのため、カメラユニット2L、2Rを仰角方向に揺動して、撮影範囲LvをL’vの間で変えることにより、必要な後方の範囲を撮影してドライバーに示すことができる。このように、車両30の移動に応じてカメラユニット2L、2Rの撮影方向、即ち撮影範囲を揺動させることにより、後進駐車時に最適な画像をドライバーに示すことができる。   FIG. 15 and FIG. 16 are diagrams for explaining the shooting direction control of the camera unit at the time of reverse stop, and are diagrams showing the swing in the horizontal direction and the elevation direction, respectively. When the vehicle 30 travels backward and stops at a parking lot or the like, as shown in FIG. 15, the horizontal angles of view Lh and Rh of the camera units 2L and 2R are small. There is a case where the light pole 31 cannot be photographed. Therefore, the necessary rear range can be photographed and shown to the driver by swinging the camera units 2L and 2R in the horizontal direction and changing the photographing ranges Lh and Rh between L'h and R'h. it can. Further, as shown in FIG. 16, since the vertical angle of view Lv (same for Rv) of the camera units 2L and 2R is small, for example, the guardrail 32 may not be photographed as the vehicle 30 moves backward. Therefore, by swinging the camera units 2L and 2R in the elevation angle direction and changing the shooting range Lv between L'v, the necessary rear range can be shot and shown to the driver. Thus, by swinging the shooting direction of the camera units 2L and 2R, that is, the shooting range in accordance with the movement of the vehicle 30, an optimal image can be shown to the driver during reverse parking.

図12に示す後方左右画像確認の場合と図14に示す後方近接部画像確認の場合は、車両30の動きとしては似ているが、カメラユニット2L、2Rの撮影方向が全く異なる。この撮影方向の選択は、カーナビゲーション装置23からの地図情報と車両30の位置情報からの判断やドライバーの運転席に設けられた操作スイッチ8により行うようことができる。上記揺動動作は、車両が移動するに従って、一方向に除々にカメラユニットの向きを変える場合もドライバーに有用な画像を提供でき、また、車両後方の全範囲を確認するため、カメラユニットの上下、左右の揺動動作を繰り返して後方全体を撮影する方法もドライバーに有用な画像を提供できる。   In the case of the rear left / right image confirmation shown in FIG. 12 and the rear proximity portion image confirmation shown in FIG. 14, the movement of the vehicle 30 is similar, but the photographing directions of the camera units 2L and 2R are completely different. The selection of the photographing direction can be performed by determination from the map information from the car navigation device 23 and the position information of the vehicle 30 or by the operation switch 8 provided in the driver's seat of the driver. The above-mentioned rocking motion can provide a useful image to the driver even when the camera unit is gradually changed in one direction as the vehicle moves. Also, in order to check the entire range behind the vehicle, The method of photographing the entire rear side by repeating the left and right rocking motion can also provide a useful image to the driver.

このようにカメラユニット2L、2Rを車両30の後方の左右位置に取り付け、それらの撮影方向を略直角方向に切替られるようにし、更に、揺動できるようにしたので、2台のカメラを、車両の走行時は後方確認のためのステレオカメラ用として、後進にて見通しの悪い道路などに出る際は後方左右確認のためのブラインドコーナーモニターカメラ用として、更には、後進にて駐車する際はバックビューモニタカメラ用として使用できる。これにより、ステレオカメラ装置とブラインドコーナーモニターカメラ装置、バックビューモニター装置の各々専用のカメラを搭載する必要はなくなり、車両30へのカメラ搭載台数を削減することができ、車両30の車体への取付け、各カメラの制御が容易となる。
また、上記用途から考えて、カメラユニット1L、1Rまたはカメラユニット2L、2Rは、車両30の前部の両端付近に搭載されることが最も適している。
As described above, the camera units 2L and 2R are attached to the left and right positions behind the vehicle 30 so that their photographing directions can be switched to a substantially right angle direction and can be swung. When driving on a stereo camera for checking backwards, when going backwards on roads with poor visibility, etc., for blind corner monitor cameras for checking left and right behind, and when backing up, Can be used for view monitor cameras. As a result, there is no need to mount dedicated cameras for the stereo camera device, the blind corner monitor camera device, and the back view monitor device, the number of cameras mounted on the vehicle 30 can be reduced, and the vehicle 30 can be attached to the vehicle body. Control of each camera becomes easy.
In view of the above application, it is most suitable that the camera units 1L, 1R or the camera units 2L, 2R are mounted near both ends of the front portion of the vehicle 30.

本発明の活用例として、車両の前方または後方の他の車両などの位置を認識するためのステレオカメラ装置、また、見通しの悪い交差点などで、車両前部または後部の左右の視界を車内モニターに映し出すためのブラインドコーナーモニターカメラ装置、車両後方の視界を車内モニターに映し出すためのバックビューモニター装置などに使用されるカメラ装置に適用できる。   As an application example of the present invention, a stereo camera device for recognizing the position of another vehicle in front of or behind the vehicle, and the left and right visual fields at the front or rear of the vehicle at an intersection with poor visibility, etc. The present invention can be applied to a blind corner monitor camera device for projecting, a camera device used for a back view monitor device for projecting a field of view behind the vehicle to an in-vehicle monitor, and the like.

この発明の実施の形態1の車載運転支援カメラ装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the vehicle-mounted driving assistance camera apparatus of Embodiment 1 of this invention. この発明の実施の形態1の車載運転支援カメラ装置のカメラユニットの構成例を示す図である。It is a figure which shows the structural example of the camera unit of the vehicle-mounted driving assistance camera apparatus of Embodiment 1 of this invention. この発明の実施の形態1の車載運転支援カメラ装置のブラインドコーナーモニターカメラ動作を説明する図である。It is a figure explaining the blind corner monitor camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 1 of this invention. この発明の実施の形態1の車載運転支援カメラ装置のブラインドコーナーモニターカメラ動作時の画像の一例を示す図である。It is a figure which shows an example of the image at the time of the blind corner monitor camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 1 of this invention. この発明の実施の形態1の車載運転支援カメラ装置のステレオカメラ動作を説明する図である。It is a figure explaining the stereo camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 1 of this invention. この発明の実施の形態1の車載運転支援カメラ装置のステレオカメラ動作時の画像の一例を示す図である。It is a figure which shows an example of the image at the time of the stereo camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 1 of this invention. この発明の実施の形態2の車載運転支援カメラ装置のブラインドコーナーモニターカメラ動作を説明する図である。It is a figure explaining the blind corner monitor camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 2 of this invention. この発明の実施の形態2の車載運転支援カメラ装置のステレオカメラ動作を説明する図である。It is a figure explaining the stereo camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 2 of this invention. この発明の実施の形態3の車載運転支援カメラ装置のステレオカメラ動作を説明する図である。It is a figure explaining the stereo camera operation | movement of the vehicle-mounted driving assistance camera apparatus of Embodiment 3 of this invention. この発明の実施の形態3の車載運転支援カメラ装置のカメラユニットの構成例を示す図である。It is a figure which shows the structural example of the camera unit of the vehicle-mounted driving assistance camera apparatus of Embodiment 3 of this invention. この発明の実施の形態4の車載運転支援カメラ装置の構成例を示すブロック図である。It is a block diagram which shows the structural example of the vehicle-mounted driving assistance camera apparatus of Embodiment 4 of this invention. この発明の実施の形態4の車載運転支援カメラ装置の車両後方のブラインドコーナーモニターカメラ動作を説明する図である。It is a figure explaining the blind corner monitor camera operation | movement behind the vehicle of the vehicle-mounted driving assistance camera apparatus of Embodiment 4 of this invention. この発明の実施の形態4の車載運転支援カメラ装置の車両後方のステレオカメラ動作時の画像の一例を示す図である。It is a figure which shows an example of the image at the time of the stereo camera operation | movement of the vehicle back of the vehicle-mounted driving assistance camera apparatus of Embodiment 4 of this invention. この発明の実施の形態4の車載運転支援カメラ装置の車両後方に搭載されたカメラユニットによる車両後方確認動作を説明する図である。It is a figure explaining the vehicle back confirmation operation | movement by the camera unit mounted in the vehicle back of the vehicle-mounted driving assistance camera apparatus of Embodiment 4 of this invention. この発明の実施の形態4の車載運転支援カメラ装置の車両後方に搭載されたカメラユニットの水平方向揺動による車両後方確認動作を説明する図である。It is a figure explaining the vehicle back confirmation operation | movement by the horizontal swing of the camera unit mounted in the vehicle back of the vehicle-mounted driving assistance camera device of Embodiment 4 of this invention. この発明の実施の形態4の車載運転支援カメラ装置の車両後方に搭載されたカメラユニットの仰角方向揺動による車両後方確認動作を説明する図である。It is a figure explaining the vehicle back confirmation operation | movement by the elevation direction rocking | fluctuation of the camera unit mounted in the vehicle back of the vehicle-mounted driving assistance camera device of Embodiment 4 of this invention.

符号の説明Explanation of symbols

1、 カメラユニット、 1a カメラ、 1b モータ、 1c モータ軸、 1d カメラ取り付台、 1g モータ取り付台、 2 カメラ制御部、 3 マイクロコンピュータ、 4 画像処理ユニット、 5 障害物認識部、 6 左右画像合成部、 7 切替スイッチ、 8 操作スイッチ、 10、11 車載運転支援カメラ装置、 20 表示装置、 21 車速センサ、 22 ステアリング蛇角センサ、 23 カーナビゲーション装置、 24 シフトポジションセンサ、 30 車両、 3L 3R カメラの撮影画像、 12e 複数画面表示手段、 Lh Rh カメラの水平画角、 Lv Rv カメラの垂直画角 。   DESCRIPTION OF SYMBOLS 1, Camera unit, 1a Camera, 1b Motor, 1c Motor shaft, 1d Camera mounting base, 1g Motor mounting base, 2 Camera control part, 3 Microcomputer, 4 Image processing unit, 5 Obstacle recognition part, 6 Left-right image Synthesizer, 7 changeover switch, 8 operation switch, 10, 11 on-board driving support camera device, 20 display device, 21 vehicle speed sensor, 22 steering snake angle sensor, 23 car navigation device, 24 shift position sensor, 30 vehicle, 3L 3R camera 12e multi-screen display means, horizontal view angle of Lh Rh camera, vertical view angle of Lv Rv camera.

Claims (9)

車両の前部または後部の左右に各々取り付けられた少なくとも2台のカメラと、
前記カメラの撮影方向を変更するカメラ制御機構と、
前記カメラ制御機構を駆動することにより、前記カメラの撮影方向を前記車両の略進行方向及び略側面方向に変更するカメラ制御手段と
前記カメラによる左右の撮影画像信号から左右の画像を一つの画面に表示するための左右表示画面信号に合成する左右画面合成手段と、
前記左右表示画面信号、前記左右の撮影画像信号の何れかを選択する画像選択手段とを備え、
前記画像選択手段が、前記カメラが略側面方向を撮影しているときは前記左右表示画面信号を、略進行方向を撮影しているときは前記左右の撮影画像信号の何れか一方を表示画像信号として出力することを特徴とする車載運転支援カメラ装置。
At least two cameras each attached to the left or right of the front or rear of the vehicle;
A camera control mechanism for changing the shooting direction of the camera;
By driving the camera control mechanism, camera control means for changing the shooting direction of the camera to a substantially traveling direction and a substantially side direction of the vehicle, and right and left images from left and right captured image signals from the camera on one screen Left and right screen combining means for combining the left and right display screen signals for display;
Image selection means for selecting one of the left and right display screen signals and the left and right captured image signals;
The image selection means displays the left and right display screen signal when the camera is capturing a substantially lateral direction, and displays either the left or right captured image signal when the camera is capturing a substantially traveling direction. An in-vehicle driving assistance camera device characterized by being output as
更に、前記左右の撮影画像信号に基づいて車両の走行を阻害する障害物を認識すると共に、前記左右の撮影画像信号の何れか一方を出力する障害物認識手段を備え、
前記画像選択手段が、前記カメラが略側面方向を撮影しているときは前記左右表示画面信号を、略進行方向を撮影しているときは前記障害物認識手段から出力される進行方向画像信号を表示画像信号として出力することを特徴とする請求項1に記載の車載運転支援カメラ装置。
In addition, an obstacle recognizing means for recognizing an obstacle that obstructs driving of the vehicle based on the left and right photographed image signals and outputting either one of the left and right photographed image signals,
When the image selection means is photographing the substantially side direction, the left and right display screen signal is obtained, and when the image selection means is photographing the substantially advance direction, the traveling direction image signal output from the obstacle recognition means is obtained. The in-vehicle driving support camera device according to claim 1, wherein the on-vehicle driving support camera device is output as a display image signal.
前記制御手段が、前記車両の走行速度情報が所定速度以上の場合には、前記カメラが車両の進行方向を撮影し、所定速度以下の場合には車両の側面方向を撮影するように前記カメラ制御手段を制御することを特徴とする請求項1または請求項2に記載の車載運転支援カメラ装置。   The control means controls the camera so that when the traveling speed information of the vehicle is equal to or higher than a predetermined speed, the camera captures the traveling direction of the vehicle, and when the traveling speed information is equal to or lower than the predetermined speed, the camera side direction The vehicle-mounted driving assistance camera device according to claim 1 or 2, wherein the means is controlled. 前記カメラが、車両の進行方向に対して左右両端付近に取り付けられていることを特徴とする請求項1乃至請求項3の何れか1項に記載の車載運転支援カメラ装置。   The in-vehicle driving assistance camera device according to any one of claims 1 to 3, wherein the camera is mounted near both left and right ends with respect to a traveling direction of the vehicle. 前記カメラ制御機構が、前記カメラの撮影方向を車両に対し各々左右対称に変えることを特徴とする請求項1乃至請求項4の何れか1項に記載の車載運転支援カメラ装置。   The in-vehicle driving assistance camera device according to any one of claims 1 to 4, wherein the camera control mechanism changes a shooting direction of the camera symmetrically with respect to the vehicle. 前記カメラ制御機構が、前記カメラの撮影方向を略90度変えることを特徴とする請求項1乃至請求項5の何れか1項に記載の車載運転支援カメラ装置。   The in-vehicle driving assistance camera device according to any one of claims 1 to 5, wherein the camera control mechanism changes a shooting direction of the camera by approximately 90 degrees. 前記カメラ制御機構が、前記カメラの撮影方向を車両に対し各々左右非対称に変えることを特徴とする請求項1乃至請求項4の何れか1項に記載の車載運転支援カメラ装置。   The in-vehicle driving assistance camera device according to any one of claims 1 to 4, wherein the camera control mechanism changes a shooting direction of the camera to be asymmetrical with respect to the vehicle. 前記カメラ制御機構が、前記カメラの撮影方向を水平方向に揺動可能であることを特徴とする請求項1乃至請求項4の何れか1項に記載の車載運転支援カメラ装置。   The in-vehicle driving assistance camera device according to any one of claims 1 to 4, wherein the camera control mechanism is capable of swinging a photographing direction of the camera in a horizontal direction. 前記カメラ制御機構が、前記カメラの撮影方向を水平方向または仰角方向に揺動可能であることを特徴とする請求項1乃至請求項4の何れか1項に記載の車載運転支援カメラ装置。
The in-vehicle driving assistance camera device according to any one of claims 1 to 4, wherein the camera control mechanism is capable of swinging a shooting direction of the camera in a horizontal direction or an elevation angle direction.
JP2006171176A 2006-06-21 2006-06-21 In-vehicle driving assistance camera device Expired - Fee Related JP4929869B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006171176A JP4929869B2 (en) 2006-06-21 2006-06-21 In-vehicle driving assistance camera device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006171176A JP4929869B2 (en) 2006-06-21 2006-06-21 In-vehicle driving assistance camera device

Publications (2)

Publication Number Publication Date
JP2008001179A true JP2008001179A (en) 2008-01-10
JP4929869B2 JP4929869B2 (en) 2012-05-09

Family

ID=39005918

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006171176A Expired - Fee Related JP4929869B2 (en) 2006-06-21 2006-06-21 In-vehicle driving assistance camera device

Country Status (1)

Country Link
JP (1) JP4929869B2 (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009027240A (en) * 2007-07-17 2009-02-05 Suzuki Motor Corp Image processing apparatus for vehicle
EP2078575A2 (en) 2008-01-08 2009-07-15 Makita Corporation Cutting devices
WO2009095989A1 (en) * 2008-01-29 2009-08-06 Pioneer Corporation Image acquisition device, image acquisition method, image acquisition program, and storage medium
JP2009219000A (en) * 2008-03-12 2009-09-24 Pioneer Electronic Corp Camera device and imaging system
JP2011105058A (en) * 2009-11-13 2011-06-02 Aisin Seiki Co Ltd Multifunctional camera system
JP2014042096A (en) * 2012-08-21 2014-03-06 Daimler Ag Cab-over type vehicle
CN107678041A (en) * 2016-08-02 2018-02-09 三星电子株式会社 System and method for detection object
KR20180040012A (en) * 2016-10-11 2018-04-19 주식회사 만도 Front monitoring apparatus, driving assistant apparatus using front monitoring apparatus and driving assistant method using front monitoring apparatus
JP2018116722A (en) * 2018-03-05 2018-07-26 株式会社ユピテル Drive recorder body and apparatus
JP2019125152A (en) * 2018-01-16 2019-07-25 株式会社デンソー Communication equipment and communication method
JP2020052784A (en) * 2018-09-27 2020-04-02 株式会社Subaru Driving support device
CN112112202A (en) * 2019-06-21 2020-12-22 纳博特斯克有限公司 Handling assistance system, handling assistance method, and construction machine

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05238314A (en) * 1992-02-28 1993-09-17 Honda Motor Co Ltd Vehicular ambience monitor system
JPH05310078A (en) * 1992-05-07 1993-11-22 Clarion Co Ltd Vehicle safety confirmation device and camera used for the device
JP2001294086A (en) * 2000-04-17 2001-10-23 Auto Network Gijutsu Kenkyusho:Kk Vehicle periphery recognition device
JP2002154375A (en) * 2000-11-20 2002-05-28 Nissan Motor Co Ltd Visibility assist device for vehicles
JP2002279596A (en) * 2001-03-15 2002-09-27 Nissan Motor Co Ltd Vehicle periphery monitoring device
JP2003202614A (en) * 2002-01-09 2003-07-18 Auto Network Gijutsu Kenkyusho:Kk Vehicle periphery recognition device
JP2005309797A (en) * 2004-04-22 2005-11-04 Nissan Motor Co Ltd Pedestrian warning device

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05238314A (en) * 1992-02-28 1993-09-17 Honda Motor Co Ltd Vehicular ambience monitor system
JPH05310078A (en) * 1992-05-07 1993-11-22 Clarion Co Ltd Vehicle safety confirmation device and camera used for the device
JP2001294086A (en) * 2000-04-17 2001-10-23 Auto Network Gijutsu Kenkyusho:Kk Vehicle periphery recognition device
JP2002154375A (en) * 2000-11-20 2002-05-28 Nissan Motor Co Ltd Visibility assist device for vehicles
JP2002279596A (en) * 2001-03-15 2002-09-27 Nissan Motor Co Ltd Vehicle periphery monitoring device
JP2003202614A (en) * 2002-01-09 2003-07-18 Auto Network Gijutsu Kenkyusho:Kk Vehicle periphery recognition device
JP2005309797A (en) * 2004-04-22 2005-11-04 Nissan Motor Co Ltd Pedestrian warning device

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009027240A (en) * 2007-07-17 2009-02-05 Suzuki Motor Corp Image processing apparatus for vehicle
EP2078575A2 (en) 2008-01-08 2009-07-15 Makita Corporation Cutting devices
EP2363230A1 (en) 2008-01-08 2011-09-07 Makita Corporation Cutting device
WO2009095989A1 (en) * 2008-01-29 2009-08-06 Pioneer Corporation Image acquisition device, image acquisition method, image acquisition program, and storage medium
JP2009219000A (en) * 2008-03-12 2009-09-24 Pioneer Electronic Corp Camera device and imaging system
JP2011105058A (en) * 2009-11-13 2011-06-02 Aisin Seiki Co Ltd Multifunctional camera system
KR101369866B1 (en) * 2009-11-13 2014-03-05 아이신세이끼가부시끼가이샤 Multi-function camera system
JP2014042096A (en) * 2012-08-21 2014-03-06 Daimler Ag Cab-over type vehicle
CN107678041A (en) * 2016-08-02 2018-02-09 三星电子株式会社 System and method for detection object
TWI781109B (en) * 2016-08-02 2022-10-21 南韓商三星電子股份有限公司 System and method for stereo triangulation
KR20180040012A (en) * 2016-10-11 2018-04-19 주식회사 만도 Front monitoring apparatus, driving assistant apparatus using front monitoring apparatus and driving assistant method using front monitoring apparatus
KR102537598B1 (en) * 2016-10-11 2023-06-01 주식회사 에이치엘클레무브 Front monitoring apparatus, driving assistant apparatus using front monitoring apparatus and driving assistant method using front monitoring apparatus
JP7040031B2 (en) 2018-01-16 2022-03-23 株式会社デンソー Communication device and communication method
JP2019125152A (en) * 2018-01-16 2019-07-25 株式会社デンソー Communication equipment and communication method
JP2018116722A (en) * 2018-03-05 2018-07-26 株式会社ユピテル Drive recorder body and apparatus
JP2020052784A (en) * 2018-09-27 2020-04-02 株式会社Subaru Driving support device
JP7202120B2 (en) 2018-09-27 2023-01-11 株式会社Subaru Driving support device
CN112112202A (en) * 2019-06-21 2020-12-22 纳博特斯克有限公司 Handling assistance system, handling assistance method, and construction machine
JP2021001472A (en) * 2019-06-21 2021-01-07 ナブテスコ株式会社 Steering support system for construction machine, steering support method for construction machine, and construction machine
CN112112202B (en) * 2019-06-21 2024-04-23 纳博特斯克有限公司 Manipulation assistance system, manipulation assistance method, and construction machinery

Also Published As

Publication number Publication date
JP4929869B2 (en) 2012-05-09

Similar Documents

Publication Publication Date Title
JP5070809B2 (en) Driving support device, driving support method, and program
JP4134939B2 (en) Vehicle periphery display control device
US8717196B2 (en) Display apparatus for vehicle
CN106564432B (en) Vehicle view angle control device and method, and vehicle including the device
US9219887B2 (en) Drive assist device
JP4929869B2 (en) In-vehicle driving assistance camera device
JP2007223338A (en) Display system, moving body, display method, display program, and recording medium thereof
JP2017536621A (en) Method for operating driver assistance system for motor vehicle, driver assistance system, and motor vehicle
JP2002117496A (en) On-vehicle rear confirmation support device and on- vehicle navigation device
JP2019104336A (en) Image display device and driving assist system
JP4479183B2 (en) Video presentation device
JP2011003117A (en) Backward visual recognition support system
JP4703896B2 (en) Driving support device
JP2002154375A (en) Visibility assist device for vehicles
CN113060156B (en) Vehicle surrounding monitoring device, vehicle, vehicle surrounding monitoring method and program
JP2006295676A (en) Imaging device for mobile unit
JP2008282235A (en) Driving support device, automobile equipped with driving support device, and driving support method
US20250316094A1 (en) Image processing device, mobile object, image processing method, and storage medium
CN104670092B (en) Apparatus and method for assisting parking
JP4161861B2 (en) Night vision system for vehicles linked to headlights for curved roads
JP6093338B2 (en) Sign information display system and sign information display method
JPH09180088A (en) Surrounding monitor device for vehicles
JP4774603B2 (en) Vehicle display device
JP2004051063A (en) Vehicle periphery recognition device
JP2007293390A (en) Reverse running alarm device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080717

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110304

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110512

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110928

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120117

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120130

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees