JP2008001179A - In-vehicle driving assistance camera device - Google Patents
In-vehicle driving assistance camera device Download PDFInfo
- Publication number
- JP2008001179A JP2008001179A JP2006171176A JP2006171176A JP2008001179A JP 2008001179 A JP2008001179 A JP 2008001179A JP 2006171176 A JP2006171176 A JP 2006171176A JP 2006171176 A JP2006171176 A JP 2006171176A JP 2008001179 A JP2008001179 A JP 2008001179A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- vehicle
- driving assistance
- camera device
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】 車載カメラを各用途に応じて車両に搭載した場合、カメラの搭載台数が多くなり、車体への取付け、カメラの制御などが困難となる。
【解決手段】 カメラの撮影方向を略90度移動できるカメラ1L、1Rを車両の前方または後方の両端付近に搭載し、カメラ1L、1Rが車両の進行方向を撮影する場合は切替スイッチ7によりカメラ1L、1Rの何れか一方の画像を選択し、また、側面方向を撮影する場合はカメラ1L、1Rの画像を左右画像合成部6で合成した左右画面合成画像を切替スイッチ7により選択して表示装置20に表示する。
【選択図】 図1
PROBLEM TO BE SOLVED: To mount an in-vehicle camera on a vehicle according to each application, the number of cameras mounted is increased, and it becomes difficult to attach to a vehicle body and to control the camera.
When a camera 1L, 1R capable of moving the shooting direction of the camera approximately 90 degrees is mounted in the vicinity of both front and rear ends of the vehicle, and the camera 1L, 1R captures the traveling direction of the vehicle, the switch 7 switches the camera. When one of the images 1L and 1R is selected and the side direction is photographed, the left and right screen synthesized image obtained by synthesizing the images of the cameras 1L and 1R by the left and right image synthesizing unit 6 is selected by the changeover switch 7 and displayed. Display on the device 20.
[Selection] Figure 1
Description
本発明は、車載運転支援カメラ装置に関し、車両の前方の走行状況を認識するためのステレオカメラ装置、及び、見通しの悪い交差点などで、車両の前部の左右方向(前部側方)の視界を車内モニターに映し出すためのブラインドコーナーモニターカメラ装置の両方に使用される車載運転支援カメラ装置に関するものである。 The present invention relates to an in-vehicle driving assistance camera device, a stereo camera device for recognizing a traveling situation ahead of the vehicle, and a field of view in the left-right direction (front side) of the front portion of the vehicle at an intersection with poor visibility. It is related with the vehicle-mounted driving assistance camera apparatus used for both the blind corner monitor camera apparatus for projecting to a vehicle interior monitor.
従来のステレオカメラ装置は、2台のカメラを車両前方に向けて固定し、三角測量の原理を用いて車両の前方の走行状況を認識し、必要に応じてドライバーに注意喚起し、またシフトダウンによる減速などの車両制御を行っていた。(特許文献1) A conventional stereo camera device fixes two cameras facing the front of the vehicle, recognizes the driving situation ahead of the vehicle using the principle of triangulation, alerts the driver as necessary, and shifts down Vehicle control such as deceleration by was performed. (Patent Document 1)
また、ブラインドコーナーモニターカメラ装置は、車両の前部にその左右を撮像するカメラを取り付け、見通しの悪い交差点において、交差点の左右の画像を撮影し、車内のモニター等に表示することで、ドライバーが交差点の状況を確認するものである。(特許文献2) In addition, the blind corner monitor camera device attaches a camera that captures the left and right of the vehicle to the front of the vehicle, captures the left and right images of the intersection at an unsightly intersection, and displays it on the monitor in the vehicle. This is to check the situation of the intersection. (Patent Document 2)
ところで、ステレオカメラ装置は、車両の前方の車両などとの距離を認識して、危険を事前に認識するためのもので、車両の走行中に使用される。また、ブラインドコーナーモニターカメラ装置は、見通しの悪い左右の状況を確認するためのもので、交差点などで一時停止した時に使用される。このため、両者のカメラ装置は、同時に使用される場面は少なく、ステレオカメラ装置を使用している時はブラインドコーナーモニターカメラ装置を使用することはなく、ブラインドコーナーモニターカメラ装置を使用している時はステレオカメラ装置を使用していない場合が大半である。 By the way, the stereo camera device is for recognizing a danger in advance by recognizing a distance from a vehicle in front of the vehicle, and is used while the vehicle is traveling. The blind corner monitor camera device is used to check the left and right situation with poor visibility, and is used when the vehicle is temporarily stopped at an intersection or the like. For this reason, both camera devices are rarely used at the same time, and when using a stereo camera device, do not use a blind corner monitor camera device, but use a blind corner monitor camera device. In most cases, stereo camera devices are not used.
従来、車両の走行制御や、死角の監視補助など用途毎に複数台のカメラが車両に搭載されていたが、その用途毎にカメラを設置すると車両に搭載されるカメラの数が増加し、配線の複雑化、費用の増大、及びデザイン上の制約を招いていた。本発明は、カメラを複数の用途に共用化することで、車両に搭載されるカメラの台数を減らすものである。 Conventionally, multiple cameras have been mounted on the vehicle for each application, such as vehicle driving control and blind spot monitoring assistance. However, if a camera is installed for each application, the number of cameras mounted on the vehicle increases and wiring is performed. Complexity, increased costs, and design constraints. The present invention reduces the number of cameras mounted on a vehicle by sharing the camera for a plurality of uses.
本発明による車載運転支援カメラ装置は、車両の前部または後部の左右に各々取り付けられた少なくとも2台のカメラと、前記カメラの撮影方向を変更するカメラ制御機構と、前記カメラ制御機構を駆動することにより、前記カメラの撮影方向を前記車両の略進行方向及び略側面方向に変更するカメラ制御手段と前記カメラによる左右の撮影画像信号から左右の画像を一つの画面に表示するための左右表示画面信号に合成する左右画面合成手段と、前記左右表示画面信号、前記左右の撮影画像信号の何れかを選択する画像選択手段とを備え、
前記画像選択手段が、前記カメラが略側面方向を撮影しているときは前記左右表示画面信号を、略進行方向を撮影しているときは前記左右の撮影画像信号の何れか一方を表示画像信号として出力することを特徴とする。
An in-vehicle driving assistance camera device according to the present invention drives at least two cameras respectively attached to the left and right of a front part or a rear part of a vehicle, a camera control mechanism that changes a shooting direction of the camera, and the camera control mechanism. Accordingly, the left and right display screen for displaying the left and right images on one screen from the left and right captured image signals by the camera and the camera control means for changing the photographing direction of the camera to the substantially traveling direction and the substantially lateral direction of the vehicle. Left and right screen combining means for combining with a signal; and image selecting means for selecting any of the left and right display screen signals and the left and right captured image signals,
The image selection means displays the left and right display screen signal when the camera is capturing a substantially lateral direction, and displays either the left or right captured image signal when the camera is capturing a substantially traveling direction. Is output as
本発明による車載運転支援カメラ装置は、車両前部に撮像方向を略90度の範囲で可変できるカメラを少なくとも2台搭載し、車両が通常の走行をしている時はステレオカメラ装置として機能し、車両が交差点等に近づき、停止又は微速走行している時はブラインドコーナーモニターカメラ装置として機能するようにしたので、車両へのカメラ搭載台数を減らすことができる。 The in-vehicle driving assistance camera device according to the present invention is equipped with at least two cameras whose imaging direction can be changed within a range of approximately 90 degrees at the front of the vehicle, and functions as a stereo camera device when the vehicle is traveling normally. Since the vehicle functions as a blind corner monitor camera device when the vehicle approaches an intersection or the like and stops or travels at a slow speed, the number of cameras mounted on the vehicle can be reduced.
実施の形態1.
図1は、この発明の実施の形態1による車載運転支援カメラ装置10の構成を示すブロック図である。図1において、車両(図示せず)の前方左右に取り付けられたカメラユニット1Lと1Rは、カメラ制御部2の制御により前方または前方左右方向の画像信号を画像処理ユニット4に送出する。この左右の画像信号に基づいて、左右画像合成部6により左右の画像信号の合成が行われ、障害物認識部5により障害物の認識が行われる。左右画像合成部6から出力される左右画像信号と障害物認識部5から出力される前方画像信号が切替スイッチ7により選択され、表示装置20に出力される。
なお、マイクロコンピュータ3は、操作スイッチ8、車速センサ21、ステアリング蛇角センサ22、カーナビゲーション装置23から出力される制御信号等に基づいて、カメラ制御部2、画像処理ユニット4等の車載運転支援カメラ装置10の構成部を制御する。
FIG. 1 is a block diagram showing a configuration of an in-vehicle driving
The microcomputer 3 supports on-board driving of the camera control unit 2, the image processing unit 4, and the like based on control signals output from the operation switch 8, the
また、図2は車載運転支援カメラ装置10のカメラユニット1の構成例を示す図、図3は車載運転支援カメラ装置10のブラインドコーナーモニターカメラ動作を説明する図、図4はそのブラインドコーナーモニターカメラ動作時の画像の一例を示す図、図5は、車載運転支援カメラ装置10のステレオカメラ動作を説明する図、図6は、そのステレオカメラ動作時の画像の一例を示す図である。
2 is a diagram showing a configuration example of the
図1により、カメラユニット1Lとカメラユニット1Rの駆動の制御方法を説明する。図1において、カメラユニット1Lとカメラユニット1Rは、各々カメラ制御部2によりカメラ動作と撮影方向が制御される。カメラ制御部2は、マイクロコンピュータ3に接続されており、マイクロコンピュータ3から送出される制御信号に基づいてカメラユニット1L、1Rを駆動制御する。カメラユニット1L、1Rで撮影された画像信号は、画像処理ユニット4の左右画像合成部6と障害物認識部5に送出される。
A driving control method for the
図2により、カメラユニット1(1Lまたは1R)動作を説明する。図において、カメラ1aは、垂直方向を軸としてある決められた角度(例えば略90度)の範囲で回転するモータ1bの駆動軸1cに固定されたカメラ取り付け台1dに取り付けられている。モータ1bは、たとえばステッピングモータであり、事前に決められたパルス数回転することによりカメラ1aを所定の方向に精度良く向けることができる。ステッピングモータの他に、エンコーダを備えたDCモータでも可能である。また、モータ1bの回転方向の角度の基準位置は、図示しないセンサ等で認識することができる。
The operation of the camera unit 1 (1L or 1R) will be described with reference to FIG. In the figure, a
次に、ブラインドコーナーモニターカメラ機能動作について説明する。例えば図3に示すように、車両30の前部の左右両端部にカメラユニット1L、1Rが各々搭載されている。カメラユニット1Lは、車両30の進行方向に対して左側を向いており、車両の進行方向に対して略90度左の方向を撮影している。また、カメラユニット1Rは、車両30の進行方向に対して右側を向いており、車両の進行方向に対して略90度右の方向を撮影している。カメラユニット1L、1Rの撮影する水平画角は、カメラユニット1LがLh、カメラユニット1RがRhである。
Next, the operation of the blind corner monitor camera function will be described. For example, as shown in FIG. 3,
カメラユニット1L、1Rで撮影された画像信号は、例えば図4に示すように、左右画像合成部6おいて、左半分にカメラユニット1Lの画像L(S)を、右半分にカメラユニット1Rの画像R(S)を並べて表示する左右画面表示画像信号として合成される。この左右画面表示画像信号は、切替スイッチ7により選択され、表示装置20に表示される。これにより、ドライバーは車両30を交差点に大きく侵入させることなく、交差点の左右の状況を表示装置20で確認できる。
For example, as shown in FIG. 4, the left and right
次に、ステレオカメラ機能動作について説明する。例えば図5は、車両30が走行している場合の図で、カメラユニット1Lとカメラユニット1Rは各々車両30の進行方向の前方を向いている。カメラユニット1Lとカメラユニット1Rは、各々車両の左右端に取り付けられているため、その撮影画像は、その取付け位置の差の分だけ位置がずれた画像を撮影する。図6は、カメラユニット1Lとカメラユニット1Rで撮影した画像を示した図である。カメラユニット1Lで撮影した画像が画像L(F)であり、カメラユニット1Rで撮影した画像が画像R(F)である。各々の撮影された画像は、カメラユニット1Lとカメラユニット1Rの取付け位置の差により視差が生じる。
Next, the stereo camera function operation will be described. For example, FIG. 5 is a diagram when the
障害物認識部5は、この視差に基づいて前方の車両等の障害物までの距離を算出し、その結果をマイクロコンピュータ3に送出する。ステレオカメラ機能動作時は、車両が通常走行時であるので、カメラユニット1Lまたはカメラユニット1Rのどちらかの画像が前方画像信号として障害物認識部6から送出され、切替スイッチ7により選択され、表示装置20に表示される。なお、障害物認識部5にて障害物として認識された画像の輪郭を強調したり、着色、マーキングするなどの、注意喚起のための画像処理を行ったものを前方画像信号として出力することにより、視認性の良い前方画像が得られる。
The obstacle recognition unit 5 calculates a distance to an obstacle such as a vehicle ahead based on this parallax, and sends the result to the microcomputer 3. When the stereo camera function is operating, the vehicle is in a normal running state, so either image of the
また、マイクロコンピュータ3には、操作スイッチ8からの操作信号、車速センサ21からの車速情報、ステアリング蛇角センサ22からの蛇角情報、カーナビゲーション装置23からの位置情報、地図情報等が送られる。マイクロコンピュータ3はこれらの情報に基づいて、切替スイッチ7により左右画像合成部6からの左右画面表示画像信号、または障害物認識部5から送られる前方画像信号を選択して、表示装置20に表示する画像信号として出力するようにすることができる。
Further, an operation signal from the operation switch 8, vehicle speed information from the
例えば、車速センサ21から出力される車速情報が、徐行若しくは停止を示すような所定の速度以下の場合には、切替スイッチ7が左右画像合成部6の出力、即ち、左右画面表示画像信号を選択するようにし、ブラインドコーナーモニターカメラとして動作させることができる。
For example, when the vehicle speed information output from the
また、渋滞時の徐行ではブラインドコーナーモニターとして動作させる必要がないので、カーナビゲーション装置23の位置情報、地図情報に基づいて、ステレオカメラとして動作を継続させることができる。
Moreover, since it is not necessary to operate as a blind corner monitor at slow speed in a traffic jam, the operation as a stereo camera can be continued based on the position information and map information of the
また、ステレオカメラ機能動作時に、ステアリング蛇角センサ22から送られる蛇角情報に基づいて、カメラ制御部2に対して、カメラユニット1L、1Rの撮影方向を指示することができる。なお、ドライバーは操作スイッチ8を使用して、ドライバーの手動により、カメラユニット1L、1Rの撮影方向を変えることも可能である。
In addition, when the stereo camera function is operated, the camera control unit 2 can be instructed in the shooting direction of the
また、表示装置20は、カーナビゲーション装置23の表示装置と共用することは可能であり、その場合、図示しない切替スイッチによりカメラ画像とカーナビゲーション装置23の画像を切り替えたり、また、一画面に同時に表示することができる。
Further, the
図3で示したブラインドコーナーモニターカメラ装置としての機能と、図5で示したステレオカメラ装置としての機能を基本的に満足するためには、カメラユニット1Lとカメラユニット1Rの駆動は、車両30に対して水平方向(パン方向)に略90度だけカメラユニット1Lとカメラユニット1Rの撮影方向を変えることで足りる。また、カメラユニット1Lとカメラユニット1Rは、車両30の進行方向に対して左右対称に動作することで、その機能を満足することができる。
In order to basically satisfy the function as the blind corner monitor camera device shown in FIG. 3 and the function as the stereo camera device shown in FIG. 5, the driving of the
このようにカメラユニット1L、1Rを車両前方の左右の位置に取り付けることにより、その2台のカメラを、車両の走行時はステレオカメラ装置として、また、見通しの悪い交差点などでの一時停止の際はブラインドコーナーモニターカメラ装置として機能させ、ドライバーに対する車両走行の補助や交差点などの左右の状況確認の補助を可能にする。これにより、ステレオカメラ装置とブラインドコーナーモニターカメラ装置の各々専用のカメラを搭載する必要はなくなり、車両へのカメラ搭載台数を削減することができ、車両30の車体への取付け、各カメラの制御が容易となる。また、上記用途から考えて、カメラユニット1Lとカメラユニット1Rは、車両30の前部の両端付近に搭載されることが最も適している。
By attaching the
実施の形態2.
図7は、この発明の実施の形態2による車載運転支援カメラ装置10のブラインドコーナーモニターカメラ動作を説明する図であり、直行していないT字路に進入した車両30が一旦停止した状態を示し、図8は、道路がカーブしている際の車載運転支援カメラ装置10のステレオカメラ動作を説明する図である。この実施の形態2では、カメラユニットの撮影方向を、実施の形態1のように車両30の進行方向に略90度とせずに、進入する道路を監視できる方向に向ける場合を示したものである。なお、実施の形態1の車載運転支援カメラ装置と共通する部分には同符号を付す。
Embodiment 2. FIG.
FIG. 7 is a diagram for explaining the operation of the blind corner monitor camera of the in-vehicle driving
通常の場合、ステレオカメラ装置として車載運転支援カメラ装置を使用する際は、車両30の進行方向にカメラユニット1L、1Rの撮影方向を向ければ良く、また、ブラインドコーナーモニターカメラ装置として使用する際は、車両30の進行方向に対して略90度の方向に向ければ良い。
In a normal case, when using the in-vehicle driving support camera device as a stereo camera device, the shooting direction of the
しかしながら、図7に示すように直行していないT字路においては、カメラユニットの撮影方向は車両30の進行方向に略90度とはならず、また、車両30の道路への進入量が車両30の左右で異なるため、必ずしもカメラユニット1L、1Rの撮影方向が道路と平行とならない。この例では、カメラユニット1Lを進行方向に対して略45度に向け、カメラユニット1Rを略120度の方向に向けることにより、ドライバーにとって有用な画像を得ることができる。
However, as shown in FIG. 7, in a T-shaped road that is not orthogonal, the shooting direction of the camera unit is not approximately 90 degrees in the traveling direction of the
また、図8に示すように、道路がカーブしている場合には、カメラユニット1Lとカメラユニット1Rは、道路のカーブに合わせて車両30の進行方向に対して少し道路のカーブしている方向を向いた方が、先行車両等の状況を適切に把握することができる。この場合、例えば、障害物認識部5により認識された先行車両の方向にカメラユニット1L、1Rの撮影方向を決めることにより、先行車両の状況把握ができる。また、ステアリング蛇角センサ22からの車輪の向き情報に基づいて車両の進行方向を検出して、カメラユニット1L、1Rの撮影方向を決めることも可能である。あるいは、カーナビゲーション装置23の地図データと車両30の現在位置から、道路の状況を把握して、カメラユニット1L、1Rの撮影方向を決めることも可能である。
Further, as shown in FIG. 8, when the road is curved, the
以上のように、車両30の置かれている状況を把握し、カメラユニット1L、1Rの最適な撮影方向を決定することにより、ステレオカメラ装置、ブラインドコーナーモニターカメラ装置として、より適切な画像を撮影することができる。
As described above, by grasping the situation where the
実施の形態3.
図9は、この発明の実施の形態3による車載運転支援カメラ装置10のステレオカメラ動作を説明する図であり、車両30が上り坂にさしかかった場合を示している。図10は、車載運転支援カメラ装置10のカメラユニットの構成例を示す図である。この実施の形態3では、カメラユニット1L、1Rの撮影方向を車両30に対して水平方向(パン方向)のみならず、仰角方向(チルト方向)にも制御可能にしたものである。なお、実施の形態1の車載運転支援カメラ装置と共通する部分には同符号を付す。
Embodiment 3 FIG.
FIG. 9 is a diagram for explaining the stereo camera operation of the in-vehicle driving
通常、平地を運転する場合に、ステレオカメラ装置として車載運転支援カメラ装置10を使用する際は、車両30の水平方向にカメラユニット1L,1Rの撮影方向を向ければ良い。しかしながら、図9に示すように、前方が急な上り坂で、道路に勾配がある場合などは、カメラユニット1L、1Rを車両30の水平方向に対して、上方を向けて撮影した方が、運転支援としては有用な画像を得られることがある。この場合、カメラユニット1L、1Rが車両30の水平方向に対して、仰角方向にも駆動できる構成であることが必要である。
In general, when driving on the flat ground, when using the in-vehicle driving
図10は、カメラユニット1にカメラ1aを車両30の仰角方向に対して回転させるためのモータ1eを取り付けた図である。カメラ1aを車両30の上方または下方を向ける場合、カメラ1aの駆動は、図1で示した1軸の駆動のみではなく、図10で示すような2軸の駆動となる。
図10で示す取付け台1gは、車両30の垂直方向に回転軸1cを持つモータ1bの回転軸1cに取り付けられている。また、取付け台1gには、車両30の水平方向に回転軸1fを持つモータ1eが固定されている。モータ1eの回転軸1fには、カメラ取付け台1dが取り付けられ、カメラ取付け台1dにはカメラ1aが固定されている。これにより、モータ1bを回転させると、カメラ1aは車両30の水平方向に撮影方向を変え、モータ1eを回転させると、カメラ1aは車両30の仰角方向に撮影方向を変えることができる。
FIG. 10 is a view in which a motor 1 e for rotating the
A mounting base 1g shown in FIG. 10 is attached to a
このようにモータ1b、1eを取り付けたカメラユニット1を車両前方の左右の位置に取り付けることにより、急な上り坂のみならず、急な下り坂などの起伏のある道路等においても、2台のカメラユニット1L、1Rにより、ステレオカメラ装置として、ドライバーに対して車両走行の補助として機能する。これにより、ステレオカメラ装置とブラインドコーナーモニターカメラ装置の各々専用のカメラを搭載する必要はなくなり、車両へのカメラ搭載台数を削減することができ、車両30の車体への取付け、各カメラの制御が容易となる。なお、上記用途から考えて、カメラユニット1L、1Rは、車両30の前部の両端付近に搭載されることが最も適している。
By attaching the
実施の形態4.
図11は、この発明の実施の形態4による車載運転支援カメラ装置11の構成を示すブロック図である。図において、車両(図示せず)の前方左右に取り付けられたカメラユニット1Lと1Rと後方左右に取り付けられたカメラユニット2Lと2Rは、カメラ制御部2の制御により画像信号を、切替スイッチ25を経由して画像処理ユニット4に送出する。切替スイッチ25はカメラユニット1Lと1Rの画像信号またはカメラユニット2Lと2Rの画像信号を選択して、左右画像合成部6または、障害物認識部5に送出することができる。また、必要に応じて、カメラユニット1Lと1Rの画像信号とカメラユニット2Lと2Rの画像信号の両方を左右画像合成部6または、障害物認識部5に送出することができる。この場合は、例えば各カメラユニットがステレオカメラとして機能している場合、車両前方の障害物と、車両後方の障害物を同時に検出する場合が考えられる。左右画像合成部6は左右の画像信号の合成を行い、障害物認識部5は障害物の認識を行う。更に、左右画像合成部6から出力される左右画像信号と障害物認識部5から出力される障害物を示す画像信号は切替スイッチ7により選択され、表示装置20に出力される。カメラユニットは車両30の前部と後部の両方に取付けられているため、障害物認識部5からの画像は、車両30の前方と後方の両方の画像を同時に表示装置20に表示することができる。
なお、マイクロコンピュータ3は、操作スイッチ8、車速センサ21、ステアリング蛇角センサ22、カーナビゲーション装置23、シフトポジションセンサ24から出力される制御信号等に基づいてカメラ制御部2、画像処理ユニット4等の車載運転支援カメラ装置10の構成部を制御する。
Embodiment 4 FIG.
FIG. 11 is a block diagram showing a configuration of an in-vehicle driving
The microcomputer 3 includes a camera control unit 2, an image processing unit 4, and the like based on control signals output from the operation switch 8, the
図12は、後方発進で、駐車場などから道路などに進入する車両30を示す図であり、図13は、車両30の後方に搭載されたカメラユニット2L、2Rが、車両30の後方を撮影し、ステレオカメラ装置として機能していることを示す図である。図14、図15、図16は、車両30の後方に搭載されたカメラユニット2L、2Rが、車両30の後方を撮影し、車両30が車両後方に進行して駐車場などに停車する際に、車両30の後方の状況を確認する場合を示す図である。実施の形態1の車載運転支援カメラ装置10と共通する部分には同符号を付す。
FIG. 12 is a diagram showing the
図11により、カメラユニット2Lとカメラユニット2Rの駆動制御について説明する。図11において、カメラユニット2L、2Rは、図1に示す実施の形態1のカメラユニット1L、1Rと同様に、各々カメラ制御部2によりカメラ動作と撮像方向が制御される。マイクロコンピュータ3にはシフトポジションセンサ24からシフトポジション情報が入力されているので、シフトポジションが後進状態の場合に、マイクロコンピュータ3は、切替スイッチ25に対してカメラユニット2L、2Rから出力される画像信号を選択する制御信号を出力する。選択された後方の左右の画像信号は、画像処理ユニット4において、図1と同様の処理がなされる。
The drive control of the
図12において、車両30の後方の左右両側にカメラユニット2L、2Rが各々搭載されている。カメラユニット2Lは、車両30の進行方向(車両30は後方に進行)に対して右側を向いており、車両30の進行方向に対して略90度の方向を撮影している。また、カメラユニット2Rは、車両30の進行方向(車両30は後方に進行)に対して左側を向いており、車両30の進行方向に対して略90度の方向を撮影している。これにより、ドライバーは車両30を後方に進行させながら、駐車場などから道路に侵入する際、道路に大きく侵入することなく、道路の左右の状況を車両30内の表示装置20で確認することができる。
In FIG. 12, camera units 2 </ b> L and 2 </ b> R are mounted on the left and right sides behind the
図13は、車両30が前方に走行している場合の図で、車両30の後方に取り付けられたカメラユニット2L、2Rは各々車両30の後方を向いている。カメラユニット2L、2Rは、各々車両30の左右端に取り付けられているため、その撮影画像は、その取付け位置の差の分だけ位置がずれた画像を撮影する。各々の撮影された画像は、カメラユニット2L、2Rの取付け位置の差により視差が生じており、この視差の生じた画像により、後方の車両等の距離を算出することができる。これにより、ドライバーが車線変更する際などに、車両後方から接近してくる他の車両を認識して、車両が危険状態の場合は、警告などの注意喚起や、また、衝突が避けられない場合には事故回避のため、アンチロックブレーキングシステム(ABS)や操縦安定性制御(スタビリティコントロール)などの適正な制御で被害を軽減する働きをすることができる。
FIG. 13 is a diagram when the
次に、駐車場などにおいて車両30が後方に進行して停車(後進停車)する場合について述べる。一般的に、駐車支援の目的で設置されるカメラは広角レンズを搭載したものが使用されるが、本実施の形態のように、走行時に後方確認のためのステレオカメラ装置として使用する場合には広角レンズのものは不向きである。そのため、図13に示す例では、カメラユニット2L、2Rの画角の関係で、停車直前に確認したい画像、特に、車両後端に近接する部分の画像が撮影できない場合が生じる。
Next, the case where the
図14は、車両後端に近接する部分の画像撮影を説明する図であり、車両30の後方に取り付けられたカメラユニット2L、2Rは各々車両30の後方に対して内側を向いている。これにより、カメラユニット2L、2Rは特に広角のレンズを使用することなく、車両30の後方の車両後端に近接する部分の画像を撮影するバックビューモニタカメラとして使用することができる。また、ステレオカメラ機能は、視差が大きくなる近距離に有利であることより、駐車時の場合もステレオカメラとして機能させ、停車位置までの距離を測定し、ドライバーの駐車支援をすることができる。この機能は、渋滞の際の徐行運転の場合、車間距離の短い前方車両との距離を測定する時にも有効な機能として使用できる。つまり、図5でのカメラユニット1L、1Rを車両前方に対して内側を向け、両方のカメラユニットの撮影範囲に、近接する前方車両を入れて、前方の車両画像を撮影することにより、渋滞の際の先行車両との距離を認識することが可能となる。
FIG. 14 is a diagram for explaining image capturing in a portion close to the rear end of the vehicle, and the
図15及び図16は、後進停車時のカメラユニットの撮影方向制御を説明する図であり、それぞれ水平方向と仰角方向の揺動を示す図である。駐車場等で、車両30が後方に進行して停車する際、図15に示すように、カメラユニット2L、2Rの水平画角Lh、Rhが小さいので、車両30が後進するにつれて、例えば、照明灯のポール31が撮影できなくなる場合が生じる。そのため、カメラユニット2L、2Rを水平方向に揺動して、撮影範囲Lh,RhをL’h、R’hの間で変えることにより、必要な後方の範囲を撮影してドライバーに示すことができる。また、図16に示すように、カメラユニット2L、2Rの垂直画角Lv(Rvも同様)が小さいので、車両30が後進するにつれて、例えば、ガードレール32が撮影できなくなる場合が生じる。そのため、カメラユニット2L、2Rを仰角方向に揺動して、撮影範囲LvをL’vの間で変えることにより、必要な後方の範囲を撮影してドライバーに示すことができる。このように、車両30の移動に応じてカメラユニット2L、2Rの撮影方向、即ち撮影範囲を揺動させることにより、後進駐車時に最適な画像をドライバーに示すことができる。
FIG. 15 and FIG. 16 are diagrams for explaining the shooting direction control of the camera unit at the time of reverse stop, and are diagrams showing the swing in the horizontal direction and the elevation direction, respectively. When the
図12に示す後方左右画像確認の場合と図14に示す後方近接部画像確認の場合は、車両30の動きとしては似ているが、カメラユニット2L、2Rの撮影方向が全く異なる。この撮影方向の選択は、カーナビゲーション装置23からの地図情報と車両30の位置情報からの判断やドライバーの運転席に設けられた操作スイッチ8により行うようことができる。上記揺動動作は、車両が移動するに従って、一方向に除々にカメラユニットの向きを変える場合もドライバーに有用な画像を提供でき、また、車両後方の全範囲を確認するため、カメラユニットの上下、左右の揺動動作を繰り返して後方全体を撮影する方法もドライバーに有用な画像を提供できる。
In the case of the rear left / right image confirmation shown in FIG. 12 and the rear proximity portion image confirmation shown in FIG. 14, the movement of the
このようにカメラユニット2L、2Rを車両30の後方の左右位置に取り付け、それらの撮影方向を略直角方向に切替られるようにし、更に、揺動できるようにしたので、2台のカメラを、車両の走行時は後方確認のためのステレオカメラ用として、後進にて見通しの悪い道路などに出る際は後方左右確認のためのブラインドコーナーモニターカメラ用として、更には、後進にて駐車する際はバックビューモニタカメラ用として使用できる。これにより、ステレオカメラ装置とブラインドコーナーモニターカメラ装置、バックビューモニター装置の各々専用のカメラを搭載する必要はなくなり、車両30へのカメラ搭載台数を削減することができ、車両30の車体への取付け、各カメラの制御が容易となる。
また、上記用途から考えて、カメラユニット1L、1Rまたはカメラユニット2L、2Rは、車両30の前部の両端付近に搭載されることが最も適している。
As described above, the
In view of the above application, it is most suitable that the
本発明の活用例として、車両の前方または後方の他の車両などの位置を認識するためのステレオカメラ装置、また、見通しの悪い交差点などで、車両前部または後部の左右の視界を車内モニターに映し出すためのブラインドコーナーモニターカメラ装置、車両後方の視界を車内モニターに映し出すためのバックビューモニター装置などに使用されるカメラ装置に適用できる。 As an application example of the present invention, a stereo camera device for recognizing the position of another vehicle in front of or behind the vehicle, and the left and right visual fields at the front or rear of the vehicle at an intersection with poor visibility, etc. The present invention can be applied to a blind corner monitor camera device for projecting, a camera device used for a back view monitor device for projecting a field of view behind the vehicle to an in-vehicle monitor, and the like.
1、 カメラユニット、 1a カメラ、 1b モータ、 1c モータ軸、 1d カメラ取り付台、 1g モータ取り付台、 2 カメラ制御部、 3 マイクロコンピュータ、 4 画像処理ユニット、 5 障害物認識部、 6 左右画像合成部、 7 切替スイッチ、 8 操作スイッチ、 10、11 車載運転支援カメラ装置、 20 表示装置、 21 車速センサ、 22 ステアリング蛇角センサ、 23 カーナビゲーション装置、 24 シフトポジションセンサ、 30 車両、 3L 3R カメラの撮影画像、 12e 複数画面表示手段、 Lh Rh カメラの水平画角、 Lv Rv カメラの垂直画角 。
DESCRIPTION OF
Claims (9)
前記カメラの撮影方向を変更するカメラ制御機構と、
前記カメラ制御機構を駆動することにより、前記カメラの撮影方向を前記車両の略進行方向及び略側面方向に変更するカメラ制御手段と
前記カメラによる左右の撮影画像信号から左右の画像を一つの画面に表示するための左右表示画面信号に合成する左右画面合成手段と、
前記左右表示画面信号、前記左右の撮影画像信号の何れかを選択する画像選択手段とを備え、
前記画像選択手段が、前記カメラが略側面方向を撮影しているときは前記左右表示画面信号を、略進行方向を撮影しているときは前記左右の撮影画像信号の何れか一方を表示画像信号として出力することを特徴とする車載運転支援カメラ装置。 At least two cameras each attached to the left or right of the front or rear of the vehicle;
A camera control mechanism for changing the shooting direction of the camera;
By driving the camera control mechanism, camera control means for changing the shooting direction of the camera to a substantially traveling direction and a substantially side direction of the vehicle, and right and left images from left and right captured image signals from the camera on one screen Left and right screen combining means for combining the left and right display screen signals for display;
Image selection means for selecting one of the left and right display screen signals and the left and right captured image signals;
The image selection means displays the left and right display screen signal when the camera is capturing a substantially lateral direction, and displays either the left or right captured image signal when the camera is capturing a substantially traveling direction. An in-vehicle driving assistance camera device characterized by being output as
前記画像選択手段が、前記カメラが略側面方向を撮影しているときは前記左右表示画面信号を、略進行方向を撮影しているときは前記障害物認識手段から出力される進行方向画像信号を表示画像信号として出力することを特徴とする請求項1に記載の車載運転支援カメラ装置。 In addition, an obstacle recognizing means for recognizing an obstacle that obstructs driving of the vehicle based on the left and right photographed image signals and outputting either one of the left and right photographed image signals,
When the image selection means is photographing the substantially side direction, the left and right display screen signal is obtained, and when the image selection means is photographing the substantially advance direction, the traveling direction image signal output from the obstacle recognition means is obtained. The in-vehicle driving support camera device according to claim 1, wherein the on-vehicle driving support camera device is output as a display image signal.
The in-vehicle driving assistance camera device according to any one of claims 1 to 4, wherein the camera control mechanism is capable of swinging a shooting direction of the camera in a horizontal direction or an elevation angle direction.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006171176A JP4929869B2 (en) | 2006-06-21 | 2006-06-21 | In-vehicle driving assistance camera device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006171176A JP4929869B2 (en) | 2006-06-21 | 2006-06-21 | In-vehicle driving assistance camera device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2008001179A true JP2008001179A (en) | 2008-01-10 |
| JP4929869B2 JP4929869B2 (en) | 2012-05-09 |
Family
ID=39005918
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006171176A Expired - Fee Related JP4929869B2 (en) | 2006-06-21 | 2006-06-21 | In-vehicle driving assistance camera device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4929869B2 (en) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009027240A (en) * | 2007-07-17 | 2009-02-05 | Suzuki Motor Corp | Image processing apparatus for vehicle |
| EP2078575A2 (en) | 2008-01-08 | 2009-07-15 | Makita Corporation | Cutting devices |
| WO2009095989A1 (en) * | 2008-01-29 | 2009-08-06 | Pioneer Corporation | Image acquisition device, image acquisition method, image acquisition program, and storage medium |
| JP2009219000A (en) * | 2008-03-12 | 2009-09-24 | Pioneer Electronic Corp | Camera device and imaging system |
| JP2011105058A (en) * | 2009-11-13 | 2011-06-02 | Aisin Seiki Co Ltd | Multifunctional camera system |
| JP2014042096A (en) * | 2012-08-21 | 2014-03-06 | Daimler Ag | Cab-over type vehicle |
| CN107678041A (en) * | 2016-08-02 | 2018-02-09 | 三星电子株式会社 | System and method for detection object |
| KR20180040012A (en) * | 2016-10-11 | 2018-04-19 | 주식회사 만도 | Front monitoring apparatus, driving assistant apparatus using front monitoring apparatus and driving assistant method using front monitoring apparatus |
| JP2018116722A (en) * | 2018-03-05 | 2018-07-26 | 株式会社ユピテル | Drive recorder body and apparatus |
| JP2019125152A (en) * | 2018-01-16 | 2019-07-25 | 株式会社デンソー | Communication equipment and communication method |
| JP2020052784A (en) * | 2018-09-27 | 2020-04-02 | 株式会社Subaru | Driving support device |
| CN112112202A (en) * | 2019-06-21 | 2020-12-22 | 纳博特斯克有限公司 | Handling assistance system, handling assistance method, and construction machine |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05238314A (en) * | 1992-02-28 | 1993-09-17 | Honda Motor Co Ltd | Vehicular ambience monitor system |
| JPH05310078A (en) * | 1992-05-07 | 1993-11-22 | Clarion Co Ltd | Vehicle safety confirmation device and camera used for the device |
| JP2001294086A (en) * | 2000-04-17 | 2001-10-23 | Auto Network Gijutsu Kenkyusho:Kk | Vehicle periphery recognition device |
| JP2002154375A (en) * | 2000-11-20 | 2002-05-28 | Nissan Motor Co Ltd | Visibility assist device for vehicles |
| JP2002279596A (en) * | 2001-03-15 | 2002-09-27 | Nissan Motor Co Ltd | Vehicle periphery monitoring device |
| JP2003202614A (en) * | 2002-01-09 | 2003-07-18 | Auto Network Gijutsu Kenkyusho:Kk | Vehicle periphery recognition device |
| JP2005309797A (en) * | 2004-04-22 | 2005-11-04 | Nissan Motor Co Ltd | Pedestrian warning device |
-
2006
- 2006-06-21 JP JP2006171176A patent/JP4929869B2/en not_active Expired - Fee Related
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH05238314A (en) * | 1992-02-28 | 1993-09-17 | Honda Motor Co Ltd | Vehicular ambience monitor system |
| JPH05310078A (en) * | 1992-05-07 | 1993-11-22 | Clarion Co Ltd | Vehicle safety confirmation device and camera used for the device |
| JP2001294086A (en) * | 2000-04-17 | 2001-10-23 | Auto Network Gijutsu Kenkyusho:Kk | Vehicle periphery recognition device |
| JP2002154375A (en) * | 2000-11-20 | 2002-05-28 | Nissan Motor Co Ltd | Visibility assist device for vehicles |
| JP2002279596A (en) * | 2001-03-15 | 2002-09-27 | Nissan Motor Co Ltd | Vehicle periphery monitoring device |
| JP2003202614A (en) * | 2002-01-09 | 2003-07-18 | Auto Network Gijutsu Kenkyusho:Kk | Vehicle periphery recognition device |
| JP2005309797A (en) * | 2004-04-22 | 2005-11-04 | Nissan Motor Co Ltd | Pedestrian warning device |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009027240A (en) * | 2007-07-17 | 2009-02-05 | Suzuki Motor Corp | Image processing apparatus for vehicle |
| EP2078575A2 (en) | 2008-01-08 | 2009-07-15 | Makita Corporation | Cutting devices |
| EP2363230A1 (en) | 2008-01-08 | 2011-09-07 | Makita Corporation | Cutting device |
| WO2009095989A1 (en) * | 2008-01-29 | 2009-08-06 | Pioneer Corporation | Image acquisition device, image acquisition method, image acquisition program, and storage medium |
| JP2009219000A (en) * | 2008-03-12 | 2009-09-24 | Pioneer Electronic Corp | Camera device and imaging system |
| JP2011105058A (en) * | 2009-11-13 | 2011-06-02 | Aisin Seiki Co Ltd | Multifunctional camera system |
| KR101369866B1 (en) * | 2009-11-13 | 2014-03-05 | 아이신세이끼가부시끼가이샤 | Multi-function camera system |
| JP2014042096A (en) * | 2012-08-21 | 2014-03-06 | Daimler Ag | Cab-over type vehicle |
| CN107678041A (en) * | 2016-08-02 | 2018-02-09 | 三星电子株式会社 | System and method for detection object |
| TWI781109B (en) * | 2016-08-02 | 2022-10-21 | 南韓商三星電子股份有限公司 | System and method for stereo triangulation |
| KR20180040012A (en) * | 2016-10-11 | 2018-04-19 | 주식회사 만도 | Front monitoring apparatus, driving assistant apparatus using front monitoring apparatus and driving assistant method using front monitoring apparatus |
| KR102537598B1 (en) * | 2016-10-11 | 2023-06-01 | 주식회사 에이치엘클레무브 | Front monitoring apparatus, driving assistant apparatus using front monitoring apparatus and driving assistant method using front monitoring apparatus |
| JP7040031B2 (en) | 2018-01-16 | 2022-03-23 | 株式会社デンソー | Communication device and communication method |
| JP2019125152A (en) * | 2018-01-16 | 2019-07-25 | 株式会社デンソー | Communication equipment and communication method |
| JP2018116722A (en) * | 2018-03-05 | 2018-07-26 | 株式会社ユピテル | Drive recorder body and apparatus |
| JP2020052784A (en) * | 2018-09-27 | 2020-04-02 | 株式会社Subaru | Driving support device |
| JP7202120B2 (en) | 2018-09-27 | 2023-01-11 | 株式会社Subaru | Driving support device |
| CN112112202A (en) * | 2019-06-21 | 2020-12-22 | 纳博特斯克有限公司 | Handling assistance system, handling assistance method, and construction machine |
| JP2021001472A (en) * | 2019-06-21 | 2021-01-07 | ナブテスコ株式会社 | Steering support system for construction machine, steering support method for construction machine, and construction machine |
| CN112112202B (en) * | 2019-06-21 | 2024-04-23 | 纳博特斯克有限公司 | Manipulation assistance system, manipulation assistance method, and construction machinery |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4929869B2 (en) | 2012-05-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5070809B2 (en) | Driving support device, driving support method, and program | |
| JP4134939B2 (en) | Vehicle periphery display control device | |
| US8717196B2 (en) | Display apparatus for vehicle | |
| CN106564432B (en) | Vehicle view angle control device and method, and vehicle including the device | |
| US9219887B2 (en) | Drive assist device | |
| JP4929869B2 (en) | In-vehicle driving assistance camera device | |
| JP2007223338A (en) | Display system, moving body, display method, display program, and recording medium thereof | |
| JP2017536621A (en) | Method for operating driver assistance system for motor vehicle, driver assistance system, and motor vehicle | |
| JP2002117496A (en) | On-vehicle rear confirmation support device and on- vehicle navigation device | |
| JP2019104336A (en) | Image display device and driving assist system | |
| JP4479183B2 (en) | Video presentation device | |
| JP2011003117A (en) | Backward visual recognition support system | |
| JP4703896B2 (en) | Driving support device | |
| JP2002154375A (en) | Visibility assist device for vehicles | |
| CN113060156B (en) | Vehicle surrounding monitoring device, vehicle, vehicle surrounding monitoring method and program | |
| JP2006295676A (en) | Imaging device for mobile unit | |
| JP2008282235A (en) | Driving support device, automobile equipped with driving support device, and driving support method | |
| US20250316094A1 (en) | Image processing device, mobile object, image processing method, and storage medium | |
| CN104670092B (en) | Apparatus and method for assisting parking | |
| JP4161861B2 (en) | Night vision system for vehicles linked to headlights for curved roads | |
| JP6093338B2 (en) | Sign information display system and sign information display method | |
| JPH09180088A (en) | Surrounding monitor device for vehicles | |
| JP4774603B2 (en) | Vehicle display device | |
| JP2004051063A (en) | Vehicle periphery recognition device | |
| JP2007293390A (en) | Reverse running alarm device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080717 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110304 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110315 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110512 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110802 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110928 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120117 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120130 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150224 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |