[go: up one dir, main page]

WO2007066580A1 - カメラ装置及びワイパ制御方法 - Google Patents

カメラ装置及びワイパ制御方法 Download PDF

Info

Publication number
WO2007066580A1
WO2007066580A1 PCT/JP2006/324024 JP2006324024W WO2007066580A1 WO 2007066580 A1 WO2007066580 A1 WO 2007066580A1 JP 2006324024 W JP2006324024 W JP 2006324024W WO 2007066580 A1 WO2007066580 A1 WO 2007066580A1
Authority
WO
WIPO (PCT)
Prior art keywords
circuit
wiper
image
camera device
foreign object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2006/324024
Other languages
English (en)
French (fr)
Inventor
Koji Wakiyama
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of WO2007066580A1 publication Critical patent/WO2007066580A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/56Accessories
    • G03B17/561Support related camera accessories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/52Elements optimising image sensor operation, e.g. for electromagnetic interference [EMI] protection or temperature control by heat transfer or cooling elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals

Definitions

  • 0001 relates to a camera device to which a wai is worn and a method for controlling the wai.
  • the patent describes a method of controlling a wiping system for wiping the surface of a glass of an automobile or the like.
  • a special optical sensor is installed on the windshield to detect the state of the windshield surface, and the light on the glass surface is detected to detect rain patterns. Physically, the raindrop is detected by recognizing what occurs in the detector under the raindrop.
  • the foreign material distinction unit identifies the presence of foreign matter based on the image data obtained by the unit equipped with the camera body. It does not increase the cost of the camera because no special sensor needs to be installed. In addition, since the wire is driven only when foreign matter is detected, it is possible to prevent image deterioration.
  • the above-mentioned separate unit detects the predetermined amount of movement in the above-mentioned data based on the difference between the number of data determined by the above-mentioned unit when the above-mentioned It is used to identify the presence of foreign matter based on the motion amount of the image that is output. [0111] When the area of a part is changed by adjusting the power of the camera, the position of the image of the subject in the image moves accordingly. On the other hand, the foreign matter adhering to the glass or the like placed on the surface of the part moves with the part, so that it does not change even when the image of the foreign matter in the frame is taken.
  • the separate unit has a number of motions having a constant motion amount in the region, including a motion amount determined according to Among these, the amount of foreign matter is calculated based on one of them, and the absence of foreign matter is identified by comparing the amount of foreign matter with a predetermined threshold value.
  • the amount of foreign matter is calculated based on the movement that differs from the change in the area, so that the foreign matter can be detected from the image obtained.
  • Ming Camera the separate part compares the output. Is updated based on the above-mentioned discharge amount in the above-mentioned Y.
  • the threshold value used for each foreign matter is updated, so that water and substances can be removed to a sufficient level according to the situation.
  • the separate part detects the wave number of the image based on the image data obtained by the part, and recognizes the lower part of the wave number as adhesion of foreign matter. .
  • the bright camera unit has the automatic adjustment mechanism, and the above-mentioned separate unit calculates the spatial wave number detected from the image taken immediately after the automatic adjustment mechanism is activated. It holds a large value as the wave number, and uses the spatial wave number detected from the image of the point and the wave number as a lamella to judge that foreign matter has adhered.
  • the wave number of the image taken immediately after the image was set by the operation of the automatic adjustment mechanism which is considered to be the large value of the spatial wave number, is held as the wave number, and the wave number of the image taken at the point is held.
  • the wave number with the wave number it is possible to identify whether or not foreign matter has adhered.
  • the 002 control method includes the steps of taking an image with a part, identifying the absence of foreign matter adhering to the surface to be swept by the wipe based on the image data obtained by the part, and And operating the wire according to the above.
  • the foreign matter-identifying part identifies the presence of foreign matter on the basis of the image data obtained by the part provided in the camera body. Therefore, it is not necessary to install a special sensor. Do not increase the strike. In addition, since the wire is driven only when foreign matter is detected, it is possible to prevent image deterioration. 002, the computer is provided with a wipe program for performing the steps of claim 7.
  • the 002 program identifies the presence of foreign matter based on the image data obtained by the camera's body, and it is not necessary to install a special sensor. Do not increase the strike. In addition, since the wire is driven only when foreign matter is detected, it is possible to prevent the image.
  • 3 shows an example of an image when the region is changing
  • FIG. 3 is a schematic diagram showing the main parts related to the camera device according to the light condition.
  • the camera of this embodiment control, rotation 5, rotation unit 5, gear 52, center 53, gear 54, magnet 55, magnetic sensor 56, and camera unit 57. It includes a table 58, a front glass 59, a wire 6, a wire 6, a connection 62, a magnet 63, and a magnetic sensor 64 and a support 65 66.
  • the camerat 57 functions as an example of a part, and has, for example, a 2 CC image sensor element in that part, and can photograph an object in front of the camera.
  • a transparent glass 59 is installed on the surface facing the camerat 57 to protect the internal elements and optical system from dirt and moisture.
  • a wiper 6 is provided to remove the water on the windshield 59 and water droplets.
  • Wye 6 is connected to Wright 6 via articulation 62. 62 converts the movement of the water 6 into a linear movement and transmits the driving force to the movement 6. By driving the wiper 6, the wiper 6 can remove dirt and water droplets on the front glass 59.
  • the 003 camerat 57 is supported on both sides by support arms 65 66. Also, the support frame 65 66 supports the camerat 57 so that the camerat 57 can swing about a predetermined center. Then, the camerat 57 can be turned to (chito). Further, the camera 58 of the motor 58 installed on the support frame 65 is connected, and by driving the camera 58, the camera 57 can be changed in the direction of the arrow.
  • 0032 65 65 65 is fixed on the rotating part 5 formed in a disk shape. Further, the rotating part 5 is arranged on the side of the rotation 5, and is supported by the rotation 5 while being rotated at the arrow 2 (n).
  • an inverter 53 is installed on the rotation 5 side.
  • a gear 54 is attached to the center 53, and the gear 54 is connected to the gear 52 mounted on the rotary unit 5.
  • the rotary unit 5 When the motor 53 is driven, the rotary unit 5 is driven via the gear 54 and the gear 52 and rotates in the direction of arrow 2. When the moving part 5 rotates, the camerat 57 also rotates in two directions.
  • a sensor 55 is in place. Further, in the rotation 5, a sensor 56 is attached at a position where the magnet 55 can face. Also, 63 is attached to the surface of the camera-t 57 in order to detect the orientation of the camera-t 57. A sensor 64 is mounted on the support frame 65 at a position where it can face 63.
  • Image display 2 is for the time taken by camerat 57. Used to display etc.
  • the control detects the foreign substance attached to the windshield 59 based on the image actually captured by the body 57, and operates the wiper 6 when the substance is separated. Is.
  • 00372 is a schematic diagram showing the structure of the lanes of the camera according to the situation of Ming.
  • circuit 33 operation number generation 32, command generator 23, command 38, image timing 7, target image output circuit 7, brightness variation 72, image 73, image 74, and motion output.
  • 89 and new 9. It is mainly composed of a processor that operates by control, for example, a wipe program.
  • the command decoder 23 is a circuit that interprets the content of the instruction input from the operation 22 and gives an operation indication to the control section.
  • the number generator 32 is a circuit that generates a Wy number in response to an instruction from the NAND device 23.
  • the wais 33 are paths for operating the wais by the number of wais generated by the motion number generator 32.
  • the circuit 38 functions as an example of and is a circuit for driving the transistor 53 based on the rotation direction information and the rotation information input from the inverter 23.
  • the 004 timing 7 is a circuit for generating the timing of the image memory based on the timing of the image 57 output from the printer 57.
  • the elephant image output circuit 7 is a circuit for extracting information on a predetermined image area from the image captured by the camera 57.
  • the degree change 72 is a circuit for calculating a change in brightness between adjacent images of the image output by the target image output circuit 7.
  • a reference numeral 73 is a memory for storing the brightness change 72 or the information processed by the target image output circuit 7.
  • the memory 74 reads the image information delayed by a predetermined time from the image memory 73 according to the signal timing of the image memory 7, and stores it.
  • the 004 output circuit 75 compares the contents of the images 73 and 74, which hold the image information of the images captured by each other, with each other to determine the object (movement direction and movement This is a circuit that extracts the quantity or movement.
  • the timing output circuit 76 is a circuit that outputs a timing signal each time the target image area changes.
  • Vector 77 is a circuit that holds the maximum vector amount of the target image as an extraction vector and holds it at the timing of timing circuit 76.
  • Reference numeral 004478 is a circuit which, when the object in the predetermined range is not included in the direction corresponding to the direction of rotation of the target image, outputs the foreign object as the object data.
  • the image 79 is a circuit that calculates the number of foreign objects that are output as a result from the detection 78.
  • Numeral 8 is a circuit that calculates the number of motions in the element that is the source of detection 78.
  • Vector 8 is a circuit that calculates the standard value of the motion vector based on the movement amount information and the frequency input from the NANDDA 23, and calculates the predicted vector range in which the detection difference is added. 82 detected
  • 004 83 is a circuit that calculates the value obtained by dividing the number of stops by the target number of strokes. is there. 284 is a circuit for calculating a value obtained by dividing the number of abnormalities by the target number of strokes. 385 is a circuit that calculates the value obtained by dividing the number of stops by the number of target images minus the number of abnormalities.
  • 004 868 is a way to hold the used to judge the Wy with the force of 83.
  • 2 87 is a path for holding 2 which is used to judge a Wy with the force of 2 84.
  • 3 88 is a path for holding 3 used to judge a Wy with the force of 3 85.
  • the selection of the deviation of 83, 2 84, 3 85 and 86 2 87, 388 is determined according to the judgment report input from the command data 23.
  • the operation of the circuit part is controlled by giving a predetermined information to the commander 22 and the commander 23.
  • the Nandadeda 23 makes the direction S23a and the rotation S23b necessary for controlling the work.
  • the 38 drives the 53.
  • the power of the motor 53 is transmitted to the rotary unit 5 via the gear 54 and the gear 52, and the rotary unit 5 rotates.
  • the unit 57 placed on the rotary unit 5 also rotates in the A2 direction, and the shooting direction changes.
  • the image of the time taken by the 57 is displayed on Image Display 2. The displayed image will move in the left-right direction.
  • the image image output circuit 7 limits the range of the image used for extracting the motion on the image, for example, within the range of a predetermined area. Therefore, the range is limited to reduce the amount of data to be processed when extracting motions.
  • the output circuit 75 detects the motion by comparing the two images at the shooting time.
  • 00573 is a diagram showing an example of an image when the area is changed.
  • the motion detection circuit 75 recognizes the detected amount and direction of movement as a motion. , The foreign matter adhering to the surface of the windshield 59 and the water drop rotate with the camerat 57, so movement is not detected in the image corresponding to the object or water drop.
  • a motion is performed while the camera 57 rotates a predetermined amount, and the motion output circuit 75 outputs the motions in sequence to perform a pixel operation. That is, the maximum value among the motion values input during the predetermined period is held and output as a result.
  • the 005 78 When the movement amount cannot be detected in the rotation direction of the camerat 57, the 005 78 considers that region as a region in which there is no change in brightness and excludes that region from the foreign substance region.
  • the following three types of lamellas P 1 to P3 can be used as the lamera representing the output at the time of 006.
  • O represents the number of motions not generated, that is, the number. Also, indicates the number of detection areas. In addition, has a constant amount of constants, including the amount of the predicted vector, i.e., the number where the predicted vector is the amount of camerat 57 between the two image differences to be compared. It shows the movement that can be seen.
  • the lamella P 83 is calculated, the lamella P 2 is calculated by 284, and the lamella P 3 is calculated by 3
  • 89 selectively uses the deviations of the three types of lamellas P to P3. For example, if the lamella P is selected by the judgment replacement S23c, the window
  • the wire 89 sets the number of operations (32) that corresponds to the amount of foreign matter (P) produced by 83 and that produced by 86. Physically, it outputs a value that represents (amount). Similarly, when the lamella P2 is selected, the wire 89 outputs to the operation number generator 32 a value according to the amount of foreign matter (P2) that 2 84 does and the amount that 2 87 does, and the lam e If you select P3,
  • the number generator 32 will Determine the number and activity. As a body example, if the value of Wy 89 is a positive number, Wyon is controlled, or if it is a negative number, wyo is controlled. In addition, the number of operations and the degree are increased in proportion to the size of the positive number.
  • Wy 33 functions as an example of Wy, and drives Wyt 6 and moves Wy 6 according to the signal generated by the operation number generation 32. Since the wire 6 covers the front glass 59, foreign matter that may cause shadows on the subject is removed, and a good image can be obtained.
  • the presence of foreign matter is identified based on the image data obtained by the unit provided in the camera body. Since it does not need to be installed, it does not increase the cost of the camera and the failure rate. In addition, since the wire is driven only when foreign matter is detected, it is possible to prevent the image. 007 0 (of 2)
  • Figure 4 is a block diagram showing the structure of the camera device according to the second condition of Ming. Control 2 shown in 4 is applied instead of control in the camera device shown in. In addition, in 4), the same number is attached to the 2 overlapping parts explained in the above condition.
  • the camera 57 applied to this embodiment has a function of an adjusting mechanism (lower, lower).
  • the camera device 2 of the present embodiment has a Y 33, a motion number generator 32, a command generator 23, a command 38, a target image output circuit 7, a high frequency output circuit, and an initial stage. 2 and
  • the command decoder 23 interprets the instruction input from the operation 22 and gives an operation indication to the circuit unit.
  • the number generator 32 is a circuit for generating a Wy number in response to the indication from the NAND device 23.
  • the wai 33 is a circuit that drives the wai 6 as many times as the operation number generation 32.
  • Reference numeral 38 is a circuit for driving the inverter 53 based on the rotation direction 23a and the rotation 23b input from the inverter 23.
  • the elephant image output circuit 7 is a process for extracting only the information of a specified specific area from the image obtained by the shadow of the dot 57.
  • the frequency output circuit is a circuit that finds the frequency band of the target image area and adds the results.
  • 007552 is a route for assigning the value of the high-frequency output circuit as an initial value at the timing when the operation of OT 57 is completed after the ring S23d of NANDDE 23 is input.
  • the output circuit 3 is a path for determining the difference between the high-frequency output circuit and the initial 2 as
  • 00764 is a circuit that holds the signal for disconnection.
  • Y5 is output circuit 3
  • control 2 shown in 4 will be described below.
  • the control unit 23 controls the operation of each part according to the instruction output from the operation 22.
  • the ndodeda 23 sends the direction information and the rotation information as the information of the operation
  • the nd 38 drives the nt 53. Since the power of the motor 53 is transmitted to the rotary unit 5 via the gear 54 and the gear 52, the rotary unit 5 rotates, and the mount 57 installed on the rotary unit 5 moves in two directions. Change. At this time, when viewing the image of the time taken with the screen 57 in image display 2, the subject on the displayed image
  • Fig. 5 shows an example of an image when foreign matter is attached
  • Fig. 6 is a front view showing the glass when foreign matter is attached.
  • the image output circuit 7 receives the image 57 output from the dot 57 and extracts a specific area that is a moving object in this image. Therefore, the image data that is the object of motion is limited to the area of the part of the frame.
  • the frequency output circuit 0 is for the image area output by the target image output circuit 7.
  • the value of the high frequency output circuit is the initial value in the timing of 008 product.
  • the spatial wave number detected from this image also includes high frequency components.
  • the value initially assigned to 2 represents the high frequency component of the state.
  • the output circuit 03 calculates the conversion based on the initial stage of the initial stage 2 when the high frequency output circuit outputs.
  • () is output circuit 3 as a change To do.
  • the change of the output circuit 3 becomes large.
  • 0087 Y5 is output from the output circuit 3 but is output to the operation number generator 32 as a notification that it is held in 4.
  • the frequency band of the spatial frequency extracted from the image by the high-frequency output circuit as a high-frequency component affects foreign matter
  • different sizes such as rain, snow, dust, etc. have different sizes and characteristics, so that the difference in the wave number associated with the foreign matter also depends on the type of foreign matter. Therefore, if the frequency band is selectively configured according to the type of object to be detected, foreign matter adhesion can be detected more effectively.
  • the 0089 number generator 32 determines the number of WYs and the degree of operation according to the value of WY5. For example, if the value is positive, it is Wyong, or if it is negative, it is Wyo. You may also increase the number of movements and the degree in proportion to the size of the positive number.
  • the 0090 WY 33 drives the WYTER 6 according to the force of the operation number generation 32, and operates the WY 6.
  • the 0090 WY 33 drives the WYTER 6 according to the force of the operation number generation 32, and operates the WY 6.
  • the presence of foreign matter is identified based on the wave number of the image data obtained by the part provided in the camera body, and therefore a special sensor is used. Since it does not need to be installed, it does not increase the cost of the device, nor does it increase the failure rate. In addition, since the wire is driven only when foreign matter is detected, it is possible to prevent the image. In addition, in the above-mentioned state 2, as a circuit for controlling the region,
  • the 0095 application is based on the present patent (2 5 35 58) of the 2 5 2 8 application, which is hereby incorporated by reference.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

 本発明の課題は、カメラ装置の構造を複雑化することなく、比較的安価にワイパによる撮像画像への影響を軽減することが可能なカメラ装置及びワイパ制御方法を提供することである。  カメラ装置にはワイパ(60)が装着され、画像を撮像する撮像部を有するカメラユニット(57)と、制御回路(11)とを備える。制御回路(11)は、カメラユニット(57)により得られた画像信号(S57)に基づいて、前面ガラス(59)に付着した異物の有無を識別し、異物が識別されたときにワイパ(60)を動作させる。

Description

明 細 書
カメラ装置及びワイパ制御方法
技術分野
[0001] 本発明は、ワイパが装着されるカメラ装置及びそのワイパ制御方法に関する。
背景技術
[0002] 監視カメラ等、屋外等に設置されるカメラ装置には、レンズやレンズを保護する保護 ガラスに水滴や汚れ等が付着する。そこで、付着した水滴や汚れ等を取り除くために ワイパが装着された監視カメラ装置がある。
[0003] このようなワイパが装着されるカメラ装置では、ワイパを駆動している間は、ワイパ自 体 (例えばワイパブレード)が被写体の撮影を妨げることになるので、鮮明な監視画 像を得るためには、ワイパ機構の駆動に格別な配慮が必要になる。
[0004] 例えば、特許文献 1には、自動車等の風防ガラスの表面を払拭するためのワイパ系 を制御する方法が記載されている。この方法では、風防ガラスの表面の状態を検出 するために特別な光学センサを風防ガラスに設置してガラス面の光透過率を検出し 、雨模様を検出している。具体的には、雨滴の落下によって検出信号に生じる変化 のエッジを認識することにより、雨滴や曇りを検出している。
[0005] 特許文献 1 :特開平 6— 199208号公報
発明の開示
発明が解決しょうとする課題
[0006] し力しながら、上記の方法では、ガラス面上の雨滴等を検出するために特別なセン サを設置することが不可欠であるため、このような技術をカメラ装置に採用することに より、構造が複雑になり装置コストの上昇も避けられないといった事情があった。
[0007] 本発明は、上記の事情に鑑みてなされたものであって、カメラ装置の構造を複雑化 することなぐ比較的安価にワイパによる撮像画像への影響を軽減することが可能な カメラ装置及びワイパ制御方法を提供することを目的とする。
課題を解決するための手段
[0008] 本発明のカメラ装置は、画像を撮像する撮像部と、前記撮像部に撮像される面を清 掃するワイパと、前記撮像部により得られた画像データに基づいて、前記ワイパにより 清掃される面に付着した異物の有無を識別する異物識別部と、前記異物識別部によ り異物が識別されたときに前記ワイパを動作させるワイパ制御部とを備えたものである
[0009] この構成により、異物識別部がそのカメラ自体に備わっている撮像部により得られ た画像データに基づ!/、て異物の有無を識別するので、特別なセンサを設置する必要 がないため、カメラ装置のコストを増大させることがない。また、異物の付着が検出さ れたときだけワイパ機構を駆動するので、画像の品質劣化を防止することが可能にな る。
[0010] また、本発明のカメラ装置は、前記撮像部の撮像領域を制御する撮像領域制御部 を備え、前記異物識別部は、前記撮像領域制御部が前記撮像領域を変化させてい るときに、前記撮像部により撮像された複数の画像データ間の差異に基づいて、前 記画像データにおける所定の画像領域毎に移動量を検出し、前記検出された画像 領域毎の移動量の違 1、に基づ 1、て異物の有無を識別するものである。
[0011] カメラの姿勢調整などによって撮像部の撮像領域を変化させている時には、その移 動に伴って画像フレーム中の被写体の像の位置が移動する。一方、前記撮像部の 前面に配置されるガラス等に付着した異物は、撮像部と共に移動するので画像フレ ーム中の異物の像の位置は撮影方向の変更中であっても変わらない。そこで、上記 の構成により、互いに異なる時点で撮影した複数画像のフレーム中の像の移動量の 違いを区別することにより、被写体の像とガラス面の異物とを識別することができる。
[0012] また、本発明のカメラ装置において、前記異物識別部は、前記画像領域において、 前記撮像領域制御部による撮像領域変化の制御量に応じて定まる移動量を含む所 定の移動量範囲外の移動量を有する画素数、及び移動量が実質的にゼロの画素数 の少なくとも一方に基づいて異物検出量を求め、前記異物検出量と所定のしきい値 とを比較して異物の有無を識別するものである。
[0013] この構成により、撮像領域の変化とは異なる移動をする画素に基づいて異物検出 量を求めるので、撮像された画像カゝら異物の付着を検出することができる。
[0014] また、本発明のカメラ装置は、前記異物識別部が前記異物検出量と比較する閾値 を、前記ワイパの動作後における前記異物検出量に基づいて更新する閾値更新部 を備えたものである。
[0015] この構成により、ワイパ駆動毎に異物識別に用いるしきい値を更新するので、状況 に応じた十分なレベルまで水分や異物を除去できる。
[0016] また、本発明のカメラ装置において、前記異物識別部は、前記撮像部の撮像により 得られた画像データに基づいて画像中の空間周波数を検出し、前記空間周波数の 低下を異物の付着として認識するものである。
[0017] この構成により、撮影面のガラス等に異物が付着したことに起因して、画像中に含 まれる空間周波数の高い成分が減少することを検出するので、異物の付着を認識す ることがでさる。
[0018] また、本発明のカメラ装置において、前記撮像部は自動焦点調整機構を有し、前 記異物識別部は、前記自動焦点調整機構の作動によって合焦状態になった直後に 撮像された画像カゝら検出された空間周波数の最大値を周波数初期値として保持し、 各時点の画像力 検出される空間周波数と前記周波数初期値との違いを異物の付 着と判断するためのパラメータとして使用する。
[0019] この構成により、空間周波数の最大値と考えられる、自動焦点調整機構の作動によ つて合焦状態になった直後に撮影された画像の空間周波数を周波数初期値として 保持しておき、各時点で撮影された画像中の空間周波数と前記周波数初期値とを比 較することにより、異物の付着の有無を識別できる。
[0020] 本発明のワイパ制御方法は、撮像部により画像を撮像するステップと、前記撮像部 により得られた画像データに基づいて、ワイパにより清掃される面に付着した異物の 有無を識別するステップと、前記異物の識別結果に基づいて、前記ワイパを動作さ せるステップとを有する。
[0021] この方法により、異物識別部がそのカメラ自体に備わっている撮像部により得られ た画像データに基づ!/、て異物の有無を識別するので、特別なセンサを設置する必要 がないため、カメラ装置のコストを増大させることがない。また、異物の付着が検出さ れたときだけワイパ機構を駆動するので、画像の品質劣化を防止することが可能にな る。 [0022] 本発明は、コンピュータに、請求項 7に記載の各ステップを実行させるワイパ制御プ ログラムが提供されるちのである。
[0023] このプログラムにより、異物識別部がそのカメラ自体に備わっている撮像部により得 られた画像データに基づいて異物の有無を識別するので、特別なセンサを設置する 必要がないため、カメラ装置のコストを増大させることがない。また、異物の付着が検 出されたときだけワイパ機構を駆動するので、画像の品質劣化を防止することが可能 になる。
発明の効果
[0024] 本発明によれば、カメラ装置の構造を複雑ィ匕することなぐ比較的安価にワイパによ る撮像画像への影響を軽減することが可能なカメラ装置及びワイパ制御方法を提供 することができる。また、特別なセンサを設置しないため、故障確率を増大させること がな 、と 、つた効果を有する。
図面の簡単な説明
[0025] [図 1]本発明の第 1の実施形態に係るカメラ装置に関連する主要部の構成例を示す ブロック図
[図 2]本発明の第 1の実施形態に係るカメラ装置の制御回路の概略構成を示すブロッ ク図
[図 3]撮像領域が変化しているときの撮像画像の例を示す図
[図 4]本発明の第 2の実施形態に係るカメラ装置の制御回路の概略構成を示すブロッ ク図
[図 5]異物が付着しているときの撮像画像の例を示す図
[図 6]異物が付着しているときの前面ガラスを示す側面図
符号の説明
[0026] 21 画像表示部
22 操作端末
230, 231 コマンドデコーダ
320, 321 動作回数生成回路
33 ワイパ駆動回路 0 パン駆動回路 回転台固定部 回転台可動部 困单
パン駆動モータ 困单
磁石
磁気センサ
カメラユニット チノレト駆動モータ 前面ガラス
ワイパ
ワイパ駆動モータ 連接
磁石
磁気センサ
, 66 支持フレーム 画像タイミング生成回路 対象画像抽出回路 輝度変化検知回路, 74 画像メモリ 動きベクトル抽出回路 タイミング信号出力回路 最大ベクトル保持回路 検出領域決定回路 対象画素数演算回路 停止画素数演算回路 予測ベクトル演算回路 82 異常画素数演算回路
83 第 1比率演算回路
84 第 2比率演算回路
85 第 3比率演算回路
86 第 1閾値保持回路
87 第 2閾値保持回路
88 第 3閾値保持回路
89 ワイパ動作情報回路
90 閾値更新回路
101 高周波成分抽出回路
102 初期値決定回路
103 合焦度変化算出回路
104 閾値保持回路
105 ワイパ動作情報回路
発明を実施するための最良の形態
[0027] (第 1の実施形態)
図 1は本発明の第 1の実施形態に係るカメラ装置に関連する主要部の構成例を示 すブロック図である。
[0028] 図 1に示すように、本実施形態のカメラ装置は、制御回路 11と、回転台固定部 50と 、回転台可動部 51と、歯車 52と、パン駆動モータ 53と、歯車 54と、磁石 55と、磁気 センサ 56と、カメラユニット 57と、チルト駆動モータ 58と、前面ガラス 59と、ワイパ 60と 、ワイパ駆動モータ 61と、連接棒 62と、磁石 63と、磁気センサ 64と支持フレーム 65 及び 66とを備える。
[0029] カメラユニット 57は撮像部の一例として機能し、その内部に例えば 2次元 CCDィメ ージセンサのような撮像素子を有しており、前方に位置する任意の被写体を撮影す ることができる。カメラユニット 57の撮影方向の前面には内部の撮像素子や光学系を 汚れや水分力も保護するために透明な前面ガラス 59が設置してある。
[0030] また、前面ガラス 59が汚れや水滴等の異物が付着するとカメラユニット 57の撮影に 支障をきたすことになるので、前面ガラス 59の汚れや水滴を拭い取るためにワイパ 6 0が設けてある。ワイパ 60は、連接棒 62を介してワイパ駆動モータ 61と接続されてい る。連接棒 62はワイパ駆動モータ 61の回転運動を直線運動に変換して駆動力をヮ ィパ 60に伝達する。従って、ワイパ駆動モータ 61を駆動することによりワイパ 60で前 面ガラス 59上の汚れや水滴を拭 、取ることができる。
[0031] カメラユニット 57は、両側の側面が支持フレーム 65及び 66によって支持されている 。また、支持フレーム 65及び 66は所定の支持軸を中心としてカメラユニット 57が揺動 自在になるようにそれを支持している。従って、カメラユニット 57は矢印 A1方向(チル ト方向)に向きを変えることができる。また、支持フレーム 65上に設置されたチルト駆 動モータ 58の駆動軸がカメラユニット 57と連結されており、チルト駆動モータ 58を駆 動することにより、カメラユニット 57の向きを矢印 A1方向に変更することができる。
[0032] 支持フレーム 65及び 66は円盤形状に形成された回転台可動部 51の上に固定さ れている。また、回転台可動部 51は回転台固定部 50の上方に配置してあり、矢印 A 2方向(パン方向)に回転自在な状態で回転台固定部 50に支持されている。また、回 転台固定部 50の側方にパン駆動モータ 53が設置してある。パン駆動モータ 53の駆 動軸には歯車 54が装着してあり、この歯車 54が回転台可動部 51に装着された歯車 52と連結されて!ヽる。
[0033] 従って、パン駆動モータ 53を駆動すると、歯車 54及び歯車 52を介して回転台可動 部 51が駆動され、矢印 A2方向に回転する。回転台可動部 51が回転すると、それに 伴ってカメラユニット 57の向きも矢印 A2方向に回転する。
[0034] 回転台可動部 51の回転方向の位置を検出するために、回転台可動部 51の周面 の所定位置に磁石 55が装着してある。また、回転台固定部 50の周面には、磁石 55 と対向可能な位置に磁気センサ 56が装着してある。また、カメラユニット 57のチルト 方向の位置を検出するために、カメラユニット 57の側面には磁石 63が装着してある。 また、支持フレーム 65上には磁石 63と対向可能な位置に磁気センサ 64が装着され ている。
[0035] カメラ装置を実際に使用する場合には、画像表示部 21を備える操作端末 22が用 いられる。画像表示部 21は、カメラユニット 57によって撮影されたリアルタイムの映像 などを表示するために用いられる。また、操作端末 22から所定のコマンドを入力する ことにより、例えばカメラユニット 57の撮影方向などに関する動作指示を与えることが できる。
[0036] 次に、本実施形態のワイパ制御方法について説明する。本実施形態のカメラ装置 において、制御回路 11は、カメラユニット 57自体が実際に撮影した映像に基づいて 、前面ガラス 59に対する異物の付着を検出し、この異物が識別されたときにワイパ 60 を動作させるものである。
[0037] 図 2は、本発明の第 1の実施形態に係るカメラ装置の制御回路の概略構成を示す ブロック図である。
[0038] 図 2に示すように、制御回路 11は異物識別部の一例として機能し、ワイパ駆動回路 33と、動作回数生成回路 320と、コマンドデコーダ 230と、パン駆動回路 380と、画 像タイミング生成回路 70と、対象画像抽出回路 71と、輝度変化検知回路 72と、画像 メモリ 73と、画像メモリ 74と、動きベクトル抽出回路 75と、タイミング信号出力回路 76 と、最大べ外ル保持回路 77と、検出領域決定回路 78と、対象画素数演算回路 79と 、停止画素数演算回路 80と、予測べ外ル演算回路 81と、異常画素数演算回路 82 と、第 1比率演算回路 83と、第 2比率演算回路 84と、第 3比率演算回路 85と、第 1閾 値保持回路 86と、第 2閾値保持回路 87と、第 3閾値保持回路 88と、ワイパ動作情報 回路 89と、閾値更新回路 90とを備える。なお、制御回路 11は、例えばワイパ制御プ ログラムによって動作するプロセッサを主体に構成される。
[0039] コマンドデコーダ 230は、操作端末 22から入力される指示の内容を解釈して制御 回路 11の各部に動作指示を与える回路である。動作回数生成回路 320は、コマンド デコーダ 230からの指示を受けて、ワイパ動作回数を生成する回路である。ワイパ駆 動回路 33は、動作回数生成回路 320の生成したワイパ動作回数だけ、ワイパを動作 させるための回路である。パン駆動回路 380は、撮像領域制御部の一例として機能 し、コマンドデコーダ 230から入力される回転方向情報と回転量情報とに基づいてパ ン駆動モータ 53を駆動する回路である。
[0040] 画像タイミング生成回路 70は、カメラユニット 57から出力される画像信号 S57のフ レーム更新タイミングに基づ 、て、画像メモリの更新タイミングを生成する回路である 。対象画像抽出回路 71は、カメラユニット 57が撮影した画像の中から、予め定めた 画像領域の画像情報を抽出する回路である。輝度変化検知回路 72は、対象画像抽 出回路 71が抽出した画像領域中の各画素毎に、隣接する画素群との間の輝度変化 を算出する回路である。
[0041] 画像メモリ 73は、輝度変化検知回路 72又は対象画像抽出回路 71の処理する各画 素情報を記憶するためのメモリである。画像メモリ 74は、画像タイミング生成回路 70 が出力する信号のタイミングに従って、所定フレームだけ時間的に遅れた画像情報 を画像メモリ 73から読み込んで記憶するためのメモリである。
[0042] 動きベクトル抽出回路 75は、互いに撮影時刻の異なる画像情報を保持している画 像メモリ 73の内容と画像メモリ 74の内容とを比較することにより、対象画素毎にその 動きベクトル (移動方向と移動量もしくは移動速度)を抽出する回路である。
[0043] タイミング信号出力回路 76は、対象画像範囲の 1画面分の角度回転するたびに、 タイミング信号を出力する回路である。最大ベクトル保持回路 77は、対象画素毎に 最大ベクトル量を抽出ベクトルとして保持し、タイミング信号出力回路 76のタイミング で保持値をクリアする回路である。
[0044] 検出領域決定回路 78は、対象画素のうち回転方向に対応した画素列に所定範囲 のベクトルが含まれな 、場合、その画素列のベクトルデータを異物検出の対象外と する回路である。
[0045] 対象画素数演算回路 79は、検出領域決定回路 78から結果として出力される異物 検出の対象となる画素の総数を算出する回路である。停止画素数演算回路 80は、 検出領域決定回路 78の異物検出の対象となる画素の中で動き量がない画素数を算 出する回路である。
[0046] 予測ベクトル演算回路 81は、コマンドデコーダ 230から入力される移動量情報と力 メラの撮影角度とに基づいて動きベクトルの目標値を算出し、検出誤差を加味した予 測ベクトル範囲を算出する回路である。異常画素数演算回路 82は、検出領域決定 回路 78の異物検知の対象となる画素の中で、予測ベクトルの範囲外のベクトルが検 出された画素 (異常画素)の数を算出する回路である。
[0047] 第 1比率演算回路 83は、停止画素数を対象画素数で除した値を演算する回路で ある。第 2比率演算回路 84は、異常画素数を対象画素数で除した値を演算する回路 である。第 3比率演算回路 85は、停止画素数を対象画素数力も異常画素数を引い た数で除した値を演算する回路である。
[0048] 第 1閾値保持回路 86は、第 1比率演算回路 83の出力でワイパ動作を判定するた めに用いられる第 1の閾値を保持するための回路である。第 2閾値保持回路 87は、 第 2比率演算回路 84の出力でワイパ動作を判定するために用いられる第 2の閾値を 保持するための回路である。第 3閾値保持回路 88は、第 3比率演算回路 85の出力 でワイパ動作を判定するために用いられる第 3の閾値を保持するための回路である。
[0049] ワイパ動作情報回路 89は、第 1比率演算回路 83、第 2比率演算回路 84、第 3比率 演算回路 85のいずれか一つが出力する値と、第 1閾値保持回路 86、第 2閾値保持 回路 87、第 3閾値保持回路 88のいずれか一つが出力する閾値との差分を演算し、 その結果をワイパ動作情報として出力する。ワイパ動作情報回路 89が第 1比率演算 回路 83、第 2比率演算回路 84、第 3比率演算回路 85並びに第 1閾値保持回路 86、 第 2閾値保持回路 87、第 3閾値保持回路 88のいずれを選択するかは、コマンドデコ ーダ 230から入力される判定手段切替情報に対応して決定される。
[0050] 閾値更新回路 90は、ワイパ動作直後に、タイミング信号出力回路 76が出力するタ イミングで、第 1比率演算回路 83、第 2比率演算回路 84、第 3比率演算回路 85がそ れぞれ出力する値に比べて所定の値だけ大きな値を第 1閾値保持回路 86、第 2閾 値保持回路 87、第 3閾値保持回路 88の閾値として割り当てる回路である。
[0051] 次に、図 2に示す制御回路 11の動作について以下に説明する。操作端末 22から コマンドデコーダ 230に対して所定の指示情報を与えることにより、回路各部の動作 が制御される。例えばマニュアル動作の指示情報が発生すると、コマンドデコーダ 23 0はマニュアル動作の制御に必要な方向情報 S23aと回転量情報 S23bとを出力する 。これらの情報に従って、パン駆動回路 380はパン駆動モータ 53を駆動する。パン 駆動モータ 53の駆動力は歯車 54及び歯車 52を介して回転台可動部 51に伝達され 、回転台可動部 51が回転する。これに伴って、回転台可動部 51上に配置されてい るカメラユニット 57も矢印 A2方向に回転し、撮影方向が変化する。このとき、カメラュ ニット 57によって撮影されたリアルタイムの画像を画像表示部 21上で見ると、表示さ れる画像は左右方向に移動することになる。
[0052] また、ワイパ動作指示が出力されると、動作回数生成回路 320はワイパ動作情報回 路 89の出力する情報に従ってワイパ 60を駆動するように制御する。
[0053] 次に、前面ガラス 59の表面に付着した異物や水滴等の存在を検出するための動 作について説明する。
[0054] 対象画像抽出回路 71は、画像上で動きベクトルを抽出するために利用する画像の 範囲を、例えば予め決定した領域の範囲内に限定する。つまり、動きベクトルを抽出 する際に処理対象となるデータ量を減らすために、範囲を限定する。
[0055] 輝度変化検知回路 72は、動きベクトルの抽出を容易にするために、前処理として 被写体の輝度変化部分が強調されるように画像処理を行う。
[0056] 動きベクトル抽出回路 75は、撮影時刻の異なる 2つの画像を比較することによって 画素毎に動きベクトルを検出する。
[0057] 図 3は、撮像領域が変化して ヽるときの撮像画像の例を示す図である。パン駆動モ ータ 53の駆動によりカメラユニット 57の向きを回転させているときには、例えば図 3に 示すように撮影される画像中の被写体は、カメラユニット 57の旋回方向と逆方向に移 動することになる。従って、カメラユニット 57の旋回中に互いに異なる時点で撮影され た 2つの画像を比較すると、画素毎に画像上での移動が検出される。そこで、動きべ タトル抽出回路 75は画素毎に検出された移動量及び移動方向を動きベクトルとして 認識する。但し、前面ガラス 59の表面に付着した異物や水滴等はカメラユニット 57と 共に回転するので、画像上で異物や水滴等に相当する画素については、移動は検 出されない。
[0058] 最大ベクトル保持回路 77は、カメラユニット 57が所定量の回転をする間に動きべク トル抽出回路 75が順次に出力する動きベクトルの瞬時値について、ピークホールド 動作を行う。つまり、所定の検出期間の間に入力された動きベクトルの瞬時値の中の 最大値を結果的に保持し出力する。
[0059] 検出領域決定回路 78は、カメラユニット 57の回転方向の全ての画素列について、 動きベクトル量が検出できな力つた場合に、その領域を輝度変化のない領域とみなし 、その領域を異物検出領域力 除外する。 [0060] 実際の異物検出量を表すパラメータとしては、次の 3種類のパラメータ P1〜P3を利 用することができる。
[0061] Pl =NO/Nt
P2 = Nx/Nt
P3 = NO/ (Nt-Nx)
[0062] ここで、 NOは、動きの検出されな力つた画素の数、すなわち停止画素数を示す。ま た、 Ntは、検出領域の総画素数を示す。さらに、 Nxは、予測ベクトルのベクトル量を 含む所定のベクトル量範囲外のベクトル量を有する画素の数、すなわち異常画素数 を示すここで、予測ベクトルとは、比較する 2つの画像の撮影時間差の間のカメラュ ニット 57の回転量から求められる動きベクトルを示す。
[0063] 図 2に示す制御回路 11においては、パラメータ P1は第 1比率演算回路 83で計算さ れ、パラメータ P2は第 2比率演算回路 84で計算され、パラメータ P3は第 3比率演算 回路 85で計算される。
[0064] 実際に、 3種類のパラメータ P1〜P3の 、ずれを利用するかにっ 、ては、現実に前 面ガラス 59に付着する可能性のある雨、雪、ほこり等の状況に応じて最適なパラメ一 タを選択すればよい。図 2に示す制御回路 11においては、操作端末 22からの指示 に従ってコマンドデコーダ 230が出力する判定切り替え信号 S23cに従って、ワイパ 動作情報回路 89は 3種類のパラメータ P1〜P3のいずれかを選択的に利用する。
[0065] 例えば、判定切り替え信号 S23cにより前記パラメータ P1を選択した場合には、ワイ パ動作情報回路 89は、第 1比率演算回路 83が出力する異物検出量 (P1)と、第 1閾 値保持回路 86が出力する閾値とに応じた値を動作回数生成回路 320に出力する。 具体的には、(異物検出量-閾値)を表す値を出力する。同様に、前記パラメータ P2 を選択した場合には、ワイパ動作情報回路 89は、第 2比率演算回路 84が出力する 異物検出量 (P2)と、第 2閾値保持回路 87が出力する閾値とに応じた値を動作回数 生成回路 320に出力し、前記パラメータ P3を選択した場合には、ワイパ動作情報回 路 89は、第 3比率演算回路 85が出力する異物検出量 (P3)と、第 3閾値保持回路 8 8が出力する閾値とに応じた値を動作回数生成回路 320に出力する。
[0066] 動作回数生成回路 320は、ワイパ動作情報回路 89が出力する値に応じて、ワイパ 動作回数や動作頻度を決定する。具体例としては、ワイパ動作情報回路 89の出力 する値が正の数ならワイパ動作オン、零または負の数ならワイパ動作オフに制御する 。また、正の数の大きさに比例して動作回数や頻度を高める。
[0067] ワイパ駆動回路 33はワイパ制御部の一例として機能し、動作回数生成回路 320の 出力する信号に応じて、ワイパ駆動モータ 61を駆動し、ワイパ 60を動かす。ワイパ 6 0が前面ガラス 59の表面を拭うことより、被写体撮影の妨げとなる異物は除去され、 良好な画像が得られる。
[0068] 閾値更新回路 90は、ワイパ動作が終了した直後の異物検出量に基づいて、それよ り所定の値だけ大き ヽ値を新たな閾値 (例:一定値を加算した値や 1. 1倍した値)と して第 1閾値保持回路 86、第 2閾値保持回路 87、第 3閾値保持回路 88が保持する 閾値を再設定する。これにより、撮影環境に応じて最適化された閾値を利用すること ができ、効率的なワイパ動作を行うことが可能となる、
[0069] このような本発明の第 1の実施形態に係るカメラ装置によれば、カメラ自体に備わつ ている撮像部により得られた画像データの動きベクトルに基づいて、異物の有無を識 別するので、特別なセンサを設置する必要がないため、カメラ装置のコストを増大さ せることがなぐ故障確率を増大させることがない。また、異物の付着が検出されたと きだけワイパ機構を駆動するので、画像の品質劣化を防止することが可能になる。
[0070] (第 2の実施形態)
図 4は、本発明の第 2の実施形態に係るカメラ装置の制御回路の概略構成を示す ブロック図である。図 4に示す制御回路 12は、図 1に示すカメラ装置において、制御 回路 11の代わりに適用されるものである。なお、図 4において、第 1の実施形態で説 明した図 1及び図 2と重複する部分については同一の符号を付す。
[0071] なお、本実施形態に適用されるカメラユニット 57は、シングル自動焦点調整機構( 以下、シングル AFと 、う)の機能を有して!/、る。
[0072] 図 4に示すように、本実施形態のカメラ装置の制御回路 12は、ワイパ駆動回路 33と 、動作回数生成回路 321と、コマンドデコーダ 231と、パン駆動回路 380と、対象画 像抽出回路 71と、高周波成分抽出回路 101と、初期値決定回路 102と、合焦度変 化算出回路 103と、閾値保持回路 104と、ワイパ動作情報回路 105とを備える。 [0073] コマンドデコーダ 231は、操作端末 22から入力される指示の内容を解釈し、回路各 部に動作指示を与える。動作回数生成回路 321は、コマンドデコーダ 230からの指 示を受けて、ワイパ動作回数を生成する回路である。ワイパ駆動回路 33は、動作回 数生成回路 32の出力する回数だけワイパ 60を駆動する回路である。パン駆動回路 380は、コマンドデコーダ 230から入力される回転方向情報 S23aと回転量情報 S23 bとに基づいてパン駆動モータ 53を駆動する回路である。
[0074] 対象画像抽出回路 71は、カメラユニット 57の撮影により得られた映像の中から、予 め定めた特定の画像領域の画像情報だけを抽出する処理を行う回路である。高周 波成分抽出回路 101は、対象画像領域の高周波成分レベルを求め、その結果を合 焦度値として出力する回路である。
[0075] 初期値決定回路 102は、コマンドデコーダ 231からのシングル AF指示 S23dが入 力された後、カメラユニット 57のオートフォーカス動作が終了したタイミングで高周波 成分抽出回路 101の値を初期合焦度値として割り当てるための回路である。合焦度 変化算出回路 103は、高周波成分抽出回路 101の値と初期値決定回路 102の値と の差を、合焦度悪ィ匕値として出力するための回路である。
[0076] 閾値保持回路 104は、ワイパ動作判断のための合焦度悪ィ匕値の閾値を保持する 回路である。ワイパ動作情報回路 105は、合焦度変化算出回路 103の値と閾値保持 回路 104の値との差を動作回数生成回路 321へ出力するための回路である。
[0077] 次に、図 4に示す制御回路 12の動作について以下に説明する。
[0078] コマンドデコーダ 231は、操作端末 22から出力される指示情報に従って各部の動 作を制御する。コマンドデコーダ 231がマニュアル動作の指示情報として方向情報と 回転量情報とを出力すると、パン駆動回路 380がパン駆動モータ 53を駆動する。パ ン駆動モータ 53の駆動力が歯車 54及び歯車 52を介して回転台可動部 51に伝達さ れるので、回転台可動部 51が回転し、回転台可動部 51上に設置されたカメラュニッ ト 57の向きが矢印 A2方向に変化する。このとき、カメラユニット 57によって撮影され たリアルタイムの画像を画像表示部 21で見ると、表示される画像上の被写体の位置 はカメラユニット 57の回転に伴って左右方向に移動する。また、コマンドデコーダ 23 1からワイパ動作指示が出力されると、動作回数生成回路 321はワイパ動作情報回 路 105の出力情報に従ってワイパ 60を駆動する。
[0079] 次に、前面ガラス 59の表面に付着した異物や水滴等の存在を検出するための動 作について説明する。図 5は異物が付着しているときの撮像画像の例を示す図、図 6 は異物が付着しているときの前面ガラスを示す側面図である。
[0080] 対象画像抽出回路 71は、カメラユニット 57から出力される画像信号 S57を入力し、 この画像の中で動きベクトル抽出対象となる特定の画像領域を抽出する。従って、動 きベクトルの抽出対象になる画像データは各フレームの画像中の一部分の領域だけ に限定される。
[0081] 高周波成分抽出回路 101は、対象画像抽出回路 71が抽出した画像領域の画像 データを処理し、その中の空間周波数を検出する。そして、空間周波数のうち高周波 成分のレベルを合焦度値として出力する。
[0082] この状態でコマンドデコーダ 231からシングル AF指令 S23dが出力されると、カメラ ユニット 57内のオートフォーカス機能が働き、ピントのあった画像が得られる状態にな つた後で、 AF動作は終了する。
[0083] AF動作の終了タイミングで、高周波成分抽出回路 101の出力する値が初期値決 定回路 102に入力され、初期値として割り当てられる。
[0084] ピントのあって 、る画像にぉ ヽては被写体の各部の像が細部まで鮮明に映るので
、この画像力も検出される空間周波数には高周波成分も含まれている。初期値決定 回路 102に初期値として割り当てられる値は、合焦状態における高周波成分のレべ ルを表す。
[0085] 一方、時間の経過に伴って、例えば図 6の斜線部分に示すように雨や雪などが異 物として前面ガラス 59の表面に付着すると、カメラユニット 57によって撮影される画像 は、例えば図 5に示すように光の屈折などの影響によりぼやけることになるので、この 画像に含まれる空間周波数の高周波成分はレベルが低下する。つまり、高周波成分 抽出回路 101が出力する合焦度値が低下する。
[0086] 合焦度変化算出回路 103は、高周波成分抽出回路 101が出力する合焦度値と初 期値決定回路 102が出力する初期値とに基づいて合焦度値の変化を算出する。具 体例としては、(初期値-合焦度値)を合焦度変化算出回路 103が変化量として出 力する。従って、前面ガラス 59の表面に異物等が付着すると、合焦度変化算出回路 103の出力する変化量が大きくなる。
[0087] ワイパ動作情報回路 105は、合焦度変化算出回路 103から出力される合焦度の変 化量と、閾値保持回路 104に保持されている閾値との差分をワイパ動作情報として 動作回数生成回路 321に出力する。
[0088] なお、高周波成分抽出回路 101が高周波成分として画像力 抽出する空間周波数 の周波数帯域が異物検出特性に影響するので、検出対象の異物の種類に応じて最 適な周波数帯域を割り当てるのが望ましい。すなわち、雨、雪、ほこり等の異物はそ れぞれ大きさや特性が大きく異なるので、異物の付着に伴う画像中の空間周波数特 性の変化にも、異物の種類に応じた違いが現れる。そこで、検出対象の異物の種類 に応じて、周波数帯域を選択的に切替可能に構成すれば、より効果的に異物の付 着を検出可能になる。
[0089] 動作回数生成回路 321は、ワイパ動作情報回路 105が出力する値に応じて、ワイ パ動作回数や動作頻度を決定する。例えば、値が正の数ならワイパ動作オン、零ま たは負の数ならワイパ動作オフにする。また、正の数の大きさに比例して動作回数や 頻度を高めてもよい。
[0090] ワイパ駆動回路 33は、動作回数生成回路 321の出力に応じてワイパ駆動モータ 6 1を駆動し、ワイパ 60を動作させる。ワイパ 60が前面ガラス 59の表面を拭うことにより 、被写体撮影の妨げとなる異物は除去され、良好な画像が得られる。
[0091] このような本発明の第 2の実施形態に係るカメラ装置によれば、カメラ自体に備わつ ている撮像部により得られた画像データの空間周波数に基づいて、異物の有無を識 別するので、特別なセンサを設置する必要がないため、カメラ装置のコストを増大さ せることがなぐ故障確率を増大させることもない。また、異物の付着が検出されたと きだけワイパ機構を駆動するので、画像の品質劣化を防止することが可能になる。
[0092] なお、上記第 1及び第 2の実施形態では、撮像領域を制御する回路として、カメラュ ニットをパン方向に駆動させるパン駆動回路を例にあげて説明した力 他に、チルト 方向の駆動するチルト駆動回路や、カメラユニットのズームを制御するズーム制御回 路を用いてもよい。 [0093] また、上記第 1及び第 2の実施形態では、異物除去方法として、ガラス面を直接ふ き取るワイパの例を示したが、気体を吹き付ける方法や、水分を蒸発させる方法等、 別の異物除去方法を用いてもょ 、。
[0094] 本発明を詳細にまた特定の実施態様を参照して説明したが、本発明の精神と範囲 を逸脱することなく様々な変更や修正を加えることができることは当業者にとって明ら かである。
[0095] 本出願は、 2005年 12月 8日出願の日本特許出願(特願 2005— 355008)に基づ くものであり、その内容はここに参照として取り込まれる。
産業上の利用可能性
[0096] 本発明のカメラ装置及びワイパ制御方法は、カメラ装置の構造を複雑ィ匕することな ぐ比較的安価にワイパによる撮像画像への影響を軽減することが可能な効果を有し 、監視カメラ装置等に有用である。

Claims

請求の範囲
[1] 画像を撮像する撮像部と、
前記撮像部に撮像される面を清掃するワイパと、
前記撮像部により得られた画像データに基づいて、前記ワイパにより清掃される面 に付着した異物の有無を識別する異物識別部と、
前記異物識別部により異物が識別されたときに前記ワイパを動作させるワイパ制御 部とを備えたカメラ装置。
[2] 請求項 1に記載のカメラ装置であって、
前記撮像部の撮像領域を制御する撮像領域制御部を備え、
前記異物識別部は、前記撮像領域制御部が前記撮像領域を変化させて ヽるときに 、前記撮像部により撮像された複数の画像データ間の差異に基づいて、前記画像デ ータにおける所定の画像領域毎に移動量を検出し、前記検出された画像領域毎の 移動量の違!、に基づ!、て異物の有無を識別するカメラ装置。
[3] 請求項 2に記載のカメラ装置であって、
前記異物識別部は、前記画像領域において、前記撮像領域制御部による撮像領 域変化の制御量に応じて定まる移動量を含む所定の移動量範囲外の移動量を有す る画素数、及び移動量が実質的にゼロの画素数の少なくとも一方に基づいて異物検 出量を求め、前記異物検出量と所定のしきい値とを比較して異物の有無を識別する カメラ装置。
[4] 請求項 3に記載のカメラ装置であって、
前記異物識別部が前記異物検出量と比較する閾値を、前記ワイパの動作後にお ける前記異物検出量に基づいて更新する閾値更新部を備えたカメラ装置。
[5] 請求項 1に記載のカメラ装置であって、
前記異物識別部は、前記撮像部の撮像により得られた画像データに基づ ヽて画像 中の空間周波数を検出し、前記空間周波数の低下を異物の付着として認識するカメ ラ装置。
[6] 請求項 5に記載のカメラ装置であって、
前記撮像部は自動焦点調整機構を有し、 前記異物識別部は、前記自動焦点調整機構の作動によって合焦状態になった直 後に撮像された画像力 検出された空間周波数の最大値を周波数初期値として保 持し、各時点の画像力 検出される空間周波数と前記周波数初期値との違いを異物 の付着と判断するためのパラメータとして使用するカメラ装置。
[7] 撮像部により画像を撮像するステップと、
前記撮像部により得られた画像データに基づいて、ワイパにより清掃される面に付 着した異物の有無を識別するステップと、
前記異物の識別結果に基づ 、て、前記ワイパを動作させるステップとを有するワイ パ制御方法。
[8] コンピュータに、請求項 7に記載の各ステップを実行させるワイパ制御プログラム。
PCT/JP2006/324024 2005-12-08 2006-11-30 カメラ装置及びワイパ制御方法 Ceased WO2007066580A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005355008A JP2007159021A (ja) 2005-12-08 2005-12-08 カメラ装置及びワイパ制御方法
JP2005-355008 2005-12-08

Publications (1)

Publication Number Publication Date
WO2007066580A1 true WO2007066580A1 (ja) 2007-06-14

Family

ID=38122726

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2006/324024 Ceased WO2007066580A1 (ja) 2005-12-08 2006-11-30 カメラ装置及びワイパ制御方法

Country Status (2)

Country Link
JP (1) JP2007159021A (ja)
WO (1) WO2007066580A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014007153A1 (ja) * 2012-07-03 2014-01-09 クラリオン株式会社 車両周囲監視装置
US9616856B2 (en) 2012-07-27 2017-04-11 Clarion Co., Ltd. Lens cleaning apparatus
CN112954142A (zh) * 2019-11-22 2021-06-11 宝山钢铁股份有限公司 一种智能除尘除雾摄像机防护罩及其智能识别方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016070796A (ja) * 2014-09-30 2016-05-09 シャープ株式会社 障害物判定装置および障害物判定方法
WO2016207987A1 (ja) * 2015-06-24 2016-12-29 株式会社日立製作所 画像処理装置、自律移動装置および自己位置推定方法
JP7576095B2 (ja) * 2020-09-11 2024-10-30 株式会社日立国際電気 撮像装置及び付着物検出方法
CN113787987A (zh) * 2021-09-13 2021-12-14 安徽江淮汽车集团股份有限公司 针对挡风玻璃前视摄像头视野区域的自清洁方法及系统
JP7533798B2 (ja) * 2021-10-19 2024-08-14 三菱電機ビルソリューションズ株式会社 画像解析システム
JPWO2023085403A1 (ja) * 2021-11-12 2023-05-19

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001147278A (ja) * 1999-11-19 2001-05-29 Nippon Seiki Co Ltd 雨滴検出装置
JP2001153969A (ja) * 1999-11-25 2001-06-08 Nippon Seiki Co Ltd 雨滴検出装置
JP2003051972A (ja) * 2001-08-07 2003-02-21 Matsushita Electric Ind Co Ltd 撮像システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001147278A (ja) * 1999-11-19 2001-05-29 Nippon Seiki Co Ltd 雨滴検出装置
JP2001153969A (ja) * 1999-11-25 2001-06-08 Nippon Seiki Co Ltd 雨滴検出装置
JP2003051972A (ja) * 2001-08-07 2003-02-21 Matsushita Electric Ind Co Ltd 撮像システム

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014007153A1 (ja) * 2012-07-03 2014-01-09 クラリオン株式会社 車両周囲監視装置
CN104395156A (zh) * 2012-07-03 2015-03-04 歌乐株式会社 车辆周围监视装置
JPWO2014007153A1 (ja) * 2012-07-03 2016-06-02 クラリオン株式会社 車両周囲監視装置
US9473718B2 (en) 2012-07-03 2016-10-18 Clarion Co., Ltd. Vehicle surroundings monitoring device
US9616856B2 (en) 2012-07-27 2017-04-11 Clarion Co., Ltd. Lens cleaning apparatus
CN112954142A (zh) * 2019-11-22 2021-06-11 宝山钢铁股份有限公司 一种智能除尘除雾摄像机防护罩及其智能识别方法
CN112954142B (zh) * 2019-11-22 2022-06-28 宝山钢铁股份有限公司 一种智能除尘除雾摄像机防护罩及其智能识别方法

Also Published As

Publication number Publication date
JP2007159021A (ja) 2007-06-21

Similar Documents

Publication Publication Date Title
KR100741942B1 (ko) 레인 센서
US10604121B2 (en) Vehicle camera with lens cleaner
EP0477986A2 (en) Image detection system for a car
CN102883925B (zh) 在风挡玻璃上的雾和雨滴的检测方法以及驾驶辅助装置
JP4461157B2 (ja) カメラ装置、クリーニング制御方法およびプログラム
JP2002074339A (ja) 車載撮像装置
JP2008288720A (ja) カメラドームの清掃装置
JP4245452B2 (ja) レンズの汚れ判定方法及び装置
WO2018037790A1 (ja) 画像処理装置、画像撮影装置、および画像処理方法、並びにプログラム
KR102294403B1 (ko) 와이퍼를 구비한 cctv 카메라
WO2007066580A1 (ja) カメラ装置及びワイパ制御方法
EP2200272B1 (en) Autofocus system
CN100512380C (zh) 摄像装置和图像恢复方法
JP2009130700A (ja) 撮像装置
WO2001016649A1 (en) Camera and device for switching optical filters
EP3107063A1 (en) Method for processing camera images
JP5326809B2 (ja) 撮像装置
US20210061229A1 (en) Imaging device, method of controlling imaging device, and storage medium
JPH0872641A (ja) 車両用画像認識装置
JP4815498B2 (ja) カメラ装置、クリーニング制御方法およびプログラム
JP2007195037A (ja) 雲台ユニット
JP2009027251A (ja) 監視装置
JP2007166313A (ja) カメラ装置及びワイパ制御方法
JP2000025576A (ja) 自動ワイパー装置
JP7576095B2 (ja) 撮像装置及び付着物検出方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 06833827

Country of ref document: EP

Kind code of ref document: A1