[go: up one dir, main page]

DE102004037870B4 - Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system - Google Patents

Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system Download PDF

Info

Publication number
DE102004037870B4
DE102004037870B4 DE102004037870A DE102004037870A DE102004037870B4 DE 102004037870 B4 DE102004037870 B4 DE 102004037870B4 DE 102004037870 A DE102004037870 A DE 102004037870A DE 102004037870 A DE102004037870 A DE 102004037870A DE 102004037870 B4 DE102004037870 B4 DE 102004037870B4
Authority
DE
Germany
Prior art keywords
optical module
semiconductor element
vis
mirror
electromagnetic radiation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE102004037870A
Other languages
German (de)
Other versions
DE102004037870A1 (en
Inventor
Stephan Voltz
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Continental Automotive GmbH
Original Assignee
Siemens Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens Corp filed Critical Siemens Corp
Priority to DE102004037870A priority Critical patent/DE102004037870B4/en
Priority to PCT/EP2005/052957 priority patent/WO2006015906A1/en
Publication of DE102004037870A1 publication Critical patent/DE102004037870A1/en
Application granted granted Critical
Publication of DE102004037870B4 publication Critical patent/DE102004037870B4/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/35Details of non-pulse systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optical Radar Systems And Details Thereof (AREA)

Abstract

Optisches Modul (1) eines den Außenvorraum (50) in Fahrtrichtung eines Kraftfahrzeuges erfassenden Assistenzsystems, mit
– wenigstens einem ersten Schaltungsträger (10);
– wenigstens einem auf dem ersten Schaltungsträger (10) angeordneten ersten Halbleiterelement (12);
– wobei die sensitive Fläche (34) des ersten Halbleiterelements (12) ein hoch auflösender 2D-Bildsensor (34) ist;
– mit einem zweiten Halbleiterelement (13), dessen sensitive Fläche (35) als 3D-Laufzeitsensor ausgebildet ist; und
– wenigstens einer Linseneinheit (14; 16, 18) zum Projizieren von elektromagnetischer Strahlung auf eine sensitive Fläche (34) des ersten Halbleiterelements (12);
dadurch gekennzeichnet,
– dass im Strahlengang (Vis + IR) des optischen Moduls (1) ein Strahlenteiler oder Spiegel (28) angeordnet ist, welcher elektromagnetische Strahlung wellenlängenspezifisch (Vis; IR) auf die sensitiven Flächen (34; 35) des ersten (12) und des zweiten (13) Halbleiterelements verteilt;
– dass der Strahlenteiler oder Spiegel (28) ein sog. "hot-cold-mirror" ist, welcher die elektromagnetische Strahlung (Vis +...
Optical module (1) of an outer vestibule (50) in the direction of travel of a motor vehicle detecting assistance system, with
- At least a first circuit carrier (10);
- At least one on the first circuit carrier (10) arranged first semiconductor element (12);
- wherein the sensitive surface (34) of the first semiconductor element (12) is a high-resolution 2D image sensor (34);
- With a second semiconductor element (13) whose sensitive surface (35) is designed as a 3D-term sensor; and
- At least one lens unit (14; 16, 18) for projecting electromagnetic radiation on a sensitive surface (34) of the first semiconductor element (12);
characterized,
- That in the beam path (Vis + IR) of the optical module (1) a beam splitter or mirror (28) is arranged, which electromagnetic radiation wavelength specific (Vis; IR) on the sensitive surfaces (34, 35) of the first (12) and second (13) semiconductor element distributed;
- That the beam splitter or mirror (28) is a so-called. "Hot-cold-mirror", which the electromagnetic radiation (Vis + ...

Figure 00000001
Figure 00000001

Description

Die Erfindung betrifft ein optisches Modul eines den Außenvorraum in Fahrtrichtung eines Kraftfahrzeuges erfassenden Assistenzsystems, mit den Merkmalen des Oberbegriffs des Patentanspruchs 1.The The invention relates to an optical module of the outer vestibule in the direction of travel of a motor vehicle detecting assistance system, with the features of the preamble of patent claim 1.

Auf die Fahrumgebung eines Kraftfahrzeuges gerichtete Sensorsysteme finden immer mehr Anwendung im Kraftfahrzeug der näheren Zukunft. Dabei sind verschiedentlich assistierende Systeme vorstellbar, welche dem Fahrer Unterstützung bieten. Als Beispiele können genannt werden: Spurerkennungs- oder -überwachungs-Anwendungen, Nachtsicht-Anwendungen, Hinderniswarnung, Pre-Crash-Sensierung, automatische Geschwindigkeitsadaption, Stauassistent, Fußgänger- und Fahrradfahrerschutz, Verkehrszeichenerkennung, Einparkhilfe und dergleichen mehr.On the driving environment of a motor vehicle directed sensor systems find more and more application in the motor vehicle of the near future. there are various assistive systems conceivable, which the driver support Offer. As examples can Track Recognition or Monitoring Applications, Night Vision Applications, Obstacle warning, pre-crash sensing, automatic speed adaptation, Traffic Jam Assistant, Pedestrian and Bicycle rider protection, traffic sign recognition, parking assistance and such more.

Die Anforderungen an derartige Assistenzsysteme sind zum Teil sehr verschieden. Gemein ist ihnen die Anforderung, eine möglichst realistische Repräsentation der Umwelt zu generieren. Um beispielsweise Fahrspuren vor dem Fahrzeug auch in großen Abständen noch zu erkennen, wird eine Kamera mit einem relativ hoch auflösenden optischen Modul benötigt.The Requirements for such assistance systems are sometimes very different. Common to them is the requirement, as realistic a representation as possible to generate the environment. For example, lanes in front of the vehicle also in big ones intervals to recognize, is a camera with a relatively high-resolution optical module needed.

Um Objekte wie andere Kraftfahrzeuge, Fahrradfahrer und/oder auch Fußgänger zu erkennen, ist neben einem Kamerabild auch ein den Abstand messendes System hilfreich, insbesondere auf Radar- oder Lidar-Technologien basierend.Around Objects such as other motor vehicles, cyclists and / or pedestrians too recognize, is next to a camera image also a distance measuring System helpful, especially on radar or lidar technologies based.

Für eine Erfassung des Außenvorraums in Fahrtrichtung eines Kraftfahrzeuges ist bekannt, beispielsweise eine hoch auflösende 2D Kamera mit beispielsweise 300k Pixel zu verwenden, welche z.B. Fahrspuren erkennt und/oder Objekte erfasst und klassifiziert.For a capture of the outer vestibule in the direction of travel of a motor vehicle is known, for example a high resolution 2D camera with, for example, 300k pixels, which e.g. lanes recognizes and / or records and classifies objects.

Es ist auch bekannt, für Abstand messende Systeme einen auf Lichtlaufzeit basierenden Lidar Sensor zu verwenden. Derartige Lidar Sensoren existieren auch in Form einer Pixelmatrix, welche in CMOS Technologie implementiert ist. Ein derartiges, beispielsweise aus der EP 1 159 636 B1 oder DE 101 38 531 A1 bekanntes sog. TOF (Time of Flight) CMOS-Array kann mit Hilfe einer gepulsten Beleuchtung ein Tiefenbild einer Szene mit vielen Abtastpunkten generieren. Neben dem Tiefenbild kann zusätzlich ein Grauwertbild ausgewertet werden. Allerdings ist dies auf eine kleine Anzahl von z.B. 1 bis 3000 (3k) Bildpunkte beschränkt, da die ausgesendete Lichtmenge nicht beliebig vergrößert werden kann und ein Kompromiss zwischen Lichtmenge, Pixelanzahl, Abstandsbereich und Kosten gefunden werden muss. Somit ist es nicht möglich, diese, einen Abstand messende CMOS Pixelmatrix auch für ein hoch auflösendes 2D Bild mit zu verwenden.It is also known to use a light-time-based lidar sensor for distance measuring systems. Such lidar sensors also exist in the form of a pixel matrix implemented in CMOS technology. Such, for example from the EP 1 159 636 B1 or DE 101 38 531 A1 known so-called TOF (Time of Flight) CMOS array can generate a depth image of a scene with many sampling points by means of pulsed illumination. In addition to the depth image, a grayscale image can also be evaluated. However, this is limited to a small number of eg 1 to 3000 (3k) pixels, since the amount of light emitted can not be increased arbitrarily and a compromise between the amount of light, number of pixels, distance range and cost must be found. Thus, it is not possible to use this CMOS pixel matrix measuring a distance for a high-resolution 2D image as well.

In einem Kraftfahrzeug müssen daher bislang jeweils ein getrenntes System für die 2D Erfassung und eins für die 3D Erfassung implementiert werden, womit schon deshalb erhebliche Kosten einhergehen. Darüber hinaus müssen die nur einzeln verfügbaren Systeme vernetzt werden, will man ein möglichst vollständiges Bild der Fahrumgebung erfassen und damit ein entsprechend sicheres System aufbauen. Weil zudem der Bauraum in einem Kraftfahrzeug oft sehr begrenzt ist, ist es häufig schwierig, zwei verschiedene Systeme gleichzeitig unterzubringen.In a motor vehicle so far, each has a separate system for the 2D acquisition and one for the 3D detection are implemented, which is why therefore considerable Costs go along. About that have to go out the only available individually Systems are networked, one wants a picture as complete as possible capture the driving environment and thus build up a correspondingly secure system. Because also the space in a motor vehicle often very limited it is frequent difficult to accommodate two different systems simultaneously.

Derartige Vorrichtungen sind beispielsweise aus der DE 196 03 276 A1 und der GB 2 374 228 A bekannt. In beiden Fällen wird jeweils zusätzlich zu einem hoch auflösenden 2D-Bildsensor, der beispielsweise als CCD-Kamera ausgebildet sein kann, ein 3D-Laufzeitsensor verwendet. Die Strahlengänge sind dabei vorzugsweise, wie dies in der GB 2 374 228 A offenbart ist, so geführt, dass jeweils ein zusammenfallender Beobachtungsbereich für die beiden Bildsysteme erfasst werden kann. Nachteilig ist hierbei jedoch der Aufwand, der durch das Vor sehen von zwei unterschiedlichen Bilderfassungssystemen bedingt ist. Aus diesem Grund wird in der GB 2 374 228 vorgeschlagen, beide Auswertungen mittels eines speziellen Verfahrens durch einen einzigen lichtempfindlichen Sensor und eine entsprechende nachgeschaltete Auswertevorrichtung vorzunehmen.Such devices are for example from the DE 196 03 276 A1 and the GB 2 374 228 A known. In both cases, in each case in addition to a high-resolution 2D image sensor, which may be formed for example as a CCD camera, a 3D runtime sensor is used. The beam paths are preferably, as shown in the GB 2 374 228 A is disclosed, guided so that in each case a coincident observation area for the two image systems can be detected. The disadvantage here, however, the effort that is due to the see before by two different imaging systems. For this reason, in the GB 2 374 228 proposed to carry out both evaluations by means of a special method by a single photosensitive sensor and a corresponding downstream evaluation device.

Ein derartiges Verfahren und eine Vorrichtung zur Bestimmung der Phasen- und/oder Amplitudeninformation einer elektromagnetischen Welle ist auch in der EP 1 009 984 B1 beschrieben. Hierbei wird durch eine bestimmte Korrelationstechnik sowohl die Amplitudeninformation als auch die Phaseninformation einer elektromagnetischen Welle ausgewertet.Such a method and a device for determining the phase and / or amplitude information of an electromagnetic wave is also in the EP 1 009 984 B1 described. In this case, both the amplitude information and the phase information of an electromagnetic wave are evaluated by a specific correlation technique.

Nachteilig ist hierbei jedoch der hohe Rechenaufwand bei der Auswertung der Signale bzw. der schaltungstechnische Aufwand zur Realisierung der Korrelation.adversely Here, however, the high computational effort in the evaluation of Signals or the circuit complexity for the realization of Correlation.

Es ist Aufgabe der vorliegenden Erfindung, die aus dem Stand der Technik bekannten Nachteile zu vermeiden.It object of the present invention, which is known from the prior art to avoid known disadvantages.

Diese Aufgabe wird erfindungsgemäß durch die Merkmale der unabhängigen Patentansprüche gelöst. Vorteilhafte Ausgestaltungen und Weiterbildungen, welche einzeln oder in Kombination miteinander eingesetzt werden können, sind Gegenstand der jeweils abhängigen Ansprüche.This object is achieved by the features of the independent claims. Advantageous embodiments and developments, which can be used individually or in combination with each other, are the subject the respective dependent claims.

Die Erfindung baut auf gattungsgemäßen optischen Moduln dadurch auf, dass die sensitive Fläche des ersten Halbleiterelements ein hoch auflösender 2D-Bildsensor ist; und dass ein zweites Halbleiterelement vorgesehen ist, dessen sensitive Fläche als 3D-Laufzeitsensor ausgebildet ist.The Invention is based on generic optical Modulon on that the sensitive surface of the first semiconductor element a high resolution Is 2D image sensor; and that a second semiconductor element is provided is whose sensitive area is designed as a 3D runtime sensor.

Auf dem ersten Schaltungsträger können sowohl das erste als auch das zweite Halbleiterelement angeordnet sein.On the first circuit carrier can arranged both the first and the second semiconductor element be.

Zwecks Erhöhung konstruktiver Freiheitsgrade wird vorgeschlagen, ein erstes und zweites Halbleiterelement auf verschiedenen Schaltungsträgern anzuordnen.For the purpose of increase constructive degrees of freedom is proposed, a first and to arrange second semiconductor element on different circuit carriers.

Erfindungsgemäß ist im Strahlengang (Vis + IR) des optischen Moduls ein Strahlenteiler oder Spiegel angeordnet, welcher elektromagnetische Strahlung wellenlängenspezifisch (Vis; IR) auf die sensitiven Flächen des ersten bzw. des zweiten Halbleiterelements verteilt.According to the invention is in Beam path (Vis + IR) of the optical module, a beam splitter or mirror arranged, which electromagnetic radiation wavelength specific (Vis; IR) on the sensitive surfaces of the first and the second semiconductor element distributed.

Je nach konstruktiver Ausgestaltung des optischen Moduls ist der Strahlenteiler bzw. Spiegel unter 30° bis 60°, vorzugsweise unter 45° im Strahlengang (Vis + IR) des optischen Moduls angeordnet.ever according to the structural design of the optical module is the beam splitter or mirrors below 30 ° to 60 °, preferably below 45 ° in the Beam path (Vis + IR) of the optical module arranged.

Erfindungsgemäß wird ein sog. "hot-cold-mirror" als Strahlenteiler oder Spiegel verwendet, welcher elektromagnetische Strahlung (Vis + IR) in zwei Komponenten aufteilt, nämlich in eine, welche das sichtbare Licht (Vis) einschließt und in eine, welche längere Wellenlängen wie das nahe Infrarot (IR) umfasst.According to the invention is a so-called "hot-cold-mirror" as a beam splitter or mirror which uses electromagnetic radiation (Vis + IR) is divided into two components, one in which the visible one Includes light (Vis) and in one, which longer wavelength as the near infrared (IR) includes.

Nach der Erfindung werden das sichtbare Licht (Vis) auf die sensitive Fläche des ersten Halbleiterelements und längere Wellenlängen wie das nahe Infrarot (IR) auf die sensitive Fläche des zweiten Halbleiterelements geführt.To the invention, the visible light (Vis) on the sensitive area of the first semiconductor element and longer wavelengths such as the near infrared (IR) on the sensitive surface of the second semiconductor element guided.

Der eingesetzte Strahlenteiler bzw. Spiegel besitzt damit vorteilhaft eine Art Filterfunktion, indem er dem jeweiligen Halbleiterelement nur die entsprechende Wellenlänge bzw. Lichtanteile zuführt, welche auch genutzt werden.Of the used beam splitter or mirror has thus advantageous a kind of filter function, by the respective semiconductor element only the corresponding wavelength or light components, which are also used.

Zweckmäßigerweise stammt der infrarote Lichtanteil (IR) von wenigstens einer dem optischen Modul zugeordneten Infrarotlichtquelle.Conveniently, the infrared light component (IR) originates from at least one of the optical module associated infrared light source.

Die Auflösung der Linseneinheit zum Projizieren von elektromagnetischer Strahlung schließlich ist vom Spektralbereich im wesentlichen auf den hoch auflösenden 2D Sensor abgestimmt, denn für die viel geringere Pixelanzahl und die aus Empfindlichkeitsgründen eher größeren Pixel des 3D Sensors ist eine viel geringere Auflösung und Schärfe (MTF) notwendig.The resolution the lens unit for projecting electromagnetic radiation finally is from the spectral range essentially to the high-resolution 2D Sensor tuned, because for the much smaller number of pixels and the sake of sensitivity rather larger pixels of the 3D sensor is a much lower resolution and sharpness (MTF) necessary.

Die vorliegende Erfindung gestattet erstmals den preisgünstigen Aufbau nur eines optischen Moduls mit einer abgeschlossenen 2D/3D Einheit. Darüber hinaus können diese Einheiten des optischen Moduls bereits bei der Fertigung aufeinander abgestimmt bzw. zueinander kalibriert werden, so dass aufwendige Vernetzungsarbeiten – wie im Stand der Technik notwendig – vorteilhaft entfallen.The The present invention allows for the first time the inexpensive Construction of only one optical module with a completed 2D / 3D Unit. About that can out these units of the optical module already in the production of each other be tuned or calibrated to each other, so that complex networking work - as in State of the art necessary - advantageous omitted.

Zusätzliche Einzelheiten und weitere Vorteile der Erfindung werden nachfolgend an Hand bevorzugter Ausführungsbeispiele in Verbindung mit der beigefügten Zeichnung beschrieben.additional Details and further advantages of the invention are given below on hand preferred embodiments in conjunction with the attached Drawing described.

Die einzige Fig. zeigt in einer Prinzipskizze ein Ausführungsbeispiel eines optischen Moduls 1.The single FIGURE shows a schematic diagram of an embodiment of an optical module 1 ,

Diesem liegt der Grundgedanke zugrunde, eine optische Erfassungseinheit 1 aufzubauen, welche Licht im kompletten Spektralbereich von sichtbar (Vis) bis nahes Infrarot (IR) aufnimmt. Auf dem Markt sind so genannte "Hot/Cold-Mirrors" oder auch "Cold/Hot-Mirrors" 28 erhältlich, welche es ermöglichen den Wellenlängenbereich des Lichts in zwei Komponenten aufzuteilen, nämlich in eine, welche das sichtbare Licht (Vis) einschließt und in eine, welche längere Wellenlängen wie das nahe Infrarot (IR) umfasst.This is based on the basic idea, an optical detection unit 1 which absorbs light in the entire spectral range from visible (Vis) to near infrared (IR). There are so-called "hot / cold mirrors" or "cold / hot mirrors" on the market. 28 It is possible to divide the wavelength range of the light into two components, namely one which encloses the visible light (Vis) and one which comprises longer wavelengths such as the near infrared (IR).

Je nach Variante des Spiegels 28, wird eine Komponente (Vis oder IR) reflektiert und die andere transmittiert oder umgekehrt. Ein anderes diesbezügliches Kriterium ist der Winkel, unter welchem der Spiegel 28 im Strahlengang (Vis + IR) angeordnet ist.Depending on the version of the mirror 28 , one component (Vis or IR) is reflected and the other is transmitted or vice versa. Another criterion in this regard is the angle at which the mirror 28 in the beam path (Vis + IR) is arranged.

Der Spiegel 28 ist – wie dargestellt – beispielsweise unter einem Winkel von 45 Grad in den Strahlengang (Vis + IR) gebracht. Er kann somit das Signal wellenlängenspezifisch auf zwei verschiedene Detektoren 34 und 35 führen. Dargestellt ist ein sog. „Hot-mirror" 28, welcher für kurzwelligere („kalte") Wellenlängen, also für sichtbares Licht (Vis) durchlässig ist und langwellige („heiße") Wellenlängen, insb. IR-Strahlen, nach oben hin reflektiert bzw. spiegelt.The mirror 28 is - as shown - for example, at an angle of 45 degrees in the beam path (Vis + IR) brought. It can thus send the signal wavelength-specific to two different detectors 34 and 35 to lead. Shown is a so-called "hot-mirror" 28 which is permeable to shorter wavelength ("cold") wavelengths, ie visible light (Vis), and which reflects or reflects longwave ("hot") wavelengths, in particular IR rays, upwards.

Die Detektoren sind bevorzugt sensitive Flächen 34; 35 zweier Halbleiterelemente 12; 13, welche im Ausführungsbeispiel je auf einem eigenen Schaltungsträger 10, 11 angeordnet sind, was vorteilhaft die Designfreiheit des optischen Moduls 1 erhöht.The detectors are preferably sensitive surfaces 34 ; 35 two semiconductor elements 12 ; 13 , which in the embodiment depending on its own circuit carrier 10 . 11 are arranged, which advantageously the design freedom of the optical module 1 elevated.

In dem konkret dargestellten Fall handelt es sich bei dem Detektor für das sichtbare Licht (Vis) um einen hoch auflösenden 2D Bildsensor 34 beispielsweise zur Erkennung von Fahrspuren und/oder Objekten im Außenvorraum 50 eines Kraftfahrzeuges.In the specific case illustrated, the visible light detector (Vis) is a high resolution 2D image sensor 34 example way to detect lanes and / or objects in the outer lobby 50 a motor vehicle.

Demgegenüber handelt es sich bei dem Detektor für das infrarote Licht (IR) um einen 3D Laufzeitsensor 35, welcher ohnehin vorzugsweise nur mit einer eigenen Infrarotlichtquelle (nicht dargestellt) des optischen Moduls 1 arbeitet – für den 35 somit nur der infrarote Lichtanteil (IR) relevant ist.In contrast, the detector for the infrared light (IR) is a 3D transit time sensor 35 , which in any case preferably only with its own infrared light source (not shown) of the optical module 1 works - for the 35 Thus, only the infrared light component (IR) is relevant.

Der Vorteil eines derartigen optischen Moduls 1 liegt zu einen bei den Kosten, es muss nur eine Optikeinheit 14; 16, 18 aufgebaut werden, und das Modul 1 umfasst eine abgeschlossenen 2D/3D Einheit 12, 34; 13, 35. Ein weiterer Vorteil ist, dass die Sensoreinheiten 12, 34 und 13, 35 bereits bei der Fertigung aufeinander abgestimmt, die 2D und 3D Daten also zueinander kalibriert werden können.The advantage of such an optical module 1 There is one in the cost, it has only one optical unit 14 ; 16 . 18 be built, and the module 1 includes a completed 2D / 3D unit 12 . 34 ; 13 . 35 , Another advantage is that the sensor units 12 . 34 and 13 . 35 Already coordinated during production, the 2D and 3D data can be calibrated to each other.

Darüber hinaus besitzt der eingesetzte Strahlenteiler bzw. Spiegel 28 bereits eine Filterfunktion für die entsprechenden Wellenlängen. Er 28 führt dem jeweiligen Sensor 34; 35 nur die Lichtanteile zu, welche auch genutzt werden.In addition, the used beam splitter or mirror 28 already a filter function for the corresponding wavelengths. He 28 leads to the respective sensor 34 ; 35 only the light components, which are also used.

Die Auflösung der Optik 14; 16, 18, umfassend einen Linsenhalter 14 sowie z.B. eine erste 16 und zweite 18 Linse, braucht vom Spektralbereich im Wesentlichen nur auf den hoch auflösenden Sensor 34 optimiert werden, da für die viel geringere Pixelanzahl und die aus Empfindlichkeitsgründen sowieso eher größeren Pixel des 3D Sensors 35 eine viel geringere Auflösung und Schärfe (MTF) notwendig ist.The resolution of the optics 14 ; 16 . 18 comprising a lens holder 14 as well as a first 16 and second 18 Lens, of the spectral range essentially only needs the high-resolution sensor 34 be optimized because of the much smaller number of pixels and for sensitivity reasons anyway rather larger pixels of the 3D sensor 35 a much lower resolution and sharpness (MTF) is necessary.

Insoweit gestattet die vorliegende Erfindung erstmals den preisgünstigen Aufbau nur eines optischen Moduls mit einer abgeschlossenen 2D/3D Einheit, welche sich insbesondere für den Außenvorraum 50 in Fahrtrichtung eines Kraftfahrzeuges erfassende Assistenzsysteme wie Spurerkennungs- oder -überwachungs-Anwendungen, Nachtsicht-Anwendungen, Hinderniswarnung, Pre-Crash-Sensierung, Automatische Geschwindigkeitsadaption, Stauassistent, Fußgänger- und Fahrradfahrerschutz, Verkehrszeichenerkennung und dergleichen mehr eignet.In that regard, the present invention allows for the first time the inexpensive construction of only one optical module with a closed 2D / 3D unit, which is especially for the outer vestibule 50 in the direction of travel of a motor vehicle detecting assistance systems such as lane detection or monitoring applications, night vision applications, obstacle warning, pre-crash sensing, automatic speed adaptation, congestion assistant, pedestrian and cyclist protection, traffic sign recognition and the like is more suitable.

Claims (6)

Optisches Modul (1) eines den Außenvorraum (50) in Fahrtrichtung eines Kraftfahrzeuges erfassenden Assistenzsystems, mit – wenigstens einem ersten Schaltungsträger (10); – wenigstens einem auf dem ersten Schaltungsträger (10) angeordneten ersten Halbleiterelement (12); – wobei die sensitive Fläche (34) des ersten Halbleiterelements (12) ein hoch auflösender 2D-Bildsensor (34) ist; – mit einem zweiten Halbleiterelement (13), dessen sensitive Fläche (35) als 3D-Laufzeitsensor ausgebildet ist; und – wenigstens einer Linseneinheit (14; 16, 18) zum Projizieren von elektromagnetischer Strahlung auf eine sensitive Fläche (34) des ersten Halbleiterelements (12); dadurch gekennzeichnet, – dass im Strahlengang (Vis + IR) des optischen Moduls (1) ein Strahlenteiler oder Spiegel (28) angeordnet ist, welcher elektromagnetische Strahlung wellenlängenspezifisch (Vis; IR) auf die sensitiven Flächen (34; 35) des ersten (12) und des zweiten (13) Halbleiterelements verteilt; – dass der Strahlenteiler oder Spiegel (28) ein sog. "hot-cold-mirror" ist, welcher die elektromagnetische Strahlung (Vis + IR) in zwei Komponenten aufteilt, nämlich in eine, welche das sichtbare Licht (Vis) einschließt und in eine, welche längere Wellenlängen wie das nahe Infrarot (IR) umfasst; und – dass das sichtbare Licht (Vis) auf die sensitive Fläche (34) des ersten Halbleiterelements (12) und längere Wellenlängen wie das nahe Infrarot (IR) auf – die sensitive Fläche (35) des zweiten Halbleiterelements (13) geführt wird.Optical module ( 1 ) one the outer vestibule ( 50 ) in the direction of travel of a motor vehicle detecting assistance system, with - at least a first circuit carrier ( 10 ); At least one on the first circuit carrier ( 10 ) arranged first semiconductor element ( 12 ); - where the sensitive surface ( 34 ) of the first semiconductor element ( 12 ) a high-resolution 2D image sensor ( 34 ); With a second semiconductor element ( 13 ) whose sensitive area ( 35 ) is designed as a 3D runtime sensor; and - at least one lens unit ( 14 ; 16 . 18 ) for projecting electromagnetic radiation onto a sensitive surface ( 34 ) of the first semiconductor element ( 12 ); characterized in that - in the optical path (Vis + IR) of the optical module ( 1 ) a beam splitter or mirror ( 28 ), which electromagnetic radiation wavelength-specific (Vis; IR) on the sensitive surfaces ( 34 ; 35 ) of the first ( 12 ) and the second ( 13 ) Distributed semiconductor element; - that the beam splitter or mirror ( 28 ) is a so-called "hot-cold-mirror" which divides the electromagnetic radiation (Vis + IR) into two components, namely one which encloses the visible light (Vis) and one which has longer wavelengths such as the near infrared (IR); and - that the visible light (Vis) on the sensitive surface ( 34 ) of the first semiconductor element ( 12 ) and longer wavelengths like the near infrared (IR) - the sensitive area ( 35 ) of the second semiconductor element ( 13 ) to be led. Optisches Modul (1) nach Anspruch 1, dadurch gekennzeichnet, dass auf dem ersten Schaltungsträger (10) sowohl das erste (12) als auch das zweite (13) Halbleiterelement angeordnet sind.Optical module ( 1 ) according to claim 1, characterized in that on the first circuit carrier ( 10 ) both the first ( 12 ) as well as the second ( 13 ) Semiconductor element are arranged. Optisches Modul (1) nach Anspruch 1, dadurch gekennzeichnet, dass das zweite Halbleiterelement (13) auf einem eigenen, zweiten Schaltungsträger (11) angeordnet ist.Optical module ( 1 ) according to claim 1, characterized in that the second semiconductor element ( 13 ) on its own second circuit carrier ( 11 ) is arranged. Optisches Modul (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Strahlenteiler oder Spiegel (28) unter 30° bis 60°, vorzugsweise unter 45° im Strahlengang (Vis + IR) des optischen Moduls (1) angeordnet ist.Optical module ( 1 ) according to one of the preceding claims, characterized in that the beam splitter or mirror ( 28 ) at 30 ° to 60 °, preferably at 45 ° in the optical path (Vis + IR) of the optical module ( 1 ) is arranged. Optisches Modul (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der infrarote Lichtanteil (IR) von einer dem optischen Modul (1) zugeordneten Infrarotlichtquelle stammt.Optical module ( 1 ) according to one of the preceding claims, characterized in that the infrared light component (IR) of a the optical module ( 1 ) associated infrared light source comes. Optisches Modul (1) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Auflösung der Linseneinheit (14; 16, 18) zum Projizieren von elektromagnetischer Strahlung vom Spektralbereich im Wesentlichen auf den hoch auflösenden 2D Sensor (34) abgestimmt ist.Optical module ( 1 ) according to one of the preceding claims, characterized in that the resolution of the lens unit ( 14 ; 16 . 18 ) for projecting electromagnetic radiation from the spectral region substantially onto the high-resolution 2D sensor ( 34 ) is tuned.
DE102004037870A 2004-08-04 2004-08-04 Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system Expired - Fee Related DE102004037870B4 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102004037870A DE102004037870B4 (en) 2004-08-04 2004-08-04 Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system
PCT/EP2005/052957 WO2006015906A1 (en) 2004-08-04 2005-06-24 Optical module for a driver assistance system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102004037870A DE102004037870B4 (en) 2004-08-04 2004-08-04 Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system

Publications (2)

Publication Number Publication Date
DE102004037870A1 DE102004037870A1 (en) 2006-03-16
DE102004037870B4 true DE102004037870B4 (en) 2007-02-15

Family

ID=34979494

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102004037870A Expired - Fee Related DE102004037870B4 (en) 2004-08-04 2004-08-04 Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system

Country Status (2)

Country Link
DE (1) DE102004037870B4 (en)
WO (1) WO2006015906A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012111199A1 (en) 2012-11-21 2014-05-22 Conti Temic Microelectronic Gmbh Optical device for camera of vehicle for detecting images of two different distance ranges, has two image acquisition elements that are arranged in different image planes of imaging system

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7646419B2 (en) 2006-11-02 2010-01-12 Honeywell International Inc. Multiband camera system
DE102007013501B4 (en) * 2007-03-21 2019-06-06 Bayerische Motoren Werke Aktiengesellschaft Driver assistance system with differently oriented cameras
DE102008039606A1 (en) 2008-08-25 2010-03-04 GM Global Technology Operations, Inc., Detroit Motor vehicle with a distance sensor and an image acquisition system
CN104655283A (en) * 2014-03-03 2015-05-27 上海膺芙光电科技有限公司 Common-path infrared/visual light double-waveband microscopic system
DE102014206677A1 (en) * 2014-04-07 2015-10-08 Robert Bosch Gmbh Camera system and method for detecting an environment of a vehicle
DE102019214211A1 (en) * 2019-09-18 2021-03-18 Robert Bosch Gmbh Sensor unit for a LiDAR system
GB2605768A (en) * 2021-03-31 2022-10-19 Continental Automotive Gmbh An imaging device for a driver monitoring system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19603267A1 (en) * 1996-01-30 1997-07-31 Bosch Gmbh Robert Device for determining the distance and / or position
GB2374228A (en) * 2001-04-04 2002-10-09 Instro Prec Ltd A collision warning device
EP1009984B1 (en) * 1996-09-05 2003-11-19 SCHWARTE, Rudolf Method and device for determining the phase- and/or amplitude data of an electromagnetic wave

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002506977A (en) * 1998-03-10 2002-03-05 リーグル・レーザー・メジャーメント・システムズ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング How to monitor the subject or subject space
JP2002237969A (en) * 2001-02-09 2002-08-23 Hitachi Ltd In-vehicle camera and image processing system
DE10117147A1 (en) * 2001-04-05 2002-10-10 Bodenseewerk Geraetetech Dual-mode seeker
JP4931288B2 (en) * 2001-06-08 2012-05-16 ペンタックスリコーイメージング株式会社 Image detection device and diaphragm device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19603267A1 (en) * 1996-01-30 1997-07-31 Bosch Gmbh Robert Device for determining the distance and / or position
EP1009984B1 (en) * 1996-09-05 2003-11-19 SCHWARTE, Rudolf Method and device for determining the phase- and/or amplitude data of an electromagnetic wave
GB2374228A (en) * 2001-04-04 2002-10-09 Instro Prec Ltd A collision warning device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012111199A1 (en) 2012-11-21 2014-05-22 Conti Temic Microelectronic Gmbh Optical device for camera of vehicle for detecting images of two different distance ranges, has two image acquisition elements that are arranged in different image planes of imaging system

Also Published As

Publication number Publication date
DE102004037870A1 (en) 2006-03-16
WO2006015906A1 (en) 2006-02-16

Similar Documents

Publication Publication Date Title
DE102004037871B4 (en) Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system
DE102016215618B4 (en) VEHICLE CAMERA DEVICE FOR IMAGE CAPTURE IN FRONT OF VEHICLE AND FOR VEHICLE CONTROL
EP1589484A1 (en) Method for detecting and/or tracking objects
EP2338062B1 (en) Method and system for determining a vehicle speed
EP3335419B1 (en) Vehicle camera device for capturing the surroundings of a motor vehicle and driver assistance device for detecting objects with such a vehicle camera device
WO2010076065A1 (en) Camera arrangement for a motor vehicle, and motor vehicle comprising a camera arrangement
KR102397156B1 (en) A method of providing a camera system and driver assistance functions for photographing the surrounding area of one's vehicle
CN108924543B (en) Optical test system and test method for vehicle-mounted camera
DE102017222614A1 (en) Device for environmental detection and method for its operation
WO2010103061A1 (en) Apparatus and method for detection of at least one object
EP3428677A1 (en) A vision system and a vision method for a vehicle
DE102004037870B4 (en) Optical module for an outer vestibule in the direction of travel of a motor vehicle detecting assistance system
DE102006010295B4 (en) Camera system with at least two image recorders
DE102019206370A1 (en) Exterior lighting device for a motor vehicle
WO2011153990A1 (en) Optical device having a bifocal optical element and a mirror element
JP2010271143A (en) Imaging device, distance measuring device, outside vehicle monitoring device, and imaging method
DE102011055928A1 (en) Optical device e.g. stereo camera, for driver assistance system for detecting e.g. transport area lying ahead of vehicle, has concave mirror and deflecting prism arranged in optical path of near range radiation from near region
EP3428687B1 (en) A vision system and vision method for a vehicle
DE102014224903A1 (en) Optical environment sensor for vehicles
DE102012111199A1 (en) Optical device for camera of vehicle for detecting images of two different distance ranges, has two image acquisition elements that are arranged in different image planes of imaging system
WO2013041292A1 (en) Image capturing device for a vehicle
DE102005003191A1 (en) Motor vehicle e.g. passenger car`s, surrounding field detecting device for parking spot measurement, has light source and camera arranged with basis distance from one another, which serves to determine distance between vehicle and obstacle
DE102010055865A1 (en) Camera device for a motor vehicle
EP1417634B1 (en) Device and method for recognition of optical markers
DE102007013501B4 (en) Driver assistance system with differently oriented cameras

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
8364 No opposition during term of opposition
8327 Change in the person/name/address of the patent owner

Owner name: CONTINENTAL AUTOMOTIVE GMBH, 30165 HANNOVER, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee