CN1103045C - 确定电磁波的相位和/或幅度信息的方法和装置 - Google Patents
确定电磁波的相位和/或幅度信息的方法和装置 Download PDFInfo
- Publication number
- CN1103045C CN1103045C CN97198749A CN97198749A CN1103045C CN 1103045 C CN1103045 C CN 1103045C CN 97198749 A CN97198749 A CN 97198749A CN 97198749 A CN97198749 A CN 97198749A CN 1103045 C CN1103045 C CN 1103045C
- Authority
- CN
- China
- Prior art keywords
- modulation
- pixel
- light
- hybrid element
- voltage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J9/00—Measuring optical phase difference; Determining degree of coherence; Measuring optical wavelength
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/491—Details of non-pulse systems
- G01S7/4912—Receivers
- G01S7/4913—Circuits for detection, sampling, integration or read-out
- G01S7/4914—Circuits for detection, sampling, integration or read-out of detector arrays, e.g. charge-transfer gates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/491—Details of non-pulse systems
- G01S7/4912—Receivers
- G01S7/4915—Time delay measurement, e.g. operational details for pixel components; Phase measurement
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/32—Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated
- G01S17/36—Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated with phase comparison between the received signal and the contemporaneously transmitted signal
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Solid State Image Pick-Up Elements (AREA)
- Optical Modulation, Optical Deflection, Nonlinear Optics, Optical Demodulation, Optical Logic Elements (AREA)
- Holo Graphy (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Variable-Direction Aerials And Aerial Arrays (AREA)
- Measurement Of Resistance Or Impedance (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
本发明涉及一种确定电磁波的相位和/或幅度数据的方法和相应的装置。为了使得采用这样一种方法获得的图象数据具有空间深度分辨率,按照本发明的方法包含下述步骤:使电磁波成束在至少包含一个象素的光混合元件的表面上,该象素至少具有两个光敏调制光门Gam和Gbm以及相关的累积门Ga和Gb;将调制光门电压Uam和Ubm施加到调制光门Ga和Gb上,而调制光门电压的构成是Uam(t)=Uo+Um(t),Ubm(t)=Uo-Um(t);将直流电压施加到累积门Ga和Gb上,而直流电压的幅度至少与Uo和调制电压Uam(t)的幅度的总和相同;使由入射电磁波在调制光门Gam和Gbm的空间电荷区中产生的载流子经受漂移场的电位梯度,并漂移到相应的累积门Ga或Gb,而电磁波是调制光门电压Uam(t)和Ubm(t)的极性的函数;已经分别漂移到累积门Ga和Gb的电荷的方向反向。相应的光混合元件至少具有一个象素,该象素包含至少两个光敏调制光门(Gam,Gbm)和与这两个调制光门相关并与入射电磁波隔开的累积门(Ga,Gb)。可以由多个光混合元件组合在一起形成一个阵列。
Description
本发明涉及一种确定电磁波的相位和幅度信息的方法和装置。
这里所使用的术语“相位”表示相位的通过时间,以及也按照所包含的各个信号波形而使用的指定通过时间。
本文中,涉及的不是电磁波,而是光波。然而,这不表示仅限于可见电磁波的频谱范围,而仅是为了简便起见。
为了测量宽带及高频信号中频率分量的幅度和相位,电磁测量技术和通信技术采用相位检测器,将未知信号与正弦振荡相乘或混合,并通过积分或低通滤波,确定相同频率的信号成份中出现的稳定部分。
这一过程对于一个给定的可调相对相位位置,产生一个混合信号与未知信号的相关函数。通过改变混合频率(扫描),可以将未知信号划分成一个个频谱分量。至少可以在三个相位处确定同一频率的稳定部分和未知频率分量变化的幅度和相位。
正如前文中描述电信号时所提及的那样,通过采用宽带光检测器作为电光传感器并后续电子测量值的确定,目前特别对测量和通信领域中已经日益重要的相应光信号进行了研究。
由于费用昂贵,那些方法和相应的测量装置通常仅适用于一个或两个通道。然而在光信号的情况下,必须经常同时对具有高频分量的许多并行通道(尤其是整个图象序列)进行测量。
除了二维光波的频谱调制特性以外,人们日益感兴趣的是包络在时间空间中的快速跑动(run)。另外,人们希望对3维目标进行快速和准确的测定(例如通过光雷达处理过程),由于回波信号的速度为光速,这需要在亚毫微秒数量级的快速检测器。同时,如果想要避免扫描有源的(actively)或无源的(passively)光亮的三维物体的费时操作,应当具备一个检测器阵列。
DE 44 39 298 A1专利中提供了这样一种三维摄像机,本发明将这一专利作为基本的起点。
图10描绘的是基于回波通过时间或相位通过时间过程的三维摄像机。调制光发射器107和103辐射并由三维物体100反射的高频(HF)调制光波101在相前延迟中含有所有的深度信息。如果入射光波再一次在具有相同频率的二维光学混合器104的接收孔径102经过调制,而这一过程对应于一个零拍(homodyne)混合或解调过程,则结果产生一个稳定高频干涉图。
该高频干涉图可以用一个传统的CCD摄像机105记录下来,并用一种图象处理装置106作进一步的处理。CCD光电荷(photoelectric charge)中混合乘积的稳恒部分的积分与两个混合信号的相关函数的形成对应。因回波通过时间而产生的与距离有关的相位延迟和幅度可以通过解调混合频率的不同相位(例如0°、120°和240°或0°、90°、180°和270°)从三个或更多的干涉图按照象素计算得到,从而可以重新构成三维深度的图象。
这时,二维光学混合器103或104(也称为空间光调制器或SLM)包含一个Pockel盒,这种Pockel盒具有文献中所描述的各种严重的缺点。
其他的实施方法是采用LCD窗,这种LCD窗的价格倒是不贵,但在所需带宽方面约低到1000分之一,离要求太远。
若与图象放大器中所使用的那样采用所谓的微通道板(microchannelplate),则价格也很贵。增益可以调节由施加到微通道上并影响微通道中二次电子发射的加速电压来调节。
另外,目前的技术状态建议采用一种二维相关器(correlator),这种相关器是基于IEEE Journal of Quantum Electronics(量子电子学IEEE杂志)1995年第9期,卷31,1705-1708页上Spiring、Seitz等人的“The Lock-In CCD-Two-Dimensional Synchronous Detection of Light”中提出的一种CCD-光检测器阵列的。其中,通过四个转移门(transfer gate)询问(interrogate)一个光象素(photopixel),以便确定正弦调制光的相位。对于每一正弦周期,用四个转移门取得一个个等距离的取样,从而可以容易地计算相位。由于在主要限定带宽的扫描周期内首先是对谐波光信号进行积分的,所以对于上述问题来说,这一过程的速度仍然太慢。于是,只有用接收存储的电荷作为扫描取样来实施所需的混合过程。
因此,本发明的目的是提供一种方法和装置,用以取得相位和/或幅度信息以及光波的包络,从而提供一种更简单、频带更宽且更廉价的相关器概念和通过可预定的光照(lighting)的快速三维问题测量。
上述目的是通过一种确定电磁波的相位和/或幅度信息的方法来实现,该方法包括以下步骤:
将电磁波辐射到至少具有一个象素的光混合元件的表面上,其中,所述象素至少有两个光敏调制光门Gam和Gbm以及相关的累积门Ga和Gb;
将具有Uam(t)=Uo+Um(t)和Ubm(t)=Uo-Um(t)形式的调制光门电压Uam(t)和Ubm(t)施加到调制光门Gam和Gbm上,其中Uo是恒定电压;
施加到累积门Ga和Gb上的是直流电压,所述直流电压的数值至少是Uo与调制电压幅度Um(t)之和的数值一样大;
由入射电磁波在调制光门Gam和Gbm的空间电荷区中产生的载流子受到依赖于调制光门电压Uam(t)和Ubm(t)之极性的漂移场电位梯度的影响,并漂移到相应的累积门Ga和Gb;以及
取出已经漂移到各个累积门Ga和Gb的电荷qa和qb。
另外,上述目的可以通过一种光混合元件来实现,该混合元件包括:
至少一个象素,
至少两个光敏调制光门(Gam,Gbm),以及
与调制光门(Gam,Gbm)相邻、相关且相对于入射电磁波遮蔽(shaded)的调制门(Ga,Gb)。
关于相应的混合元件排列结构,本发明的目的可以通过前述光混合元件来实现,其中所述光混合元件被排列成一维、二维或三维。
最后,上述目的可以通过一种确定电磁波之相位信息的装置来实现,该装置包括:
至少一个如上定义的光混合元件;
调制发生器;以及
发射器,其辐射电磁波是以预定方式由所述调制发生器进行强度调制的;
其中,由物体反射的电磁波被辐射到所述光混合元件的表面上,并且,
所述调制发生器向所述光混合元件提供与来自所述发射器的辐射电磁波的相位成预定相位关系的调制电压Um(t)。
按照本发明的原理是基于调制光门(photogate)电压产生的漂移(drift)以及至少两个靠近光敏调制光门下面的材料中光波由光产生的少数载流子的分离。这样,在施加到调制光门的调制光门电压Uam(t)和Ubm(t)的影响下,那些载流子根据各极性和相位,漂移到累加门(accumulation gate),该累加门所受的偏置最好是直流电压Ua和Ub的两倍。调制光门电压Uam(t)和Ubm(t)最好是互补施加的,并且最好构成偏压Uo以及调制电压+Um(t)和-Um(t)分别叠加成推拉关系。两个调制光门最好一起形成正方形表面。仅具有两个调制光门的象素也可以称为是双象素。
按照本发明的这一原理预先假定光电量子效应是由电磁波引起的。但不管怎样,本说明书总是仅涉及光波,这不能理解为是一种限制。
实际的混合和相乘过程在于光生载流子依赖于电压或依赖于相位的调制漂移至调制光门的右侧或左侧(“电荷摆动(charge swing)”)。因此,以这种方式分离并在累加门(accumulation gate)处收集并传送到电子读出系统的载流子之间的电荷差在预定时间内的积分,代表相对于入射调制光信号与调制电压Um(t)的包络的相关函数的量度。
同时,已经漂移到累加门并通过不受电荷摆动位置影响的其余电荷的那些载流子的电荷总和,具有合适的象素亮度和象素灰度值。
为了确定入射光波的相对相位或时间延迟,如上所述,必须进行三个参数的测量,即,直流电压成份和交流电压成份以及相对相位。所以,可以有这样一种象素结构,即,光混合元件具有三个光敏调制光门,这些光门因调制光门电压而动作,相对于发射器辐射的光波,调制光门电压有三种不同的相移。
然而,要求从合成相关幅度中确定光混合元件每一象素处接收信号的相位,对混合器信号的四种不同的相位进行四种不同的测量。这就提供了一种超定方法(over-determination),采用这种方法,可以使噪声得到明显的抑制。
每一象素两个调制光门处调制光门电压的推—拉结构使得同时实施两次测量。因此,在高频调制的例子中,分别关于辐射光的相位,就调制电压Uam(t)和Ubm(t),在0°/180°同时也在90°/270°相位差分别通过相差90°的实施两次测量就足够了,以便得到所必须的四个不同的测量值。
所以,一种特定的较佳结构是这样的,分别形成一个象素的光混合元件包含四个对称排列的调制光门,其中,每两个处于相对位置的调制光门因推—拉或180°相移的调制光门电压而动作,其中,分别相差90°并且已在上文中对双象素的描述的两次测量是在0°/180°以及90°/270°相位差的调制光门电压下同时实施的。这样一种象素也称为四元(quadruple)象素。
另外,为了校正调制光门电压Uam(t)和Ubm(t)的相移,最好能够将发射器辐射的一部分光波作为基准(reference)直接投射到多个光混合元件结构多个象素的至少一个象素上。随后,从直接接受辐射的象素得到的相位和幅度信息可以用作校正操作,或用来将相移调节到某一预定值。
相反,如果独立接受激励,借助于至少一个光混合元件,有源物体辐射的入射光的未知调制,可以用已知的高精度的锁定(lock-in)放大器来测量光波。为此,带有取代发射器的可调调制发生器的光混合元件形成一个锁相环路。另外,在锁定放大中,锁相环路用作高频调制的例子,而延迟锁定环路用作数字调制。
为了测量无源物体,可以用各种方式分别实施辐射光的调制和调制光门电压Uam(t)和Ubm(t)的相应调制。首先,可以进行连续的高频调制,这时,在不同的时间间隔反复读取电荷之差和电荷之和,而这又反过来受象素亮度的影响,用以对光波的相位信息和幅度信息的估算。
一种有利的过程是脉冲形式的高频调制和照光(lighting)操作的间断模式,以便在每一种情况下暂时超过干扰背景照光。这时,在高频脉冲期间仅对光生电荷进行积分,随后再估算。
尤其在确定发射光波的的相位或通过时间信息时,为了提高相位或通过时间分辨率的水平,可以采用从雷达技术得知的高频脉冲压缩过程,采用窄相关函数,例如啁啾调制(chirp)过程。这样,采用啁啾(chirp)重复调制各个光混合元件的调制信号以及发射器以预定相位关系发光的光路并因此以寻求的相位关系反射的光波。借助于啁啾调制,采用合适的方式,光混合元件的调制光门电压与发射器辐射的光之间可调延迟的插入可以解决(resolve)多个目标或抑制被照场景的令人头痛的多次反射。
下文中将描述的伪随机噪声调制(PN调制)是另一种调制形式,即,基带PN调制和高频PN调制。重复光信号情况下采用取样—保持过程的取样过程是采用针形脉冲(needle pulse)进行混合和相关的特例。按照本发明的光混合元件可以有利地应用于本例中以及其他脉冲调制的应用中。
这里的调制方式本质上都是现有技术中所熟知的。
现在,已经漂移到累加门的电荷可以是以各种途径进行进一步处理的主题。一方面,可以用CCD技术构筑光混合元件,这时,电荷在累加门处收集或集中,随后用传统的方式移送至CCD读出电路(例如在三相移循环),并通过p扩散或n扩散读出。
另一方面,光混合元件可以用CMOS技术来实现,作为具有特定象素电子读出和信号预处理系统的有源(active)象素元件。这时,实践中,直接调制光门的两边,采用在CCD工程中是传统技术的读出电路。这时,累加门最好呈阻塞的低电容pn-结二极管的形式,并最好直接通过电极Ga和Gb将传送到达的光生电荷至电子象素读出和信号预处理系统,在那里存储并处理。
所以,在后一种情况下,电荷摆动的两个电荷分量(component)被连续读出,并且可以在实际上以不发生反应的方式(例如采用电荷放大器)存储在各个下游连接的电容器上。
在每一种新的测量操作之前,本领域的状态是使所包含的充电电容器通过电子复位开关放电,并要求复位状态中测定的故障(fault)电压用作实际测量值的纠正。采用按照象素(pixel-wise)的不反应(reaction-free)读出过程具有这样的优点,即光混合元件的整个动态过程及其测量方法与采用CCD技术相比得到大大提高。
采用进一步的较佳方法,可以直接计算电子象素读出和信号预处理系统中的相位和幅度信息,最好是以在单片集成(on-chip integration)的形式。这样一种特定应用的光电芯片(ASOC)或这样一种有源象素传感器(APS)使测量速率提高,并使得可以进行相位和/或幅度按照象素预处理。
本发明的重要优点是可以与电荷产生和分离同时进行调制。换言之,同时进行检测和混合,而没有噪声和频带限制的中间级。所以,防止了本领域中特别出现的时间漂移误差,必定会出现来自检测操作按照时间和空间分离的电荷调制和集中(integration)操作,而不必使其抑制。
本发明的进一步的优点是光混合元件的高极限(limit)频率。推—拉调制电压引起的电荷转移的极限频率是可以按照最大漂移长度或转移距离比较的,这就是说,调制光门与相应MOS晶体管的极限频率的和长度,因此得到GHz范围。另外,通过反对称载流子分离和差(difference)形成使麻烦的共模信号得到抑制。与调制信号不相关的每一干扰信号(例如背景光)在电荷差中得到抑制,从而得到高信噪比。另外,由于检测、混合和载流子集中的组合以及同一芯片上的差形成,仅存在微小的时间漂移。此外,在单个的半导体结构中可以实现实际上所有测量功能的组合。
与采用Pockel盒作为调制器的DE44 39 298AA1专利中揭示的技术相比,仅需1伏很低的调制电压,而不是1000伏。另外,按照本发明的光混合元件的二维结构使得可以在接收器侧具有大孔径(aperture)。
另外,确定相位和/或幅度信息无需相干光或偏振光。因此,可以通过选择滤光片的上游结构利用入射光的进一步的特定特性,例如,光的偏振和波长。此外由于去掉了按照本领域中的电子混合器和宽带光检测器放大器,这种结构提供了高水平的灵敏度和高的信噪比。
由在光门处空间电荷区中使用的材料的频谱光灵敏度确定要测量的光波的光谱带宽,例如,在硅的情况下,波长范围是0.3到1.1μm,在InGaAs的情况下,波长范围是约0.8到1.6μm,而在InSb的情况下,是约1到5.5μm。
光混合元件可以是零、一或二维结构,因此提供了宽频谱的几何形式。这样,因此,几个100,000的光混合元件可以以并行关系以例如10-1000MHz的调制带宽进行工作,从而可以极快地进行三维摄影,用以判断每一象素中的距离信息。相位图象φ(x,y),或者在调制光的情况下是具有半径矢量或voxel距离R(x,y)的距离图象或深度图象是通过流入累加门并读出的电荷的电荷差按照象素方式来确定的。相应的电荷和给出了传统的象素灰度值A(x,y)。这两种可以组合起来,给出标度的灰度值图象或三维图象A(x,y,z)。
因此,三维图象重复率是在约10Hz至高于1000Hz的范围内,并取决于所使用的光混合元件数和光强度水平。通过另外的滤色镜,可以得到距离图象R(x,y)的通常的彩色值,红色(x,y)、绿色(x,y)和蓝色(x,y)。
在光混合元件方面,混合的集中结构和载流子集中至少还提供了一种简单的结构。最后,无需在接收通道方面再花钱,因为如果要录制的是一维或二维景色而不是一个点时,传统的光学成象系统足以对入射光(甚至可能是反射光波)进行成象。采用光学发送和接收系统的同步变焦距,该测量装置可以灵活地适用于不同的三维景色。
在按照本发明的方法和相应混合元件或多个混合元件结构的情况下,如果直接通过有源象素传感器结构(APS)确认象素相位或象素通过时间以及象素亮度,随后有选择地读出或者最好顺序采用位于相同芯片上的多路复用结构(所谓单片多路复用结构),那是合乎要求的。这提高了处理速度,同时也减小了所需的进一步的元件数。
另外,如果象素亮度被估算为相关累加门的电荷之和,估算为灰度值图象,则本发明的一种特定的较佳实施例是这样一种实施例,即,在背照光的情况下,即,在出现除调制光以外的非调制光的情况下,通过计算,消除累加门处附加光产生的电荷,采用这一过程,一方面,在得到的灰度值图象与开启的调制光之间形成差,而在另一方面,无需调制光,即,在关断调制光源以后。在累加门处的基本亮度中和电荷基础量中不含有相关信息,从而实际的相关信息更清楚地出现在基础量的减去以后。
正如已经提及的那样,如果以线性阵列、面阵列或空间阵列采用多个混合元件,很明显这是合适的。这样,术语“线性”阵列的含义不仅是指呈顺序关系排列成直线的一组混合元件,而且通常是指沿一条线排列的一组混合元件,其中,所述线可以是直线,也可以是曲线。在面结构的情况下,即使由于实际上的原因,也可以以矩形阵列的形式提供平面混合元件排列结构,而且原则上混合元件可以按照任何要求的图形来排列,也可以排列在曲面上,例如排列在球壳的内表面上。也可以在成角度的两个面上采用混合元件的阵列,即,同时在相互成一个角度的两个面上,并且这样一种结构对于给定的应用是合适的。这种结构由统称为“空间阵列”所包括。
在这样一种含有多个并且可能是几百或几千个混合元件的阵列中,按照本发明的方法的优点和所要求的结构是这样的,即,至少一个象素或至少一个混合元件是直接用用作发光(lighting)的强度调制的一部分电磁波来辐照的,这时,在所述至少一个象素处,采用用这样的途径得到的测量结果,用来对其他相位和亮度结果进行校准。这样,如果这样一种参考象素是由于具有有选择的不同强度级别的发射器或者是采用多个参考象素的情况而动作,每一象素由不同的强度级别而动作,则这是合乎要求的。这使得可以避免可能由于测量信号的大的动态范围而出现的差错。
在上述一维或多维混合元件的情况下,如果象素是用MOS技术构筑在硅片上并且可以用多路复用结构(最好是CCD结构)来读出,则这是合乎要求的。
读者将会理解,按照本发明的混合元件是适合用于数字照相机或摄像机的。为此,只需提供合适的混合元件结构(例如呈矩形矩阵形式),这种结构具有集成接收光学系统、电子估算系统和用于差信号、和信号和相关的参考信号的信号处理,以及从中计算的灰度值图象以及通过时间或距离图象的数字存储器。这种结构还包括用调制的电磁波或调制光辐照三维景物的合适的发射器或光源,以及可适当调节接收光学系统的发送光学系统,其中,所有这些元件组合在一起构成一个小型装置用作数字照相机。这样,数字照相机和数字摄像机之间的差异仅在于在相应的摄像机中,相当大数量的图象必须在相应短的时间内记录和存储起来,从而必须提供合适的装置,用于相应图象序列的存储和重现。
读者将会理解,除了采用来自各个频谱区域的调制光来实现对景物的照光或者辐照以外,从而以这种途径获得的图象彩色分量或色度分量可以用同时提供的空间深度信息来得到并重新构筑完整的彩色图像。
对于更大的带宽以及改进的边缘检测,可以采用微透镜光学系统,其中,每一混合元件或象素是一个微透镜光学系统,该系统将入射光缩小到象素的中央区域,从而实际上去除了特别出现在光敏表面的边缘区域中的调制门处与理想潜在(potential)结构的偏差。另外,由微透镜光学系统在混合元件的检测器平面内产生的焦点以外处的成象能够确保沿两个半个象素中间随机延伸的边缘的成象不会在模拟相关或不正确的深度信息的累加门处产生差电荷(differencecharge)。
具有按照本发明的光混合元件的阵列同样最适合用于检测,可能也适合于在对问题中的结构的观测场中跟踪预定的一、二或三维结构,另外还考虑到被寻找以及可能被跟踪的物体的深度信息和目标距离。
用特定的术语,有选择地用(Δx,ΔY,ΔT)确定调制信号的幅度和x、Y的位移及时间坐标T(其中,x和Y定义了两个沿混合元件矩阵平面上延伸的线性独立坐标,而T表示调制信号的通过时间延迟),使得实现三维相关,从而在空间中搜寻、检测并且可能的话跟踪预定的三维物体。
按照本发明的光混合元件在光数据传输领域中有较广的应用。这样,按照本发明的光混合元件被简单地用来取代传统光信号接收器中光二极管,光信号接收器也可以包括光再生,其中,用最佳方式使调制信号的形状与信号形式相适应,并用最佳方式使调制信号的相位在锁相回路中与接收信号的相位位置相适应。换言之,时钟是从信号自身中得到,并用作接收信号的最佳权重,从而用最佳方式使信号与麻烦的噪声背景分开。这样,与传统的光二极管相比,光数据传输的灵敏度和精度明显得到提高。尤其是使得光传输部分的长度明显增加,而无需以时间、频率和编码多路复用模式进行中间放大以及更多数量的并行通信信道。
最后,按照本发明的光混合元件还可以用作光学位置检测系统,其中,操作方式在原理上与采用使得能够进行信号编码辐射的卫星传输进行很精确位置确定的GPS系统是相似的。在相应的光学位置检测系统中,从GPS系统熟知的卫星发射器可以由色散调制光源(例如用激光二极管和光色散或散射系统)所取代,色散调制光源的位置相应更靠近位置是待确定的物体,而接收器是用物体上的一个或多个光混合元件形成的,最好是用多个光混合元件形成,这些光混合元件沿不同的方向,从而可以检测来自不同地方、具有不同调制方式并且位置是固定的光源的信号。这样,编码调制就使得通过位置的确定,固定光源与要确定位置的物体具有清楚的相关性,以及相关的信号通过时间。
进一步的用途是光数据传输的去多路复用,采用光混合元件用光调制以及相关性形式进行编码使得各个通道(channel)具有清楚的相关性。
按照本发明的高水平光混合元件相位灵敏度的进一步应用和用途在于Sagnac效应的测量,即,旋转参考系统中光波的通过时间和相移。为此,将调制光耦合到一根光纤内,该光纤最好有多圈,光纤的输出照射按照本发明的一个光混合元件。该混合元件的调制门用与作为耦合输入的光波相同的频率调制,从而在光混合元件处以电荷分布形式而出现的相关结果提供了对电流(current)频率和相移的测量。在其转轴不在光纤各匝或光波导的平面内的参考系统的每一旋转期间,频率和通过时间以及相位位置发生变化,并且是由光混合元件自动检测的。值得注意的是,采用这种光混合元件,这种基于Sagnac效应的光纤陀螺仪系统现在可以用非相干光来实施,这样不会在长期稳定性中产生问题,因为按照现有技术中的相应误差源、光检测器和电子混合器的高频放大器下游被完全去掉的了。
另外,除了可以用这样的系统进行绝对方向测量以外,也可以用按照本发明的光混合元件进行移动物体的速度测量,因为至今,在光波被引入光波导之前,在分束器(beam splitter)中去除了一部分光波,并且光波被引向固定的物体,这时,固定物体反射的光被合适的光混合元件接收器捕获,并且用已在许多场合中描述的方式(这里是按照Doppler频移)进行估算。
根据一条线或矩阵图象的附加深度信息的各个含义和意义,可以在CCD、CMOS或TFA(Thin Film on ASIC,ASIC上的薄膜)图象传感器中以合适的技术集成给定数量的光混合元件。
另外,在采用按照本发明的3D-线或矩阵照相机(camera)时,另外采用一个传统的2D照相机可能是合适的,其中,向3D照相机进行频谱分配和馈送有源调制照明元件以及其他的非调制照明元件最好用分束器来实现。
为了用光混合元件进行三维测量或勘测,在距离较长时来说调制光太弱,这时,可以采用至少两个3D线或矩阵照相机的组合,其中,本发明的测量或勘测是根据通过时间原理在近区域内以及根据三角测量原理本质上在存有背景光时在远区域中实现的。
这时,近距离的深度测量是如上所述实施的,本例中是采用至少两个并列的照相机来实施的。
对于在远距离中的深度测量,由PMD芯片中心点形成的照相机的光轴被对准要测量的区域中相交的公共点上,例如,沿水平或垂直方向以PMD芯片间距由合适的PMD芯片位移,其中,在相同的时间内,照相机的光学系统也被设置成该距离。通过合适的前述调节,象素亮度值在最大的深度清晰度区域内重合。
对于对该空间中物体的检测和识别,如果象素幅度具有相应性,由粗略提供的直流调制电压相加光混合元件的和图象,在差图象中与设置的距离相关并估算,而由设置为零的调制电压在差图象中去除非相应的象素幅度,则Uma=Umb=0。
这样,通过角度扫描,在调制发射器光照范围以外测量并勘测三维景物,通过PMD芯片合适的位移和各个摄像机的旋转和/或整个装置的枢轴运动得到必要的角度。
本文中只是部分详细描述或者仅仅粗略地描述的本发明许许多多用途中的一部分,下面列举了本发明其他一些可能的用途,但这些用途的进一步描述超出了本申请的范围,同样,下面的列表也是非穷尽的。
其他的用途也是很有意义的,下面列举了领域:
—数字三维照相机,
—数字三维摄像机,
—危险区域监视,
—安全工程和“智能大厦”,
—摩托车中乘员检测和识别,“智能气袋”,
—电子三维后视镜,
—道路交通状况的识别,
—自动车辆导航,
—非相干光纤陀螺和多普勒速度测量,
—自动运输车辆的控制,
—工业清洁机器人,
—进入许可的个人识别、鉴别和检查,
—物体(例如车辆)的识别,
—生产监控、材料测试、100%质量测试,
—机器人手、坚固的、小型的、所有固态的电子“三维眼”,
—车辆速度和所含距离测量、道路条件检测、交通拥挤,
—铁路轨道空闲信号发送、接触线监控,
—医学工程、内窥镜检查,
—光纤自由空间或线路通信的CDMA工程,
—如用于多媒体领域的互作用三维通信,以及
—采用一行光混合元件对移动物体的三维测量。
因此,下面将强调本发明光混合元件的下述优点(下文中用“PMD”表示“光混合器装置(Photonic Mixer Device”):
1.PMD组合:在1/100-1/1000mm2很小空间内的检测、推拉混合和集成光—电相关。
2.2倍/4倍PMD:分别代替2或4个昂贵的具有高动态和群(group)通过时间的宽带放大器以及2或4个电子混合器。
3.消除了发射器和接收器之间的高水平的电子串话灵敏性。
4.具有约100,000个并行电—光调制器的高水平的可集成度。
5.全部可集成PMD-3D-照相机或摄像机,小型、轻便、坚固并且可由一光学变焦距系统灵活适配用于发射器和接收器。用于具有约20cm到50m距离、约5°到50°孔径角对自然表面的测量容积(volume)。
6.在10Hz-1000Hz范围内极快的三维图象记录。灵敏度和S/N比与当代的CCD和CMOS照相机相应。
7.根据各测量时间、照光强度、用最佳参照衡量的所包含的光学系统和间距的不同,期望的深度分辨力约为0.5mm到50mm。
8.按照各象素尺寸的最大带宽可达GHz范围。
9.调制电压在小于1伏的范围内。
10.无需相干光、偏振光或窄带光,且频谱范围取决于光敏材料(例如InSb可达5.5μm)。
11.通过数据结合对三维深度图象和二维灰度值图象进行同时记录可以对三维灰度值图象(或三维彩色图象)进行最佳估算。
12.通过在积分(integration)时间Ti内依赖于时间的变化(variation),读出电路使动态范围增加约8位(系数(factor)256)。
下面参照附图详细描述本发明的实施例。
图1中的a)是按照本发明采用CCD技术的光混合元件第一个实施例的象素截面图,b)-f)是两个互补调制光门电压Uam(t)和Ubm(t)各个相位或时间的电位分布US(t),
图2是用包括一部分线间转移读取装置的CCD技术的两个线性排列象素的方框图,
图3是在HF调制时入射光的强度分布和电压Usep(t)、Ua(t)、Uam(t)、Ubm(t)和Ub(t)的电位图,
图4是根据相对相位或发送时移ωopt=ωmτ在高频调制时,以漂移到累加门的光生载流子电流
形式光混合元件的混合和相关结果的特征图,
图6描述的是a)在调制光门和累加门处按照具有调制光门G0以及电位分布的本发明采用光混合元件的CCD技术的第二个实施例的象素截面图,b)是用于正调制电压的时候,而c)是负调制电压Um(t)的时候,
图7描述的是,a)是按照本发明的光混合元件第三个实施例的象素截面图,b)-f)是与图1类似各个相位的电位分布,
图8是按照本发明具有四个调制光门和四个累加门的光混合元件第四个实施例称为四倍象素的平面图,
图9是按照本发明具有四个调制光门和四个累加门和一个中央对称中间门G0的光混合元件第五个实施例象素的平面图,
图10是本领域中用来确定光波的相位和幅度信息的已知装置的示意图,
图11是按照本发明用来确定高频调制的光波的相位和幅度信息的装置的示意图,
图12是按照本发明用来确定例如PN调制或矩形波调制的光波的相位和幅度信息的装置示意图,
图13描述的是,a)是按照本发明采用CMOS技术具有电子象素读出和预处理系统的光混合元件第六个实施例的象素的截面图,b)和c)是类似于图6用于调制光门电压的两个相位或极性的电位分布,
图14是按照本发明具有四个调制光门、四个调制门和交叉形状结构的中间门最好用于数字调制的光混合元件第六个实施例的象素的平面图。
图1a是采用CCD结构例子光混合元件一个单独象素1的截面图。这时,除了象素1以外,光混合元件包括电源和信号输出(take-off)操作所必须的结构。较外部的门Gsep仅用作电确定该象素与相邻结构之间的关系。
图1所示的结构是形成在p掺杂的硅衬底2上。所建议的混合或相乘(multiplication)操作将首先考虑用于纯CW高频调制。
与该截面图相关,图1b-f示意描述了混合过程各个相位的电位分布。中间调制光门Gam和Gbm代表光敏部分,并且是倒置(inversion)状态。除了在例如导通的或透光或部分透光的上覆盖物(upper cover)多晶硅上的正偏置电压U0以外,上面还有叠加的推—拉电压Um(t)。这就分别使得Uam(t)=U0(t)+Um(t),以及Ubm(t)=U0(t)-Um(t)。
它们倍增地使得在贴近绝缘层3下方的空间电荷区(例如氧化硅或氮化硅)入射光光子所产生的少数载流子产生分离。在调制推—拉电压的影响下,那些载流子(此例中是电子)漂移到贴近的正累加门Ga或Gb,并在那里集中,而多数载流子或空穴流到p-Si衬底的地端。也可以是背照光。
图2描绘的是按照本发明的光混合元件两个象素1的平面图,它包括线间转移读装置7的一部分,其形式是一个3相位CCD移位寄存器,其一端上是一个电子读出系统,该电子读出系统有一个用来对由相关获得的电荷值进行串行(serial)处理的扩散汇合点(diffusion junction)。在线路例如第n个象素的所有累加门处电荷累加的预定时间T以后,Ga和Gb处的的电荷qa和qb通过各个转移门TGa和TGb传送到3相读出移位寄存器。限定隔离门(delimiting separationgate)Gsep使相关象素不会受到不需要的外部影响,并且最好是处在地电位。
图3描述的是与图1相关的电压结构。调制光门Gam和Gbm是通过图3中所示的调制光门电压而工作,包括反向相位的高频调制电压Um(t),其描述如下:
Uam=Uo+Umcos(ωmt) (1a)
以及
Ubm=U0+Umcos(ωmt-180°)=U0-Umcos(ωmt) (1b)
图1b-f清楚地描绘了在高频调制信号的持续时间Tm内从t0到t8的时间序列中对问题中的象素代表象素1的空间范围s以内空间电荷区中的电位分布Us(s)。在累加门Ga和Gb处,在按照调制光门电压Uam(t)和Ubm(t)的极性,在光生载流子主要漂移到图1中截面的象素1的左侧或右侧以后,相当高的正电压提供用于光生载流子的累加。当光调制和调制光门电压Uam(t)具有相同的频率的时候,该运行具有特定的效果。于是,根据各个相位差φopt,有一个漂移到累加门Ga和Gb的载流子的平均优先方向。相关平均电流用
和
表示。
基本的相关过程可以在数学上描述如下:在最普通的2D(二维)阵列光混合元件情况下的接收平面内,z=0,并且那里的入射调制光波通常描述为Popt(x,y,t-τ)。这里,通常是用那里推—拉调制信号作用的光生载流子来描述的,其形式通常是Um(x,y,t),通过相对于两个累加门的电荷差,近似相乘(multiplicatively)和积分联系在一起。对于漂移到累加门的Ga和Gb,载流子漂移
的平均差(这里,T=积分时间),在大多数场合,将依赖于地点的相应相关函数φUm,Popt(x,y,t)描述为三重卷积:
φUm,Popt(x,y,τ)=k1Uam(-x,-y,-τ)***Popt(x,y,τ)=k2Δiab(x,y,τ)(2)通过时间差τ=φopt/ωm,调制角频率ωm和常数k1和k2是依赖于结构并且按照操作原理是不重要的。
按照本发明的光混合元件通过光电子的快速分离电荷传送及其推—拉存储以及差和和估算,达到高水平的位置和时间分辨力。因此,通过在非稳定光波情况下形成依赖于时间的平均漂移电流
的差,可以抑制所有麻烦的偏移分量,并且同时,形成关于具有调制电压Um(t)的光信号Popt(t-τ)的所要求的相关函数。
下面更详细地描述该过程。由Uam(t)和Ubm(t)产生的高频漂移场提供分别漂移到正侧的电子漂移。例如,在调制光门电压的正半波,Uam(t)=U0+Um(t),即,在Ubm(t)=U0-Um(t)的负半波期间,光生载流子将漂移到累加门Ga,并在那里累积,或传送作为电荷量qa(见图1b和c中两个上面(upper)的调制光门电压分布)。对于稳定的、谐波(harmonically)调制光,图3将每一象素的光功率表示为:
Popt(t-τ)=P0+Pmcos(ωt-φopt) (3)其中,P代表包括背景光的平均值,Pm代表调制幅度,ωm代表高频调制频率,φopt代表相位延迟,而τ=φopt/ωm代表关于在Gam处调制相位入射光的相应的通过时间延迟。每一象素总的光生电流为:
i(t)=Sλ·Popt(t-τ)=Sλ·[P0+Pm·cos(ωmt-φopt)] (4)
i(t)=I0+Im·cos(ωmt-φopt) (5)
其中,参数i(t)=ia(t)+ib(t),I0=按照P0的象素电流的平均值,Im=按照Pm的调制光电流的交变幅度,并且,Sλ=频谱灵敏度。每一象素的全部光电流被分成两个分量,具体说来是累积门Ga的电流ia(t),和累积门Gb的电流ib(t)。因为那些值是在累积门Ga和Gb处采用CCD技术并且最好是以电子阅读系统中按照象素的方式读出的CMOS技术进行积分的,所以,下面仅考虑那些电流的平均值
和
就足够了。对于角度φopt=0以及τ=0,按照电荷分离得到最大值。这种情况如图3所示。
图4描绘的是这些理想化平均象素电流的结构。它们代表从高频调制接收光和调制光门Gam和Gbm处施加的高频调制光门电压产生的反相的相关函数。其和与平均象素光功率P0的I0对应。在时间T=N*Tm(即在高频调制电压的N个周期Tm)内累积的总电荷量给出:
其中,通过时间τ=φopt/ωm与相位延迟对应。下文中,qaT仅用qa表示。所有象素1的累积门Ga和Gb的电荷总量形成两个定位的离散的高频干涉图(locationally discrete HF-interferogram),即a干涉图和相对于a干涉图位移180°的b干涉图,并通过差分,形成由通过时间决定的被寻找的差分(difference)高频干涉图,该差分干涉图由等式(2)描述。
图11是按照本发明的三维照相机的示意图,它根据光混合元件阵列采用直接混合。与从本领域得知的如图10所示的三维照相机概念相比,在图11中,发射器4对光学无源三维物体的照光的调制是由激光二极管的电流的调制来实现的。这时,调制是由高频发生器13产生的。对于更大的距离,最好采用共同调制电流并且为保护眼睛起见是不同波长的高功率激光二极管
第一光学系统5在物体6的表面形成光波的图象。物体6反射的光波通过第二光学系统7投射到光混合元件阵列8的表面上。
光混合元件阵列8也由高频发生器13激励,其中,激励是针对相对于辐射光波的相位的不同相移由高频发生器13实施的。光混合元件阵列8的信号最终是由估算单元9来估算的,如果没有做在单片上(on-chip)的话。
根据按照本发明的测量装置除了按照本发明的光混合元件阵列以外,对于所建议的三维照相机概念,无需高孔径的的附加光学调制器,并且这提供了一种经济上优越的结构。
为了从产生的相关幅度确定象素相位φopt,正如前文中描述的那样,如果有四个混合器信号的不同相位,则总共有四个不同的干涉图。混合器信号的四个相位产生在这样的情况中,即,调制光门电压Uam和Ubm从0°/180°的相位关系切换到90°/270°或延迟通过90°的状态。这给出两个相关的与实分量或同相分量相关的虚分量或正交分量,从中可以按照下文中描述的等式(10)来计算正被寻找的象素相位。
同时,这种操作方式使得可以消除背景亮度和混合操作产生的麻烦的偏移电压。
除了通过与光混合元件阵列平面中最好是相同频率的调制电压Um(x,y,t)的二维相关有关CW调制三维光波描述的测量操作以外,按照本发明的测量装置可以有利地采用以脉冲形式出现的调制信号。
特别是,光的伪随机噪声调制对于含有三维光波的高精度通过时间测量的任务是有利的。图12中示出了观察或测量光学无源三维物体例子的实施例。与图11中包含谐波调制的实施例类似,按照本发明的这种具有合适的照光装置(lighting device),该装置用强度经PN(伪随机噪声)调制的光照射三维物体6,并且反射光和接收光经过最好用发生器13产生的相应PN调制信号的相关过程。
由于相对于具有增加词长度TW=TB(2N-1)那种PN信号的相关性与半宽度等于位宽度TB的三角针形脉冲相类似,所以对于整个光束或整个照射的空间的清楚和完整的测量,调制光门处相同信号形状的光调制PN信号和调制PN推—拉电压Um(t)之间的相对延迟TD必须至少以连续或以TB为步长分步地通过的最大回波通过时间的整个延迟范围一次。这一目的是由延迟构件11来实现的,延迟构件可以由控制和估算单元9对延迟TD进行调节。
图5a描绘的是关于矩形15位PN序列例子的调制信号Um(t)。光混合元件的相关结果是图5b中所示关于相对延迟τ的平均漂移电流ia和ib。
在下文中描述的四元象素中,如图8、9和14所示,施加到调制光门Gcm和Gdm并且叠加在偏置电压U0上的推—拉调制光门电压最好相对于施加到调制光门Ga和Gb上的推—拉调制光门电压延迟TB,这就是说,Ucm(t)=U0+Um(t-TB),Udm(t)=U0-Um(t-TB),从而导致很好的幅度和通过时间测量。
除了相对于调制电压的可预定延迟TD以外,发射器4辐射的光强度const.*Popt(t)含有相同的PN信号结构。反射在回波通过时间以后到达光混合元件。在如图5b所示平均象素电流
和
中的双象素的情况下,以及在平均象素电流ic和id中附加的所述TB时移的四元象素的情况下,在没有背景亮度的理想情况下,按照各个相对通过时间,与推—拉调制电压的相关性对TD=0产生延迟τ。该相关特征首先揭示,可以根据相同的半径矢量来识别多次物体反射,例如对于识别多个半透明物体而这些物体可以是一个位于另一个的后面的情况,或者对于消除多个反射的情况。
另外,如图5c所示,平均漂移电流差的和与差最好是在分别相应的电子象素读出和信号预处理系统15中在双象素同时在四元象素的情况下顺序形成的。它们使得可以具有高灵敏度的测量,因为只有在TB到2TB宽的测量窗口内才出现不等于零的信号值。和的估算使得可以根据最小幅度确定测量的关系。该差值给出在可用的TB宽的测量窗内的急剧变化的线性结构,使得可用用高的分辨力确定通过时间。下面的公式适用于理想化的情况:
根据建议的相关光检测器阵列用于采用PN调制的三维物体的光学测量的相应测量装置的方框图的特征是如图12所示结构特别简单。这时,除了发生器10和延迟元件11以外,包含如图11所示相同的结构。
按照本发明,为了以相对的低水平的分辨力快速确定距离,还可以用时间T并且最好是相同的脉冲和持续时间间隔(space duration)TB进行简单的发射器4的矩形调制。确认通过时间的操作是按照等式(9)来进行的。分辨力水平是随持续时间T下降为1/2而增加的,其中,第一测量步骤后面首先是第二个步骤,含有相同的时间,但具有时移TD=T/4。
图1中按照本发明的光混合元件的象素1的例子所描述的截面可用由推—拉调制电压引起的电位梯度采用合适的结构对其极限频率实现最佳化。因此,图6描绘的是中间门G0位于调制光门Gam和Gbm之间的实施例,中间门最好处在偏置电压U0下,并且与调制光门Gam和Gbm一起形成三个电位级。所要求的是电位梯度,该电位梯度要求尽可能均匀,并且调制漂移场尽可能为恒定,并且这是通过增加级数从2到3或更多来实现的的。在光敏空间电荷区内,不管与绝缘层3的间隔怎样,级的清晰性(definition)或判断(pronouncement)程度(degree)降低。这一效果用在按照本发明的进一步的实施例中,尤其是采用已知的“掩埋沟道(buried channel)”,这是一种弱掺杂的n沟道,与绝缘层约几个μm的距离,并且在调制光门处的p型衬底中变化稍深。该结构还包括一个用于累积门Ga和Gb的阴影部分12,从而它们不会被光波照射和产生其他的载流子。
图7描绘的是光混合元件的特定结构和连接,其中,与图1中的相比,两个调制光门分别仅由一个公共的累积门Gs,n隔开,从而实现更高程度的填充动作(filling action)。这一结构也有一个用于累积门Ga和Gb的阴影部分。这时,推—拉调制电压的极性或Gam,n和Gbm,n的序列随象素的不同而变化。同时,门的三倍周期也适合于通过三相移位寄存器的操作的直接读出。在某些应用场合的能被容忍的某些缺点在于分别靠近象素的电荷分布,这就导致明显的象素尺寸增加,以及沿所考虑的方向更低的位置分辨率。
相互关系和影响的计算显示,与100%的可用电荷相比,在对电荷差进行了估算以后,所考虑的中央象素仅需要50%,而两个相邻象素中每一个需要25%。
为了描绘电荷分布,图7与图1相似,给出了CW调制的电位分布的各个相位。
图8给出的是光混合元件象素设计更优越的实施例,这时,CW调制不需要在I状态和Q状态之间进行任何IQ(同相—正交相位)转换。建议采用有调制光门Gam、Gbm、Gcm和Gdm以及相关累积门Ga、Gb、Gc和Gd的四元象素,而不是上述双象素,使得同时对于四个相位位置相关,这是因为推—拉调制光门电压Uam(t)和Ubm(t)、Ucm(t)和Udm(t)分别相互移位,特别是在通过90°的高频调制的情况下。
所以,在相对于φ=0°的调制光门Gam和φ=180°的调制光门Gbm的正交结构中,还有两个对称集成在象素中并且基于相同的原理工作的φ=90°的调制光门和φ=270°的调制光门,这就在相关累积门Ga、Gb、Gc和Gd或在相关的电子读出系统中用电荷qa、qb、qc和qd进行四相电荷累积,其中,通过简单的算术计算,可用直接计算相关相位φopt如下:
为了简单确定单个象素的灰度值,将象素的所有累积门的各个电荷相加:q象素=qa+qb+qc+qd。要求各四个象素的读出过程是采用象素设计用按照象素的集成信号预处理的CMOS技术来实施的。
图9与图8一样,示出光混合元件的四元象素,但通过最好电位为Uo的中央的方形中间门Go,具有平滑如图6所示的电位梯度。
图14与图9一样,给出具有对数字调制信号最佳的结构的光混合元件的四元象素。中间门G排列在最好呈正方形的调制门之间,以类似于图9所示的方式,用作使调制光门电压产生的电位梯度光滑。
最后,图13描绘的是象素1的进一步的较佳实施例,与上述讨论的实施例相反,它采用的不是CCD技术,而是具有按象素读出和信号预处理系统15的CMOS技术。这时,关于电荷摆动的载流子依赖于调制电压的漂移的运行模式与上面讨论的实施例是相同的。图13所示实施例中唯一的差异是已经漂移到累积门Ga和Gb的电荷qa和qb的进一步处理的方式。
本实施例中,累积门G和G呈块状pn二极管的形式。正向偏置的累积门Ga和Gb是由图13中最好为弱掺杂的p-Si衬底3上的n+掺杂的电极形成。采用“浮动扩散(floating diffusion)”的操作模式或高阻抗电压读出模式,与采用CCD技术的情况一样,电荷qa和qb集中在累积门Ga和Gb的电容上,并以电压值的形式以高阻抗模式读出。
还可以采用电流读出模式,其中,光生载流子不是集中在电位井(potentialwell)中,而是由合适的电流读出电路通过输出扩散连续传送,而电流读出电路分别与累积门Ga和Gb相连。于是,电荷就例如集中在各个外部电容上了。
采用通过放大器反馈使累积门电压基本保持常数的电流读出模式的读出电流能够确保在象素强烈辐射时,累积电荷qa和qb的量不会对电位井产生反作用或过流。从而光混合元件的动态特性显著提高。同样,在调制门的绝缘层处,含有弱掺杂n沟道(掩埋层)的上述技术得到提高,在本质上提高了极限频率。
采用CMOS技术构筑光混合元件进一步采用有源象素设计(APS),使得在每一象素处,可以将读出和信号预处理电路集中在光混合元件内。这使得在信号被传送到外部电路之前在象素处直接对电信号进行预处理。尤其是可以以这样的方式直接在芯片上计算相位和幅度信息,从而可以进一步提高测量速率。
本发明的进一步的结构采用最好是二维的光混合元件阵列,用来根据各种标准(如物体的形状、位置、颜色、偏振(polarization)、速度矢量、亮度或物体特性的组合)进行三维电子目标搜寻和无源(passively)或有源(actively)照亮目标的跟踪过程。例如,在一开始是未知的入射光波的三维测量中各调制信号(例如频率或编码变换)的传送中,由差值(difference)漂移电流标准得知局部(local)相关不等于零,于是,在出现变化时,通过尤其也包括图象深度的调节环路,可以连续测量物体范围(特别是所述物体特性),并进行跟踪。
可以以将在下文中描述的各种操作模式应用光混合元件。
这样,由于累积门Ga和Gb处的和电荷总是与入射光波的总强度对应,感兴趣较少,qa+qb=const.*Popt,ges*T,其中,T=积分时间。
差电荷
依赖于多种因素,并且可以以多种方式用来测量入射光波。为此,考虑基本亮度,它总是有P0>=Pm(见图3a)。
例如,在光学上,当对用调制光由发射器4照射的物体6进行测量时,发射器电源被关断或开启,因此Pm为有限大或等于零。同时,在光学上,调制电压Um(t)或者为零,或者转变成发射器中使用并包含在入射光中的结构,或者转换成在积分时间内为常数的电压Um0。
因此,当P≠0时,给出四种重要的运行模式:
1.)对于Pm=0和Um=0,Δqab=0。
2.)在有限的(finite)Pm以及Um(t)作为高频调制信号的情况下,Δqab=0。
3.)在有限Pm和高频调制电压的情况下,Δqab是Um、相对发送时移τ和以这种方式调制的入射光功率分量Pm(t)的函数。
4.)如果在积分时间T内,有一个入射平均光强P0和恒定的调制电压Um0,则差电荷Δqab是Um0和平均光功率P0的函数。
在光波未经强度调制的情况下,本发明的进一步的结构使得可以按照可能的操作方式的第四种情况,例如二维图象处理来使用光混合元件。
这时,每一混合元件可以指定启动并且是相互独立的,例如,最好通过RA元件的Um0的各个可快速重写调制电压词按象素的相关。最好估算是仅对于近似正比于Um0的差电荷
和差漂移电流
来实施。这样,调制电压Um0是从调制电压词分别导到的。
这意味着Um(t)不再是在前面的使用但非周期的例子中按周期设置的,或者是准周期设置的,例如按照预定图象内容或按照测量的图象内容。对于Um(t)=0,所有的差电流为零,从而相关的差图象D(x,y)也因幅度或强度而为零。
因此,差图象亮度可以受U(x,y,t)的影响。这样,按照本发明,任何光波或图象(这就是说甚至是未调制的光波或图象)都可以通过可极快设置的加权函数G(x,y,t)=k1*Um(x,y,t)进行通用的图象处理,例如,通过上述可控、与象素相关的存储单元,例如,上述用于目标搜寻和跟踪,但这时没有深度信息。
Claims (35)
1.一种确定电磁波的相位和/或幅度信息的方法,其特征在于,包括以下步骤:
将电磁波辐射到至少具有一个象素的光混合元件的表面上,其中,所述象素至少有两个光敏调制光门Gam和Gbm以及相关的累积门Ga和Gb;
将具有Uam(t)=Uo+Um(t)和Ubm(t)=Uo-Um(t)形式的调制光门电压Uam(t)和Ubm(t)施加到调制光门Gam和Gbm上,其中Uo是恒定电压;
施加到累积门Ga和Gb上的是直流电压,所述直流电压的数值至少是Uo与调制电压幅度Um(t)之和的数值一样大;
由入射电磁波在调制光门Gam和Gbm的空间电荷区中产生的载流子受到依赖于调制光门电压Uam(t)和Ubm(t)之极性的漂移场电位梯度的影响,并漂移到相应的累积门Ga和Gb;以及
取出已经漂移到各个累积门Ga和Gb的电荷qa和qb。
2.如权利要求1所述的方法,其特征在于,
由发射器辐射经强度调制的电磁波;
将物体反射的电磁波辐射到光混合元件的表面上;
调制光门电压Uam(t)和Ubm(t)与发射器辐射的电磁波的相位有固定的相位关系;并且,
产生的载流子还受到依赖于推—拉调制光门电压Uam(t)和Ubm(t)之相位的漂移场电位梯度的影响。
4.如权利要求3所述的方法,其特征在于,还包括以下步骤:
通过四个调制光门Gam、Gbm、Gcm和Gdm以及四个相关累积门Ga、Gb、Gc和Gd,对于调制光门电压Uam(t)=Uo+Um1(t)和Ubm(t)=Uo-Um1(t)以及Ucm(t)=U1+Um2(t)和Udm(t)=U1-Um2(t)相对于发射器辐射的电磁波之相位的两个不同相移Δ1和Δ2,同时分离并取得电荷qa、qb、qc和qd,其中Uo和U1是恒定电压;并且,
按照等式:确定发射器辐射的电磁波的象素相位opt,以及象素接收的电磁波的通过时间。
5.如上述任何一个权利要求所述的方法,其特征在于,
光混合元件具有多个象素,
至少一个象素是直接用来自发射器的一部分强度调制电磁波辐照的,并且,
所述辐照的电磁波与调制光门电压Uam(t)和Ubm(t)之间的相移校正是根据所述象素测得的相移来实现的。
6.如权利要求1所述的方法,其特征在于,
用独立受激的、未知强度调制的电磁波辐射光混合元件的表面;
用可调谐的调制发生器产生所述调制光门电压Uam(t)和Ubm(t);
所述产生的电荷载流子还受依赖于所述推—拉调制光门电压Uam(t)和Ubm(t)的漂移场电位梯度的影响,并且,
光混合元件和调制发生器形成至少一个锁相环路,并且所述电磁波是按照所述锁定(lock-in)方法测量的。
7.如权利要求1-4或6中任何一个所述的方法,其特征在于,将一种连续或断续的高频调制、伪随机调制或线性调频调制用作周期调制。
8.如权利要求5所述的方法,其特征在于,将一种连续或断续的高频调制、伪随机调制或线性调频调制用作周期调制。
9.如权利要求7所述的方法,其特征在于,所述调制是高频调制,并且最好对于相移Δ=0°/180°和90°/270°得到电荷qa和qb以及qc和qd。
10.如权利要求1所述的方法,其特征在于,稳态(steady state))调制是用具有可设置调制直流电压Um0的调制光门电压Uam=Uo+Um0和Ubm=U0-Um0进行的,其中所述可设置调制直流电压Um0相对于时间是恒定的,并且用其对从电荷qa和qb之差得到的差图象加权。
11.如权利要求1-4、6、9或10中任何一个所述的方法,其特征在于,对所述累积门Ga和Gb处的电荷qa和qb进行积分,并用一种多路复用(multiplex)结构且最好用一种CCD结构读出。
12.如权利要求1-4、6、9或10中任何一个所述的方法,其特征在于,累积门Ga和Gb呈pn二极管形式,最好是阻塞(blocked)低电容pn二极管,并且最好采用CMOS技术,并且电荷qa和qb并且可能qc和qd被直接读作电压或电流。
13.如权利要求12所述的方法,其特征在于,通过有源象素传感器结构(APS)直接确认象素相位或象素通过时间和象素亮度,并通过一单片(on-chip)多路复用结构有选择地和/或顺序读出。
14.如权利要求1-4、6、9或10中任何一项所述的方法,其特征在于,分别估算象素亮度作为相关累积门的电荷之和,作为灰度值图象。
15.如权利要求1-4、6、9或10中任何一项所述的方法,其特征在于,在背照光或外部、非调制附加照光的情况下,灰度值图象的差一方面当接通调制光时而另一方面当关断调制光时用作校正参数。
16.如权利要求1-4、6、9或10中任何一项所述的方法,其特征在于,多个分离的混合元件用在线性、面或空间阵列中。
17.如权利要求16所述的方法,其特征在于,至少一个象素是直接用起照光作用的强度调制的电磁波辐照的,并且在所述至少一个象素处的测量结果用作其他相位和亮度结果的校正,并且最好一个或多个参考象素是根据具有不同强度级或强度级可以不同设置的发射器来动作的。
18.一种光混合元件,其特征在于,包括:
至少一个象素(1),
至少两个光敏调制光门(Gam,Gbm),以及
与调制光门(Gam,Gbm)相邻、相关且相对于入射电磁波遮蔽(shaded)的调制门(Ga,Gb)。
19.如权利要求18所述的混合元件,其特征在于,中间门(G0)排列在调制光门(Gam,Gbm)之间。
20.如权利要求18或19所述的混合元件,其特征在于,所述象素(1)具有四个并且最好是对称排列的调制光门(Gam,Gbm,Gcm,Gdm)和累积门(Ga,Gb,Gc,Gd)。
21.如权利要求18或19所述的混合元件,其特征在于,所述累积门(Ga,Gb且可能Gc,Gd)呈pn二极管的形式,最好是阻塞低电容pn二极管并且最好采用CMOS技术,并且电荷qa、qb并且可能qc、qd可以直接读作电压或电流。
22.如权利要求18或19所述的混合元件,其特征在于,为了提高最大调制速度,象素是用GaAs技术、最好是用“掩埋沟道”型(例如掩埋n-沟道)并且是用集中漂移场来产生的。
23.如权利要求18或19所述的混合元件,其特征在于,所述象素(1)呈有源象素传感器结构形式,所述结构是用局部(partially)象素相关信号处理或局部行(line)或可能是矩阵相关的信号处理形成的。
24.如权利要求18或19所述的混合元件,其特征在于,所述遮蔽(shaded)还延伸到所述调制光门的边缘区域。
25.一种至少具有两个如权利要求18-24中任何一项所述的光混合元件的混合元件排列结构,其特征在于,所述光混合元件排列成一维、二维或三维。
26.如权利要求25所述的混合元件排列结构,其特征在于,分别与两个相邻排列的不同象素(n,n+1)相关的调制光门(Gam,n,Gam,n+1)和(Gbm,n,Gbm,n+1)分别具有共同的累积门(Gs),并且所述调制光门(Gam,n,Gam,n+1)和(Gbm,n,Gbm,n+1)分别是用相同的调制光门电压Uam(t)和Ubm(t)而动作的。
27.如权利要求25所述的混合元件排列结构,其特征在于,具有直接辐射作为参考象素的至少一个象素(1)的装置,从而所述发射器辐射的一部分强度调制的电磁波被引向讨论中的一个象素或多个象素。
28.如权利要求27所述的混合元件排列结构,其特征在于,用于直接辐照的装置的配备用于直接辐射强度的空间和/或时间的变化。
29.如权利要求25所述的一维或多维混合元件排列结构,其特征在于,所述象素(1)是用MOS技术在硅衬底(2)上实施的,并且可以用多路复用结构最好用CCD结构来读出。
30.如权利要求25所述的混合元件排列结构,其特征在于,它具有一种微透镜光学系统,所述光学系统基本上为每个用于图象记录的混合元件产生其自己的微透镜,通过所述微透镜,将所述入射光聚焦到所述混合元件的中央区域上而因此可以减小尺寸。
31.一种确定电磁波之相位信息的装置,其特征在于,包括:
至少一个如权利要求18-24中任何一个所述的光混合元件;
调制发生器(10,13);以及
一个发射器(4),其辐射电磁波是以预定方式由所述调制发生器(10,13)进行强度调制的;
其中,由物体(6)反射的电磁波被辐射到所述光混合元件的表面上,并且,
所述调制发生器(10,13)向所述光混合元件提供与来自所述发射器的辐射电磁波的相位成预定相位关系的调制电压Um(t)。
32.如权利要求31所述的装置,其特征在于,它具有一光学系统(7)以及如权利要求25-30中任何一个所述的混合元件排列结构,其中所述光学系统(7)在所述混合元件或所述混合元件排列结构的表面上形成反射电磁波的图象。
33.如权利要求31或32所述的装置,其特征在于,它具有一混合元件排列结构,该混合元件排列结构具有相关的光学接收系统、用于差信号、和信号和相关参考信号的电子估算和信号处理系统,还具有用于灰度值图象和通过时间或距离图象的数字存储器、用调制电磁波照射三维景物的发射器,以及对应于所述光学接收系统的可调光学发射系统,从而形成小型装置形式的数字三维摄像机。
34.如权利要求31或32所述的装置,其特征在于,为了形成数字三维摄像机,所述具有一混合元件排列结构,所述排列结构具有相关的光学接收系统、用于差信号、和信号和相关参考信号的电子估算和信号处理系统,还具有用于灰度值图象和通过时间或距离图象的数字存储器、用调制电磁波照射三维景物的发射器,以及对应于所述光学接收系统的可调光学发射系统,并且所述装置还具有用于存储数字图象序列的存储装置。
35.如权利要求33所述的装置,其特征在于,所述发射器具有用于发射不同频谱区内光波的装置,以便产生彩色图象或彩色图象分量(component)。
Applications Claiming Priority (4)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE19635932 | 1996-09-05 | ||
| DE19635932.5 | 1996-09-05 | ||
| DE19704496.4 | 1997-02-07 | ||
| DE19704496A DE19704496C2 (de) | 1996-09-05 | 1997-02-07 | Verfahren und Vorrichtung zur Bestimmung der Phasen- und/oder Amplitudeninformation einer elektromagnetischen Welle |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN1233323A CN1233323A (zh) | 1999-10-27 |
| CN1103045C true CN1103045C (zh) | 2003-03-12 |
Family
ID=26029051
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN97198749A Expired - Lifetime CN1103045C (zh) | 1996-09-05 | 1997-09-05 | 确定电磁波的相位和/或幅度信息的方法和装置 |
Country Status (14)
| Country | Link |
|---|---|
| US (2) | US6825455B1 (zh) |
| EP (1) | EP1009984B1 (zh) |
| JP (1) | JP4060365B2 (zh) |
| CN (1) | CN1103045C (zh) |
| AT (1) | ATE254758T1 (zh) |
| AU (1) | AU715284B2 (zh) |
| BR (1) | BR9712804B1 (zh) |
| CA (1) | CA2264051C (zh) |
| CZ (1) | CZ300055B6 (zh) |
| ES (1) | ES2206748T3 (zh) |
| HU (1) | HU227654B1 (zh) |
| MX (1) | MXPA99002142A (zh) |
| RU (1) | RU2182385C2 (zh) |
| WO (1) | WO1998010255A1 (zh) |
Families Citing this family (232)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2264051C (en) * | 1996-09-05 | 2005-07-26 | Rudolf Schwarte | Method and device for determining the phase- and/or amplitude data of an electromagnetic wave |
| US6815791B1 (en) * | 1997-02-10 | 2004-11-09 | Fillfactory | Buried, fully depletable, high fill factor photodiodes |
| US7199410B2 (en) * | 1999-12-14 | 2007-04-03 | Cypress Semiconductor Corporation (Belgium) Bvba | Pixel structure with improved charge transfer |
| DE19821974B4 (de) * | 1998-05-18 | 2008-04-10 | Schwarte, Rudolf, Prof. Dr.-Ing. | Vorrichtung und Verfahren zur Erfassung von Phase und Amplitude elektromagnetischer Wellen |
| DE19916123B4 (de) * | 1999-04-09 | 2015-02-05 | Pmdtechnologies Gmbh | Erfassung von Phase und Amplitude elektromagnetischer Wellen |
| DE19951154A1 (de) * | 1999-10-23 | 2001-05-17 | Garwe Frank | Verfahren und Vorrichtung zur Bestimmung von Probeneigenschaften über zeitaufgelöste Lumineszenz |
| EP1152261A1 (en) * | 2000-04-28 | 2001-11-07 | CSEM Centre Suisse d'Electronique et de Microtechnique SA | Device and method for spatially resolved photodetection and demodulation of modulated electromagnetic waves |
| EP1303931B1 (en) * | 2000-07-24 | 2007-04-25 | Litton Systems, Inc. | Polarization diversity detector mask selection algorithm |
| CA2424139C (en) | 2000-10-09 | 2008-07-15 | S-Tec Gmbh | Sensing the phase and amplitude of electromagnetic waves |
| AU2001221481A1 (en) * | 2000-10-16 | 2002-04-29 | Rudolf Schwarte | Method and device for detecting and processing signal waves |
| US6906793B2 (en) * | 2000-12-11 | 2005-06-14 | Canesta, Inc. | Methods and devices for charge management for three-dimensional sensing |
| WO2002049339A2 (en) * | 2000-12-11 | 2002-06-20 | Canesta, Inc. | Cmos-compatible three-dimensional image sensing using quantum efficiency modulation |
| DE10118183B4 (de) * | 2001-04-11 | 2005-06-23 | Siemens Ag | Röntengerät |
| DE10207610A1 (de) * | 2002-02-22 | 2003-09-25 | Rudolf Schwarte | Verfahren und Vorrichtung zur Erfassung und Verarbeitung elektrischer und optischer Signale |
| US6924887B2 (en) | 2002-03-27 | 2005-08-02 | Sarnoff Corporation | Method and apparatus for generating charge from a light pulse |
| US6657706B2 (en) * | 2002-03-27 | 2003-12-02 | Sarnoff Corporation | Method and apparatus for resolving relative times-of-arrival of light pulses |
| JP3832441B2 (ja) * | 2002-04-08 | 2006-10-11 | 松下電工株式会社 | 強度変調光を用いた空間情報の検出装置 |
| ATE321689T1 (de) | 2002-04-19 | 2006-04-15 | Iee Sarl | Sicherheitsvorrichtung für ein fahrzeug |
| LU90912B1 (de) | 2002-04-19 | 2003-10-20 | Iee Sarl | Sicherheitsvorrichtung fuer ein Fahrzeug |
| RU2002112876A (ru) * | 2002-05-17 | 2004-03-27 | Леонид Викторович Волков (RU) | Система формирования объемных изображений в миллиметровом и субмиллиметровом диапазоне волн |
| US20110015518A1 (en) * | 2002-06-13 | 2011-01-20 | Martin Schmidt | Method and instrument for surgical navigation |
| GB2389960A (en) * | 2002-06-20 | 2003-12-24 | Suisse Electronique Microtech | Four-tap demodulation pixel |
| EP1521981B1 (en) * | 2002-07-15 | 2008-02-20 | Matsushita Electric Works, Ltd. | Light receiving device with controllable sensitivity and spatial information detecting apparatus using the same |
| US20060006482A1 (en) * | 2002-07-16 | 2006-01-12 | Stmicroelectronics N.V. | Tfa image sensor with stability-optimized photodiode |
| US6777662B2 (en) | 2002-07-30 | 2004-08-17 | Freescale Semiconductor, Inc. | System, circuit and method providing a dynamic range pixel cell with blooming protection |
| US6906302B2 (en) | 2002-07-30 | 2005-06-14 | Freescale Semiconductor, Inc. | Photodetector circuit device and method thereof |
| AU2003263131A1 (en) | 2002-08-09 | 2004-03-19 | Automotive Distance Control Systems Gmbh | Means of transport with a three-dimensional distance camera and method for the operation thereof |
| DE10259135A1 (de) * | 2002-12-18 | 2004-07-01 | Conti Temic Microelectronic Gmbh | Verfahren und Anordnung zur Referenzierung von 3D Bildaufnehmern |
| JP4235729B2 (ja) * | 2003-02-03 | 2009-03-11 | 国立大学法人静岡大学 | 距離画像センサ |
| EP1458087B1 (en) * | 2003-03-10 | 2005-10-12 | CSEM Centre Suisse d'Electronique et de Microtechnique SA | Electrical circuit, apparatus and method for the demodulation of an intensity-modulated signal |
| JP3906818B2 (ja) * | 2003-04-07 | 2007-04-18 | 松下電工株式会社 | 受光素子の感度制御方法、強度変調光を用いた空間情報の検出装置 |
| DE10324217A1 (de) | 2003-05-28 | 2004-12-16 | Robert Bosch Gmbh | Vorrichtung zur Klassifizierung von wenigstens einem Objekt mit einer Umfeldsensorik |
| DK1513202T3 (da) | 2003-09-02 | 2010-05-10 | Univ Bruxelles | Detektor til elektromagnetisk stråling ved hjælp af en majoritetsstrøm |
| RU2252466C1 (ru) * | 2003-09-08 | 2005-05-20 | Институт проблем проектирования в микроэлектронике РАН | Кмоп-фотоприемная ячейка с обработкой сигналов |
| US7521663B2 (en) | 2003-09-18 | 2009-04-21 | Mesa Imaging Ag | Optoelectronic detector with multiple readout nodes and its use thereof |
| CN100580940C (zh) | 2003-09-18 | 2010-01-13 | Ic-豪斯有限公司 | 光电传感器和用于三维距离测量的装置 |
| US20050243302A1 (en) * | 2004-01-20 | 2005-11-03 | Bedabrata Pain | Two dimensional range-imaging |
| JP4280822B2 (ja) | 2004-02-18 | 2009-06-17 | 国立大学法人静岡大学 | 光飛行時間型距離センサ |
| DE102004016624A1 (de) * | 2004-04-05 | 2005-10-13 | Pmdtechnologies Gmbh | Photomischdetektor |
| EP1612511B1 (en) | 2004-07-01 | 2015-05-20 | Softkinetic Sensors Nv | TOF rangefinding with large dynamic range and enhanced background radiation suppression |
| DE102004035847A1 (de) * | 2004-07-23 | 2006-03-23 | BSH Bosch und Siemens Hausgeräte GmbH | Verfahren zur Erkennung der Spülgutbeladung und Geschirrspülmaschine |
| US7834305B2 (en) | 2004-07-30 | 2010-11-16 | Panasonic Electric Works Co., Ltd. | Image processing device |
| JP4645177B2 (ja) * | 2004-11-30 | 2011-03-09 | パナソニック電工株式会社 | 計測装置 |
| DE102004037870B4 (de) * | 2004-08-04 | 2007-02-15 | Siemens Ag | Optisches Modul für ein den Außenvorraum in Fahrtrichtung eines Kraftfahrzeuges erfassendes Assistenzsystem |
| EP1624491B1 (en) | 2004-08-04 | 2009-05-27 | CSEM Centre Suisse d'Electronique et de Microtechnique SA - Recherche et Développement | Solid-state photosensor with electronic aperture control |
| DE102004044581B4 (de) * | 2004-09-13 | 2014-12-18 | Pmdtechnologies Gmbh | Verfahren und Vorrichtung zur Laufzeitsensitiven Messung eines Signals |
| KR100778904B1 (ko) | 2004-09-17 | 2007-11-22 | 마츠시다 덴코 가부시키가이샤 | 레인지 이미지 센서 |
| JP2006105887A (ja) * | 2004-10-08 | 2006-04-20 | Synthesis Corp | 立体視装置およびそれを備えた立体画像表示システム |
| US7808022B1 (en) | 2005-03-28 | 2010-10-05 | Cypress Semiconductor Corporation | Cross talk reduction |
| US7750958B1 (en) | 2005-03-28 | 2010-07-06 | Cypress Semiconductor Corporation | Pixel structure |
| US7417736B2 (en) * | 2005-03-31 | 2008-08-26 | Infineon Technologies Ag | Method for determining a radiation power and an exposure apparatus |
| JP2006337286A (ja) * | 2005-06-03 | 2006-12-14 | Ricoh Co Ltd | 形状計測装置 |
| EP1746410B1 (en) | 2005-07-21 | 2018-08-22 | CSEM Centre Suisse d'Electronique et de Microtechnique SA - Recherche et Développement | Apparatus and method for fluorescence lifetime imaging |
| WO2007025398A1 (de) * | 2005-08-31 | 2007-03-08 | Baumer Electric Ag | Vorrichtung und verfahren zur phasendiskriminierung bei einem optischen distanzsensor |
| EP1762862A1 (en) | 2005-09-09 | 2007-03-14 | IEE INTERNATIONAL ELECTRONICS & ENGINEERING S.A. | Method and device for 3D imaging |
| DE102005046754A1 (de) * | 2005-09-29 | 2007-04-05 | Carl Zeiss Jena Gmbh | Vorrichtung und Verfahren zur tiefenaufgelösten optischen Erfassung einer Probe |
| US20090115993A1 (en) * | 2005-09-30 | 2009-05-07 | Gunter Doemens | Device and Method for Recording Distance Images |
| US8355117B2 (en) * | 2005-12-21 | 2013-01-15 | Ecole Polytechnique Federale De Lausanne | Method and arrangement for measuring the distance to an object |
| JP2007175294A (ja) * | 2005-12-28 | 2007-07-12 | Ge Medical Systems Global Technology Co Llc | イメージセンサ及びその制御方法並びにx線検出器及びx線ct装置 |
| US20070200943A1 (en) * | 2006-02-28 | 2007-08-30 | De Groot Peter J | Cyclic camera |
| US7843029B2 (en) | 2006-03-31 | 2010-11-30 | National University Corporation Shizuoka University | Semiconductor range-finding element and solid-state imaging device |
| DE102006017003A1 (de) * | 2006-04-11 | 2007-10-18 | Friedrich-Alexander-Universität Erlangen-Nürnberg | Endoskop zur Tiefendatenakquisition |
| EP1903299A1 (en) | 2006-09-20 | 2008-03-26 | IEE INTERNATIONAL ELECTRONICS & ENGINEERING S.A. | Method and system for acquiring a 3-D image of a scene |
| JP5266636B2 (ja) * | 2006-12-12 | 2013-08-21 | 株式会社デンソー | 光センサ、および距離検出装置 |
| JP4807253B2 (ja) * | 2006-12-28 | 2011-11-02 | 株式会社デンソー | 画像データ生成装置及び受光デバイス |
| DE102007004349A1 (de) * | 2007-01-29 | 2008-07-31 | Robert Bosch Gmbh | Nachtsichtsystem, insbesondere für ein Fahrzeug, und Verfahren zum Erstellen eines Nachtsichtbildes |
| EP1952752B2 (de) † | 2007-01-31 | 2019-10-16 | Richard Wolf GmbH | Endoskopsystem |
| DE102007012624B3 (de) * | 2007-03-16 | 2008-06-12 | K.A. Schmersal Holding Kg | Vorrichtung und Verfahren zur Aufnahme eines dreidimensionalen Abstandsbildes |
| JP4831760B2 (ja) * | 2007-03-29 | 2011-12-07 | 日本放送協会 | 3次元情報検出方法及びその装置 |
| US7889257B2 (en) * | 2007-07-18 | 2011-02-15 | Mesa Imaging Ag | On-chip time-based digital conversion of pixel outputs |
| US7586077B2 (en) † | 2007-07-18 | 2009-09-08 | Mesa Imaging Ag | Reference pixel array with varying sensitivities for time of flight (TOF) sensor |
| EP2026097A1 (en) * | 2007-08-08 | 2009-02-18 | Harman Becker Automotive Systems GmbH | Vehicle illumination system |
| US8027029B2 (en) | 2007-11-07 | 2011-09-27 | Magna Electronics Inc. | Object detection and tracking system |
| EP2073035A1 (en) * | 2007-12-18 | 2009-06-24 | IEE INTERNATIONAL ELECTRONICS & ENGINEERING S.A. | Recording of 3D images of a scene |
| EP2240798B1 (en) * | 2008-01-30 | 2016-08-17 | Heptagon Micro Optics Pte. Ltd. | Adaptive neighborhood filtering (anf) system and method for 3d time of flight cameras |
| KR101448152B1 (ko) * | 2008-03-26 | 2014-10-07 | 삼성전자주식회사 | 수직 포토게이트를 구비한 거리측정 센서 및 그를 구비한입체 컬러 이미지 센서 |
| DE102008018637A1 (de) * | 2008-04-11 | 2009-10-15 | Storz Endoskop Produktions Gmbh | Vorrichtung und Verfahren zur Fluoreszenz-Bildgebung |
| JP5356726B2 (ja) | 2008-05-15 | 2013-12-04 | 浜松ホトニクス株式会社 | 距離センサ及び距離画像センサ |
| JP2010002326A (ja) * | 2008-06-20 | 2010-01-07 | Stanley Electric Co Ltd | 移動ベクトル検出装置 |
| EP2138865A1 (en) | 2008-06-25 | 2009-12-30 | IEE International Electronics & Engineering S.A.R.L. | Method and device for recording 3D images of a scene |
| DE102008031601A1 (de) * | 2008-07-07 | 2010-01-14 | Pmd Technologies Gmbh | Sensor zur Messung eines Einfallwinkels elektromagnetischer Strahlung |
| KR101483462B1 (ko) * | 2008-08-27 | 2015-01-16 | 삼성전자주식회사 | 깊이 영상 획득 장치 및 방법 |
| DE102008047103B4 (de) * | 2008-09-12 | 2011-03-24 | Cnrs Centre National De La Recherche Scientifique | Vorrichtung und Verfahren zur dreidimensionalen Bildgebung mit THz-Strahlung |
| EP2264481A1 (en) | 2009-06-04 | 2010-12-22 | IEE International Electronics & Engineering S.A. | Method and device for acquiring a range image |
| EP2441246A1 (en) * | 2009-06-09 | 2012-04-18 | MESA Imaging AG | System for charge-domain electron subtraction in demodulation pixels and method therefor |
| JP5439975B2 (ja) * | 2009-06-23 | 2014-03-12 | 富士ゼロックス株式会社 | イメージセンサおよび画像読取装置 |
| EP2275833A1 (en) | 2009-07-01 | 2011-01-19 | IEE International Electronics & Engineering S.A.R.L. | Range camera and range image acquisition method |
| US9117712B1 (en) * | 2009-07-24 | 2015-08-25 | Mesa Imaging Ag | Demodulation pixel with backside illumination and charge barrier |
| DE102009037596B4 (de) | 2009-08-14 | 2014-07-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Pixelstruktur, System und Verfahren zur optischen Abstandsmessung sowie Steuerschaltung für die Pixelstruktur |
| WO2011020921A1 (en) | 2009-08-21 | 2011-02-24 | Iee International Electronics & Engineering S.A. | Time-of-flight sensor |
| EP2302564A1 (en) | 2009-09-23 | 2011-03-30 | Iee International Electronics & Engineering S.A. | Real-time dynamic reference image generation for range imaging system |
| DE102009045555A1 (de) | 2009-10-12 | 2011-04-14 | Ifm Electronic Gmbh | Überwachungskamera |
| GB2474631A (en) | 2009-10-14 | 2011-04-27 | Optrima Nv | Photonic Mixer |
| WO2011057244A1 (en) | 2009-11-09 | 2011-05-12 | Mesa Imaging Ag | Multistage demodulation pixel and method |
| JP5740413B2 (ja) | 2010-01-06 | 2015-06-24 | メサ・イメージング・アー・ゲーMesa Imaging Ag | ピクセルアレイと記憶アレイを別個に備える復調センサ |
| WO2011117162A1 (en) | 2010-03-25 | 2011-09-29 | Iee International Electronics & Engineering S.A. | Optoelectronic sensor and method for detecting impinging-light attribute |
| DE102011007464A1 (de) | 2010-04-19 | 2011-10-20 | Ifm Electronic Gmbh | Verfahren und Vorrichtung zur Visualisierung einer Szene |
| US8587771B2 (en) * | 2010-07-16 | 2013-11-19 | Microsoft Corporation | Method and system for multi-phase dynamic calibration of three-dimensional (3D) sensors in a time-of-flight system |
| DE102010043768B3 (de) * | 2010-09-30 | 2011-12-15 | Ifm Electronic Gmbh | Lichtlaufzeitkamera |
| GB2486208A (en) * | 2010-12-06 | 2012-06-13 | Melexis Tessenderlo Nv | Demodulation sensor and method for detection and demodulation of temporarily modulated electromagnetic fields for use in Time of Flight applications. |
| FR2971343B1 (fr) * | 2011-02-07 | 2014-07-04 | Keopsys | Dispositif aeroporte de telemetrie par laser, a division d'impulsions, et systeme de releve topographique correspondant |
| US9052395B2 (en) | 2011-04-29 | 2015-06-09 | Waikatolink Limited | Resonant modulation for low power range imaging cameras |
| US9140795B2 (en) | 2011-09-20 | 2015-09-22 | Mesa Imaging Ag | Time of flight sensor with subframe compression and method |
| US8829408B2 (en) | 2011-09-27 | 2014-09-09 | Mesa Imaging Ag | Sensor pixel array and separated array of storage and accumulation with parallel acquisition and readout wherein each pixel includes storage sites and readout nodes |
| US9190540B2 (en) | 2011-12-21 | 2015-11-17 | Infineon Technologies Ag | Photo cell devices for phase-sensitive detection of light signals |
| DE102012203596B4 (de) * | 2012-03-07 | 2023-11-23 | pmdtechnologies ag | Lichtlaufzeitsensor |
| US9030354B2 (en) | 2012-03-12 | 2015-05-12 | International Business Machines Corporation | Imaging architecture with code-division multiplexing for large aperture arrays |
| US8853813B2 (en) | 2012-04-30 | 2014-10-07 | Infineon Technologies Ag | Photo cell devices and methods for spectrometric applications |
| CN102692622B (zh) * | 2012-05-28 | 2014-07-02 | 清华大学 | 基于密集脉冲的激光探测方法 |
| EP2867923B1 (en) * | 2012-06-27 | 2020-01-15 | Teledyne Dalsa B.V. | Image sensor and apparatus comprising such image sensor |
| GB2506685A (en) | 2012-10-08 | 2014-04-09 | Melexis Technologies Nv | Determining and/or Compensating Range Offset of a Range Sensor |
| DE102013225438B4 (de) * | 2012-12-14 | 2017-02-23 | pmdtechnologies ag | Lichtlaufzeitsensor mit Referenzpixel |
| KR101941907B1 (ko) * | 2013-01-03 | 2019-01-24 | 삼성전자주식회사 | 깊이 정보를 이용하는 내시경 및 깊이 정보를 이용하는 내시경에 의한 용종 검출 방법 |
| US9141198B2 (en) | 2013-01-08 | 2015-09-22 | Infineon Technologies Ag | Control of a control parameter by gesture recognition |
| KR102007277B1 (ko) | 2013-03-11 | 2019-08-05 | 삼성전자주식회사 | 3차원 이미지 센서의 거리 픽셀 및 이를 포함하는 3차원 이미지 센서 |
| LU92173B1 (en) * | 2013-03-20 | 2014-09-22 | Iee Sarl | Distance determination method |
| JP2016524709A (ja) * | 2013-06-06 | 2016-08-18 | ヘプタゴン・マイクロ・オプティクス・プライベート・リミテッドHeptagon Micro Optics Pte. Ltd. | 能動照明を備えるセンサシステム |
| US10203399B2 (en) | 2013-11-12 | 2019-02-12 | Big Sky Financial Corporation | Methods and apparatus for array based LiDAR systems with reduced interference |
| EP3792662A1 (en) * | 2014-01-13 | 2021-03-17 | Sony Depthsensing Solutions SA/NV | Time-of-flight system for use with an illumination system |
| US9360554B2 (en) | 2014-04-11 | 2016-06-07 | Facet Technology Corp. | Methods and apparatus for object detection and identification in a multiple detector lidar array |
| JP6507529B2 (ja) * | 2014-08-29 | 2019-05-08 | 株式会社デンソー | 光飛行型測距装置 |
| US10215857B2 (en) | 2014-12-02 | 2019-02-26 | Ams Sensors Singapore Pte. Ltd. | Depth sensor module and depth sensing method |
| US10036801B2 (en) | 2015-03-05 | 2018-07-31 | Big Sky Financial Corporation | Methods and apparatus for increased precision and improved range in a multiple detector LiDAR array |
| JP6439181B2 (ja) * | 2015-03-12 | 2018-12-19 | 本田技研工業株式会社 | 光通信装置、及びプログラム |
| US10605916B2 (en) | 2015-03-17 | 2020-03-31 | Cornell University | Depth field imaging apparatus, methods, and applications |
| US9984508B2 (en) * | 2015-05-20 | 2018-05-29 | Micron Technology, Inc. | Light-based radar system for augmented reality |
| US9874693B2 (en) | 2015-06-10 | 2018-01-23 | The Research Foundation For The State University Of New York | Method and structure for integrating photonics with CMOs |
| US10677924B2 (en) | 2015-06-23 | 2020-06-09 | Mezmeriz, Inc. | Portable panoramic laser mapping and/or projection system |
| US10419723B2 (en) | 2015-06-25 | 2019-09-17 | Magna Electronics Inc. | Vehicle communication system with forward viewing camera and integrated antenna |
| US10137904B2 (en) | 2015-10-14 | 2018-11-27 | Magna Electronics Inc. | Driver assistance system with sensor offset correction |
| US11027654B2 (en) | 2015-12-04 | 2021-06-08 | Magna Electronics Inc. | Vehicle vision system with compressed video transfer via DSRC link |
| US10191154B2 (en) | 2016-02-11 | 2019-01-29 | Massachusetts Institute Of Technology | Methods and apparatus for time-of-flight imaging |
| US9866816B2 (en) | 2016-03-03 | 2018-01-09 | 4D Intellectual Properties, Llc | Methods and apparatus for an active pulsed 4D camera for image acquisition and analysis |
| US10703204B2 (en) | 2016-03-23 | 2020-07-07 | Magna Electronics Inc. | Vehicle driver monitoring system |
| US10571562B2 (en) | 2016-03-25 | 2020-02-25 | Magna Electronics Inc. | Vehicle short range sensing system using RF sensors |
| US10337993B2 (en) | 2016-04-15 | 2019-07-02 | Massachusetts Institute Of Technology | Methods and apparatus for fluorescence lifetime imaging with periodically modulated light |
| US10534081B2 (en) | 2016-05-02 | 2020-01-14 | Magna Electronics Inc. | Mounting system for vehicle short range sensors |
| FI127463B (en) * | 2016-05-10 | 2018-06-29 | Aabo Akademi Aabo Akademi Univ | An artifact for determining resolution of imaging based on electromagnetic radiation and/or mechanical waves |
| US10040481B2 (en) | 2016-05-17 | 2018-08-07 | Magna Electronics Inc. | Vehicle trailer angle detection system using ultrasonic sensors |
| US10768298B2 (en) | 2016-06-14 | 2020-09-08 | Magna Electronics Inc. | Vehicle sensing system with 360 degree near range sensing |
| US11454719B2 (en) | 2016-07-08 | 2022-09-27 | Magna Electronics Inc. | 2D MIMO radar system for vehicle |
| US10239446B2 (en) | 2016-07-13 | 2019-03-26 | Magna Electronics Inc. | Vehicle sensing system using daisy chain of sensors |
| US10708227B2 (en) | 2016-07-19 | 2020-07-07 | Magna Electronics Inc. | Scalable secure gateway for vehicle |
| US10641867B2 (en) | 2016-08-15 | 2020-05-05 | Magna Electronics Inc. | Vehicle radar system with shaped radar antennas |
| US10852418B2 (en) | 2016-08-24 | 2020-12-01 | Magna Electronics Inc. | Vehicle sensor with integrated radar and image sensors |
| US10677894B2 (en) | 2016-09-06 | 2020-06-09 | Magna Electronics Inc. | Vehicle sensing system for classification of vehicle model |
| US10836376B2 (en) | 2016-09-06 | 2020-11-17 | Magna Electronics Inc. | Vehicle sensing system with enhanced detection of vehicle angle |
| DE102016223568B3 (de) | 2016-10-14 | 2018-04-26 | Infineon Technologies Ag | Optische Sensoreinrichtung mit tiefen und flachen Steuerelektroden |
| US10347129B2 (en) | 2016-12-07 | 2019-07-09 | Magna Electronics Inc. | Vehicle system with truck turn alert |
| US10462354B2 (en) | 2016-12-09 | 2019-10-29 | Magna Electronics Inc. | Vehicle control system utilizing multi-camera module |
| US10703341B2 (en) | 2017-02-03 | 2020-07-07 | Magna Electronics Inc. | Vehicle sensor housing with theft protection |
| US10782388B2 (en) | 2017-02-16 | 2020-09-22 | Magna Electronics Inc. | Vehicle radar system with copper PCB |
| US11536829B2 (en) | 2017-02-16 | 2022-12-27 | Magna Electronics Inc. | Vehicle radar system with radar embedded into radome |
| US11142200B2 (en) | 2017-02-23 | 2021-10-12 | Magna Electronics Inc. | Vehicular adaptive cruise control with enhanced vehicle control |
| DE102017105142B4 (de) | 2017-03-10 | 2021-09-16 | Infineon Technologies Ag | Laufzeit-Bilderzeugungsvorrichtungen und ein Verfahren zum Anpassen einer Referenzfrequenz |
| US10928489B2 (en) | 2017-04-06 | 2021-02-23 | Microsoft Technology Licensing, Llc | Time of flight camera |
| US10884103B2 (en) | 2017-04-17 | 2021-01-05 | Magna Electronics Inc. | Calibration system for vehicle radar system |
| US10870426B2 (en) | 2017-06-22 | 2020-12-22 | Magna Electronics Inc. | Driving assistance system with rear collision mitigation |
| CN208376630U (zh) | 2017-06-30 | 2019-01-15 | 麦格纳电子(张家港)有限公司 | 与拖车传感器通信的车辆视觉系统 |
| WO2019044569A1 (ja) * | 2017-08-30 | 2019-03-07 | ソニーセミコンダクタソリューションズ株式会社 | 撮像素子および撮像装置 |
| US11150342B2 (en) | 2017-09-07 | 2021-10-19 | Magna Electronics Inc. | Vehicle radar sensing system with surface segmentation using interferometric statistical analysis |
| US10962641B2 (en) | 2017-09-07 | 2021-03-30 | Magna Electronics Inc. | Vehicle radar sensing system with enhanced accuracy using interferometry techniques |
| US10877148B2 (en) | 2017-09-07 | 2020-12-29 | Magna Electronics Inc. | Vehicle radar sensing system with enhanced angle resolution using synthesized aperture |
| US10962638B2 (en) | 2017-09-07 | 2021-03-30 | Magna Electronics Inc. | Vehicle radar sensing system with surface modeling |
| US10933798B2 (en) | 2017-09-22 | 2021-03-02 | Magna Electronics Inc. | Vehicle lighting control system with fog detection |
| US11391826B2 (en) | 2017-09-27 | 2022-07-19 | Magna Electronics Inc. | Vehicle LIDAR sensor calibration system |
| EP3474038B1 (en) | 2017-10-23 | 2024-07-24 | ams International AG | Image sensor for determining a three-dimensional image and method for determining a three-dimensional image |
| US11486968B2 (en) | 2017-11-15 | 2022-11-01 | Magna Electronics Inc. | Vehicle Lidar sensing system with sensor module |
| US10816666B2 (en) | 2017-11-21 | 2020-10-27 | Magna Electronics Inc. | Vehicle sensing system with calibration/fusion of point cloud partitions |
| US10335036B2 (en) | 2017-11-22 | 2019-07-02 | Hi Llc | Pulsed ultrasound modulated optical tomography using lock-in camera |
| US10016137B1 (en) | 2017-11-22 | 2018-07-10 | Hi Llc | System and method for simultaneously detecting phase modulated optical signals |
| US10215856B1 (en) | 2017-11-27 | 2019-02-26 | Microsoft Technology Licensing, Llc | Time of flight camera |
| US11167771B2 (en) | 2018-01-05 | 2021-11-09 | Magna Mirrors Of America, Inc. | Vehicular gesture monitoring system |
| US10901087B2 (en) | 2018-01-15 | 2021-01-26 | Microsoft Technology Licensing, Llc | Time of flight camera |
| US11112498B2 (en) | 2018-02-12 | 2021-09-07 | Magna Electronics Inc. | Advanced driver-assistance and autonomous vehicle radar and marking system |
| US11047977B2 (en) | 2018-02-20 | 2021-06-29 | Magna Electronics Inc. | Vehicle radar system with solution for ADC saturation |
| US11199611B2 (en) | 2018-02-20 | 2021-12-14 | Magna Electronics Inc. | Vehicle radar system with T-shaped slot antennas |
| CN108519604B (zh) * | 2018-03-08 | 2021-08-10 | 北京理工大学 | 一种基于伪随机码调制解调的固态面阵激光雷达测距方法 |
| US10368752B1 (en) | 2018-03-08 | 2019-08-06 | Hi Llc | Devices and methods to convert conventional imagers into lock-in cameras |
| JP7054639B2 (ja) * | 2018-03-16 | 2022-04-14 | ソニーセミコンダクタソリューションズ株式会社 | 受光素子および電子機器 |
| CN108507688B (zh) * | 2018-04-10 | 2019-05-03 | 中国人民解放军国防科技大学 | 大数目激光阵列的相位探测与控制方法 |
| US10942274B2 (en) | 2018-04-11 | 2021-03-09 | Microsoft Technology Licensing, Llc | Time of flight and picture camera |
| US11206985B2 (en) | 2018-04-13 | 2021-12-28 | Hi Llc | Non-invasive optical detection systems and methods in highly scattering medium |
| US12019160B2 (en) | 2018-04-19 | 2024-06-25 | The Board Of Trustees Of The Leland Stanford Junior University | Mechanically resonant photoelastic modulator for time-of-flight imaging |
| US11857316B2 (en) | 2018-05-07 | 2024-01-02 | Hi Llc | Non-invasive optical detection system and method |
| DE112019003626T5 (de) | 2018-07-17 | 2021-05-27 | Sony Corporation | Bildgebungselement und bildgebungsvorrichtung |
| KR102615195B1 (ko) * | 2018-07-19 | 2023-12-18 | 삼성전자주식회사 | ToF 기반의 3D 이미지 센서 및 그 이미지 센서를 구비한 전자 장치 |
| US10895925B2 (en) | 2018-10-03 | 2021-01-19 | Microsoft Technology Licensing, Llc | Touch display alignment |
| US11435476B2 (en) | 2018-10-12 | 2022-09-06 | Microsoft Technology Licensing, Llc | Time-of-flight RGB-IR image sensor |
| EP3640590B1 (en) | 2018-10-17 | 2021-12-01 | Trimble Jena GmbH | Surveying apparatus for surveying an object |
| EP3640677B1 (en) | 2018-10-17 | 2023-08-02 | Trimble Jena GmbH | Tracker of a surveying apparatus for tracking a target |
| US11808876B2 (en) | 2018-10-25 | 2023-11-07 | Magna Electronics Inc. | Vehicular radar system with vehicle to infrastructure communication |
| US11683911B2 (en) | 2018-10-26 | 2023-06-20 | Magna Electronics Inc. | Vehicular sensing device with cooling feature |
| US11638362B2 (en) | 2018-10-29 | 2023-04-25 | Magna Electronics Inc. | Vehicular radar sensor with enhanced housing and PCB construction |
| US11454720B2 (en) | 2018-11-28 | 2022-09-27 | Magna Electronics Inc. | Vehicle radar system with enhanced wave guide antenna system |
| US11096301B2 (en) | 2019-01-03 | 2021-08-17 | Magna Electronics Inc. | Vehicular radar sensor with mechanical coupling of sensor housing |
| US11332124B2 (en) | 2019-01-10 | 2022-05-17 | Magna Electronics Inc. | Vehicular control system |
| US11294028B2 (en) | 2019-01-29 | 2022-04-05 | Magna Electronics Inc. | Sensing system with enhanced electrical contact at PCB-waveguide interface |
| US11609304B2 (en) | 2019-02-07 | 2023-03-21 | Magna Electronics Inc. | Vehicular front camera testing system |
| EP4553538A3 (en) | 2019-02-15 | 2025-08-13 | Trimble Inc. | Surveying instrument and method of calibrating a survey instrument |
| US12044794B2 (en) | 2019-02-26 | 2024-07-23 | Magna Electronics Inc. | Vehicular radar system with automatic sensor alignment |
| KR20220004647A (ko) * | 2019-05-06 | 2022-01-11 | 소니 세미컨덕터 솔루션즈 가부시키가이샤 | 타임-오브-플라이트 디바이스 및 방법 |
| US11267393B2 (en) | 2019-05-16 | 2022-03-08 | Magna Electronics Inc. | Vehicular alert system for alerting drivers of other vehicles responsive to a change in driving conditions |
| US12516556B2 (en) | 2019-07-18 | 2026-01-06 | Magna Electronics Inc. | Vehicle outside door handle with radar module and thermal management |
| US12371027B2 (en) | 2019-08-23 | 2025-07-29 | Magna Electronics Inc. | Vehicular driving assist system with traffic jam probability determination |
| US12036990B2 (en) | 2019-11-22 | 2024-07-16 | Magna Electronics Inc. | Vehicular control system with controlled vehicle stopping and starting at intersection |
| US11079515B2 (en) | 2019-12-18 | 2021-08-03 | Microsoft Technology Licensing, Llc | Micro lens time-of-flight sensor having micro lens heights that vary based on image height |
| DE112021000497T5 (de) | 2020-01-10 | 2022-11-24 | Magna Electronics, Inc. | Kommunikationssystem und -verfahren |
| US12071084B2 (en) | 2020-02-14 | 2024-08-27 | Magna Electronics Inc. | Vehicular sensing system with variable power mode for thermal management |
| RU2738602C1 (ru) * | 2020-03-03 | 2020-12-14 | Федеральное государственное бюджетное образовательное учреждение высшего образования "Казанский национальный исследовательский технический университет им. А.Н. Туполева - КАИ" | Способ одновременного измерения частоты, фазы, начальной фазы и амплитуды гармонического сигнала |
| JP2021182701A (ja) * | 2020-05-19 | 2021-11-25 | ソニーセミコンダクタソリューションズ株式会社 | 受光装置およびその駆動制御方法、並びに、測距装置 |
| US12013480B2 (en) | 2020-06-05 | 2024-06-18 | Magna Electronics Inc. | Vehicular radar sensor with waveguide connection embedded in PCB |
| US11823395B2 (en) | 2020-07-02 | 2023-11-21 | Magna Electronics Inc. | Vehicular vision system with road contour detection feature |
| US20220011431A1 (en) * | 2020-07-10 | 2022-01-13 | Xin Jin | Camera sensor for lidar with doppler-sensing pixels |
| US20220011438A1 (en) * | 2020-07-10 | 2022-01-13 | Xin Jin | Multi-domain optical sensor chip and apparatus |
| US11749105B2 (en) | 2020-10-01 | 2023-09-05 | Magna Electronics Inc. | Vehicular communication system with turn signal identification |
| US12030501B2 (en) | 2020-10-02 | 2024-07-09 | Magna Electronics Inc. | Vehicular control system with enhanced vehicle passing maneuvering |
| EP4229423A1 (en) * | 2020-10-13 | 2023-08-23 | Yissum Research Development Company Of The Hebrew University Of Jerusalem Ltd | Detector array system |
| US12117555B2 (en) | 2020-12-11 | 2024-10-15 | Magna Mirrors Of America, Inc. | Vehicular exterior door handle assembly with radar module and enhanced thermal management |
| WO2022187805A1 (en) | 2021-03-01 | 2022-09-09 | Magna Mirrors Of America, Inc. | Interior rearview mirror assembly with driver monitoring system |
| US12194992B2 (en) | 2021-07-01 | 2025-01-14 | Magna Electronics Inc. | Vehicular automatic emergency braking system with cross-path threat determination |
| US12449534B2 (en) | 2021-07-29 | 2025-10-21 | Magna Electronics Inc. | Vehicular radar sensor with cross channel isolation |
| US12007476B2 (en) | 2021-09-13 | 2024-06-11 | Magna Electronics Inc. | Method for detecting objects via a vehicular sensing system |
| US12122324B2 (en) | 2021-09-17 | 2024-10-22 | Magna Mirrors Of America, Inc. | Vehicular power door sensing and operating system |
| US12252172B2 (en) | 2021-09-21 | 2025-03-18 | Magna Electronics Inc. | Vehicular intelligent remote parking assist system |
| US12366653B2 (en) | 2021-10-26 | 2025-07-22 | Magna Electronics Inc. | Radar-based vehicular exterior mirror collision avoidance system |
| US12510659B2 (en) | 2022-03-24 | 2025-12-30 | Magna Electronics Inc. | Vehicular radar sensing system with transmitting and receiving antennas on same platform with isolated waveguide ports |
| US12539819B2 (en) | 2022-04-07 | 2026-02-03 | Magna Electronics Inc. | Vehicular vision system with tailgate control |
| US12336675B2 (en) | 2022-04-11 | 2025-06-24 | Vorwerk & Co. Interholding Gmb | Obstacle avoidance using fused depth and intensity from nnt training |
| US12345809B2 (en) * | 2022-04-20 | 2025-07-01 | Magna Electronics Inc. | Vehicular radar sensor with antenna that provides improved blind-spot detection |
| US12286102B2 (en) | 2022-04-27 | 2025-04-29 | Magna Electronics Inc. | Vehicular driving assist system with collision avoidance |
| US12420707B2 (en) | 2022-06-24 | 2025-09-23 | Magna Electronics Inc. | Vehicular control system with cross traffic alert and collision avoidance |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4873561A (en) * | 1988-04-19 | 1989-10-10 | Wen David D | High dynamic range charge-coupled device |
| JP2901649B2 (ja) * | 1989-07-31 | 1999-06-07 | 株式会社日立製作所 | 半導体装置及びそれを用いたカメラ |
| DE3930632A1 (de) * | 1989-09-13 | 1991-03-14 | Steinbichler Hans | Verfahren zur direkten phasenmessung von strahlung, insbesondere lichtstrahlung, und vorrichtung zur durchfuehrung dieses verfahrens |
| JP2581863B2 (ja) * | 1991-12-26 | 1997-02-12 | 三菱電機株式会社 | 立体形状計測装置及び立体形状計測用センサ |
| US5155383A (en) | 1992-02-03 | 1992-10-13 | Motorola, Inc. | Circuit and method of resetting a master/slave flipflop |
| US5449908A (en) * | 1993-12-30 | 1995-09-12 | Texas Instruments Incorporated | Hybrid CCD imaging |
| US5517043A (en) * | 1994-10-25 | 1996-05-14 | Dalsa, Inc. | Split pixel interline transfer imaging device |
| DE4439298A1 (de) | 1994-11-07 | 1996-06-13 | Rudolf Prof Dr Ing Schwarte | 3D-Kamera nach Laufzeitverfahren |
| JPH08313215A (ja) | 1995-05-23 | 1996-11-29 | Olympus Optical Co Ltd | 2次元距離センサ |
| US5646733A (en) * | 1996-01-29 | 1997-07-08 | Medar, Inc. | Scanning phase measuring method and system for an object at a vision station |
| CA2264051C (en) * | 1996-09-05 | 2005-07-26 | Rudolf Schwarte | Method and device for determining the phase- and/or amplitude data of an electromagnetic wave |
-
1997
- 1997-09-05 CA CA002264051A patent/CA2264051C/en not_active Expired - Lifetime
- 1997-09-05 WO PCT/DE1997/001956 patent/WO1998010255A1/de not_active Ceased
- 1997-09-05 JP JP51212498A patent/JP4060365B2/ja not_active Expired - Lifetime
- 1997-09-05 EP EP97941871A patent/EP1009984B1/de not_active Expired - Lifetime
- 1997-09-05 MX MXPA99002142A patent/MXPA99002142A/es active IP Right Grant
- 1997-09-05 AU AU43761/97A patent/AU715284B2/en not_active Expired
- 1997-09-05 AT AT97941871T patent/ATE254758T1/de active
- 1997-09-05 RU RU99106432/28A patent/RU2182385C2/ru active
- 1997-09-05 HU HU0001087A patent/HU227654B1/hu unknown
- 1997-09-05 CZ CZ0069399A patent/CZ300055B6/cs not_active IP Right Cessation
- 1997-09-05 ES ES97941871T patent/ES2206748T3/es not_active Expired - Lifetime
- 1997-09-05 US US09/254,333 patent/US6825455B1/en not_active Expired - Lifetime
- 1997-09-05 BR BRPI9712804-0A patent/BR9712804B1/pt not_active IP Right Cessation
- 1997-09-05 CN CN97198749A patent/CN1103045C/zh not_active Expired - Lifetime
-
2004
- 2004-11-29 US US10/999,582 patent/US7053357B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| AU4376197A (en) | 1998-03-26 |
| WO1998010255A1 (de) | 1998-03-12 |
| HUP0001087A2 (hu) | 2000-08-28 |
| US20050092897A1 (en) | 2005-05-05 |
| ES2206748T3 (es) | 2004-05-16 |
| CZ300055B6 (cs) | 2009-01-21 |
| AU715284B2 (en) | 2000-01-20 |
| MXPA99002142A (es) | 2004-08-27 |
| US6825455B1 (en) | 2004-11-30 |
| BR9712804A (pt) | 1999-11-23 |
| HU227654B1 (en) | 2011-10-28 |
| US7053357B2 (en) | 2006-05-30 |
| EP1009984B1 (de) | 2003-11-19 |
| RU2182385C2 (ru) | 2002-05-10 |
| HUP0001087A3 (en) | 2004-01-28 |
| ATE254758T1 (de) | 2003-12-15 |
| BR9712804B1 (pt) | 2011-04-19 |
| CN1233323A (zh) | 1999-10-27 |
| JP2000517427A (ja) | 2000-12-26 |
| CZ69399A3 (cs) | 1999-08-11 |
| CA2264051C (en) | 2005-07-26 |
| EP1009984A1 (de) | 2000-06-21 |
| CA2264051A1 (en) | 1998-03-12 |
| JP4060365B2 (ja) | 2008-03-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1103045C (zh) | 确定电磁波的相位和/或幅度信息的方法和装置 | |
| US20220050201A1 (en) | Fmcw imaging lidar based on coherent pixel array | |
| RU99106432A (ru) | Способ и устройство для определения информации об амплитуде и фазе электромагнитной волны | |
| KR101696335B1 (ko) | 다중 스펙트럼 센서 | |
| JP5066735B2 (ja) | 電磁波の位相及び振幅を検出するための装置並びに方法 | |
| US8723924B2 (en) | Recording of 3D images of a scene with phase de-convolution | |
| CN1290254C (zh) | 检测与处理信号波的过程与装置 | |
| US20030076484A1 (en) | Systems for CMOS-compatible three-dimensional image sensing using quantum efficiency modulation | |
| US20160033766A1 (en) | Directional optical receiver | |
| CN112444818A (zh) | 一种激光雷达 | |
| JP2004525351A (ja) | 量子効率変調を用いたcmosコンパチブルの三次元イメージセンシングのためのシステム | |
| Lee et al. | Highly precise AMCW time-of-flight scanning sensor based on parallel-phase demodulation | |
| US11971506B2 (en) | Light propagation time pixel and light propagation time sensor with corresponding pixel | |
| Schwarte et al. | New optical four-quadrant phase detector integrated into a photogate array for small and precise 3D cameras | |
| Dalla Betta et al. | Design and Characterization of Current-Assisted Photonic Demodulators in 0.18-$\mu\hbox {m} $ CMOS Technology | |
| CN116930920A (zh) | 激光雷达及激光雷达控制方法 | |
| HK1023177A (zh) | 确定电磁波的相位和/或幅度信息的方法和装置 | |
| CN101071314A (zh) | 空间积分过剩光载流子相关器 | |
| KR100458629B1 (ko) | 전자파의 진폭정보와 위상을 감지하는 방법 및 장치 | |
| US20240363786A1 (en) | Optical component | |
| US12328966B2 (en) | Substrate for optical device, method of manufacturing the same, optical device including the substrate for optical device, method of manufacturing the same, and electronic apparatus including optical device | |
| CN116840848A (zh) | 一种平衡探测器阵列 | |
| Müller et al. | Optical Ranging–The Amorphous Silicon Intrinsic Photomixing Detector | |
| Hossain et al. | A 3D image sensor based on current assisted photonic mixing demodulator in 0.18 µm CMOS technology | |
| Shcherbakova et al. | Design and characterization of a monolithic CMOS phase-sensitive pixel based on an avalanche photodiode |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| REG | Reference to a national code |
Ref country code: HK Ref legal event code: WD Ref document number: 1023177 Country of ref document: HK |
|
| CX01 | Expiry of patent term |
Granted publication date: 20030312 |
|
| CX01 | Expiry of patent term |