JP2021518560A - マルチスペクトルLiDARトランシーバ - Google Patents
マルチスペクトルLiDARトランシーバ Download PDFInfo
- Publication number
- JP2021518560A JP2021518560A JP2020551417A JP2020551417A JP2021518560A JP 2021518560 A JP2021518560 A JP 2021518560A JP 2020551417 A JP2020551417 A JP 2020551417A JP 2020551417 A JP2020551417 A JP 2020551417A JP 2021518560 A JP2021518560 A JP 2021518560A
- Authority
- JP
- Japan
- Prior art keywords
- scanning
- wavelength
- scanning device
- laser beam
- polarized light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/21—Polarisation-affecting properties
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/55—Specular reflectivity
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
- B60W30/095—Predicting travel path or likelihood of collision
- B60W30/0956—Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/50—Systems of measurement based on relative movement of target
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/4802—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4814—Constructional features, e.g. arrangements of optical elements of transmitters alone
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4816—Constructional features, e.g. arrangements of optical elements of receivers alone
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/481—Constructional features, e.g. arrangements of optical elements
- G01S7/4817—Constructional features, e.g. arrangements of optical elements relating to scanning
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00795—Reading arrangements
- H04N1/00827—Arrangements for reading an image from an unusual original, e.g. 3-dimensional objects
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/408—Radar; Laser, e.g. lidar
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/54—Audio sensitive means, e.g. ultrasound
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/21—Polarisation-affecting properties
- G01N2021/217—Measuring depolarisation or comparing polarised and depolarised parts of light
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/47—Scattering, i.e. diffuse reflection
- G01N2021/4792—Polarisation of scatter light
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N2201/00—Features of devices classified in G01N21/00
- G01N2201/06—Illumination; Optics
- G01N2201/061—Sources
- G01N2201/06113—Coherent sources; lasers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/86—Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/87—Combinations of systems using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/56—Particle system, point based geometry or rendering
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2004—Aligning objects, relative positioning of parts
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- Theoretical Computer Science (AREA)
- Automation & Control Theory (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Pathology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Architecture (AREA)
- Geometry (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Mechanical Optical Scanning Systems (AREA)
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Abstract
Description
本発明は、マルチスペクトルのレーザ検出測距(laser detection and ranging,LiDAR)のための方法およびシステムに関する。
典型的なLiDARシステムにおいて、送出される信号は、スペクトル的に固定された狭帯域(ナローバンド)の光源である。例えば、太陽からのバックグラウンド光の影響を低減するために、受信器(レシーバ)の経路内に狭帯域フィルタが配置されうる。マルチスペクトルLiDARの場合、バックグラウンド光からの干渉を軽減することは特に困難である。その理由は、送信器(トランスミッタ)は、広いスペクトル幅を有しているか、または、異なる波長に迅速に同調しているためである。第1のケースでは、かなりの量の電力がチューナブル受信器(波長可変受信器)によってブロック(遮断)されるため、当該かなりの量の電力がLiDAR機能に寄与しない。このことは、特定のアプリケーション(用途)において眼の安全性の懸念(問題)を引き起こしうる。第2のケースでは、チューナブル受信器を、送信器の光源に正確に同期させる必要がある。実際には、これを実現することは容易ではない。
本発明の目的は、簡略化されたマルチスペクトルLiDARトランシーバを提供することである。当該マルチスペクトルLiDARトランシーバは、例えば、自律ビークル(自律的な移動体)の周囲を色についてリアルタイムに走査する場合に、バックグラウンド除去を大幅に改善し、クロストークを低減し、かつ、従来技術に比べて眼の安全性を向上させる。
・光入力部(optical input)と、
・分離ユニットと、
・波長選択ユニットと、
・走査ユニットと、
・広帯域検出器(ブロードバンド検出器)と、
を備えており、
上記光入力部は、パルス状の広帯域のレーザビーム(pulsed broadband laser beam)を受光し、
上記レーザビームは、直線偏光を有しており、
上記分離ユニットは、上記偏光を円偏光へと変化させつつ、走査光路に沿って上記レーザビームを送出し、
上記波長選択ユニットは、
上記分離ユニットから到来した上記レーザビームを受光し、
複数の選択可能な波長の内から選択可能な現時点の波長(現在の波長,現波長)(current wavelength)を有するフィルタリング後レーザビームを得るために、上記レーザビームをフィルタリングし、
上記走査光路に沿ったフィルタリング後レーザビームを、上記走査ユニットに向けて偏向(deflect)させ、
上記走査ユニットは、
偏向させられた上記フィルタリング後レーザビームを、所定の立体角の内部において、複数の現時点のローカル方向(現在のローカル方向,現ローカル方向)(current local directions)に沿ってステアリングし、
上記フィルタリング後レーザビームの反射光(reflections)を受光し、
上記反射光は、上記レーザビームの上記円偏光に対して直交する円偏光を有しており、
上記走査ユニットは、
受光した上記反射光を、検出光路に沿って上記波長選択ユニットを通過させて上記分離ユニットに戻すように送出し、
上記検出光路と上記走査光路とは、上記波長選択ユニットと上記走査ユニットとを通る同一の光路を有しているが、互いに反対の光伝播方向を有しており、
上記分離ユニットは、上記直交する円偏光を、上記レーザビームの上記直線偏光に対して直交する直線偏光へと変化させつつ、上記反射光を上記広帯域検出器に向けて偏向(deviating)させ、
上記広帯域検出器は、
偏向させられた上記反射光を受光し、
上記反射光の飛行時間および光パワーを検出する。
上記走査光路に沿って上記レーザビームを送出し、かつ、上記検出光路において上記反射光を偏向させる偏光ビームスプリッタと、
上記同一の光路上において、上記偏光ビームスプリッタと上記波長選択ユニットとの間に配置された光学コンポーネントと、を備えており、
上記光学コンポーネントは、
上記走査光路において、直線偏光を円偏光へと変換し、
上記検出光路において、直交する円偏光を直交する直線偏光へと変換する。
上記広帯域のレーザビームを回折するための格子と、
ミラーと、を備えており、
上記格子および上記ミラーの一方は、配向可能であり、
上記一方の配向は、回折ビームの選択された波長の1次の次数(1st order of a selected wavelength diffracted beam)を選択するために調整可能である。
(i)30nmまでのFWHMを有しており、
(ii)好ましくは、20nmまでのFWHMを有しており、
(iii)好ましくは、範囲[10nm〜20nm]内に含まれるFWHMを有している。
(i)少なくとも10nmだけ互いに離間されており、
(ii)好ましくは、少なくとも15nmだけ互いに離間されており、
(iii)さらに好ましくは、少なくとも20nmだけ互いに離間されている。
(i)少なくとも3つの波長を含んでおり、
(ii)好ましくは、少なくとも5つの波長を含んでおり、
(iii)さらに好ましくは、少なくとも10個の波長を含んでいる。
(i)範囲[45°〜360°]内の水平角度寸法と、範囲[10°〜180°]内の垂直角度寸法と、を有しており、
(ii)好ましくは、範囲[90°〜180°]内の水平角度寸法と、範囲[20°〜90°]内の垂直角度寸法と、を有しており、
(iii)より好ましくは、約120°の水平角度寸法と、約30°の垂直角度寸法と、を有している。
・メモリと、
・上記走査デバイスのための処理手段と、
・制御手段と、
をさらに備えており、
上記メモリは、上記複数の選択可能な波長に対応する波長値のセットを格納(記憶)し、
上記処理手段は、上記波長値のセットに含まれる現時点の波長値(wavelength current value)を、好ましくは3Hzよりも高い波長レートにおいて逐次的に(successively)選択し、
上記制御手段は、上記波長選択ユニットを上記現時点の波長値に同調させるように、当該波長選択ユニットを制御する。
・駆動手段と、
・メモリと、
をさらに備えており、
上記駆動手段は、偏向させられた上記フィルタリング後レーザビームを、上記所定の立体角の内部において上記複数の現時点のローカル方向に沿ってステアリングするために上記走査ユニットを制御し、
上記走査デバイスは、上記現時点の波長値および上記現時点のローカル方向の座標に関連付けて、光パワーおよび飛行時間を上記メモリに記録する。
上記立体角の上記垂直角度寸法の全体を垂直走査し、
上記立体角の上記水平角度寸法の全体を水平走査し、
上記垂直走査は、ある垂直走査周波数において繰り返し実行され、
上記水平走査は、ある水平走査周波数において繰り返し実行される。
・上記波長値のセットに含まれる現時点の波長値を、ある波長レートにおいて逐次的に選択する工程と、
・上記立体角の上記垂直角度寸法の全体を垂直走査する工程と、
・上記立体角の上記水平角度寸法の全体を水平走査する工程と、
を含んでおり、
上記垂直走査は、ある垂直走査周波数において繰り返し実行され、
上記水平走査は、ある水平走査周波数において繰り返し実行され、
上記波長レートは、上記水平走査周波数および上記垂直走査周波数よりも低い。
他の構成、詳細、および利点は、以下の詳細な説明および図面において示されている。
図1は、本発明の一実施形態に係るマルチスペクトルLiDARデバイスの光学機能の模式図である。
図2は、図1のマルチスペクトルLiDARデバイスを動作させる場合に選択可能な波長のマルチスペクトルコムの例示的なスペクトルである。
図3は、図1のマルチスペクトルLiDARデバイスの模式図であり、図1の通り機能的に動作する構造的な光学素子の例が示されている。
図4は、図3のコムの第1波長を選択するように機能的に動作する、図1のマルチスペクトルLiDARデバイスの詳細の模式図である。
図5は、図3のコムの第2波長を選択するために機能的に動作する、図4に描写された詳細の模式図である。
図6は、図1のマルチスペクトルLiDARデバイスによって生成された単色パルスの列と、当該マルチスペクトルLiDARデバイスによって受信された単色パルスの反射列との模式図である。
図面および以下の詳細な説明は、本質的に一部の正確な要素を含んでいる。これらの要素は、本発明の理解を高めるために、また必要に応じて本発明を規定(定義)するためにも使用されてよい。
・複数の選択可能な波長の内から第1波長を選択する工程;
・立体角円錐内に包含されたローカル方向において、第1波長を有するフィルタリング後レーザビーム5を連続的に水平走査する工程;
・各水平線(水平ライン)を走査した後、基本垂直角度ステップ分だけ垂直方向を変更し、新たな水平線に対する連続的な水平走査を繰り返す工程;
・全ての水平線を垂直走査した後、複数の選択可能な波長の内から第2波長を選択する工程;
・水平走査および垂直走査を同じ立体角円錐内において繰り返す工程;
を、含んでいてもよい。
Claims (19)
- レーザ検出測距(LiDAR)のための走査デバイスであって、
上記走査デバイスは、光学的自由空間内に配置されており、
上記走査デバイスは、
光入力部と、
分離ユニット(103)と、
波長選択ユニット(104)と、
走査ユニット(105)と、
広帯域検出器(18)と、を備えており、
上記光入力部は、パルス状の広帯域のレーザビームを受光し、
上記レーザビームは、直線偏光を有しており、
上記分離ユニット(103)は、上記偏光を円偏光へと変化させつつ、走査光路(X1)に沿って上記レーザビームを送出し、
上記波長選択ユニット(104)は、
上記分離ユニット(103)から到来した上記レーザビームを受光し、
複数の選択可能な波長の内から選択可能な現時点の波長を有するフィルタリング後レーザビーム(5)を得るために、上記レーザビームをフィルタリングし、
上記走査光路(X1)に沿ったフィルタリング後レーザビーム(5)を、上記走査ユニット(105)に向けて偏向させ、
上記走査ユニット(105)は、
偏向させられた上記フィルタリング後レーザビーム(5)を、所定の立体角の内部において、複数の現時点のローカル方向に沿ってステアリングし、
上記フィルタリング後レーザビームの反射光(4)を受光し、
上記反射光は、上記レーザビームの上記円偏光に対して直交する円偏光を有しており、
上記走査ユニット(105)は、
受光した上記反射光(4)を、検出光路(X2)に沿って上記波長選択ユニット(104)を通過させて上記分離ユニット(103)に戻すように送出し、
上記検出光路と上記走査光路とは、上記波長選択ユニット(104)と上記走査ユニット(105)とを通る同一の光路を有しているが、互いに反対の光伝播方向を有しており、
上記分離ユニット(103)は、上記直交する円偏光を、上記レーザビームの上記直線偏光に対して直交する直線偏光へと変化させつつ、上記反射光(4)を上記広帯域検出器(18)に向けて偏向させ、
上記広帯域検出器(18)は、
偏向させられた上記反射光を受光し、
上記反射光の飛行時間および光パワーを検出する、走査デバイス。 - 上記広帯域検出器は、固有の検出器である、請求項1に記載の走査デバイス。
- 上記分離ユニット(103)は、
上記走査光路(X1)に沿って上記レーザビームを送出し、かつ、上記検出光路(X2)において上記反射光を偏向させる偏光ビームスプリッタ(13)と、
上記同一の光路上において、上記偏光ビームスプリッタ(13)と上記波長選択ユニット(104)との間に配置された光学コンポーネント(14)と、を備えており、
上記光学コンポーネント(14)は、
上記走査光路(X1)において、直線偏光を円偏光へと変換し、
上記検出光路(X2)において、直交する円偏光を直交する直線偏光へと変換する、請求項1または2に記載の走査デバイス。 - 上記反射光(5)は、送出された上記レーザビームに対して所定の角度で偏向させられる、請求項1から3のいずれか1項に記載の走査デバイス。
- 上記波長選択ユニット(104)は、
上記広帯域のレーザビームを回折するための格子(15)と、
ミラー(16)と、を備えており、
上記格子および上記ミラーの一方は、配向可能であり、
上記一方の配向は、回折ビームの選択された波長の1次の次数を選択するために調整可能である、請求項1から4のいずれか1項に記載の走査デバイス。 - 回折ビームの選択された波長は、
30nmまでのFWHMを有しており、
好ましくは、20nmまでのFWHMを有しており、
好ましくは、範囲[10nm〜20nm]内に含まれるFWHMを有している、請求項5に記載の走査デバイス。 - 上記複数の選択可能な波長は、
少なくとも10nmだけ互いに離間されており、
好ましくは、少なくとも15nmだけ互いに離間されており、
さらに好ましくは、少なくとも20nmだけ互いに離間されている、請求項1から6のいずれか1項に記載の走査デバイス。 - 上記複数の選択可能な波長は、900nmから1700nmまでの範囲内にある、請求項1から7のいずれか1項に記載の走査デバイス。
- 上記複数の選択可能な波長は、
少なくとも3つの波長を含んでおり、
好ましくは、少なくとも5つの波長を含んでおり、
さらに好ましくは、少なくとも10個の波長を含んでいる、請求項1から8のいずれか1項に記載の走査デバイス。 - 上記パルス状の広帯域のレーザビームを、上記光入力部を介して上記分離ユニット(103)へと送出する広帯域レーザ光源(12)をさらに備えている、請求項1から9のいずれか1項に記載の走査デバイス。
- 上記パルス状の広帯域のレーザビームは、300kHzよりも高い周波数を有している、請求項1から10のいずれか1項に記載の走査デバイス。
- 上記所定の立体角は、
範囲[45°〜360°]内の水平角度寸法と、範囲[10°〜180°]内の垂直角度寸法と、を有しており、
好ましくは、範囲[90°〜180°]内の水平角度寸法と、範囲[20°〜90°]内の垂直角度寸法と、を有しており、
より好ましくは、約120°の水平角度寸法と、約30°の垂直角度寸法と、を有している、請求項1から11のいずれか1項に記載の走査デバイス。 - 上記走査デバイスは、
メモリ(7)と、
上記走査デバイスのための処理手段(8)と、
制御手段(6)と、をさらに備えており、
上記メモリ(7)は、上記複数の選択可能な波長に対応する波長値のセットを格納し、
上記処理手段(8)は、上記波長値のセットに含まれる現時点の波長値を、好ましくは3Hzよりも高い波長レートにおいて逐次的に選択し、
上記制御手段(6)は、上記波長選択ユニット(104)を上記現時点の波長値に同調させるように、当該波長選択ユニットを制御する、請求項1から12のいずれか1項に記載の走査デバイス。 - 上記走査デバイスは、
駆動手段(6)と、
メモリ(7)と、をさらに備えており、
上記駆動手段(6)は、偏向させられた上記フィルタリング後レーザビーム(5)を、上記所定の立体角の内部において上記複数の現時点のローカル方向に沿ってステアリングするために上記走査ユニット(105)を制御し、
上記走査デバイスは、上記現時点の波長値および上記現時点のローカル方向の座標に関連付けて、光パワーおよび飛行時間を上記メモリ(7)に記録する、請求項13に記載の走査デバイス。 - 上記走査ユニット(105)は、
上記立体角の上記垂直角度寸法の全体を垂直走査し、
上記立体角の上記水平角度寸法の全体を水平走査し、
上記垂直走査は、ある垂直走査周波数において繰り返し実行され、
上記水平走査は、ある水平走査周波数において繰り返し実行される、請求項12に従属する請求項14に記載の走査デバイス。 - 上記波長レートは、上記水平走査周波数および上記垂直走査周波数よりも低く、
好ましくは、上記水平走査周波数は、上記波長レートに比べて、少なくとも10倍高い、請求項15に記載の走査デバイス。 - 上記波長レートは、上記水平走査周波数および上記垂直走査周波数よりも高い、請求項15に記載の走査デバイス。
- 請求項1から17のいずれか1項に記載の走査デバイスを備えた、ビークル。
- 請求項1から17のいずれか1項に記載のレーザ検出測距(LiDAR)のための走査デバイスを動作させるための方法であって、
上記波長値のセットに含まれる現時点の波長値を、ある波長レートにおいて逐次的に選択する工程と、
上記立体角の上記垂直角度寸法の全体を垂直走査する工程と、
上記立体角の上記水平角度寸法の全体を水平走査する工程と、を含んでおり、
上記垂直走査は、ある垂直走査周波数において繰り返し実行され、
上記水平走査は、ある水平走査周波数において繰り返し実行され、
上記波長レートは、上記水平走査周波数および上記垂直走査周波数よりも低い、方法。
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201862644746P | 2018-03-19 | 2018-03-19 | |
| US62/644,746 | 2018-03-19 | ||
| US201862745370P | 2018-10-14 | 2018-10-14 | |
| US62/745,370 | 2018-10-14 | ||
| PCT/EP2019/056841 WO2019180019A1 (en) | 2018-03-19 | 2019-03-19 | Multispectral lidar transceiver |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2021518560A true JP2021518560A (ja) | 2021-08-02 |
Family
ID=65904405
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020551417A Ceased JP2021518560A (ja) | 2018-03-19 | 2019-03-19 | マルチスペクトルLiDARトランシーバ |
| JP2020551259A Pending JP2021518557A (ja) | 2018-03-19 | 2019-03-19 | 移動する物体の材料組成を識別するための方法およびシステム |
| JP2020551260A Pending JP2021518558A (ja) | 2018-03-19 | 2019-03-19 | 物体の材料組成を識別するための方法およびシステム |
Family Applications After (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020551259A Pending JP2021518557A (ja) | 2018-03-19 | 2019-03-19 | 移動する物体の材料組成を識別するための方法およびシステム |
| JP2020551260A Pending JP2021518558A (ja) | 2018-03-19 | 2019-03-19 | 物体の材料組成を識別するための方法およびシステム |
Country Status (6)
| Country | Link |
|---|---|
| US (3) | US11994466B2 (ja) |
| EP (3) | EP3769113A1 (ja) |
| JP (3) | JP2021518560A (ja) |
| CA (3) | CA3093512A1 (ja) |
| ES (1) | ES3022993T3 (ja) |
| WO (3) | WO2019180021A1 (ja) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20210223363A1 (en) | 2020-01-16 | 2021-07-22 | Outsight SA | Object detection on a path of travel and obstacle detection on railway tracks using free space information |
| US20230121746A1 (en) * | 2020-01-24 | 2023-04-20 | Outsight | A MULTISPECTRAL LiDAR COMPRISING A SPECTRAL DELAY UNIT |
| FI3928066T3 (fi) * | 2020-01-30 | 2023-01-31 | Monispektrinen aktiivinen etäanturi | |
| DE102021111224A1 (de) | 2021-04-30 | 2022-11-03 | Audi Aktiengesellschaft | Computerimplementiertes Verfahren zur Ermittlung einer dreidimensionalen Karte und zur Simulation einer Sensordatenaufnahme, Ermittlungseinrichtung, Computerprogramm und elektronisch lesbarer Datenträger |
| CN113807182B (zh) * | 2021-08-17 | 2024-02-27 | 北京地平线信息技术有限公司 | 用于处理点云的方法、装置、介质以及电子设备 |
| JP7807310B2 (ja) * | 2022-04-27 | 2026-01-27 | 株式会社Screenホールディングス | 検知装置、および、検知方法 |
| EP4312060A1 (en) * | 2022-07-26 | 2024-01-31 | Nokia Technologies Oy | Material sensitive lidar |
| JP7658473B1 (ja) | 2024-01-15 | 2025-04-08 | 日本電気株式会社 | 測定装置、測定方法及びプログラム |
| WO2025197086A1 (ja) * | 2024-03-22 | 2025-09-25 | 富士通株式会社 | 測定プログラム、測定方法、および測定装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014095630A (ja) * | 2012-11-09 | 2014-05-22 | Denso Corp | レーダ装置 |
| US20160084945A1 (en) * | 2013-05-06 | 2016-03-24 | Danmarks Tekniske Universitet | Coaxial direct-detection lidar-system |
| WO2019017244A1 (ja) * | 2017-07-18 | 2019-01-24 | パイオニア株式会社 | 光学装置 |
Family Cites Families (34)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0659038A (ja) * | 1992-08-07 | 1994-03-04 | Nissan Motor Co Ltd | 車両用レーザレーダ |
| US7049597B2 (en) * | 2001-12-21 | 2006-05-23 | Andrew Bodkin | Multi-mode optical imager |
| JP3915742B2 (ja) * | 2003-06-20 | 2007-05-16 | 株式会社デンソー | 車両用物体認識装置 |
| TWI245473B (en) * | 2003-06-30 | 2005-12-11 | Delta Electronics Inc | Tunable laser source and wavelength selecting method thereof |
| US7339670B2 (en) * | 2005-07-29 | 2008-03-04 | Lockheed Martin Coherent Technologies, Inc. | Wavelength normalized depolarization ratio lidar |
| US8244026B2 (en) * | 2008-01-09 | 2012-08-14 | Tiltan Systems Engineering Ltd. | Apparatus and method for automatic airborne LiDAR data processing and mapping using data obtained thereby |
| JP2010175435A (ja) * | 2009-01-30 | 2010-08-12 | Nippon Hoso Kyokai <Nhk> | 三次元情報検出装置及び三次元情報検出方法 |
| US8269652B2 (en) * | 2009-04-02 | 2012-09-18 | GM Global Technology Operations LLC | Vehicle-to-vehicle communicator on full-windshield head-up display |
| JPWO2010137172A1 (ja) * | 2009-05-29 | 2012-11-12 | トヨタ自動車株式会社 | 移動体用スペクトル測定装置 |
| JP2012189535A (ja) * | 2011-03-14 | 2012-10-04 | Ihi Corp | 植生検出装置及び植生検出方法 |
| JP5822255B2 (ja) * | 2011-04-14 | 2015-11-24 | 株式会社豊田中央研究所 | 対象物識別装置及びプログラム |
| US9097800B1 (en) * | 2012-10-11 | 2015-08-04 | Google Inc. | Solid object detection system using laser and radar sensor fusion |
| JP6184237B2 (ja) * | 2013-08-07 | 2017-08-23 | 株式会社東芝 | 3次元データの処理装置、その処理方法及びその処理プログラム |
| US9315192B1 (en) * | 2013-09-30 | 2016-04-19 | Google Inc. | Methods and systems for pedestrian avoidance using LIDAR |
| JP6354556B2 (ja) * | 2014-12-10 | 2018-07-11 | 株式会社デンソー | 位置推定装置、位置推定方法、位置推定プログラム |
| JP2016151565A (ja) * | 2015-02-19 | 2016-08-22 | 富士通株式会社 | レーザ測距装置及びレーザ測距方法 |
| WO2017079341A2 (en) * | 2015-11-04 | 2017-05-11 | Zoox, Inc. | Automated extraction of semantic information to enhance incremental mapping modifications for robotic vehicles |
| US9612123B1 (en) * | 2015-11-04 | 2017-04-04 | Zoox, Inc. | Adaptive mapping to navigate autonomous vehicles responsive to physical environment changes |
| CN108603758A (zh) | 2015-11-30 | 2018-09-28 | 卢米诺技术公司 | 具有分布式激光器和多个传感器头的激光雷达系统和激光雷达系统的脉冲激光器 |
| JP6658001B2 (ja) * | 2016-01-27 | 2020-03-04 | 株式会社リコー | 位置推定装置、プログラム、位置推定方法 |
| JP2017138813A (ja) | 2016-02-04 | 2017-08-10 | 三菱電機株式会社 | 保全点検システム、保全点検携帯端末および保全点検作業支援方法 |
| JP6938846B2 (ja) | 2016-03-14 | 2021-09-22 | 株式会社デンソー | 物体認識装置 |
| JP7149256B2 (ja) * | 2016-03-19 | 2022-10-06 | ベロダイン ライダー ユーエスエー,インコーポレイテッド | Lidarに基づく3次元撮像のための統合された照射及び検出 |
| WO2017176901A1 (en) * | 2016-04-07 | 2017-10-12 | Arizona Board Of Regents On Behalf Of The University Of Arizona | Diffraction-based light beam scanner |
| US10761195B2 (en) * | 2016-04-22 | 2020-09-01 | OPSYS Tech Ltd. | Multi-wavelength LIDAR system |
| EP3324209A1 (en) | 2016-11-18 | 2018-05-23 | Dibotics | Methods and systems for vehicle environment map generation and updating |
| US20180284246A1 (en) * | 2017-03-31 | 2018-10-04 | Luminar Technologies, Inc. | Using Acoustic Signals to Modify Operation of a Lidar System |
| CN107179086B (zh) * | 2017-05-24 | 2020-04-24 | 北京数字绿土科技有限公司 | 一种基于激光雷达的制图方法、装置及系统 |
| US10163017B2 (en) * | 2017-09-01 | 2018-12-25 | GM Global Technology Operations LLC | Systems and methods for vehicle signal light detection |
| US11789449B2 (en) * | 2018-02-09 | 2023-10-17 | Nvidia Corporation | Controlling autonomous vehicles using safe arrival times |
| US11698445B2 (en) * | 2018-09-04 | 2023-07-11 | GM Global Technology Operations LLC | Automotive Lidar with multi-spectral depth imaging and discrete scanning mechanism |
| US12204050B2 (en) * | 2018-09-14 | 2025-01-21 | Magna Electronics, Llc | Scanning assembly for a detection system |
| US11079546B2 (en) * | 2019-04-22 | 2021-08-03 | Blackmore Sensors & Analytics, LLC. | Providing spatial displacement of transmit and receive modes in LIDAR system |
| US10948598B1 (en) * | 2020-11-25 | 2021-03-16 | Aeva, Inc. | Coherent LiDAR system utilizing polarization-diverse architecture |
-
2019
- 2019-03-19 CA CA3093512A patent/CA3093512A1/en active Pending
- 2019-03-19 CA CA3093503A patent/CA3093503A1/en active Pending
- 2019-03-19 JP JP2020551417A patent/JP2021518560A/ja not_active Ceased
- 2019-03-19 WO PCT/EP2019/056843 patent/WO2019180021A1/en not_active Ceased
- 2019-03-19 US US16/981,844 patent/US11994466B2/en active Active
- 2019-03-19 EP EP19712956.2A patent/EP3769113A1/en active Pending
- 2019-03-19 CA CA3094264A patent/CA3094264A1/en active Pending
- 2019-03-19 US US16/981,820 patent/US20210117702A1/en not_active Abandoned
- 2019-03-19 US US16/981,795 patent/US12000781B2/en active Active
- 2019-03-19 EP EP19713398.6A patent/EP3769115B1/en active Active
- 2019-03-19 WO PCT/EP2019/056842 patent/WO2019180020A1/en not_active Ceased
- 2019-03-19 JP JP2020551259A patent/JP2021518557A/ja active Pending
- 2019-03-19 ES ES19713398T patent/ES3022993T3/es active Active
- 2019-03-19 EP EP19713397.8A patent/EP3769114A1/en not_active Withdrawn
- 2019-03-19 WO PCT/EP2019/056841 patent/WO2019180019A1/en not_active Ceased
- 2019-03-19 JP JP2020551260A patent/JP2021518558A/ja active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014095630A (ja) * | 2012-11-09 | 2014-05-22 | Denso Corp | レーダ装置 |
| US20160084945A1 (en) * | 2013-05-06 | 2016-03-24 | Danmarks Tekniske Universitet | Coaxial direct-detection lidar-system |
| WO2019017244A1 (ja) * | 2017-07-18 | 2019-01-24 | パイオニア株式会社 | 光学装置 |
Non-Patent Citations (2)
| Title |
|---|
| HAKALA, TEEMU 外3名: ""Full waveform hyperspectral LiDAR for terrestrial laser scanning"", OPTICS EXPRESS, vol. Volume 20, Issue 7, JPN6022033556, 13 March 2012 (2012-03-13), pages 7119 - 7127, ISSN: 0004849765 * |
| MARTINEZ‐RAMIREZ, DANIEL 外7名: ""Developing Hyperspectral LiDAR for Structural and Biochemical Analysis of Forest Data"", 32ND EUROPEAN ASSOCIATION OF REMOTE SENSING LABORATORIES SYMPOSIUM (EARSEL 2012) ADVANCES IN GEOSCIE, JPN6022033552, 2013, pages 333 - 343, ISSN: 0004849764 * |
Also Published As
| Publication number | Publication date |
|---|---|
| ES3022993T3 (en) | 2025-05-29 |
| US11994466B2 (en) | 2024-05-28 |
| JP2021518558A (ja) | 2021-08-02 |
| US20210033533A1 (en) | 2021-02-04 |
| CA3093503A1 (en) | 2019-09-26 |
| EP3769114A1 (en) | 2021-01-27 |
| US12000781B2 (en) | 2024-06-04 |
| CA3094264A1 (en) | 2019-09-26 |
| WO2019180021A1 (en) | 2019-09-26 |
| EP3769113A1 (en) | 2021-01-27 |
| WO2019180020A1 (en) | 2019-09-26 |
| US20210117702A1 (en) | 2021-04-22 |
| JP2021518557A (ja) | 2021-08-02 |
| EP3769115B1 (en) | 2025-01-29 |
| US20210041537A1 (en) | 2021-02-11 |
| CA3093512A1 (en) | 2019-09-26 |
| WO2019180019A1 (en) | 2019-09-26 |
| EP3769115C0 (en) | 2025-01-29 |
| EP3769115A1 (en) | 2021-01-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2021518560A (ja) | マルチスペクトルLiDARトランシーバ | |
| JP6956964B2 (ja) | 光偏向デバイスおよびライダー装置 | |
| US11940538B2 (en) | Spatial profiling system and method | |
| US20240027588A1 (en) | Multi-wavelength pulse steering in lidar systems | |
| US20170261612A1 (en) | Optical distance measuring system and light ranging method | |
| US11047959B2 (en) | Apparatus and method for generating multiple-wavelength distributed continuous wave and pulse optical transmission signal | |
| CN109477896B (zh) | 用于感测扫描场的光学系统 | |
| JP2018520346A (ja) | ビート信号帯域幅圧縮方法、装置および適用 | |
| DE102014109240A1 (de) | Laserradarsystem | |
| CN212515027U (zh) | 一种阵列式相干测距芯片及其系统 | |
| CN116794635A (zh) | 一种具有抗干扰功能的激光雷达系统及其控制方法 | |
| CN116009017B (zh) | 一种基于光谱时空双编码的非视域成像系统与方法 | |
| US12235438B2 (en) | MEMS wavelength selectable switch for adaptive wavelength filtering | |
| US20220357431A1 (en) | Detection and ranging systems employing optical waveguides | |
| US11914076B2 (en) | Solid state pulse steering in LiDAR systems | |
| CN111060890B (zh) | 激光雷达设备 | |
| JP2022525658A (ja) | ホログラフィック結像光学系を有するライダーシステム | |
| US12313883B2 (en) | Photonic beam steering device with wavelength sweep | |
| TWI858694B (zh) | 光達系統及其解析度提升方法 | |
| KR20250139559A (ko) | 선택적 고분산 분광 영상 기법 | |
| CN121008291A (zh) | 利用多波束合成的非相干光远距离三维成像装置 | |
| CN120065244A (zh) | 激光雷达系统 | |
| JP2023071068A (ja) | 光干渉装置 | |
| CN117665764A (zh) | 多波长的扫描装置、发射模块和激光雷达 | |
| WO2019172166A1 (ja) | 走査装置及び測距装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210924 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220729 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220816 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220909 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220927 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20221026 |
|
| A045 | Written measure of dismissal of application [lapsed due to lack of payment] |
Free format text: JAPANESE INTERMEDIATE CODE: A045 Effective date: 20230131 |