[go: up one dir, main page]

JP2018159705A - 自動光学検査システム及びその操作方法 - Google Patents

自動光学検査システム及びその操作方法 Download PDF

Info

Publication number
JP2018159705A
JP2018159705A JP2018052039A JP2018052039A JP2018159705A JP 2018159705 A JP2018159705 A JP 2018159705A JP 2018052039 A JP2018052039 A JP 2018052039A JP 2018052039 A JP2018052039 A JP 2018052039A JP 2018159705 A JP2018159705 A JP 2018159705A
Authority
JP
Japan
Prior art keywords
optical inspection
automatic optical
defect area
dut
inspection apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018052039A
Other languages
English (en)
Inventor
クアンフ ウン
Kuang-Pu Wen
クアンフ ウン
ウェンミン ウー
Wen-Ming Wu
ウェンミン ウー
チェンイェン ウアン
Chun-Yen Huang
チェンイェン ウアン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Test Res Inc
Original Assignee
Test Res Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Test Res Inc filed Critical Test Res Inc
Publication of JP2018159705A publication Critical patent/JP2018159705A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/0008Industrial image inspection checking presence/absence
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B07SEPARATING SOLIDS FROM SOLIDS; SORTING
    • B07CPOSTAL SORTING; SORTING INDIVIDUAL ARTICLES, OR BULK MATERIAL FIT TO BE SORTED PIECE-MEAL, e.g. BY PICKING
    • B07C5/00Sorting according to a characteristic or feature of the articles or material being sorted, e.g. by control effected by devices which detect or measure such characteristic or feature; Sorting by manually actuated devices, e.g. switches
    • B07C5/34Sorting according to other particular properties
    • B07C5/342Sorting according to other particular properties according to optical properties, e.g. colour
    • B07C5/3422Sorting according to other particular properties according to optical properties, e.g. colour using video scanning devices, e.g. TV-cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/89Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles
    • G01N21/892Investigating the presence of flaws or contamination in moving material, e.g. running paper or textiles characterised by the flaw, defect or object feature examined
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/956Inspecting patterns on the surface of objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N2021/845Objects on a conveyor
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8854Grading and classifying of flaws
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8854Grading and classifying of flaws
    • G01N2021/8867Grading and classifying of flaws using sequentially two or more inspection runs, e.g. coarse and fine, or detecting then analysing
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N2021/9513Liquid crystal panels
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/956Inspecting patterns on the surface of objects
    • G01N2021/95638Inspecting patterns on the surface of objects for PCB's
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/9501Semiconductor wafers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/04Batch operation; multisample devices
    • G01N2201/0484Computer controlled
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30141Printed circuit board [PCB]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30148Semiconductor; IC; Wafer

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Biochemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Theoretical Computer Science (AREA)
  • Textile Engineering (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

【課題】自動光学検査システムを提供する。【解決手段】第1の解像度によって被試験物を検査して、被試験物に可能性のある欠陥領域があるかを検査する第1の自動光学検査装置と、第1の自動光学検査装置に電気的に接続され、第1の解像度よりも高い第2の解像度によって、可能性のある欠陥領域内だけで検査をして、被試験物において可能性のある欠陥領域内で如何なる欠陥があるかを検査する第2の自動光学検査装置と、を含む自動光学検査システム。【選択図】図1

Description

本発明は、装置及び方法に関し、特に、自動光学検査システム及びその操作方法に関する。
自動検査の分野では、ゼロエスケープ(Zero Escape)とは、仕様に適合しない製品内の全ての不良品が検出されたことを指し、ゼロフォールスコール(Zero False Call)とは、検出された不良品に実際の仕様に適合する良品がないことを指す。単一の検査構造における「ゼロエスケープ」と「ゼロフォールスコール」との競合の原因で、従来の単一機械の単一仕様試験は、これらの基準の両方を同時に満たすことができない。
従来の方法では、ゼロエスケープの目標を可能な限り達成させるように完全なマニュアル又はセミマニュアル(マシンあり)によって試験結果を検証してから、ゼロフォールスコールの目的を達成させるように検出された欠陥から正常の製品を手動で削除する。
しかしながら、手作業による検証は、予測不能性、検証不能性、非記録性及び低い再現性等の不確実性の欠点がある。これらの不安定な要因により、手作業による検証の検出プロセスは、大規模データアプリケーションのインダストリー4.0完全自動、効果的且つ効率的な生産体制のトレンドに統合されない。
本発明は、従来技術の課題を改善した自動光学検査システム及びその操作方法を提出する。
本発明の一実施例において、本発明は、第1の解像度によって被試験物を検査して、被試験物に可能性のある欠陥領域があるかを検査する第1の自動光学検査装置と、第1の自動光学検査装置に電気的に接続され、第1の解像度よりも高い第2の解像度によって、可能性のある欠陥領域内だけで検査をして、被試験物において可能性のある欠陥領域内で如何なる欠陥があるかを検査する第2の自動光学検査装置と、を含む動光学検査システムを提供する。
本発明の一実施例において、被試験物における可能性のある欠陥領域内で如何なる欠陥がある場合、被試験物は、第2の自動光学検査装置によって不良品と判定される。
本発明の一実施例において、被試験物における可能性のある欠陥領域内で如何なる欠陥もない場合、被試験物は、第2の自動光学検査装置によって良品と判定される。
本発明の一実施例において、第1の自動光学検査装置が被試験物において可能性のある欠陥領域がないと検出された場合、被試験物は、第1の自動光学検査装置によって良品と判定され、検査なしに被試験物が第2の自動光学検査装置を直接通ることを可能にする。
本発明の一実施例において、自動光学検査システムは、被試験物を第1の自動光学検査装置から第2の自動光学検査装置に輸送する輸送設備モジュールを更に含む。
本発明の一実施例において、第1の自動光学検査装置は、被試験物を支持する第1の運動装置モジュールと、第1の運動装置モジュールにおける被試験物から第1の解像度に基づく第1の画像をキャプチャする第1の光学モジュールと、第1の画像に対して算出して、被試験物における可能性のある欠陥領域を捜す第1のプロセッサーと、第2の自動光学検査装置に被試験物における可能性のある欠陥領域に関連するデータを発送するデータ伝送モジュールと、を含む。
本発明の一実施例において、第2の自動光学検査装置は、被試験物における可能性のある欠陥領域に関連するデータを接収するデータ接収モジュールと、被試験物を支持する第2の運動装置モジュールと、第2の運動装置モジュールにおける被試験物の可能性のある欠陥領域から第2の解像度に基づく第2の画像をキャプチャーする第2の光学モジュールと、第2の画像に対して算出して、被試験物において可能性のある欠陥領域内で如何なる欠陥があるかを識別する第2のプロセッサーと、を含む。
本発明の一実施例において、第1の自動光学検査装置によりキャプチャーされる被試験物の第1の画像は任意の画像フォーマットであり、第2の自動光学検査装置によりキャプチャーされる第2の画像は被試験物の可能性のある欠陥領域にある。
本発明の一実施例において、任意の画像フォーマットは、グレースケール、カラー、ハイダイナミックレンジ(High−Dynamic Range;HDR)、未加工、圧縮、1D、2D又は3Dであってもよい。
本発明の一実施例において、被試験物は、プリント回路基板、半導体ウエハ又はディスプレイパネルである。
本発明の一実施例において、本発明は、第1の自動光学検査装置を使用して第1の解像度によって被試験物を検査して、被試験物に可能性のある欠陥領域があるかを検査する工程と、第2の自動光学検査装置を使用して第1の解像度よりも高い第2の解像度によって可能性のある欠陥領域内だけで検査をして、被試験物において可能性のある欠陥領域内で如何なる欠陥があるかを検査する工程と、を含む自動光学検査システムの操作方法を提供する。
本発明の一実施例において、被試験物における可能性のある欠陥領域内で如何なる欠陥がある場合、被試験物は、第2の自動光学検査装置によって不良品と判定される。
本発明の一実施例において、被試験物における可能性のある欠陥領域内で如何なる欠陥もない場合、被試験物は、第2の自動光学検査装置によって良品と判定される。
本発明の一実施例において、第1の自動光学検査装置が被試験物において可能性のある欠陥領域がないと検出された場合、被試験物は、第1の自動光学検査装置によって良品と判定され、検査なしに被試験物が第2の自動光学検査装置を直接通ることを可能にする。
本発明の一実施例において、操作方法は、輸送設備モジュールによって被試験物を第1の自動光学検査装置から第2の自動光学検査装置に輸送する工程を更に含む。
本発明の一実施例において、第1の自動光学検査装置を使用する工程は、第1の自動光学検査装置の第1の運動装置モジュールを使用して被試験物を支持する工程と、第1の運動装置モジュールにおける被試験物から第1の解像度に基づく第1の画像をキャプチャする工程と、第1の画像に対して算出して、被試験物における可能性のある欠陥領域を捜す工程と、第2の自動光学検査装置に被試験物における可能性のある欠陥領域に関連するデータを発送する工程と、を含む。
本発明の一実施例において、第2の自動光学検査装置を使用する工程は、被試験物における可能性のある欠陥領域の関連データを接収する工程と、第2の自動光学検査装置の第2の運動装置モジュールを使用して被試験物を支持する工程と、第2の運動装置モジュールにおける被試験物の可能性のある欠陥領域から第2の解像度に基づく第2の画像をキャプチャーする工程と、第2の画像に対して算出して、被試験物における可能性のある欠陥領域内で如何なる欠陥があるかを確認する工程と、を含む。
本発明の一実施例において、第1の自動光学検査装置によりキャプチャーされる被試験物の第1の画像は任意の画像フォーマットであり、第2の自動光学検査装置によりキャプチャーされる第2の画像は被試験物の可能性のある欠陥領域にある。
本発明の一実施例において、任意の画像フォーマットは、グレースケール、カラー、ハイダイナミックレンジ(HDR)、未加工、圧縮、1D、2D又は3Dであってもよい。
本発明の一実施例において、被試験物は、プリント回路基板、半導体ウエハ又はディスプレイパネルである。
以上をまとめると、従来技術と比較して、本発明の技術的解決法は、明らかな利点及び有益な効果を有する。本発明に提供された自動光学検査システムは、「ゼロエスケープ」及び「ゼロフォールスコール」という2つの基準を有し、手動検証のコスト及び不確実性を排除する。更に、自動光学検査システムは、第1及び第2の自動光学検査機械のプロセスを、大規模データアプリケーションのインダストリー4.0構造に統合する。
以下、実施形態によって上記の説明に対して詳細に説明し、本発明の技術的解決策に対して更に説明する。
本発明の上記及び他の目的、特徴、メリット及び実施例をより分かりやすくするために、添付図面の説明は以下の通りである。
本発明の一実施例による自動光学検査システムを示す模式図である。 本発明の一実施例による第1の自動光学検査装置を示す模式図である。 本発明の一実施例による第2の自動光学検査装置を示す模式図である。 本発明の一実施例による自動光学検査システムの操作方法を示すフロー図である。
本発明の記述をより詳細化し充実させるためには、添付図面及び以下に述べられる多様な実施例を参考されたい。図面において、同じ番号は同じ又は類似な素子を示す。一方、本発明に不必要な制限を与えないよう、周知の素子やステップは、実施例に記述されていない。
実施形態や特許請求の範囲において、「電気的接続」の記載がある。これは、一般的に、ある素子が他の素子を介して別の素子に間接的に電気的に結合され、又はある素子が他の素子に寄らずに別の素子に直接電気的に接続されることを指す。
実施形態及び特許請求の範囲において、正文で冠詞に対して特別に限定されない限り、「一」と「前記」は、一般的に、単一又は複数を指すことができる。
図1は、本発明の一実施例による自動光学検査システム100を示す模式図である。図1に示すように、自動光学検査システム100は、第1の自動光学検査装置110と、第2の自動光学検査装置120と、1組の輸送装置モジュール130と、を含む。例としては、第1の自動光学検査装置110は、3Dハンダペースト検査(Solder Paste Inspection;SPI)装置又は類似な装置であってもよい。第2の自動光学検査装置120は、自動再検査装置であってもよい。前記1組の輸送装置モジュール130は、1組のロボットアーム、レール、ジグ、レールガイド車両(Rail Guided Vehicle;RGV)、自動ガイド車両(Automated Guided Vehicle;AGV)、自動輸送装置等であってもよい。
構造上、第1の自動光学検査装置110がデータを第2の自動光学検査装置120に伝送できるように、第2の自動光学検査装置120は、第1の自動光学検査装置110に電気的に接続される。なお、輸送装置モジュール130が被試験物190を第1の自動光学検査装置110から第2の自動光学検査装置120に運送できるように、1組の輸送装置モジュール130(注意:1つ又は複数、以下に説明しない)は、第1の自動光学検査装置110及び第2の自動光学検査装置120に物理的に接続される。一実施例において、被試験物190は、プリント基板であってもよい。一代替実施例において、被試験物190は、半導体ウェハ、ディスプレイパネル等であってもよい。
実際に、第1の自動光学検査装置110は、被試験物190における可能性のある欠陥領域192(注意:1つ又は複数、以下に説明しない)を検査するように、第1の解像度(例えば、比較的に低い解像度)によって被試験物190を検査する。第1の解像度が比較的に低い解像度であるので、第1のAOI装置110は、各欠陥タイプがある可能性のある欠陥領域192を快速に捜して、ゼロエスケープを実現し、また、被試験物190における可能性のある欠陥領域192がゼロフォールスコールの時に真と偽の欠陥を評価することに用いられる。例としては、真の欠陥は、例えば、様々な突起を有する導体を含み、その中で、短絡、銅飛沫、ある欠けた特徴、激しいギャップを有する導体、非局所的な不適切な幅、導体に沿って破断すること等を引き起こすものがある。
従って、第2の自動光学検査装置120は、再検査周期の時間を減少させるために、第2の解像度(例えば、比較的に高い解像度)によって被試験物190全体ではなく可能性のある欠陥領域192のみを検査する。第2の解像度が比較的に高い解像度であるので、第2の自動光学検査装置120は、可能性のある欠陥領域192内で如何なる欠陥(即ち、1つ又は複数の真の欠陥)があるかを自動且つ精確的に検査することに用いられて、手動検証がない状況で「ゼロフォールスコール」を完成させる。ある実施例において、第2の解像度が第1の解像度よりも高い。例としては、第2の解像度は2〜3umであり、第1の解像度は10umであるが、本発明はこれらに限定されない。
第2の自動光学検査装置120により、被試験物190における可能性のある欠陥領域192内で如何なる欠陥があると検査された場合、被試験物190は、第2の自動光学検査装置120によって不良品と判定される。第2の自動光学検査装置120により、被試験物190における可能性のある欠陥領域192内で如何なる欠陥もないと検査された場合、被試験物190は、第2の自動光学検査装置120によって良品と判定される。
更に、第1の自動光学検査装置110により、被試験物190において可能性のある欠陥領域192がないと検査された場合、被試験物190は、第1の自動光学検査装置110によって良品と判定され、検査なしに被試験物190が第2の自動光学検査装置120を直接通ることを可能にする。
図2は、本発明の別の実施例による第1の自動光学検査装置を示す模式図である。図2に示すように、第1の自動光学検査装置110は、第1組の運動装置モジュール210(注意:1つ又は複数、以下に説明しない)、第1組の光学モジュール220(注意:1つ又は複数、以下に説明しない)、第1組のプロセッサー230(注意:1つ又は複数、以下に説明しない)及びデータ伝送モジュール240(注意:1つ又は複数、以下に説明しない)を含む。
構造上、第1組のプロセッサー230は、第1組の運動装置モジュール210、第1組の光学モジュール220及び1組のデータ伝送モジュール240に電気的に接続される。例としては、第1組の運動装置モジュール210は、1組のロボットアーム、XYテーブル、XY平台、XYZテーブル及び1組のコンベア又は他の軸コントローラであってもよい。第1組の光学モジュール220は、1組のレンズ(例えば、1組のテレセントリックレンズ、1組の顕微鏡レンズ等)及び1組の画像センサー(例えば、1組の2D画像データセンサー、1組の3D高度データセンサー等)を含んでもよく、前記1組の2D画像データセンサーは、モノクロ画像、カラー画像、赤外線(Infrared Radiation;IR)画像等をキャプチャーすることができ、且つ前記1組の3D高度データセンサーは、レーザー画像データ、パターン、フォーカスレンジング(Depth from Focus;DFF)データ等をキャプチャーすることができる。第1組のプロセッサー230は、1組の中央処理ユニット(Central Processing Unit;CPU)、1組のマイクロコントローラ等であってもよい。データ伝送モジュール240は、第2の自動光学検査装置120と直接的又は間接的に通信する1組の有線及び/又は無線データ伝送モジュールであってもよい。
実際には、第1組の運動装置モジュール210は、被試験物190を支持し、第1組の光学モジュール220は、第1の運動装置モジュール210における被試験物190から第1の解像度に基づく第1の画像をキャプチャする。第1組のプロセッサー230は、被試験物190における可能性のある欠陥領域192を捜すように、第1の画像に対して算出する。データ伝送モジュール240は、第2の自動光学検査装置120に被試験物190における可能性のある欠陥領域192の関連データを伝送する。
図3は、本発明の一実施例による第2の自動光学検査装置を示す模式図である。図3に示すように、第2の自動光学検査装置120は、第2組の運動装置モジュール310(注意:1つ又は複数、以下に説明しない)、第2組の光学モジュール320(注意:1つ又は複数、以下に説明しない)、第2組のプロセッサー330(注意:1つ又は複数、以下に説明しない)及びデータ接収モジュール340(注意:1つ又は複数、以下に説明しない)を含む。
構造上、第2組のプロセッサー330は、第2組の運動装置モジュール310、第2組の光学モジュール320及びデータ接収モジュール340に電気的に接続される。例としては、第2組の運動装置モジュール310は、1組のロボットアーム、XYテーブル、XY平台、XYZテーブル及び1組のコンベア又は他の軸コントローラであってもよい。第2組の光学モジュール320は、1組のレンズ(例えば、1組のテレセントリックレンズ、1組の顕微鏡レンズ等)及び1組の画像センサー(例えば、1組の2D画像データセンサー、1組の3D高度データセンサー等)を含んでもよい。前記1組の2D画像データセンサーは、モノクロ画像、カラー画像、赤外線(IR)画像等をキャプチャーすることができる。且つ前記1組の3D高度データセンサーは、レーザー画像データ、パターン、フォーカスレンジング(DFF)データ等をキャプチャーすることができる。第2組のプロセッサー330は、1組の中央処理ユニット(CPU)、1組のマイクロコントローラ等であってもよい。データ接収モジュール340は、第1の自動光学検査装置110のデータ伝送モジュール240と直接的又は間接的に通信する1組の有線及び/又は無線データ接収モジュールであってもよい。
実際には、データ接収モジュール340は、被試験物190における可能性のある欠陥領域192の関連データを接収し、第2組の運動装置モジュール310は、被試験物190を支持し、第2組の光学モジュール320は、第2の運動装置モジュール310の被試験物190の可能性のある欠陥領域192から第2の解像度に基づく第2の画像をキャプチャーする。第2のプロセッサー330は、第2の画像に対して算出して、被試験物190における可能性のある欠陥領域192内で如何なる欠陥があるかを識別する。
本発明の一実施例において、第1の自動光学検査装置によりキャプチャーされる被試験物の第1の画像は任意の画像フォーマットであり、第2の自動光学検査装置によりキャプチャーされる第2の画像は被試験物の可能性のある欠陥領域にあり、任意の画像フォーマットであってもよい。本発明の別の実施例において、前記任意の画像フォーマットは、グレースケール、カラー、ハイダイナミックレンジ(HDR)、未加工、圧縮、1D、2D、3D又は他の実行可能な図面フォーマットであってもよい。
上記の自動光学検査システム100の操作方法を更に説明するために、図1〜図4を参照されたい。図4は、本発明の一実施例による自動光学検査システム100の操作方法400を示すフロー図である。操作方法400は、工程S410〜S430を含む(理解すべきなのは、本実施例に言及された工程は、その順序が特に述べられていない限り、実際の要求に応じて調整し、更に同時に又は部分的に同時に実行してもよい)。
工程S410において、第1の自動光学検査装置110を使用して第1の解像度によって被試験物190を検査して、被試験物190に可能性のある欠陥領域192があるかを検査する。具体的に、第1の自動光学検査装置110の第1の運動装置モジュール210を使用して被試験物190を支持し、第1の運動装置モジュール210における被試験物190から第1の解像度に基づく第1の画像をキャプチャし、第1の画像に対して算出して、被試験物190における可能性のある欠陥領域192を捜して、第2の自動光学検査装置120に被試験物190における可能性のある欠陥領域192の関連データを伝送する。
工程S420において、輸送設備モジュール130によって被試験物190を第1の自動光学検査装置110から第2の自動光学検査装置120に輸送する。
工程S430において、第2の自動光学検査装置120を使用して、第1の解像度よりも高い第2の解像度によって可能性のある欠陥領域192内だけで検査をして、被試験物190における可能性のある欠陥領域192内で如何なる欠陥があるかを検査する。具体的に、被試験物190における可能性のある欠陥領域192の関連データを接収し、第2の自動光学検査装置120の第2の運動装置モジュール310を使用して被試験物190を支持し、第2の運動装置モジュール310における被試験物190の可能性のある欠陥領域192から第2の解像度に基づく第2の画像をキャプチャーして、第2の画像に対して算出して、被試験物190における可能性のある欠陥領域192内で如何なる欠陥があるかを識別する。
操作方法400において、被試験物190における可能性のある欠陥領域192内で如何なる欠陥がある場合、被試験物190は、第2の自動光学検査装置120によって不良品と判定される。
操作方法400において、被試験物190における可能性のある欠陥領域192内で如何なる欠陥もない場合、被試験物190は、第2の自動光学検査装置120によって良品と判定される。
操作方法400において、第1の自動光学検査装置110が被試験物190において可能性のある欠陥領域がないと検査された場合、被試験物190は、第1の自動光学検査装置110によって良品と判定され、検査なしに被試験物190が第2の自動光学検査装置120を直接通ることを可能にする。
以上をまとめると、本発明は、提供される自動光学検査システム100に「ゼロエスケープ」及び「ゼロフォールスコール」という2つの基準を兼ねさせて、手動検証のコスト及び不確実性を排除する。更に、自動光学検査システムは、第1の自動光学検査装置110と第2の自動光学検査装置120のプロセスを、大規模データアプリケーションのインダストリー4.0構造に統合する。
本発明の実施形態を前述の通りに開示したが、これは、本発明を限定するものではなく、当業者であれば、本発明の精神や範囲から逸脱しない限り、多様の変更や修飾を加えてもよく、従って、本発明の保護範囲は、後の特許請求の範囲で指定した内容を基準とするものである。
下記添付符号の説明は、本発明の前記又は他の目的、特徴、メリット、実施例をより分かりやすくするためのものである。
100 自動光学検査システム
110 第1の自動光学検査装置
120 第2の自動光学検査装置
130 輸送装置モジュール
190 被試験物
192 可能性のある欠陥領域
210 第1組の運動装置モジュール
220 第1組の光学モジュール
230 第1組のプロセッサー
240 データ伝送モジュール
310 第2組の運動装置モジュール
320 第2組の光学モジュール
330 第2組のプロセッサー
340 データ接収モジュール
400 操作方法
S410〜S430 工程

Claims (20)

  1. 第1の解像度によって被試験物を検査して、前記被試験物に可能性のある欠陥領域があるかを検査する第1の自動光学検査装置と、
    前記第1の自動光学検査装置に電気的に接続され、前記第1の解像度よりも高い第2の解像度によって前記可能性のある欠陥領域内だけで検査をして、前記被試験物において前記可能性のある欠陥領域内で如何なる欠陥があるかを検査する第2の自動光学検査装置と、
    を含むものであることを特徴とする自動光学検査(AOI)システム。
  2. 前記被試験物の前記可能性のある欠陥領域内で前記如何なる欠陥がある場合、前記被試験物は、前記第2の自動光学検査装置によって不良品と判定されることを特徴とする請求項1に記載の自動光学検査システム。
  3. 前記被試験物の前記可能性のある欠陥領域内で前記如何なる欠陥もない場合、前記被試験物は、前記第2の自動光学検査装置によって良品と判定されることを特徴とする請求項1に記載の自動光学検査システム。
  4. 前記第1の自動光学検査装置が前記被試験物において前記可能性のある欠陥領域がないと検出された場合、前記被試験物は、前記第1の自動光学検査装置によって良品と判定され、検査なしに前記被試験物が前記第2の自動光学検査装置を直接通ることを可能にすることを特徴とする請求項1に記載の自動光学検査システム。
  5. 前記被試験物を前記第1の自動光学検査装置から前記第2の自動光学検査装置に輸送する輸送設備モジュールを更に含むものであることを特徴とする請求項1に記載の自動光学検査システム。
  6. 前記第1の自動光学検査装置は、
    前記被試験物を支持する第1の運動装置モジュールと、
    前記第1の運動装置モジュールにおける前記被試験物から前記第1の解像度に基づく第1の画像をキャプチャする第1の光学モジュールと、
    前記第1の画像に対して算出して、前記被試験物における前記可能性のある欠陥領域を捜す第1のプロセッサーと、
    前記第2の自動光学検査装置に前記被試験物における前記可能性のある欠陥領域に関連するデータを発送するデータ伝送モジュールと、
    を含むものであることを特徴とする請求項1に記載の自動光学検査システム。
  7. 前記第2の自動光学検査装置は、
    前記被試験物における前記可能性のある欠陥領域に関連する前記データを接収するデータ接収モジュールと、
    前記被試験物を支持する第2の運動装置モジュールと、
    前記第2の運動装置モジュールにおける前記被試験物の前記可能性のある欠陥領域から前記第2の解像度に基づく第2の画像をキャプチャーする第2の光学モジュールと、
    前記第2の画像に対して算出して、前記被試験物において前記可能性のある欠陥領域内で前記如何なる欠陥があるかを識別する第2のプロセッサーと、
    を含むものであることを特徴とする請求項6に記載の自動光学検査システム。
  8. 前記第1の自動光学検査装置によりキャプチャーされる前記被試験物の前記第1の画像は任意の画像フォーマットであり、前記第2の自動光学検査装置によりキャプチャーされる前記第2の画像は前記被試験物の前記可能性のある欠陥領域にあることを特徴とする請求項7に記載の自動光学検査システム。
  9. 前記任意の画像フォーマットは、グレースケール、カラー、ハイダイナミックレンジ(HDR)、未加工、圧縮、1D、2D又は3Dのいずれかであることを特徴とする請求項8に記載の自動光学検査システム。
  10. 前記被試験物は、プリント回路基板、半導体ウエハ又はディスプレイパネルのいずれかであることを特徴とする請求項1に記載の自動光学検査システム。
  11. 第1の自動光学検査装置及び第2の自動光学検査装置を含む自動光学検査システムの操作方法であって、
    前記第1の自動光学検査装置を使用して第1の解像度によって被試験物を検査して、前記被試験物に可能性のある欠陥領域があるかを検査する工程と、
    前記第2の自動光学検査装置を使用して、前記第1の解像度よりも高い第2の解像度によって前記可能性のある欠陥領域内だけで検査をして、前記被試験物において前記可能性のある欠陥領域内で如何なる欠陥があるかを検査する工程と、
    を含むことを特徴とする自動光学検査システムの操作方法。
  12. 前記被試験物の前記可能性のある欠陥領域内で前記如何なる欠陥がある場合、前記被試験物は、前記第2の自動光学検査装置によって不良品と判定されることを特徴とする請求項11に記載の操作方法。
  13. 前記被試験物の前記可能性のある欠陥領域内で前記如何なる欠陥もない場合、前記被試験物は、前記第2の自動光学検査装置によって良品と判定されることを特徴とする請求項11に記載の操作方法。
  14. 前記第1の自動光学検査装置が前記被試験物において前記可能性のある欠陥領域がないと検出された場合、前記被試験物は、前記第1の自動光学検査装置によって良品と判定され、検査なしに前記被試験物が前記第2の自動光学検査装置を直接通ることを可能にすることを特徴とする請求項11に記載の操作方法。
  15. 輸送設備モジュールによって前記被試験物を前記第1の自動光学検査装置から前記第2の自動光学検査装置に輸送する工程を更に含むことを特徴とする請求項11に記載の操作方法。
  16. 前記第1の自動光学検査装置を使用する工程は、
    前記第1の自動光学検査装置の第1の運動装置モジュールを使用して前記被試験物を支持する工程と、
    前記第1の運動装置モジュールにおける前記被試験物から前記第1の解像度に基づく第1の画像をキャプチャする工程と、
    前記第1の画像に対して算出して、前記被試験物における前記可能性のある欠陥領域を捜す工程と、
    第2の自動光学検査装置に前記被試験物における前記可能性のある欠陥領域に関連するデータを発送する工程と、
    を含むことを特徴とする請求項11に記載の操作方法。
  17. 前記第2の自動光学検査装置を使用する工程は、
    前記被試験物における前記可能性のある欠陥領域の前記関連データを接収する工程と、
    前記第2の自動光学検査装置の第2の運動装置モジュールを使用して前記被試験物を支持する工程と、
    前記第2の運動装置モジュールにおける前記被試験物の前記可能性のある欠陥領域から前記第2の解像度に基づく第2の画像をキャプチャーする工程と、
    前記第2の画像に対して算出して、前記被試験物において前記可能性のある欠陥領域内で前記如何なる欠陥があるかを識別する工程と、
    を含むことを特徴とする請求項16に記載の操作方法。
  18. 前記第1の自動光学検査装置によりキャプチャーされる前記被試験物の前記第1の画像は任意の画像フォーマットであり、前記第2の自動光学検査装置によりキャプチャーされる前記第2の画像は前記被試験物の前記可能性のある欠陥領域にあることを特徴とする請求項17に記載の操作方法。
  19. 前記任意の画像フォーマットは、グレースケール、カラー、ハイダイナミックレンジ(HDR)、未加工、圧縮、1D、2D又は3Dのいずれかとすることを特徴とする請求項18記載の操作方法。
  20. 前記被試験物は、プリント回路基板、半導体ウエハ又はディスプレイパネルのいずれかとすることを特徴とする請求項11に記載の操作方法。
JP2018052039A 2017-03-21 2018-03-20 自動光学検査システム及びその操作方法 Pending JP2018159705A (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201762474084P 2017-03-21 2017-03-21
US62/474,084 2017-03-21
US15/726,402 2017-10-06
US15/726,402 US10438340B2 (en) 2017-03-21 2017-10-06 Automatic optical inspection system and operating method thereof

Publications (1)

Publication Number Publication Date
JP2018159705A true JP2018159705A (ja) 2018-10-11

Family

ID=63583114

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018052039A Pending JP2018159705A (ja) 2017-03-21 2018-03-20 自動光学検査システム及びその操作方法

Country Status (5)

Country Link
US (1) US10438340B2 (ja)
JP (1) JP2018159705A (ja)
KR (1) KR102102874B1 (ja)
CN (1) CN108627457B (ja)
TW (1) TWI665443B (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109499916B (zh) * 2018-11-21 2021-01-05 浙江硕和机器人科技有限公司 管接头视觉检测方法
WO2020110129A1 (en) * 2018-11-29 2020-06-04 Inspekto A.M.V Ltd Centralized analytics of multiple visual inspection appliances
IL263399B (en) * 2018-11-29 2022-09-01 Inspekto A M V Ltd Centralized analyzes of multiple devices for visual inspection of a production line
WO2020110119A1 (en) 2018-11-29 2020-06-04 Inspekto A.M.V Ltd Multi-camera visual inspection appliance and method of use
CN111366580A (zh) * 2018-12-26 2020-07-03 东莞市吉洋自动化科技有限公司 一种自动光学检测方法
EP3783448B1 (de) 2019-08-19 2025-10-22 GKN Sinter Metals Engineering GmbH Verfahren zur prüfung eines produktionsprozesses zur herstellung von bauteilen
CN112577969B (zh) * 2019-09-27 2022-07-01 南通深南电路有限公司 一种基于机器视觉的缺陷检测方法以及缺陷检测系统
TWI724590B (zh) * 2019-10-25 2021-04-11 精信精密工業股份有限公司 自動缺陷檢測系統及檢測方法
CN113075216B (zh) * 2020-01-06 2024-07-02 深圳中科飞测科技股份有限公司 检测装置及检测方法
JP6947463B1 (ja) * 2020-04-08 2021-10-13 ビーエルテック株式会社 流れ分析装置及び流れ分析方法
US12229940B2 (en) 2020-10-15 2025-02-18 Applied Materials, Inc. In-line metrology systems, apparatus, and methods for optical devices
JP7563665B2 (ja) * 2021-01-26 2024-10-08 日東電工株式会社 検査システム、検査方法及び検査プログラム
TWI752846B (zh) * 2021-03-15 2022-01-11 英業達股份有限公司 自動光學與類神經網路整合的二次檢測系統及其方法
FR3125884B1 (fr) * 2021-07-27 2024-05-31 SNCF Voyageurs Procédé pour la détection automatique de défauts sur des composants d’une carte électronique
DE102021208648A1 (de) * 2021-08-09 2023-02-09 Robert Bosch Gesellschaft mit beschränkter Haftung Prüfverfahren zur Prozessqualitätsüberprüfung und Prüfvorrichtung
KR20250002324A (ko) * 2022-11-10 2025-01-07 주식회사 고영테크놀러지 결함의 유형을 결정하기 위한 장치, 방법 및 명령을 기록한 기록 매체
US20250105065A1 (en) * 2023-09-22 2025-03-27 Orbotech Ltd. Radio frequency induced micro led inspection
CN119936016B (zh) * 2024-12-30 2025-12-02 崇辉半导体(江门)有限公司 一种多aoi设备联合检测方法、装置、设备以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1183455A (ja) * 1997-09-04 1999-03-26 Dainippon Printing Co Ltd 外観検査装置
JP2000266691A (ja) * 1999-03-16 2000-09-29 Olympus Optical Co Ltd 外観検査装置
JP2009150718A (ja) * 2007-12-19 2009-07-09 Nikon Corp 検査装置および検査プログラム
JP2014062837A (ja) * 2012-09-21 2014-04-10 Hitachi High-Technologies Corp 欠陥検査装置及び欠陥レビュー装置
JP2015075451A (ja) * 2013-10-11 2015-04-20 新日鐵住金株式会社 鋼片の検査・手入れ支援装置及び鋼片の検査・手入れ方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3490661C2 (de) * 1984-02-21 1992-02-13 Aleksandr Zamotaev Optisches Verfahren zum Fruchtsortieren nach Fruchtqualit{t und Vorrichtung zur Durchf}hrung dieses Verfahrens
US4659220A (en) 1984-10-22 1987-04-21 International Business Machines Corporation Optical inspection system for semiconductor wafers
JPS62173731A (ja) * 1986-01-28 1987-07-30 Toshiba Corp 被検査物の表面検査装置
IL99823A0 (en) * 1990-11-16 1992-08-18 Orbot Instr Ltd Optical inspection method and apparatus
WO2002021105A1 (en) * 2000-09-10 2002-03-14 Orbotech, Ltd. Reduction of false alarms in pcb inspection
JP4529365B2 (ja) * 2003-03-26 2010-08-25 株式会社ニコン 基板検査システムおよび基板検査方法
US7187436B2 (en) 2004-03-30 2007-03-06 General Electric Company Multi-resolution inspection system and method of operating same
KR100819000B1 (ko) 2006-10-02 2008-04-02 삼성전자주식회사 패턴 검사, 확인 및 수정 공정을 분리하여 진행하는포토마스크 검사 방법과 그에 사용되는 시스템들 및 패턴확인 시스템
DE102007010225B4 (de) 2007-02-28 2018-08-23 Vistec Semiconductor Systems Gmbh Verfahren zur Aufnahme von hochauflösenden Bildern von Defekten auf der Oberseite des Waferrandes
US20130113919A1 (en) * 2010-07-16 2013-05-09 3M Innovative Properties Company High resolution autofocus inspection system
JP2014044063A (ja) 2012-08-24 2014-03-13 Asahi Glass Co Ltd 板状体の欠陥検査方法及び欠陥検査装置
TWI468672B (zh) 2013-12-27 2015-01-11 Chroma Ate Inc 光學檢測裝置
CN104748856A (zh) * 2013-12-31 2015-07-01 致茂电子股份有限公司 光学检测装置
CN104792793B (zh) * 2015-04-28 2019-09-10 刘凯 光学缺陷检测方法和系统
CN105301051B (zh) * 2015-11-18 2018-01-12 北京理工大学 适用于tbc脱粘缺陷快速检测线激光扫描热波成像方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1183455A (ja) * 1997-09-04 1999-03-26 Dainippon Printing Co Ltd 外観検査装置
JP2000266691A (ja) * 1999-03-16 2000-09-29 Olympus Optical Co Ltd 外観検査装置
JP2009150718A (ja) * 2007-12-19 2009-07-09 Nikon Corp 検査装置および検査プログラム
JP2014062837A (ja) * 2012-09-21 2014-04-10 Hitachi High-Technologies Corp 欠陥検査装置及び欠陥レビュー装置
JP2015075451A (ja) * 2013-10-11 2015-04-20 新日鐵住金株式会社 鋼片の検査・手入れ支援装置及び鋼片の検査・手入れ方法

Also Published As

Publication number Publication date
KR20180106856A (ko) 2018-10-01
US20180276811A1 (en) 2018-09-27
US10438340B2 (en) 2019-10-08
CN108627457A (zh) 2018-10-09
KR102102874B1 (ko) 2020-04-23
TWI665443B (zh) 2019-07-11
TW201835557A (zh) 2018-10-01
CN108627457B (zh) 2021-06-11

Similar Documents

Publication Publication Date Title
JP2018159705A (ja) 自動光学検査システム及びその操作方法
KR101590831B1 (ko) 기판의 이물질 검사방법
US7203355B2 (en) Automatic optical inspection system and method
JPS62173731A (ja) 被検査物の表面検査装置
CN102539441A (zh) 一种批量检验电路板上元器件焊接正确性的检验方法
JP6092602B2 (ja) 欠陥検査装置及び欠陥検査方法
KR101802843B1 (ko) 자동 비전 검사 시스템
JP2011180058A (ja) 半田印刷検査装置及び半田印刷システム
KR101522312B1 (ko) Pcb 제품 검사 장치 및 이를 이용한 pcb 제품 검사 방법
WO2015118997A1 (ja) 品質管理システム
JP3806461B2 (ja) 物品外観検査装置
JP2017015482A (ja) 電子部品搬送装置および電子部品検査装置
CN106526448A (zh) 一种电源驱动板自动检测系统和检测方法
JP3770484B2 (ja) 電池に取付けた端子の検査方法
JP2015094589A (ja) 外観検査装置
JP5758474B2 (ja) 半導体パッケージテスト用着座姿勢判定装置
KR20140031687A (ko) 기판 표면 검사 시스템 및 검사 방법
JP6759809B2 (ja) 電子部品搬送装置及び電子部品検査装置
JP6917959B2 (ja) 電子部品の検査装置および電子部品の検査方法
KR102410920B1 (ko) 인쇄회로기판의 회수 방법 및 이에 적합한 스캔검사장치
JP2017015481A (ja) 電子部品搬送装置および電子部品検査装置
JP2010217117A (ja) 欠陥検査装置及び欠陥検査方法
TW201546441A (zh) 電腦視覺辨識輸出圖像輔助積體電路挑選系統及挑選方法
WO2024009643A1 (ja) プレス機
CN116413279A (zh) 被动元件检测设备及方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180320

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190603

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20191008