[go: up one dir, main page]

KR101274260B1 - Apparatus of acquiring fingerprint image and method of acquiring fingerprint image - Google Patents

Apparatus of acquiring fingerprint image and method of acquiring fingerprint image Download PDF

Info

Publication number
KR101274260B1
KR101274260B1 KR1020130014154A KR20130014154A KR101274260B1 KR 101274260 B1 KR101274260 B1 KR 101274260B1 KR 1020130014154 A KR1020130014154 A KR 1020130014154A KR 20130014154 A KR20130014154 A KR 20130014154A KR 101274260 B1 KR101274260 B1 KR 101274260B1
Authority
KR
South Korea
Prior art keywords
fingerprint image
suitability
image
ridge
sample inspection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020130014154A
Other languages
Korean (ko)
Inventor
이상훈
이택기
김희대
Original Assignee
인테그레이티드에너지 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인테그레이티드에너지 주식회사 filed Critical 인테그레이티드에너지 주식회사
Priority to KR1020130014154A priority Critical patent/KR101274260B1/en
Application granted granted Critical
Publication of KR101274260B1 publication Critical patent/KR101274260B1/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/13Sensors therefor
    • G06V40/1312Sensors therefor direct reading, e.g. contactless acquisition
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1347Preprocessing; Feature extraction
    • G06V40/1359Extracting features related to ridge properties; Determining the fingerprint type, e.g. whorl or loop
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • G06V40/1376Matching features related to ridge properties or fingerprint texture
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • G06F2218/02Preprocessing

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Input (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

비접촉식 지문 영상 획득 장치는 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하는 지문 이미지 획득부 및 상기 적어도 하나의 표본 검사 이미지가 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 지문 이미지 적합성 판단부를 포함한다. The non-contact fingerprint image acquisition device includes a fingerprint image acquisition unit for obtaining a fingerprint image including at least one specimen inspection image through at least one window disposed in a virtual user's finger, and the fingerprint image from which the at least one specimen inspection image is obtained. It includes a fingerprint image suitability determination unit for checking whether or not the suitability of the.

Description

비접촉식 지문 영상 획득 장치 및 방법{APPARATUS OF ACQUIRING FINGERPRINT IMAGE AND METHOD OF ACQUIRING FINGERPRINT IMAGE}Non-contact fingerprint image acquisition device and method {APPARATUS OF ACQUIRING FINGERPRINT IMAGE AND METHOD OF ACQUIRING FINGERPRINT IMAGE}

본 발명은 비접촉식 지문 영상 획득 기술에 관한 것으로, 보다 상세하게는, 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하고, 획득된 적어도 하나의 표본 검사 이미지를 통하여 지문 이미지의 적합성 여부를 체크함으로써, 지문 이미지의 일부에 대한 초점 및 품질 중 적어도 하나의 검사 과정을 통하여 전체 지문 이미지의 적합 여부를 결정하여 빠른 처리 속도로 고품질의 지문 이미지를 획득할 수 있는 비접촉식 지문 영상 획득 장치 및 방법에 관한 것이다.
The present invention relates to a non-contact fingerprint image acquisition technology, and more particularly, to obtain a fingerprint image including at least one sample inspection image through at least one window disposed in the virtual user finger, and obtained at least one sample By checking the suitability of the fingerprint image through the inspection image, it is possible to determine the suitability of the entire fingerprint image through at least one inspection process of focus and quality of a portion of the fingerprint image to obtain a high quality fingerprint image at a high processing speed. The present invention relates to a non-contact fingerprint image acquisition device and method.

일반적으로, 지문 인식 시스템은 다른 생체 인식 시스템과 비교하여 가격 및 성능 측면에서 우수하여 널리 사용되고 있으며, 지문 인식 시스템에 적용되는 기술은 크게 접촉식 및 비접촉식 지문 인식 기술로 구분될 수 있다. In general, the fingerprint recognition system is widely used because it is superior in price and performance compared to other biometric systems, and the technology applied to the fingerprint recognition system can be largely classified into a contact and a contactless fingerprint recognition technology.

여기에서, 접촉식 지문 인식 기술은 사용자의 손가락을 평판 접촉식 센서에 접촉시켜야 하므로 사용자에게 거부감을 느끼게 할 수 있다. 특히, 접촉식 지문 인식 기술은 접촉시 센서에 가해지는 압력, 손가락의 움직임 및 사용자의 피부 상태에 따라 발생될 수 있는 지문 이미지의 왜곡으로 인하여 지문 인식의 성능이 저하될 수 있다. In this case, the contact fingerprint recognition technology may cause the user to feel rejection because the user's finger needs to be in contact with the flat panel touch sensor. In particular, the contact fingerprint recognition technology may deteriorate the performance of the fingerprint recognition due to distortion of the fingerprint image, which may be generated according to pressure applied to the sensor upon contact, finger movement, and skin condition of the user.

이러한 문제점을 극복하기 위한 다양한 비접촉식 지문 인식 기술들이 제공되고 있다. 하기의 선행 기술들은 이와 관련된 기술을 제공한다. Various contactless fingerprint recognition techniques have been provided to overcome this problem. The following prior art provides techniques related to this.

한국등록특허 제10-0895274호는 비접촉식 지문 영상 획득 기술에 관한 것으로, 보다 구체적으로, 사용자의 손가락 떨림 및 상하 좌우의 움직임을 방지하도록 사용자의 손가락이 삽입되어 지지되는 손가락 지지대, 상기 손가락 지지대에 지지되는 손가락의 하부에 일정 간격만큼 떨어져 고정된 상태에서 손가락의 회전량에 따른 연속 지문 영상을 촬영하는 1대의 카메라, 상기 손가락 지지대에 지지되는 손가락과 상기 카메라 사이에 설치되어 사용자의 지문 영역에 빛을 조사하는 조명 장치, 상기 조명 장치에 의해 조사되는 빛이 손가락에 고르게 퍼지면서 분포되게 하는 산광기, 상기 손가락 지지대에 삽입된 손가락의 회전 시 그 회전량을 측정하는 손가락 회전 감지 수단 및 상기 카메라를 작동시켜 상기 손가락 지지대에 삽입된 손가락 지문 영상을 촬영하게 하며, 상기 손가락 회전량 감지 수단에 의해 측정되는 손가락의 회전량에 따라 상기 카메라의 촬영 시점을 제어하는 컨트롤러를 포함하는 비접촉식 연속 지문 영상 획득 장치에 관한 것이다. Korean Patent No. 10-0895274 relates to a non-contact fingerprint image acquisition technology, and more specifically, a finger support in which a user's finger is inserted and supported so as to prevent a user's finger trembling and movement in up, down, left and right, and supported by the finger support. One camera for taking a continuous fingerprint image according to the amount of rotation of the finger in a state fixed to the lower portion of the finger to be fixed, installed between the finger and the camera supported by the finger support and light to the user's fingerprint area A lighting device for illuminating, a light diffuser for distributing the light emitted by the lighting device evenly on the finger, a finger rotation detecting means for measuring the amount of rotation of the finger inserted into the finger support, and operating the camera The fingerprint image inserted into the finger support The present invention relates to a non-contact continuous fingerprint image acquisition device including a controller for controlling a photographing time point of the camera according to a rotation amount of a finger measured by the finger rotation amount sensing means.

한국등록특허 제10-0604267호는 비접촉식 지문 영상 검출 기술에 관한 것으로, 보다 구체적으로, 사용자의 손가락이 상기 촬영장치의 촬영 영역에 접근여부를 감지하는 활성화센서와, 상기 활성화센서에 의하여 지문영상 검출장치가 활성화됨에 따라 상기 사용자 지문영역에 단파장대의 빛을 조사하는 조명부와, 상기 지문영역의 영상을 단파장대의 빛만 투과시켜 상기 촬영장치로 입사시키는 단파장통과필터와, 상기 사용자의 손떨림을 방지함과 아울러 상기 촬영장치로의 외부광 입사를 차단하는 지지대를 포함하는 비접촉식 지문 영상 검출 장치에 관한 것이다. Korean Patent No. 10-0604267 relates to a non-contact fingerprint image detection technology, and more particularly, an activation sensor for detecting whether a user's finger approaches a photographing area of the photographing apparatus, and a fingerprint image detection by the activation sensor. As the device is activated, an illumination unit for irradiating light of the short wavelength band to the user fingerprint region, a short-wave pass filter for transmitting the image of the fingerprint region only to the short wavelength band and incident to the photographing apparatus, and to prevent the shaking of the user It relates to a non-contact fingerprint image detection device comprising a support for blocking the incident light to the imaging device.

상기 선행 기술들은 상기 문제점을 해결하기 위하여 연속 지문 영상을 촬영하고 합성하는 구성, 2중 구조를 가지는 조명 구성 및 단파장대의 빛을 투과시키는 구성을 개시하고 있다. In order to solve the above problems, the prior art discloses a configuration of photographing and synthesizing a continuous fingerprint image, an illumination configuration having a double structure, and a configuration of transmitting light of a short wavelength band.

이러한 상황에서, 비접촉식 지문 인식 기술은 촬영 장치(예를 들어, 카메라)를 통하여 지문 이미지를 획득하므로, 상기 선행 기술들이 제공한 구성들을 활용하더라도 사용자의 손가락에 대한 초점이 정확하지 않으면 뚜렷한 융선이 포함된 지문 이미지를 획득할 수 없다. 구체적으로, 촬영 장치에서 지원하는 자동 초점 기능을 활용하는 경우, 초점을 조정하는데 걸리는 시간(약 1s)이 이미지 획득 시간(약 40ms)보다 길어 전처리 과정을 통하여 획득된 지문 이미지는 사용자의 융선을 선명하게 나타내지 못한다.
In this situation, the non-contact fingerprint recognition technology acquires a fingerprint image through a photographing device (eg, a camera), so that even if the focus of the user's finger is not correct even if the configurations provided by the prior arts are included, a distinct ridge is included. A fingerprint image cannot be obtained. Specifically, when the auto focus function supported by the photographing apparatus is used, the time required to adjust the focus (about 1 s) is longer than the image acquisition time (about 40 ms), so that the fingerprint image obtained through the preprocessing process sharpens the ridge of the user. It is not shown.

한국등록특허 제10-0895274호Korean Patent Registration No. 10-0895274 한국등록특허 제10-0604267호Korea Patent Registration No. 10-0604267

본 발명은 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하고, 획득된 적어도 하나의 표본 검사 이미지들을 통하여 지문 이미지의 적합성 여부를 체크함으로써, 지문 이미지의 일부에 대한 초점 및 품질 중 적어도 하나의 검사 과정을 통하여 전체 지문 이미지의 적합 여부를 결정하여 자동 초점 조정의 처리 속도가 느린 촬영 장치를 사용하더라도 빠른 처리 속도로 고품질의 지문 이미지를 획득하였는지 여부를 결정할 수 있는 비접촉식 지문 영상 획득 장치 및 방법을 제공하고자 한다. The present invention obtains a fingerprint image including at least one sample inspection image through at least one window disposed in the virtual user's finger, and checks the suitability of the fingerprint image through the obtained at least one sample inspection image. Determine whether the entire fingerprint image is appropriate by checking at least one of the focus and quality of a part of the image, and whether a high-quality fingerprint image was obtained at a high processing speed even when using a photographing device with a slow processing speed of auto focus. It is an object of the present invention to provide an apparatus and method for obtaining a non-contact fingerprint image.

본 발명은 적어도 하나의 표본 검사 이미지에서 융선 패턴을 추출하고, 추출된 융선 패턴을 기초로 결정된 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 지문 이미지의 적합 여부를 체크함으로써, 고품질의 지문 이미지를 획득하였는지 여부를 빠른 처리 속도로 결정할 수 있는 비접촉식 지문 영상 획득 장치 및 방법을 제공하고자 한다.
The present invention extracts a ridge pattern from at least one sample inspection image and checks whether a fingerprint image is suitable based on at least one of focus suitability and quality suitability determined based on the extracted ridge pattern, thereby providing a high quality fingerprint image. It is an object of the present invention to provide an apparatus and method for obtaining a non-contact fingerprint image, which can determine whether to obtain a fast processing speed.

실시예들 중에서, 비접촉식 지문 영상 획득 장치는 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하는 지문 이미지 획득부 및 상기 적어도 하나의 표본 검사 이미지가 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 지문 이미지 적합성 판단부를 포함한다. In example embodiments, the non-contact fingerprint image acquisition device may include a fingerprint image acquisition unit for acquiring a fingerprint image including at least one sample inspection image through at least one window disposed in a virtual user finger, and the at least one sample inspection image. And a fingerprint image suitability determination unit configured to check whether the acquired fingerprint image can be guaranteed.

일 실시예에서, 상기 적어도 하나의 윈도우에 대한 가이드 라인을 디스플레이하는 디스플레이부를 더 포함할 수 있다. The display device may further include a display unit configured to display guide lines for the at least one window.

일 실시예에서, 상기 지문 이미지 획득부는 상기 적어도 하나의 표본 검사 이미지 각각에 대하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터를 적용할 수 있다. In an embodiment, the fingerprint image acquirer may apply an image enhancement filter associated with at least one of sharpness and contrast to each of the at least one sample inspection image.

일 실시예에서, 상기 적어도 하나의 표본 검사 이미지 각각에 대한 융선 패턴을 추출하는 융선 패턴 추출부를 더 포함할 수 있다. In an embodiment, the apparatus may further include a ridge pattern extractor configured to extract a ridge pattern for each of the at least one sample inspection image.

일 실시예에서, 상기 융선 패턴 추출부는 상기 적어도 하나의 표본 검사 이미지 각각에 대하여 단위 방향 성분을 추출하여 적어도 하나의 융선을 포함하는 융선 패턴을 결정할 수 있다.The ridge pattern extracting unit may determine a ridge pattern including at least one ridge by extracting a unit direction component for each of the at least one sample inspection image.

일 실시예에서, 상기 지문 이미지 적합성 판단부는 상기 추출된 융선 패턴에 포함된 융선 영역 및 비융선 영역에 대한 대비(Contrast)를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부를 결정할 수 있다.In an example embodiment, the fingerprint image suitability determination unit may determine whether to focus on each of the at least one sample inspection image based on contrast between the ridge region and the non-ridge region included in the extracted ridge pattern. have.

일 실시예에서, 상기 지문 이미지 적합성 판단부는 상기 융선 영역의 면적 및 융선 영역 간의 간격 중 적어도 하나를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 품질 적합 여부를 결정할 수 있다.In one embodiment, the fingerprint image suitability determination unit may determine whether the quality suitability for each of the at least one sample inspection image based on at least one of the area of the ridge area and the distance between the ridge area.

일 실시예에서, 상기 지문 이미지 적합성 판단부는 상기 결정된 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 상기 획득된 지문 이미지의 적합 여부를 결정할 수 있다.The fingerprint image suitability determination unit may determine whether the acquired fingerprint image is suitable based on at least one of focus suitability and quality suitability for each of the determined at least one sample inspection image.

일 실시예에서, 상기 지문 이미지 적합성 판단부는 표본 검사 이미지가 복수 개인 경우, 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 기 설정된 갯수 이상이면 상기 획득된 지문 이미지의 적합성을 보장할 수 있는 것으로 결정할 수 있다.In an embodiment, the fingerprint image suitability determination unit may ensure suitability of the acquired fingerprint image when the number of sample inspection images satisfying the focus suitability and quality suitability is greater than or equal to a preset number when there are a plurality of sample inspection images. Can be determined.

실시예들 중에서, 비접촉식 지문 영상 획득 방법은 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하는 단계 및 상기 적어도 하나의 표본 검사 이미지가 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계를 포함한다. In embodiments, a method for obtaining a non-contact fingerprint image may include obtaining a fingerprint image including at least one sample inspection image through at least one window disposed in a virtual user finger, and wherein the at least one sample inspection image is obtained. Checking whether the suitability of the fingerprint image can be guaranteed.

일 실시예에서, 상기 지문 이미지를 획득하는 단계는 상기 적어도 하나의 윈도우에 대한 가이드 라인을 디스플레이하는 단계를 더 포함할 수 있다.In an embodiment, the acquiring of the fingerprint image may further include displaying guide lines for the at least one window.

일 실시예에서, 상기 지문 이미지를 획득하는 단계는 상기 적어도 하나의 표본 검사 이미지 각각에 대하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터를 적용하는 단계를 더 포함할 수 있다.In an embodiment, the acquiring of the fingerprint image may further include applying an image enhancement filter associated with at least one of sharpness and contrast to each of the at least one sample inspection image. .

일 실시예에서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는 상기 적어도 하나의 표본 검사 이미지 각각에 대한 융선 패턴을 추출하는 단계를 더 포함할 수 있다.In an embodiment, the checking whether the suitability of the obtained fingerprint image may be guaranteed may further include extracting a ridge pattern for each of the at least one sample inspection image.

일 실시예에서, 상기 융선 패턴을 추출하는 단계는 상기 적어도 하나의 표본 검사 이미지 각각에 대하여 단위 방향 성분을 추출하여 적어도 하나의 융선을 포함하는 융선 패턴을 결정하는 단계를 더 포함할 수 있다.In an embodiment, the extracting of the ridge pattern may further include determining a ridge pattern including at least one ridge by extracting a unit direction component for each of the at least one sample inspection image.

일 실시예에서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는 상기 추출된 융선 패턴에 포함된 융선 영역 및 비융선 영역에 대한 대비(Contrast)를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부를 결정하는 단계를 더 포함할 수 있다.In an embodiment, the checking of whether the acquired fingerprint image can be guaranteed can be performed based on the contrast of the ridge region and the non-ridge region included in the extracted ridge pattern. The method may further include determining whether to focus on each sample inspection image.

일 실시예에서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는 상기 융선 영역의 면적 및 융선 영역 간의 간격 중 적어도 하나를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 품질 적합 여부를 결정하는 단계를 더 포함할 수 있다.In one embodiment, checking whether the suitability of the acquired fingerprint image can be ensured is based on at least one of the area of the ridge area and the distance between the ridge areas, the quality of each of the at least one sample inspection image. The method may further include determining suitability.

일 실시예에서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는 상기 결정된 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 상기 획득된 지문 이미지의 적합 여부를 결정하는 단계를 더 포함할 수 있다.In one embodiment, checking whether the suitability of the obtained fingerprint image can be guaranteed can be determined based on at least one of focus suitability and quality suitability for each of the determined at least one sample inspection image. The method may further include determining whether the fingerprint image is suitable.

일 실시예에서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는 표본 검사 이미지가 복수 개인 경우, 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 기 설정된 갯수 이상이면 상기 획득된 지문 이미지의 적합성을 보장할 수 있는 것으로 결정하는 단계를 더 포함할 수 있다.
In an embodiment, the checking of whether the acquired fingerprint image may be guaranteed may be performed if the number of sample inspection images satisfying the focus suitability and quality suitability when the sample inspection image is plural. The method may further include determining that suitability of the obtained fingerprint image may be guaranteed.

본 발명의 일 실시예에 따른 비접촉식 지문 영상 획득 장치 및 방법은 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하고, 획득된 적어도 하나의 표본 검사 이미지를 통하여 지문 이미지의 적합성 여부를 체크함으로써, 지문 이미지의 일부에 대한 초점 및 품질 중 적어도 하나의 검사 과정을 통하여 전체 지문 이미지의 적합 여부를 결정하여 자동 초점 조정의 처리 속도가 느린 촬영 장치를 사용하더라도 빠른 처리 속도로 고품질의 지문 이미지를 획득하였는지 여부를 결정할 수 있다. An apparatus and method for obtaining a non-contact fingerprint image according to an embodiment of the present invention obtains a fingerprint image including at least one sample inspection image through at least one window disposed in a virtual user finger, and obtains at least one sample inspection By checking the suitability of the fingerprint image through the image, it is determined whether or not the entire fingerprint image is suitable through at least one inspection process of focus and quality of a part of the fingerprint image, so that the automatic focusing processing device is used. Even if it is possible to determine whether a high quality fingerprint image is obtained at a high processing speed.

본 발명의 일 실시예에 따른 비접촉식 지문 영상 획득 장치 및 방법은 적어도 하나의 표본 검사 이미지에서 융선 패턴을 추출하고, 추출된 융선 패턴을 기초로 결정된 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 지문 이미지의 적합 여부를 체크함으로써, 고품질의 지문 이미지를 획득하였는지 여부를 빠른 처리 속도로 결정할 수 있다.
The apparatus and method for obtaining a non-contact fingerprint image according to an embodiment of the present invention extracts a ridge pattern from at least one sample inspection image and based on at least one of focus fit and quality fit determined based on the extracted ridge pattern. By checking the suitability of the fingerprint image, it is possible to determine whether a high quality fingerprint image has been obtained at a high processing speed.

도 1은 본 발명의 일 실시예에 따른 비접촉식 지문 영상 획득 시스템을 설명하는 도면이다.
도 2는 도 1에 있는 비접촉식 지문 영상 획득 장치를 설명하는 블록도이다.
도 3은 비접촉식 지문 영상 획득 장치에서 수행되는 비접촉식 지문 영상 획득 과정을 설명하는 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 비접촉식 지문 영상 획득 장치에서 수행되는 비접촉식 지문 영상 획득 과정을 설명하는 흐름도이다.
도 5는 본 발명에 따른 비접촉식 지문 영상 획득 과정을 설명하기 위한 도면이다.
도 6은 본 발명의 일 실시예에 따른 윈도우에 대한 가이드 라인을 예시한 도면이다.
도 7은 본 발명의 일 실시예에 따른 표본 검사 이미지를 설명하기 위한 도면이다.
1 is a view for explaining a non-contact fingerprint image acquisition system according to an embodiment of the present invention.
FIG. 2 is a block diagram illustrating an apparatus for obtaining a contactless fingerprint image of FIG. 1.
3 is a flowchart illustrating a process of obtaining a contactless fingerprint image performed by the apparatus for obtaining a contactless fingerprint image.
4 is a flowchart illustrating a process of obtaining a contactless fingerprint image performed by the apparatus for obtaining a contactless fingerprint image according to an embodiment of the present invention.
5 is a view for explaining a non-contact fingerprint image acquisition process according to the present invention.
6 is a diagram illustrating a guideline for a window according to an embodiment of the present invention.
7 is a view for explaining a sample inspection image according to an embodiment of the present invention.

본 발명에 관한 설명은 구조적 내지 기능적 설명을 위한 실시예에 불과하므로, 본 발명의 권리범위는 본문에 설명된 실시예에 의하여 제한되는 것으로 해석되어서는 아니 된다. 즉, 실시예는 다양한 변경이 가능하고 여러 가지 형태를 가질 수 있으므로 본 발명의 권리범위는 기술적 사상을 실현할 수 있는 균등물들을 포함하는 것으로 이해되어야 한다. 또한, 본 발명에서 제시된 목적 또는 효과는 특정 실시예가 이를 전부 포함하여야 한다거나 그러한 효과만을 포함하여야 한다는 의미는 아니므로, 본 발명의 권리범위는 이에 의하여 제한되는 것으로 이해되어서는 아니 될 것이다.Description of the present invention is only an embodiment for structural or functional description, the scope of the present invention should not be construed as limited by the embodiments described in the text. That is, the embodiments are to be construed as being variously embodied and having various forms, so that the scope of the present invention should be understood to include equivalents capable of realizing technical ideas. Also, the purpose or effect of the present invention should not be construed as limiting the scope of the present invention, since it does not mean that a specific embodiment should include all or only such effect.

한편, 본 출원에서 서술되는 용어의 의미는 다음과 같이 이해되어야 할 것이다.Meanwhile, the meaning of the terms described in the present application should be understood as follows.

"제1", "제2" 등의 용어는 하나의 구성요소를 다른 구성요소로부터 구별하기 위한 것으로, 이들 용어들에 의해 권리범위가 한정되어서는 아니 된다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.The terms "first "," second ", and the like are intended to distinguish one element from another, and the scope of the right should not be limited by these terms. For example, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

어떤 구성요소가 다른 구성요소에 "연결되어"있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결될 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어"있다고 언급된 때에는 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 한편, 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.It is to be understood that when an element is referred to as being "connected" to another element, it may be directly connected to the other element, but there may be other elements in between. On the other hand, when an element is referred to as being "directly connected" to another element, it should be understood that there are no other elements in between. On the other hand, other expressions describing the relationship between the components, such as "between" and "immediately between" or "neighboring to" and "directly neighboring to", should be interpreted as well.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함하다"또는 "가지다" 등의 용어는 설시된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.It should be understood that the singular " include "or" have "are to be construed as including a stated feature, number, step, operation, component, It is to be understood that the combination is intended to specify that it does not preclude the presence or addition of one or more other features, integers, steps, operations, elements, components, or combinations thereof.

각 단계들에 있어 식별부호(예를 들어, a, b, c 등)는 설명의 편의를 위하여 사용되는 것으로 식별부호는 각 단계들의 순서를 설명하는 것이 아니며, 각 단계들은 문맥상 명백하게 특정 순서를 기재하지 않는 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 단계들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.In each step, the identification code (e.g., a, b, c, etc.) is used for convenience of explanation, the identification code does not describe the order of each step, Unless otherwise stated, it may occur differently from the stated order. That is, each step may occur in the same order as described, may be performed substantially concurrently, or may be performed in reverse order.

본 발명은 컴퓨터가 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현될 수 있고, 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한, 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The present invention can be embodied as computer-readable code on a computer-readable recording medium, and the computer-readable recording medium includes all kinds of recording devices for storing data that can be read by a computer system . Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and also implemented in the form of a carrier wave (for example, transmission over the Internet) . In addition, the computer-readable recording medium may be distributed over network-connected computer systems so that computer readable codes can be stored and executed in a distributed manner.

여기서 사용되는 모든 용어들은 다르게 정의되지 않는 한, 본 발명이 속하는 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한 이상적이거나 과도하게 형식적인 의미를 지니는 것으로 해석될 수 없다.
All terms used herein have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs, unless otherwise defined. The terms defined in the commonly used dictionary should be interpreted to coincide with the meanings in the context of the related art, and should not be interpreted as having ideal or excessively formal meanings unless clearly defined in the present application.

도 1은 본 발명의 일 실시예에 따른 비접촉식 지문 영상 획득 시스템을 설명하는 도면이다. 1 is a view for explaining a non-contact fingerprint image acquisition system according to an embodiment of the present invention.

도 1을 참조하면, 비접촉식 지문 영상 획득 시스템(100)은 사용자 손가락(110)의 지문에 대한 영상을 비접촉식으로 획득하는 비접촉식 지문 영상 획득 장치(120)를 포함한다. Referring to FIG. 1, the non-contact fingerprint image acquisition system 100 includes a non-contact fingerprint image acquisition device 120 that acquires an image of a fingerprint of a user's finger 110 in a non-contact manner.

일 실시예에서, 사용자 손가락(110)은 복수 개의 손가락 중 적어도 하나에 해당할 수 있다. In one embodiment, the user finger 110 may correspond to at least one of the plurality of fingers.

비접촉식 지문 영상 획득 장치(120)는 사용자 손가락(110)의 지문을 비접촉식으로 인식할 수 있는 장치에 해당한다. The contactless fingerprint image acquisition device 120 corresponds to a device capable of contactlessly recognizing a fingerprint of the user finger 110.

일 실시예에서, 비접촉식 지문 영상 획득 장치(120)는 촬영 장치를 포함할 수 있다. 여기에서, 촬영 장치는 조명 장치 및 카메라 모듈을 포함할 수 있다. In an embodiment, the non-contact fingerprint image capturing apparatus 120 may include a photographing apparatus. Here, the photographing apparatus may include a lighting apparatus and a camera module.

일 실시예에서, 비접촉식 지문 영상 획득 장치(120)는 적어도 하나의 적외선 조명 장치을 포함할 수 있다. 예를 들어, 적외선 조명은 IR LED에 해당할 수 있다. In one embodiment, the contactless fingerprint image acquisition device 120 may include at least one infrared illumination device. For example, infrared light may correspond to an IR LED.

일 실시예에서, 비접촉식 지문 영상 획득 장치(120)는 기설정된 파장 대역을 통과시키는 적어도 하나의 필터를 포함할 수 있다. 예를 들어, 비접촉식 지문 영상 획득 장치(120)는 750 ~ 950nm 파장대를 통과시킬 수 있는 BPF(Band Pass Filter)를 포함할 수 있다. In an embodiment, the non-contact fingerprint image capturing apparatus 120 may include at least one filter that passes a predetermined wavelength band. For example, the non-contact fingerprint image capturing apparatus 120 may include a band pass filter (BPPF) that may pass a wavelength band of 750 to 950 nm.

일 실시예에서, 비접촉식 지문 영상 획득 장치(120)는 모바일 단말로 구현될 수 있다. 예를 들어, 비접촉식 지문 영상 획득 장치(120)는 휴대폰(Cellular Phone), 스마트 폰(Smart Phone) 또는 태블릿 PC(Tablet Personal Computer)로 구현될 수 있다. In one embodiment, the contactless fingerprint image acquisition device 120 may be implemented as a mobile terminal. For example, the contactless fingerprint image acquisition device 120 may be implemented as a cellular phone, a smart phone, or a tablet personal computer.

이하, 도 2를 참조하여 비접촉식 지문 영상 획득 장치(120)를 상세하게 설명한다.
Hereinafter, the non-contact fingerprint image acquisition device 120 will be described in detail with reference to FIG. 2.

도 2는 도 1에 있는 비접촉식 지문 영상 획득 장치를 설명하는 블록도이다. FIG. 2 is a block diagram illustrating an apparatus for obtaining a contactless fingerprint image of FIG. 1.

도 2를 참조하면, 비접촉식 지문 영상 획득 장치(120)는 지문 이미지 획득부(210), 적합성 판단부(220), 융선 패턴 추출부(230), 디스플레이부(240) 및 제어부(250)를 포함한다. Referring to FIG. 2, the non-contact fingerprint image acquisition device 120 includes a fingerprint image acquisition unit 210, a suitability determination unit 220, a ridge pattern extraction unit 230, a display unit 240, and a controller 250. do.

지문 이미지 획득부(210)는 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득한다. 여기에서, 지문 이미지 획득부(210)는 가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득할 수 있다. The fingerprint image acquisition unit 210 acquires a fingerprint image including at least one sample inspection image. Here, the fingerprint image acquisition unit 210 may acquire a fingerprint image including at least one sample inspection image through at least one window disposed in the virtual user's finger.

일 실시예에서, 가상 사용자 손가락 내에 배치된 윈도우가 복수 개인 경우, 지문 이미지 획득부(210)는 이격적으로 배치된 복수의 윈도우들을 통해 복수의 표본 검사 이미지를 포함하는 지문 이미지를 획득할 수 있다. 여기에서, 복수의 윈도우들 각각은 특정 면적을 가지고 상호 분리되어 독립적으로 배치될 수 있다.In one embodiment, when there are a plurality of windows disposed in the virtual user finger, the fingerprint image acquisition unit 210 may obtain a fingerprint image including a plurality of sample inspection images through the plurality of windows spaced apart from each other. . Here, each of the plurality of windows may have a specific area and be separated from each other independently.

보다 구체적으로, 지문 이미지 획득부(210)는 가상 사용자 손가락 내에 기설정된 배치 및 면적을 가지는 적어도 하나의 윈도우를 통하여, 적어도 하나의 윈도우 각각에 해당하는 적어도 하나의 표본 검사 이미지를 획득할 수 있다. More specifically, the fingerprint image acquisition unit 210 may acquire at least one sample inspection image corresponding to each of the at least one window through at least one window having a predetermined arrangement and area in the virtual user finger.

여기에서, 가상 사용자 손가락은 촬영 장치에 의하여 촬영될 수 있는 영역 범위 중에서 기설정된 영역에 해당하며, 윈도우가 복수 개인 경우, 복수의 윈도우들 각각은 가상 사용자 손가락 내에 이격적으로 배치된 기설정된 영역에 해당할 수 있다. Here, the virtual user finger corresponds to a preset area among the area range that can be photographed by the photographing apparatus, and when there are a plurality of windows, each of the plurality of windows is located at a predetermined area spaced apart from the virtual user finger. This may be the case.

예를 들어, 도 6 및 도 7에서, 촬영 장치에 의하여 촬영될 수 있는 이미지의 영역 범위 중에서 타원 형상의 가상 사용자 손가락(610) 및 정사각형의 5개의 윈도우들(620a 내지 620e)이 설정된 경우, 촬영 장치에 의하여 사용자 손가락(110)에 대한 지문 이미지가 생성되면, 지문 이미지 및 지문 이미지에서 윈도우들(620a 내지 620e) 각각의 영역에 포함된 5개의 이미지들을 표본 검사 이미지들(710a 내지 710e)로서 획득할 수 있다. For example, in FIGS. 6 and 7, when an elliptic-shaped virtual user finger 610 and five square windows 620a to 620e are set within an area range of an image that can be photographed by the photographing apparatus, photographing. When the fingerprint image of the user finger 110 is generated by the device, five images included in each area of the windows 620a to 620e in the fingerprint image and the fingerprint image are obtained as the sample inspection images 710a to 710e. can do.

일 실시예에서, 지문 이미지 획득부(210)는 윈도우의 면적, 위치, 모양 및 갯수 중 적어도 하나와 연관된 설정 정보를 입력받아, 입력된 설정 정보를 기초로 적어도 하나의 표본 검사 이미지를 획득할 수 있다. 여기에서, 설정 정보는 관리자에 의하여 입력될 수 있고, 윈도우의 면적, 위치, 모양 및 갯수 중 적어도 하나에 대한 설정 데이터를 포함할 수 있다. 예를 들어, 지문 이미지 획득부(210)는 윈도우의 면적, 위치, 모양 및 갯수에 대한 설정 입력창을 디스플레이부(240)를 통하여 프롬프팅하고, 사용자에 의하여 설정 데이터를 입력받으면 해당 설정 데이터에 따라 윈도우의 면적, 위치, 모양 및 갯수를 정의할 수 있다. In an embodiment, the fingerprint image acquisition unit 210 may receive setting information associated with at least one of the area, location, shape, and number of windows, and obtain at least one sample inspection image based on the input setting information. have. Here, the setting information may be input by the administrator, and may include setting data for at least one of the area, position, shape, and number of windows. For example, the fingerprint image acquisition unit 210 prompts the setting input window for the area, position, shape, and number of windows through the display unit 240, and receives the setting data when the user inputs the setting data. Therefore, you can define the area, position, shape, and number of windows.

즉, 본 발명에 따른 비접촉식 지문 영상 획득 과정에서 관리자는 최종적으로 획득하고자 하는 지문 이미지의 품질 및 비접촉식 지문 영상 획득 장치의 처리 속도 중 적어도 하나를 고려하여 윈도우의 면적, 위치, 모양 및 갯수 중 적어도 하나를 설정할 수 있다. That is, in the process of acquiring the contactless fingerprint image according to the present invention, the manager may finally obtain at least one of the area, position, shape, and number of windows in consideration of at least one of the quality of the fingerprint image to be acquired and the processing speed of the non-contact fingerprint image acquisition device. Can be set.

일 실시예에서, 지문 이미지 획득부(210)는 가상 사용자 손가락(610) 및 적어도 하나의 윈도우(620) 중 적어도 하나에 대한 가이드 라인을 디스플레이부(240)를 통하여 디스플레이할 수 있다. 즉, 지문 이미지 획득부(210)는 표본 검사 이미지들이 촬영될 수 있는 가이드 라인을 디스플레이함으로써, 사용자가 적절하게 자신의 손가락을 배치하도록 할 수 있다. In an embodiment, the fingerprint image acquisition unit 210 may display the guide line for at least one of the virtual user finger 610 and the at least one window 620 through the display unit 240. That is, the fingerprint image acquisition unit 210 may display a guideline in which the specimen inspection images may be photographed, thereby allowing the user to appropriately place his or her finger.

일 실시예에서, 지문 이미지 획득부(210)는 사용자 손가락의 위치를 기초로 경고음을 출력할 수 있다. 예를 들어, 사용자 손가락의 위치가 기설정된 가상 사용자 손가락(610) 및 적어도 하나의 윈도우(620) 중 적어도 하나의 영역을 벗어나는 경우 비접촉식 지문 영상 획득 장치에 포함된 사운드 출력 장치를 통하여 경고음을 출력함으로써, 사용자가 적절하게 자신의 손가락을 배치하도록 할 수 있다. In one embodiment, the fingerprint image acquisition unit 210 may output a warning sound based on the position of the user's finger. For example, when the position of the user finger is outside the at least one region of the preset virtual user finger 610 and at least one window 620, by outputting a warning sound through the sound output device included in the contactless fingerprint image acquisition device In this case, the user can appropriately place his or her finger.

일 실시예에서, 지문 이미지 획득부(210)는 적어도 하나의 표본 검사 이미지 에 각각에 대하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터를 적용할 수 있다. 예를 들어, 지문 이미지 획득부(210)가 복수의 표본 검사 이미지들(710a 내지 710e)을 획득한 경우, 표본 검사 이미지들(710a 내지 710e) 각각에 포함된 융선 및 비융선 영역을 부각시키기 위하여 선명도를 증가시키거나 흑백의 대비를 높일 수 있다. In one embodiment, the fingerprint image acquisition unit 210 may apply an image enhancement filter associated with at least one of sharpness and contrast to each of the at least one sample inspection image. For example, when the fingerprint image acquisition unit 210 acquires the plurality of sample inspection images 710a to 710e, in order to highlight the ridges and non-ridge areas included in each of the sample inspection images 710a to 710e. You can increase the sharpness or increase the contrast of black and white.

적합성 판단부(220)는 적합성 판단부(220)에 의하여 획득된 적어도 하나의 표본 검사 이미지를 기초로 지문 이미지의 적합성을 체크한다. 보다 구체적으로, 적합성 판단부(220)는 사용자 손가락의 지문에 대한 일부를 포함하는 적어도 하나의 표본 검사 이미지가 사용자 손가락의 지문 전체에 대한 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크할 수 있다. The suitability determination unit 220 checks the suitability of the fingerprint image based on the at least one sample inspection image acquired by the suitability determination unit 220. More specifically, the suitability determination unit 220 may check whether at least one sample inspection image including a part of the fingerprint of the user's finger can ensure the suitability of the fingerprint image with respect to the entire fingerprint of the user's finger. .

즉, 일반적으로 촬영 장치의 초점 조정 시간이 지문 영상 획득 시간보다 길어서 초점이 정확하지 않은 상태의 이미지들로 지문 인식 전처리 과정이 수행되는 경우 발생할 수 있는 성능 저하 문제를 극복하기 위하여, 적합성 판단부(220)는 지문 이미지 중 일부 영역들을 기초로 지문 이미지의 적합성을 결정할 수 있다. That is, in general, in order to overcome a performance degradation problem that may occur when the fingerprint recognition preprocessing process is performed with images whose focus is not accurate because the focusing time of the photographing apparatus is longer than the fingerprint image acquisition time, the suitability determination unit ( 220 may determine suitability of the fingerprint image based on some areas of the fingerprint image.

일 실시예에서, 비접촉식 지문 영상 획득 장치(120)는 융선 패턴 추출부(230)를 더 포함할 수 있다. 여기에서, 적합성 판단부(220)는 융선 패턴 추출부(230)에 의하여 추출된 융선 패턴을 기초로 지문 이미지의 적합성 여부를 결정할수 있다. In one embodiment, the non-contact fingerprint image acquisition device 120 may further include a ridge pattern extractor 230. Here, the suitability determination unit 220 may determine the suitability of the fingerprint image based on the ridge pattern extracted by the ridge pattern extractor 230.

일 실시예에서, 융선 패턴 추출부(230)는 적어도 하나의 표본 검사 이미지들 각각에 대한 융선 패턴을 추출할 수 있다. 예를 들어, 도 7에서, 융선 패턴 추출부(230)는 표본 검사 이미지들(710a 내지 710e) 각각에 포함된 사용자 손가락의 지문에 대한 일부 이미지에서 적어도 하나의 융선을 포함하는 융선 패턴을 추출할 수 있다. In one embodiment, the ridge pattern extractor 230 may extract the ridge pattern for each of the at least one sample inspection image. For example, in FIG. 7, the ridge pattern extractor 230 may extract a ridge pattern including at least one ridge from some images of fingerprints of a user's finger included in each of the sample inspection images 710a to 710e. Can be.

일 실시예에서, 융선 패턴 추출부(230)는 적어도 하나의 표본 검사 이미지 각각에 대하여 단위 방향 성분을 추출하여 적어도 하나의 융선을 포함하는 융선 패턴을 결정할 수 있다. 여기에서, 융선 패턴 추출부(230)는 Local-Block Analysis를 통하여 융선의 단위 방향 성분을 결정할 수 있다. 예를 들어, 융선 패턴 추출부(230)는 표본 검사 이미지(710a)를 16*16의 block으로 구분하고, 각 block에 대한 단위 방향을 계산할 수 있다. In one embodiment, the ridge pattern extractor 230 may determine a ridge pattern including at least one ridge by extracting a unit direction component for each of the at least one sample inspection image. Here, the ridge pattern extractor 230 may determine the unit direction component of the ridge through Local-Block Analysis. For example, the ridge pattern extractor 230 may divide the sample inspection image 710a into blocks of 16 * 16 and calculate a unit direction for each block.

일 실시예에서, 융선 패턴 추출부(230)는 이미지 개선 필터가 적용된 적어도 하나의 표본 검사 이미지 각각에 대하여 융선 패턴을 추출할 수 있다. 즉, 융선 패턴 추출부(230)는 지문 이미지 획득부(210)에 의하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터가 적용된 적어도 하나의 표본 검사 이미지 각각에 대하여 융선 패턴을 추출할 수 있다. In one embodiment, the ridge pattern extractor 230 may extract the ridge pattern for each of at least one sample inspection image to which the image enhancement filter is applied. That is, the ridge pattern extractor 230 applies the ridge pattern to each of the at least one sample inspection image to which the image enhancement filter associated with at least one of sharpness and contrast is applied by the fingerprint image acquisition unit 210. Can be extracted.

일 실시예에서, 적합성 판단부(220)는 융선 패턴 추출부(230)에 의하여 추출된 융선 패턴을 기초로 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부를 결정할 수 있다. 여기에서, 적합성 판단부(220)는 융선 패턴에 포함된 융선 및 비-융선 영역에 대한 대비(Contrast)를 기초로 초점 적합 여부를 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine whether the focus is appropriate for each of the at least one specimen inspection image based on the ridge pattern extracted by the ridge pattern extraction unit 230. Here, the suitability determination unit 220 may determine whether the focus is suitable based on the contrast (contrast) to the ridge and the non-ridge region included in the ridge pattern.

단일의 표본 검사 이미지를 예시로 설명하면, 도 7에서, 적합성 판단부(220)는 표본 검사 이미지(710a)에 포함된 융선 및 비-융선 영역에 대한 대비를 측정할 수 있고, 측정된 대비가 기설정된 임계치를 초과하는지 여부를 결정할 수 있다. 여기에서, 적합성 판단부(220)는 측정된 대비가 기설정된 임계치를 초과하면 표본 검사 이미지(710a)의 초점이 적합한 것으로 결정할 수 있다. Referring to the single sample inspection image as an example, in FIG. 7, the suitability determination unit 220 may measure the contrast with respect to the ridges and non-ridge regions included in the sample inspection image 710a, and the measured contrast is It may be determined whether the predetermined threshold is exceeded. Here, the suitability determination unit 220 may determine that the focus of the sample inspection image 710a is appropriate when the measured contrast exceeds a predetermined threshold.

일 실시예에서, 적합성 판단부(220)는 융선 패턴 추출부(230)에 의하여 추출된 융선 패턴을 기초로 적어도 하나의 표본 검사 이미지 각각에 대한 품질 적합 여부를 결정할 수 있다. 여기에서, 적합성 판단부(220)는 융선 영역의 면적 및 융선 영역 간의 간격 중 적어도 하나를 기초로 적어도 하나의 표본 검사 이미지 각각에 대한 품질 적합 여부를 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine whether the quality suitability for each of the at least one sample inspection image based on the ridge pattern extracted by the ridge pattern extractor 230. Herein, the suitability determination unit 220 may determine whether the quality is appropriate for each of the at least one sample inspection image based on at least one of the area of the ridge area and the interval between the ridge areas.

단일의 표본 검사 이미지를 예시로 설명하면, 도 7에서, 적합성 판단부(220)는 표본 검사 이미지(710a)에 포함된 융선 영역의 면적(예: 픽셀 수)이 기설정된 임계치(제1 임계치)를 초과(제1 조건)하는지 여부 및 융선 영역 간의 간격이 기설정된 임계치(제2 임계치) 미만(제2 조건)에 해당하는지 여부를 결정할 수 있다. 여기에서, 적합성 판단부(220)는 융선 영역의 면적이 제1 임계치를 초과하고 융선 영역 간의 간격이 제2 임계치 미만이면 표본 검사 이미지(710a)의 품질이 적합한 것으로 결정할 수 있다. 한편, 제1 임계치, 제2 임계치 및 품질 적합 여부에 대한 조건(제1 조건 및 제2 조건을 모두 만족, 제1 조건 또는 제2 조건을 만족)은 획득하고자 하는 지문 이미지의 품질에 따라 설정 과정에서 결정될 수 있다. Referring to the single sample inspection image as an example, in FIG. 7, the suitability determination unit 220 sets a predetermined threshold (first threshold value) of an area (eg, the number of pixels) of the ridge area included in the sample inspection image 710a. Is exceeded (first condition) and whether the interval between the ridge areas is less than the predetermined threshold (second threshold) (second condition). Here, the suitability determination unit 220 may determine that the quality of the sample inspection image 710a is appropriate when the area of the ridge area exceeds the first threshold and the distance between the ridge areas is less than the second threshold. On the other hand, the first threshold value, the second threshold value and the conditions for the quality conformance (satisfied both the first condition and the second condition, satisfies the first condition or the second condition) are set according to the quality of the fingerprint image to be acquired Can be determined.

일 실시예에서, 적합성 판단부(220)는 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 지문 이미지의 적합 여부를 결정할 수 있다. 예를 들어, 적합성 판단부(220)는 모든 표본 검사 이미지들이 초점 적합 및 품질 적합 여부를 만족하는 경우 지문 이미지가 적합한 것으로 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine whether the fingerprint image is suitable based on at least one of whether the focus fit and the quality suitability for each of the at least one sample inspection image. For example, the suitability determination unit 220 may determine that the fingerprint image is suitable when all the sample inspection images satisfy the focus fit and the quality fit.

일 실시예에서, 적합성 판단부(220)는 기설정된 영역에 배치된 표본 검사 이미지에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 지문 이미지의 적합 여부를 결정할 수 있다. 예를 들어, 도 7에서, 적합성 판단부(220)는 비접촉 지문 인식 과정에서 낮은 밝기값을 가질 수 있는 손가락 외곽 영역에 배치된 표본 검사 이미지(710a 및 710c)의 초점 및 품질 적합 여부를 기초로 지문 이미지의 적합 여부를 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine whether the fingerprint image is suitable based on at least one of whether the focus suitability and the quality suitability for the sample inspection image disposed in the predetermined area. For example, in FIG. 7, the suitability determination unit 220 is based on the focus and quality of the sample inspection images 710a and 710c disposed in the outer region of the finger, which may have a low brightness value during the contactless fingerprint recognition process. Suitability of the fingerprint image can be determined.

일 실시예에서, 적합성 판단부(220)는 표본 검사 이미지가 복수 개인 경우, 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수를 기초로 지문 이미지의 적합성을 결정할 수 있다. 예를 들어, 적합성 판단부(220)는 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 기설정된 임계치(예: 3개)를 초과하면, 지문 이미지가 적합한 것으로 결정할 수 있다. In one embodiment, when there are a plurality of sample inspection images, the suitability determination unit 220 may determine the suitability of the fingerprint image based on the number of sample inspection images satisfying the focus suitability and the quality suitability. For example, the suitability determination unit 220 may determine that the fingerprint image is suitable when the number of sample inspection images satisfying the focus suitability and the quality suitability exceeds a predetermined threshold (eg, three).

한편, 복수의 표본 검사 이미지들의 초점 적합성 및 품질 적합성에 대한 조합으로 구성될 수 있는 지문 이미지의 적합성 조건은 획득하고자 하는 지문 이미지의 품질에 따라 설정 과정에서 결정될 수 있다. Meanwhile, the suitability condition of the fingerprint image, which may be composed of a combination of focus suitability and quality suitability of the plurality of sample inspection images, may be determined in the setting process according to the quality of the fingerprint image to be acquired.

일 실시예에서, 적합성 판단부(220)는 적합성을 만족하는 복수의 지문 이미지들 중에서 최적의 지문 이미지를 결정할 수 있다. 예를 들어, 지문 이미지 획득부(210)에 의하여 획득된 지문 이미지들 중 본 발명의 비접촉식 지문 영상 획득 과정에 따라 적합성을 만족하는 지문 이미지가 복수 개에 해당하는 경우, 적합성 판단부(220)는 해당 복수의 지문 이미지들 중에서 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 최대치인 지문 이미지를 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine an optimal fingerprint image among a plurality of fingerprint images satisfying the suitability. For example, if a plurality of fingerprint images satisfying suitability according to the contactless fingerprint image acquisition process of the present invention among the fingerprint images acquired by the fingerprint image acquisition unit 210 correspond to, the suitability determination unit 220 Among the plurality of fingerprint images, the fingerprint image having the maximum number of sample inspection images satisfying the focus suitability and quality suitability may be determined.

디스플레이부(240)는 가상 사용자 손가락(610) 및 적어도 하나의 윈도우(620) 중 적어도 하나에 대한 가이드 라인을 디스플레이할 수 있다. 즉, 디스플레이부(240)는 표본 검사 이미지가 촬영될 수 있는 가이드 라인을 디스플레이함으로써, 사용자가 적절하게 자신의 손가락을 배치하도록 할 수 있다. The display unit 240 may display a guide line for at least one of the virtual user finger 610 and the at least one window 620. That is, the display unit 240 may display a guide line on which the specimen inspection image may be photographed, thereby allowing the user to appropriately place his or her finger.

제어부(250)는 지문 이미지 획득부(210), 적합성 판단부(220), 융선 패턴 추출부(230) 및 디스플레이부(240)의 동작 및 데이터의 흐름을 제어한다.
The controller 250 controls the operation and data flow of the fingerprint image acquisition unit 210, the suitability determination unit 220, the ridge pattern extraction unit 230, and the display unit 240.

도 3은 비접촉식 지문 영상 획득 장치에서 수행되는 비접촉식 지문 영상 획득 과정을 설명하는 흐름도이다. 이하, 도 3은 비접촉식 지문 영상 획득 과정에서 이격적으로 배치된 윈도우가 복수 개이며, 복수의 이격적인 윈도우들을 통하여 획득되는 표본 검사 이미지 역시 복수 개인 경우를 예시로 설명한다. 한편, 이러한 예시는 본 발명의 권리범위를 한정하고자 하는 것은 아니다. 즉, 본 발명에 따른 비접촉식 지문 영상 획득 과정에서 관리자는 최종적으로 획득하고자 하는 지문 이미지의 품질 및 비접촉식 지문 영상 획득 장치의 처리 속도 중 적어도 하나를 고려하여 윈도우의 면적, 위치, 모양 및 갯수 중 적어도 하나를 설정할 수 있다. 3 is a flowchart illustrating a process of obtaining a contactless fingerprint image performed by the apparatus for obtaining a contactless fingerprint image. 3 illustrates a case in which a plurality of windows spaced apart from each other in the process of obtaining a contactless fingerprint image and a plurality of sample inspection images acquired through the plurality of spaced windows are illustrated as an example. On the other hand, these examples are not intended to limit the scope of the invention. That is, in the process of acquiring the contactless fingerprint image according to the present invention, the manager may finally obtain at least one of the area, position, shape, and number of windows in consideration of at least one of the quality of the fingerprint image to be acquired and the processing speed of the non-contact fingerprint image acquisition device. Can be set.

지문 이미지 획득부(210)는 복수의 표본 검사 이미지들을 포함하는 지문 이미지를 획득한다(단계 S310). 여기에서, 지문 이미지 획득부(210)는 가상 사용자 손가락 내에 배치된 복수의 이격적인 윈도우들을 통해 복수의 표본 검사 이미지들을 포함하는 지문 이미지를 획득할 수 있다. The fingerprint image acquisition unit 210 acquires a fingerprint image including a plurality of sample inspection images (step S310). Here, the fingerprint image acquisition unit 210 may acquire a fingerprint image including a plurality of sample inspection images through a plurality of spaced windows disposed in the virtual user's finger.

보다 구체적으로, 지문 이미지 획득부(210)는 가상 사용자 손가락 내에 기설정된 배치 및 면적을 가지는 복수의 윈도우들을 통하여, 복수의 윈도우들 각각에 해당하는 복수의 표본 검사 이미지들을 획득할 수 있다. More specifically, the fingerprint image acquisition unit 210 may acquire a plurality of sample inspection images corresponding to each of the plurality of windows through a plurality of windows having a predetermined arrangement and area in the virtual user's finger.

여기에서, 가상 사용자 손가락은 촬영 장치에 의하여 촬영될 수 있는 영역 범위 중에서 기설정된 영역에 해당하며, 복수의 윈도우들 각각은 가상 사용자 손가락 내에 이격적으로 배치된 기설정된 영역들에 해당할 수 있다. Here, the virtual user finger may correspond to a preset area among the range of areas that may be photographed by the photographing apparatus, and each of the plurality of windows may correspond to preset areas that are spaced apart from the virtual user finger.

적합성 판단부(220)는 적합성 판단부(220)에 의하여 획득된 복수의 표본 검사 이미지들을 기초로 지문 이미지의 적합성을 체크한다(단계 S320). 보다 구체적으로, 적합성 판단부(220)는 사용자 손가락의 지문에 대한 일부를 포함하는 복수의 표본 검사 이미지들이 사용자 손가락의 지문 전체에 대한 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크할 수 있다. The suitability determination unit 220 checks the suitability of the fingerprint image based on the plurality of sample inspection images acquired by the suitability determination unit 220 (step S320). More specifically, the suitability determination unit 220 may check whether a plurality of sample inspection images including a part of the fingerprint of the user's finger can guarantee the suitability of the fingerprint image with respect to the entire fingerprint of the user's finger.

즉, 일반적으로 촬영 장치의 초점 조정 시간이 지문 영상 획득 시간보다 길어서 초점이 정확하지 않은 상태의 이미지들로 지문 인식 전처리 과정이 수행되는 경우 발생할 수 있는 성능 저하 문제를 극복하기 위하여, 적합성 판단부(220)는 지문 이미지 중 일부 영역들을 기초로 지문 이미지의 적합성을 결정할 수 있다.
That is, in general, in order to overcome a performance degradation problem that may occur when the fingerprint recognition preprocessing process is performed with images whose focus is not accurate because the focusing time of the photographing apparatus is longer than the fingerprint image acquisition time, the suitability determination unit ( 220 may determine suitability of the fingerprint image based on some areas of the fingerprint image.

도 4는 본 발명의 일 실시예에 따른 비접촉식 지문 영상 획득 장치에서 수행되는 비접촉식 지문 영상 획득 과정을 설명하는 흐름도이다. 이하, 도 4는 비접촉식 지문 영상 획득 과정에서 이격적으로 배치된 윈도우가 복수 개이며, 복수의 이격적인 윈도우들을 통하여 획득되는 표본 검사 이미지 역시 복수 개인 경우를 예시로 설명한다. 한편, 이러한 예시는 본 발명의 권리범위를 한정하고자 하는 것은 아니다. 즉, 본 발명에 따른 비접촉식 지문 영상 획득 과정에서 관리자는 최종적으로 획득하고자 하는 지문 이미지의 품질 및 비접촉식 지문 영상 획득 장치의 처리 속도 중 적어도 하나를 고려하여 윈도우의 면적, 위치, 모양 및 갯수 중 적어도 하나를 설정할 수 있다. 4 is a flowchart illustrating a process of obtaining a contactless fingerprint image performed by the apparatus for obtaining a contactless fingerprint image according to an embodiment of the present invention. Hereinafter, FIG. 4 illustrates an example in which a plurality of windows spaced apart from each other in a process of obtaining a contactless fingerprint image and a plurality of sample inspection images acquired through a plurality of spaced windows are illustrated. On the other hand, these examples are not intended to limit the scope of the invention. That is, in the process of acquiring the contactless fingerprint image according to the present invention, the manager may finally obtain at least one of the area, position, shape, and number of windows in consideration of at least one of the quality of the fingerprint image to be acquired and the processing speed of the non-contact fingerprint image acquisition device. Can be set.

지문 이미지 획득부(210)는 가상 사용자 손가락(610) 및 복수의 이격적인 윈도우들(620) 중 적어도 하나에 대한 가이드 라인을 디스플레이부를 통하여 디스플레이할 수 있다(단계 S410). 즉, 지문 이미지 획득부(210)는 표본 검사 이미지들이 촬영될 수 있는 가이드 라인을 디스플레이함으로써, 사용자가 적절하게 자신의 손가락을 배치하도록 할 수 있다. The fingerprint image acquisition unit 210 may display a guide line for at least one of the virtual user finger 610 and the plurality of spaced apart windows 620 through the display unit (step S410). That is, the fingerprint image acquisition unit 210 may display a guideline in which the specimen inspection images may be photographed, thereby allowing the user to appropriately place his or her finger.

지문 이미지 획득부(210)는 복수의 표본 검사 이미지들을 포함하는 지문 이미지를 획득한다(단계 S420). 여기에서, 지문 이미지 획득부(210)는 가상 사용자 손가락 내에 배치된 복수의 이격적인 윈도우들을 통해 복수의 표본 검사 이미지들을 포함하는 지문 이미지를 획득할 수 있다. The fingerprint image acquisition unit 210 acquires a fingerprint image including a plurality of sample inspection images (step S420). Here, the fingerprint image acquisition unit 210 may acquire a fingerprint image including a plurality of sample inspection images through a plurality of spaced windows disposed in the virtual user's finger.

지문 이미지 획득부(210)는 복수의 표본 검사 이미지들 중 적어도 하나에 대하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터를 적용할 수 있다(단계 S430). 즉, 지문 이미지 획득부(210)가 복수의 표본 검사 이미지들(710a 내지 710e)을 획득한 경우, 표본 검사 이미지들(710a 내지 710e) 각각에 포함된 융선 및 비융선 영역을 부각시키기 위하여 선명도를 증가시키거나 흑백의 대비를 높일 수 있다. The fingerprint image acquirer 210 may apply an image enhancement filter associated with at least one of sharpness and contrast to at least one of the plurality of sample inspection images (step S430). That is, when the fingerprint image acquisition unit 210 acquires the plurality of sample inspection images 710a to 710e, the sharpness of the ridges and non-ridges included in each of the sample inspection images 710a to 710e may be increased. You can increase or increase the contrast of black and white.

융선 패턴 추출부(230)는 복수의 표본 검사 이미지들 각각에 대하여 단위 방향 성분을 추출할 수 있다(단계 S440). The ridge pattern extractor 230 may extract a unit direction component for each of the plurality of sample inspection images (step S440).

융선 패턴 추출부(230)는 융선 패턴 추출부(230)는 복수의 표본 검사 이미지들 각각에 대한 융선 패턴을 추출할 수 있다(단계 S450). 일 실시예에서, 융선 패턴 추출부(230)는 이미지 개선 필터가 적용된 복수의 표본 검사 이미지들에 대하여 융선 패턴을 추출할 수 있다. The ridge pattern extractor 230 may extract the ridge pattern for each of the plurality of sample inspection images (step S450). In one embodiment, the ridge pattern extractor 230 may extract the ridge pattern for a plurality of sample inspection images to which the image enhancement filter is applied.

적합성 판단부(220)는 융선 패턴 추출부(230)에 의하여 추출된 융선 패턴을 기초로 복수의 표본 검사 이미지들 각각에 대한 초점 적합 여부를 결정할 수 있다(단계 S460). 여기에서, 적합성 판단부(220)는 융선 패턴에 포함된 융선 및 비-융선 영역에 대한 대비(Contrast)를 기초로 초점 적합 여부를 결정할 수 있다. The suitability determination unit 220 may determine whether to focus on each of the plurality of sample inspection images based on the ridge pattern extracted by the ridge pattern extraction unit 230 (step S460). Here, the suitability determination unit 220 may determine whether the focus is suitable based on the contrast (contrast) to the ridge and the non-ridge region included in the ridge pattern.

적합성 판단부(220)는 융선 패턴 추출부(230)에 의하여 추출된 융선 패턴을 기초로 복수의 표본 검사 이미지들 각각에 대한 품질 적합 여부를 결정할 수 있다(단계 S470). 여기에서, 적합성 판단부(220)는 융선 영역의 면적 및 융선 영역 간의 간격 중 적어도 하나를 기초로 복수의 표본 검사 이미지들 각각에 대한 품질 적합 여부를 결정할 수 있다. The suitability determination unit 220 may determine whether the quality is appropriate for each of the plurality of sample inspection images based on the ridge pattern extracted by the ridge pattern extraction unit 230 (step S470). Herein, the suitability determination unit 220 may determine whether the quality of each of the plurality of sample inspection images is appropriate based on at least one of the area of the ridge area and the interval between the ridge areas.

적합성 판단부(220)는 복수의 표본 검사 이미지들을 기초로 지문 이미지의 적합성을 결정할 수 있다(단계 S480).The suitability determination unit 220 may determine the suitability of the fingerprint image based on the plurality of sample inspection images (step S480).

일 실시예에서, 적합성 판단부(220)는 복수의 표본 검사 이미지들 각각에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 지문 이미지의 적합 여부를 결정할 수 있다. 예를 들어, 적합성 판단부(220)는 모든 표본 검사 이미지들이 초점 적합 및 품질 적합 여부를 만족하는 경우 지문 이미지가 적합한 것으로 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine whether or not the fingerprint image is suitable based on at least one of whether the focus suitability and the quality suitability for each of the plurality of sample inspection images. For example, the suitability determination unit 220 may determine that the fingerprint image is suitable when all the sample inspection images satisfy the focus fit and the quality fit.

일 실시예에서, 적합성 판단부(220)는 기설정된 영역에 배치된 표본 검사 이미지에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 지문 이미지의 적합 여부를 결정할 수 있다. 예를 들어, 도 7에서, 적합성 판단부(220)는 비접촉 지문 인식 과정에서 낮은 밝기값을 가질 수 있는 손가락 외곽 영역에 배치된 표본 검사 이미지(710a 및 710c)의 초점 및 품질 적합 여부를 기초로 지문 이미지의 적합 여부를 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine whether the fingerprint image is suitable based on at least one of whether the focus suitability and the quality suitability for the sample inspection image disposed in the predetermined area. For example, in FIG. 7, the suitability determination unit 220 is based on the focus and quality of the sample inspection images 710a and 710c disposed in the outer region of the finger, which may have a low brightness value during the contactless fingerprint recognition process. Suitability of the fingerprint image can be determined.

일 실시예에서, 적합성 판단부(220)는 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지들의 갯수를 기초로 지문 이미지의 적합성을 결정할 수 있다. 예를 들어, 적합성 판단부(220)는 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 기설정된 임계치(예: 3개)를 초과하면, 지문 이미지가 적합한 것으로 결정할 수 있다. In one embodiment, the suitability determination unit 220 may determine the suitability of the fingerprint image based on the number of sample inspection images satisfying the focus suitability and quality suitability. For example, the suitability determination unit 220 may determine that the fingerprint image is suitable when the number of sample inspection images satisfying the focus suitability and the quality suitability exceeds a predetermined threshold (eg, three).

한편, 복수의 표본 검사 이미지들의 초점 적합성 및 품질 적합성에 대한 조합으로 구성될 수 있는 지문 이미지의 적합성 조건은 획득하고자 하는 지문 이미지의 품질에 따라 설정 과정에서 결정될 수 있다. Meanwhile, the suitability condition of the fingerprint image, which may be composed of a combination of focus suitability and quality suitability of the plurality of sample inspection images, may be determined in the setting process according to the quality of the fingerprint image to be acquired.

일 실시예에서, 적합성 판단부(220)는 적합성을 만족하는 복수의 지문 이미지들 중에서 최적의 지문 이미지를 결정할 수 있다. 예를 들어, 지문 이미지 획득부(210)에 의하여 획득된 지문 이미지들 중 본 발명의 비접촉식 지문 영상 획득 과정에 따라 적합성을 만족하는 지문 이미지가 복수 개에 해당하는 경우, 적합성 판단부(220)는 해당 복수의 지문 이미지들 중에서 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 최대치인 지문 이미지를 결정할 수 있다.
In one embodiment, the suitability determination unit 220 may determine an optimal fingerprint image among a plurality of fingerprint images satisfying the suitability. For example, if a plurality of fingerprint images satisfying suitability according to the contactless fingerprint image acquisition process of the present invention among the fingerprint images acquired by the fingerprint image acquisition unit 210 correspond to, the suitability determination unit 220 Among the plurality of fingerprint images, the fingerprint image having the maximum number of sample inspection images satisfying the focus suitability and quality suitability may be determined.

도 5는 본 발명에 따른 비접촉식 지문 영상 획득 과정을 설명하기 위한 도면이다. 5 is a view for explaining a non-contact fingerprint image acquisition process according to the present invention.

보다 구체적으로, 도 5a는 촬영 장치의 자동 초점 기능을 이용하여 초점이 적합한 상태에서 촬영된 지문 이미지에 대하여 전처리 과정을 거친 후 생성된 지문 이미지를 예시한 도면에 해당하고, 도 5b는 촬영 장치의 자동 초점 기능을 이용하여 초점이 불안정한 상태에서 촬영된 지문 이미지에 대하여 전처리 과정을 거친 후 생성된 지문 이미지를 예시한 도면에 해당한다. More specifically, FIG. 5A corresponds to a diagram illustrating a fingerprint image generated after a preprocessing process on a fingerprint image photographed in a state in which focus is appropriate using an autofocus function of the photographing apparatus, and FIG. Corresponding to the drawing illustrating a fingerprint image generated after a preprocessing process for a fingerprint image photographed in an unstable focus using an auto focus function.

일반적으로 접촉 방식의 지문 인식 장치와 달리 비접촉 방식의 지문 인식 장치는 사용자 손가락의 미세한 이동, 회전, 떨림 등의 초점 불안정 요인으로 인하여 도 5a와 같이 고품질의 지문 이미지 획득이 어렵다. 즉, 초점이 불안정한 상태에서 획득된 지문 이미지는 도 5b와 같이 사용자 손가락의 지문에 대한 융선을 뚜렷하게 나타내지 못하여 지문 인식 성능을 저하 시킬 수 있다. In general, unlike the contact-type fingerprint recognition device, the non-contact fingerprint recognition device is difficult to obtain a high quality fingerprint image as shown in FIG. 5A due to focal instability such as minute movement, rotation, and shaking of a user's finger. That is, the fingerprint image acquired in an unstable focus may not clearly show the ridge of the fingerprint of the user's finger as shown in FIG. 5B and may deteriorate the fingerprint recognition performance.

여기에서, 촬영 장치의 자동 초점 기능을 활용하는 경우 일반적인 초점 조정 시간은 [sec]단위로, 일반적인 지문 이미지 획득 시간인 [수십 ms]과 비교하여 대략 20배 이상의 시간을 초점 조정을 위하여 지연하는 것은 비효율적이다. In this case, when the auto focus function of the photographing apparatus is utilized, the general focusing time is in [sec] units, and a delay of approximately 20 times or more for focusing is compared with [several ms], which is a general fingerprint image acquisition time. Inefficient

상기 설명한 바와 같이, 본 발명에 따른 비접촉식 지문 영상 획득 과정을 통하여 고품질의 지문 이미지가 획득되었는지 여부를 빠르게 결정할 수 있다.
As described above, it is possible to quickly determine whether a high quality fingerprint image is obtained through the non-contact fingerprint image acquisition process according to the present invention.

도 6은 본 발명의 일 실시예에 따른 윈도우에 대한 가이드 라인을 예시한 도면이다. 6 is a diagram illustrating a guideline for a window according to an embodiment of the present invention.

도 6에서, 촬영 장치에 의하여 촬영될 수 있는 이미지의 영역 범위 중에서 타원 형상의 가상 사용자 손가락(610) 및 정사각형의 5개의 윈도우들(620a 내지 620e)이 설정된 경우, 지문 이미지 획득부(210)는 가상 사용자 손가락(610) 및 복수의 이격적인 윈도우들(620) 중 적어도 하나에 대한 가이드 라인을 디스플레이부를 통하여 디스플레이할 수 있다. 즉, 지문 이미지 획득부(210)는 표본 검사 이미지들이 촬영될 수 있는 가이드 라인을 디스플레이함으로써, 사용자가 적절하게 자신의 손가락을 배치하도록 할 수 있다.
In FIG. 6, when an elliptic-shaped virtual user finger 610 and five square windows 620a to 620e are set within an area range of an image that may be photographed by the photographing apparatus, the fingerprint image obtaining unit 210 may be configured. A guide line for at least one of the virtual user finger 610 and the plurality of spaced windows 620 may be displayed through the display unit. That is, the fingerprint image acquisition unit 210 may display a guideline in which the specimen inspection images may be photographed, thereby allowing the user to appropriately place his or her finger.

도 7은 본 발명의 일 실시예에 따른 표본 검사 이미지를 설명하기 위한 도면이다. 7 is a view for explaining a sample inspection image according to an embodiment of the present invention.

도 7에서, 촬영 장치에 의하여 촬영될 수 있는 이미지의 영역 범위 중에서 정사각형의 5개의 윈도우들(620a 내지 620e)이 설정된 경우, 촬영 장치에 의하여 사용자 손가락(110)에 대한 지문 이미지가 생성되면, 지문 이미지 획득부(210)는 지문 이미지에서 윈도우들(620a 내지 620e) 각각의 영역에 포함된 5개의 이미지들을 표본 검사 이미지들(710a 내지 710e)로서 획득할 수 있다.
In FIG. 7, when five square windows 620a to 620e are set in an area range of an image that can be photographed by the photographing apparatus, a fingerprint image of the user finger 110 is generated by the photographing apparatus. The image acquirer 210 may acquire five images included in each area of the windows 620a through 620e as the sample inspection images 710a through 710e in the fingerprint image.

상기에서는 본 출원의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
Although described above with reference to a preferred embodiment of the present application, those skilled in the art will be variously modified and changed within the scope of the present invention without departing from the spirit and scope of the invention described in the claims below I can understand that you can.

100: 비접촉식 지문 영상 획득 시스템
110: 사용자 손가락 120: 비접촉식 지문 영상 획득 장치
210: 지문 이미지 획득부 220: 적합성 판단부
230: 융선 패턴 추출부 240: 디스플레이부
250: 제어부
610: 가상 사용자 손가락 620: 윈도우
710: 표본 검사 이미지
100: contactless fingerprint image acquisition system
110: user finger 120: contactless fingerprint image acquisition device
210: fingerprint image acquisition unit 220: conformity determination unit
230: ridge pattern extraction unit 240: display unit
250:
610: virtual user finger 620: Windows
710: sample inspection image

Claims (18)

가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하는 지문 이미지 획득부; 및
상기 적어도 하나의 표본 검사 이미지가 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 지문 이미지 적합성 판단부를 포함하는 비접촉식 지문 영상 획득 장치.
A fingerprint image obtaining unit obtaining a fingerprint image including at least one sample inspection image through at least one window disposed in the virtual user finger; And
And a fingerprint image suitability determining unit configured to check whether the at least one sample inspection image can guarantee the suitability of the acquired fingerprint image.
제1항에 있어서,
상기 적어도 하나의 윈도우에 대한 가이드 라인을 디스플레이하는 디스플레이부를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 1,
And a display unit for displaying guide lines for the at least one window.
제1항에 있어서, 상기 지문 이미지 획득부는
상기 적어도 하나의 표본 검사 이미지 각각에 대하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터를 적용하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 1, wherein the fingerprint image acquisition unit
And applying an image enhancement filter associated with at least one of sharpness and contrast to each of the at least one sample inspection image.
제1항에 있어서,
상기 적어도 하나의 표본 검사 이미지 각각에 대한 융선 패턴을 추출하는 융선 패턴 추출부를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 1,
And a ridge pattern extractor for extracting a ridge pattern for each of the at least one sample inspection image.
제4항에 있어서, 상기 융선 패턴 추출부는
상기 적어도 하나의 표본 검사 이미지 각각에 대하여 단위 방향 성분을 추출하여 적어도 하나의 융선을 포함하는 융선 패턴을 결정하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 4, wherein the ridge pattern extraction unit
And extracting a unit direction component for each of the at least one specimen inspection image to determine a ridge pattern including at least one ridge.
제5항에 있어서, 상기 지문 이미지 적합성 판단부는
상기 추출된 융선 패턴에 포함된 융선 영역 및 비융선 영역에 대한 대비(Contrast)를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부를 결정하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 5, wherein the fingerprint image suitability determination unit
And determining whether the focus is appropriate for each of the at least one specimen inspection image based on contrast between the ridge region and the non-ridge region included in the extracted ridge pattern.
제6항에 있어서, 상기 지문 이미지 적합성 판단부는
상기 융선 영역의 면적 및 융선 영역 간의 간격 중 적어도 하나를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 품질 적합 여부를 결정하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 6, wherein the fingerprint image suitability determination unit
And determining whether quality is appropriate for each of the at least one sampled inspection image based on at least one of an area of the ridge area and a distance between the ridge areas.
제7항에 있어서, 상기 지문 이미지 적합성 판단부는
상기 결정된 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 상기 획득된 지문 이미지의 적합 여부를 결정하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 7, wherein the fingerprint image suitability determination unit
And determining whether the acquired fingerprint image is suitable based on at least one of focus fit and quality suitability for each of the determined at least one sample inspection image.
제8항에 있어서, 상기 지문 이미지 적합성 판단부는
표본 검사 이미지가 복수 개인 경우, 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 기설정된 갯수 이상이면 상기 획득된 지문 이미지의 적합성을 보장할 수 있는 것으로 결정하는 것을 특징으로 하는 비접촉식 지문 영상 획득 장치.
The method of claim 8, wherein the fingerprint image suitability determination unit
In the case where there are a plurality of sample inspection images, if the number of sample inspection images satisfying the focus suitability and the quality suitability is more than a predetermined number, it is determined that the suitability of the acquired fingerprint image can be guaranteed. Device.
가상 사용자 손가락 내에 배치된 적어도 하나의 윈도우를 통해 적어도 하나의 표본 검사 이미지를 포함하는 지문 이미지를 획득하는 단계; 및
상기 적어도 하나의 표본 검사 이미지가 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계를 포함하는 비접촉식 지문 영상 획득 방법.
Obtaining a fingerprint image comprising at least one sample inspection image through at least one window disposed within the virtual user finger; And
And checking whether the at least one sample inspection image can ensure suitability of the acquired fingerprint image.
제10항에 있어서, 상기 지문 이미지를 획득하는 단계는
상기 적어도 하나의 윈도우에 대한 가이드 라인을 디스플레이하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
The method of claim 10, wherein obtaining the fingerprint image
The method of claim 1, further comprising displaying a guide line for the at least one window.
제10항에 있어서, 상기 지문 이미지를 획득하는 단계는
상기 적어도 하나의 표본 검사 이미지 각각에 대하여 선명도(Sharpness) 및 대비(Contrast) 중 적어도 하나와 연관된 이미지 개선 필터를 적용하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
The method of claim 10, wherein obtaining the fingerprint image
And applying an image enhancement filter associated with at least one of sharpness and contrast to each of the at least one sample inspection image.
제10항에 있어서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는
상기 적어도 하나의 표본 검사 이미지 각각에 대한 융선 패턴을 추출하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
The method of claim 10, wherein checking whether the acquired fingerprint image can be guaranteed suitability
And extracting a ridge pattern for each of the at least one sample inspection image.
제13항에 있어서, 상기 융선 패턴을 추출하는 단계는
상기 적어도 하나의 표본 검사 이미지 각각에 대하여 단위 방향 성분을 추출하여 적어도 하나의 융선을 포함하는 융선 패턴을 결정하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
The method of claim 13, wherein the extracting the ridge pattern is
And extracting a unit direction component for each of the at least one specimen inspection image to determine a ridge pattern including at least one ridge.
제14항에 있어서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는
상기 추출된 융선 패턴에 포함된 융선 영역 및 비융선 영역에 대한 대비(Contrast)를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부를 결정하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
The method of claim 14, wherein the checking whether the conformity of the obtained fingerprint image can be guaranteed
And determining whether the focus is appropriate for each of the at least one specimen inspection image based on contrast between the ridge region and the non-ridge region included in the extracted ridge pattern. Image Acquisition Method.
제15항에 있어서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는
상기 융선 영역의 면적 및 융선 영역 간의 간격 중 적어도 하나를 기초로 상기 적어도 하나의 표본 검사 이미지 각각에 대한 품질 적합 여부를 결정하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
The method of claim 15, wherein checking whether the acquired fingerprint image can be guaranteed suitability
And determining whether quality is appropriate for each of the at least one sampled inspection image based on at least one of an area of the ridge area and a distance between the ridge areas.
제16항에 있어서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는
상기 결정된 상기 적어도 하나의 표본 검사 이미지 각각에 대한 초점 적합 여부 및 품질 적합 여부 중 적어도 하나를 기초로 상기 획득된 지문 이미지의 적합 여부를 결정하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
17. The method of claim 16, wherein checking whether the suitability of the obtained fingerprint image can be guaranteed
And determining whether the obtained fingerprint image is suitable based on at least one of focus fit and quality suitability for each of the determined at least one sample inspection image. .
제17항에 있어서, 상기 획득된 지문 이미지의 적합성을 보장할 수 있는지 여부를 체크하는 단계는
표본 검사 이미지가 복수 개인 경우, 초점 적합성 및 품질 적합성을 만족하는 표본 검사 이미지의 갯수가 기 설정된 갯수 이상이면 상기 획득된 지문 이미지의 적합성을 보장할 수 있는 것으로 결정하는 단계를 더 포함하는 것을 특징으로 하는 비접촉식 지문 영상 획득 방법.
18. The method of claim 17, wherein checking whether the suitability of the obtained fingerprint image can be guaranteed
If there are a plurality of sample inspection images, if the number of sample inspection images that satisfies the focus suitability and quality suitability further comprises the step of determining that the suitability of the obtained fingerprint image can be guaranteed Non-contact fingerprint image acquisition method.
KR1020130014154A 2013-02-07 2013-02-07 Apparatus of acquiring fingerprint image and method of acquiring fingerprint image Expired - Fee Related KR101274260B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130014154A KR101274260B1 (en) 2013-02-07 2013-02-07 Apparatus of acquiring fingerprint image and method of acquiring fingerprint image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130014154A KR101274260B1 (en) 2013-02-07 2013-02-07 Apparatus of acquiring fingerprint image and method of acquiring fingerprint image

Publications (1)

Publication Number Publication Date
KR101274260B1 true KR101274260B1 (en) 2013-06-17

Family

ID=48866904

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130014154A Expired - Fee Related KR101274260B1 (en) 2013-02-07 2013-02-07 Apparatus of acquiring fingerprint image and method of acquiring fingerprint image

Country Status (1)

Country Link
KR (1) KR101274260B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101768939B1 (en) * 2016-05-11 2017-08-30 주식회사 디젠트 Fingerprint acquisition auxiliary apparatus used in acquiring fingerprint by camera
KR101809543B1 (en) * 2013-11-22 2017-12-18 삼성전자주식회사 Method for recognizing contectless fingerprint and electronic apparatus for performing the same.

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100604267B1 (en) 2003-12-16 2006-07-28 학교법인연세대학교 Non-contact Fingerprint Image Detection Device
KR100895274B1 (en) 2007-08-22 2009-04-29 연세대학교 산학협력단 Non-contact Continuous Fingerprint Image Acquisition Device
KR20100127432A (en) * 2009-05-26 2010-12-06 주식회사 유니온커뮤니티 Fingerprint reader and method for acquiring fingerprint data
KR20110018598A (en) * 2009-08-18 2011-02-24 성균관대학교산학협력단 Apparatus and method for extracting directional features of a fingerprint

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100604267B1 (en) 2003-12-16 2006-07-28 학교법인연세대학교 Non-contact Fingerprint Image Detection Device
KR100895274B1 (en) 2007-08-22 2009-04-29 연세대학교 산학협력단 Non-contact Continuous Fingerprint Image Acquisition Device
KR20100127432A (en) * 2009-05-26 2010-12-06 주식회사 유니온커뮤니티 Fingerprint reader and method for acquiring fingerprint data
KR20110018598A (en) * 2009-08-18 2011-02-24 성균관대학교산학협력단 Apparatus and method for extracting directional features of a fingerprint

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101809543B1 (en) * 2013-11-22 2017-12-18 삼성전자주식회사 Method for recognizing contectless fingerprint and electronic apparatus for performing the same.
KR101768939B1 (en) * 2016-05-11 2017-08-30 주식회사 디젠트 Fingerprint acquisition auxiliary apparatus used in acquiring fingerprint by camera

Similar Documents

Publication Publication Date Title
KR102391792B1 (en) Biometric detection methods, devices and systems, electronic devices and storage media
US9489560B2 (en) On-the go touchless fingerprint scanner
US8503818B2 (en) Eye defect detection in international standards organization images
US9430691B2 (en) Fingerprint reading system
JP5521304B2 (en) Imaging apparatus, imaging program, imaging method, authentication apparatus, authentication program, and authentication method
WO2017071065A1 (en) Area recognition method and apparatus
US20140253711A1 (en) Agile non-contact biometric sensor
CN104866804B (en) A kind of method and apparatus of palm print information identification
US10441198B2 (en) Face detection device, face detection system, and face detection method
WO2017071061A1 (en) Region identification method and device
US10331015B2 (en) Method for automatically focusing on specific movable object, photographic apparatus including automatic focus function, and computer readable storage medium for storing automatic focus function program
WO2016197389A1 (en) Method and device for detecting living object, and mobile terminal
CN105678242A (en) Focusing method and apparatus in the mode of holding certificate in hands
KR101610525B1 (en) Apparatus for extracting a pupil considering illumination and method thereof
US10163009B2 (en) Apparatus and method for recognizing iris
US20080273762A1 (en) Image Determination Device, Image Determination Method, and Program
US11195298B2 (en) Information processing apparatus, system, method for controlling information processing apparatus, and non-transitory computer readable storage medium
KR101274260B1 (en) Apparatus of acquiring fingerprint image and method of acquiring fingerprint image
US10373329B2 (en) Information processing apparatus, information processing method and storage medium for determining an image to be subjected to a character recognition processing
KR101082842B1 (en) Face recognition method by using face image and apparatus thereof
KR20150005094A (en) Electronic device and method for detection eye region in electronic device
WO2015123374A1 (en) On-the-go touchless fingerprint scanner
KR20140134844A (en) Method and device for photographing based on objects
CN103207996B (en) High-accuracy fingerprint collector
CN107358159A (en) Terminal control method and device, terminal, and computer-readable storage medium

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

A302 Request for accelerated examination
PA0302 Request for accelerated examination

St.27 status event code: A-1-2-D10-D17-exm-PA0302

St.27 status event code: A-1-2-D10-D16-exm-PA0302

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

R18-X000 Changes to party contact information recorded

St.27 status event code: A-5-5-R10-R18-oth-X000

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

P14-X000 Amendment of ip right document requested

St.27 status event code: A-5-5-P10-P14-nap-X000

FPAY Annual fee payment

Payment date: 20160704

Year of fee payment: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20170606

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20170606

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000