[go: up one dir, main page]

KR20110138711A - Security robot and its control method - Google Patents

Security robot and its control method Download PDF

Info

Publication number
KR20110138711A
KR20110138711A KR1020100058756A KR20100058756A KR20110138711A KR 20110138711 A KR20110138711 A KR 20110138711A KR 1020100058756 A KR1020100058756 A KR 1020100058756A KR 20100058756 A KR20100058756 A KR 20100058756A KR 20110138711 A KR20110138711 A KR 20110138711A
Authority
KR
South Korea
Prior art keywords
security
intrusion
robot
algorithm
security robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
KR1020100058756A
Other languages
Korean (ko)
Inventor
김준호
Original Assignee
주식회사 에스원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스원 filed Critical 주식회사 에스원
Priority to KR1020100058756A priority Critical patent/KR20110138711A/en
Publication of KR20110138711A publication Critical patent/KR20110138711A/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/002Manipulators for defensive or military tasks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/022Optical sensing devices using lasers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/04Viewing devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1656Programme controls characterised by programming, planning systems for manipulators
    • B25J9/1664Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1674Programme controls characterised by safety, monitoring, diagnostic

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Manipulator (AREA)

Abstract

PURPOSE: A security robot and a control method thereof are provided to determine and actuate the task of a security robot for self by interlockingly operating the security robot and security system. CONSTITUTION: A security robot and a control method thereof comprise the following steps. The security robot calculates the result about the trespass through the previous sensing information transferred from a sensing unit using specific security algorithm(S301). The sensitivity of the security algorithm is controlled on the calculated result(S302). The robot presently receives the sensing information from one or more sensing unit. The wrong recognition about trespass is determined using the security algorithm(S304). If obstacle is suddenly exposed within the specific radius or the external environment is changed, the environmental change information is collected(S308). The operation of each component of the security robot is controlled on the basis of the environmental change information, the wrong recognition about trespass(S309).

Description

보안 로봇 및 그 제어 방법{SECURITY ROBOT AND METHOD FOR CONTROLLING SECURITY ROBOT}Security robot and its control method {SECURITY ROBOT AND METHOD FOR CONTROLLING SECURITY ROBOT}

본 발명은 보안 로봇 및 보안 로봇을 제어하는 방법에 관한 것이다. The present invention relates to a security robot and a method for controlling the security robot.

일반적으로 보안 시스템은 특정 영역 예를 들어, 사무실이나 일반 가정 등의 건물 내부에 외부적인 침입을 감지할 수 있는 센서에서 소정의 신호가 감지되는 경우, 경보 신호를 보안을 대행하는 보안 업체 또는 파출소로 전달하여 보안 요원이 출동하도록 하고 있다.In general, the security system detects a signal from a sensor that can detect external intrusion inside a specific area, such as an office or a general home, and sends a warning signal to a security company or police box that acts as a security agent. The security personnel are dispatched.

이러한, 보안 시스템은 센서의 오작동으로 인하여 경보 신호를 전송할 우려가 클 뿐만 아니라, 경보 신호가 전송된 후에도 관리자가 직접 방범 지역을 확인하여야 하기 때문에 범죄 사실 확인에 시간이 소요되는 문제점이 있다. 때문에, 보안 시스템은 특정 영역 내에 로봇을 적용함으로써, 경보 신호가 외부로 전송되기 이전에 확인 절차를 수행할 수 있다. Such a security system may not only transmit an alarm signal due to a malfunction of the sensor, but also require a manager to directly check the crime prevention area even after the alarm signal is transmitted, thus causing a problem in confirming a crime. Therefore, the security system can apply the robot within a specific area, so that the verification procedure can be performed before the alarm signal is transmitted to the outside.

그러나, 로봇은 특정 장치로부터의 명령을 전달받아야만 동작할 수 있다. 즉, 로봇은 보안을 수행하기 위해 필요한 수준의 인지능력을 구비하는 것이 매우 어렵다고 볼 수 있다.However, the robot can only operate if it receives a command from a particular device. In other words, it can be seen that it is very difficult for a robot to have the required level of cognitive ability to perform security.

본 발명이 이루고자 하는 기술적 과제는 인간과 같이 판단하고 자율적으로 행동 및 반응할 수 있는 보안 로봇 및 그 제어 방법을 제공하는 것이다.The technical problem to be achieved by the present invention is to provide a security robot and its control method capable of judging like a human being and acting and reacting autonomously.

상기한 목적을 달성하기 위한 본 발명의 특징에 따른, 방범 시스템이 해당 경비 영역 내에 침입이 발생하였는지 보안 로봇으로 확인을 요청한 경우, 상기 보안 로봇을 제어하는 방법은According to a feature of the present invention for achieving the above object, when the security system requests the security robot to confirm whether an intrusion occurred in the security area, the method for controlling the security robot is

상기 보안 로봇이 포함하는 적어도 하나의 감지 장치로부터 전달받은 이전 감지 정보들을 특정 보안 알고리즘을 이용하여 침입이 발생하였는지 판단한 결과를 통계화하는 단계, 통계화한 결과를 토대로 보안 알고리즘의 감도를 조절하는 단계, 상기 적어도 하나의 감지 장치로부터 현재 감지 정보를 전달받아, 감도를 조절한 보안 알고리즘을 이용하여 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단하는 단계, 특정 반경 내에 갑작스런 장애물이 출현하거나 외부 환경이 변화하였는지에 해당하는 환경 변화 정보를 수집하는 단계, 그리고 상기 환경 변화 정보, 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한 결과 중 적어도 하나를 토대로 상기 보안 로봇의 각 기관의 동작을 제어하는 단계를 포함한다.Statistically determining a result of determining whether an intrusion has occurred by using a specific security algorithm from previous detection information received from at least one sensing device included in the security robot, and adjusting a sensitivity of the security algorithm based on the statistical result Receiving the current sensing information from the at least one sensing device, and determining whether an intrusion has occurred or incorrectly recognized the intrusion by using a security algorithm having adjusted sensitivity, and a sudden obstacle appears within a specific radius or an external environment is changed. Collecting the environment change information corresponding to whether the information is changed, and controlling the operation of each engine of the security robot based on at least one of the environment change information, a result of determining whether an intrusion has occurred or whether an intrusion has been incorrectly recognized.

본 발명의 다른 특징에 따른, 해당 경비 영역의 보안을 담당하는 방범 시스템과 연동하여 동작하는 보안 로봇은According to another aspect of the invention, the security robot that works in conjunction with the security system that is responsible for the security of the security area

보안 알고리즘과 축적된 정보를 토대로 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단하는 제1 판단 처리부, 그리고 갑작스런 장애물이 출현하거나 외부 환경이 변화하였는지에 해당하는 환경 변화 정보를 수집하고, 상기 환경 변화 정보와 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한 결과 중 적어도 하나를 토대로 각 기관의 동작을 제어하는 제2 판단 처리부를 포함한다. A first judgment processing unit that determines whether an intrusion has occurred or has incorrectly recognized the intrusion based on the security algorithm and the accumulated information, and collects environment change information corresponding to a sudden obstacle or an external environment change; And a second determination processing unit that controls the operation of each engine based on at least one of the results of determining whether the intrusion has occurred or whether the intrusion has been recognized incorrectly.

본 발명의 실시예에 따르면, 보안 로봇은 인간이 경험을 축적하여 사고하고판단하는 것과 같이, 특정 데이터를 축적 및 통계화하여 최적의 판단을 할 수 있다. According to an embodiment of the present invention, the security robot can make an optimal judgment by accumulating and statistically collecting specific data, such as a human being accumulating experience, thinking and judging.

본 발명의 실시예에 따르면, 보안 로봇을 제어하는 방법은 보안 로봇과 시큐리티 시스템이 연동하여 동작하도록 함으로써, 보안 로봇이 해당 업무를 스스로 판단하고 자율적으로 동작하도록 할 수 있다. According to an embodiment of the present invention, the method for controlling the security robot by allowing the security robot and the security system to operate in conjunction, it is possible to allow the security robot to determine the task itself and to operate autonomously.

도 1은 본 발명의 실시예에 따른 보안 로봇을 적용하는 환경을 나타내는 도면이다.
도 2는 본 발명의 실시예에 따른 보안 로봇을 개략적으로 나타내는 도면이다.
도 3은 본 발명의 실시예에 따른 보안 로봇을 제어하는 방법을 나타내는 흐름도이다.
1 is a view showing an environment to apply a security robot according to an embodiment of the present invention.
2 is a view schematically showing a security robot according to an embodiment of the present invention.
3 is a flowchart illustrating a method of controlling a security robot according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.DETAILED DESCRIPTION Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art may easily implement the present invention. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In the drawings, parts irrelevant to the description are omitted in order to clearly describe the present invention, and like reference numerals designate like parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. Throughout the specification, when a part is said to "include" a certain component, it means that it can further include other components, without excluding other components unless specifically stated otherwise.

이하, 본 발명의 실시예에 따른 보안 로봇 및 그 제어 방법에 대하여 도면을 참고로 하여 상세하게 설명한다.Hereinafter, a security robot and a control method thereof according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

먼저, 본 발명의 실시예에 따른 보안 로봇은 방범 시스템과 연동하여 동작한다. First, the security robot according to an embodiment of the present invention operates in conjunction with the security system.

도 1은 본 발명의 실시예에 따른 보안 로봇을 적용하는 환경을 나타내는 도면이다. 1 is a view showing an environment to apply a security robot according to an embodiment of the present invention.

도 1에 도시된 바와 같이, 본 발명이 적용되는 일 예에 따른 환경은 방범 시스템(10), 로봇 운영 시스템(20), 무선 접속 장치(Wireless Access Point, 이하 "무선 AP"라고 함)(30) 및 보안 로봇(40)을 포함한다. As shown in FIG. 1, the environment according to an embodiment to which the present invention is applied is a security system 10, a robot operating system 20, a wireless access point (hereinafter referred to as a “wireless AP”) 30 And a security robot 40.

방범 시스템(10)은 해당 경비 영역의 보안을 담당한다. 이때, 방범 시스템(10)은 경비 모드 또는 해제 모드 등으로 동작한다. 여기서, 경비 모드는 방범 시스템(10)이 경비를 수행하고 있는 모드이며, 해제 모드는 방범 시스템(10)이 경비를 수행하지 않는 모드이다.The security system 10 is responsible for the security of the security area. At this time, the security system 10 operates in a guard mode or a release mode. Here, the guard mode is a mode in which the security system 10 is performing a guard, the release mode is a mode in which the security system 10 does not perform the guard.

경비 모드인 경우, 방범 시스템(10)은 경비 영역에 외부적인 침입을 인식할 수 있는 예를 들어, 센서, 카메라와 같은 특정 장치에서 소정의 신호가 인식되는 경우, 경비 영역에 침입이 발생하였는지를 확인하는 침입 확인 신호를 무선 AP(30)를 통해 보안 로봇(40)으로 전달한다.In the security mode, the security system 10 is able to recognize an external intrusion into the security area, for example, when a predetermined signal is recognized by a specific device such as a sensor or a camera, checks whether an intrusion occurs in the security area. The intrusion confirmation signal is transmitted to the security robot 40 through the wireless AP (30).

로봇 운영 시스템(20)은 보안 로봇(40)이 수행해야 하는 수행정보를 관리한다. 여기서, 수행정보는 보안 로봇(40) 수행해야 하는 스케줄에 해당하는 시간, 동작 등을 포함한다. 또한, 로봇 운영 시스템(20)은 수행정보를 AP(30)를 통해 보안 로봇(40)으로 전달한다.The robot operating system 20 manages performance information that the security robot 40 should perform. Here, the performance information includes a time, an operation, and the like corresponding to a schedule to be performed by the security robot 40. In addition, the robot operating system 20 transmits performance information to the security robot 40 through the AP 30.

보안 로봇(40)은 보안 관련 알고리즘과 축적 데이터를 토대로 침입 확인 신호에 대응하는 지점의 이상여부를 판단하는 제1 판단 처리부(A)와 제1 판단 처리부(A)의 판단결과를 토대로 보안 로봇(40)의 동작을 제어하는 제2 판단 처리부(B)를 포함한다. The security robot 40 may determine whether an abnormality of a point corresponding to the intrusion confirmation signal is determined based on the security-related algorithm and the accumulated data, based on the determination result of the first determination processing unit A and the first determination processing unit A. And a second decision processing unit (B) for controlling the operation of 40.

다음, 보안 로봇(40)은 제2 판단 처리부(B)의 판단 결과에 대응하는 운영모드로 동작한다. 여기서, 운영모드는 방범모드, 순찰모드, 출동모드, 보수모드, 안내모드 등을 포함한다. 또한, 각 운영 모드에 해당하는 보안 로봇(40)의 동작은 로봇 운영 시스템(20)이 관리하는 수행정보에 대응한다. Next, the security robot 40 operates in an operation mode corresponding to the determination result of the second determination processing unit B. Here, the operation mode includes a security mode, patrol mode, dispatch mode, maintenance mode, guidance mode and the like. In addition, the operation of the security robot 40 corresponding to each operation mode corresponds to the performance information managed by the robot operating system 20.

이와 같이, 본 발명의 실시예에 따른 보안 로봇(40)은 인간의 두뇌 즉, 좌뇌와 우뇌와 같이 제1 판단 처리부(A)와 제2 판단 처리부(B)로 구성함으로써, 인간이 경험을 축적하여 사고하고 판단하는 것과 같이, 특정 데이터를 축적 및 통계화하여 최적의 판단을 할 수 있다.As described above, the security robot 40 according to the embodiment of the present invention comprises the first judgment processing unit A and the second judgment processing unit B like the human brain, that is, the left brain and the right brain, thereby accumulating human experience. As in the case of thinking and judging, specific data can be accumulated and statisticalized for optimal judgment.

다음, 본 발명의 실시예에 따른 보안 로봇(40)의 구조를 도 2를 참조하여 상세하게 설명한다.Next, the structure of the security robot 40 according to an embodiment of the present invention will be described in detail with reference to FIG.

도 2는 본 발명의 실시예에 따른 보안 로봇을 개략적으로 나타내는 도면이다.2 is a view schematically showing a security robot according to an embodiment of the present invention.

먼저, 보안 로봇(40)은 마이크, 영상카메라, 레이져 스캔, 열화상카메라, 동작 센서, 진동 및 터치 센서 등과 같은 감지 장치(도시하지 않음)를 포함한다.First, the security robot 40 includes a sensing device (not shown), such as a microphone, an image camera, a laser scan, a thermal imaging camera, a motion sensor, a vibration and a touch sensor, and the like.

도 2에 도시된 바와 같이, 보안 로봇(40)은 제1 판단 처리부(A) 및 제2 판단 처리부(B)를 포함한다. As shown in FIG. 2, the security robot 40 includes a first determination processing unit A and a second determination processing unit B. FIG.

제1 판단 처리부(A)는 제1 통신부(410), 감도 처리부(420), 인식 처리부(430) 및 방범 처리부(440)를 포함한다. 또한, 제2 판단 처리부(B)는 제2 통신부(450), 로봇 맵 처리부(460) 및 로봇 동작 처리부(470)를 포함한다.The first determination processing unit A includes a first communication unit 410, a sensitivity processing unit 420, a recognition processing unit 430, and a security processing unit 440. In addition, the second determination processing unit B includes a second communication unit 450, a robot map processing unit 460, and a robot operation processing unit 470.

제1 통신부(410)와 제2 통신부(450)는 무선 AP(30)을 통해 방범 시스템(10) 및 로봇 운영 시스템(20)과 통신을 수행한다. The first communication unit 410 and the second communication unit 450 communicate with the security system 10 and the robot operating system 20 through the wireless AP 30.

감도 처리부(420)는 방범 처리부(440)에서 판단한 결과들 즉, 축적된 정보들을 통계화하고, 통계화한 정보를 토대로 보안 로봇(40)이 포함하는 알고리즘의 감도를 조절한다. 또한, 감도 처리부(420)는 통계화한 정보를 사용자에게 제공하고, 사용자로 하여금 직접 최적의 알고리즘의 감도를 설정하도록 할 수 있다. The sensitivity processor 420 statistics the results determined by the security processor 440, that is, the accumulated information, and adjusts the sensitivity of the algorithm included in the security robot 40 based on the statistical information. In addition, the sensitivity processing unit 420 may provide statistical information to the user and allow the user to directly set the sensitivity of the optimal algorithm.

본 발명의 실시예에 따른, 감도 처리부(420)는 축적된 정보들을 통계화하여 보안 로봇(40)이 침입 이상이 발생하였는지를 판단하는 경우에 잘못 판단하는 것을 최소화할 수 있다. According to an embodiment of the present invention, the sensitivity processing unit 420 may minimize the misjudgment when the security robot 40 determines whether an intrusion abnormality occurs by statistically accumulating the accumulated information.

인식 처리부(430)는 마이크와 영상카메라를 이용하여 외부의 음성 및 영상을 인식하고, 인식한 결과를 해당 알고리즘을 이용하여 보안 로봇(40)이 보안을 담당하는 해당 지점에 외부로부터 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한다. 이를 위하여, 인식 처리부(430)는 마이크를 이용하여 인식한 결과를 토대로 판단하는 음성인식 알고리즘과, 영상카메라를 이용하여 인식한 결과를 토대로 판단하는 영상인식 알고리즘을 포함한다. The recognition processor 430 recognizes an external voice and an image using a microphone and a video camera, and uses the corresponding algorithm to determine whether an intrusion has occurred from the outside at a point where the security robot 40 is responsible for security. Or determine whether the intrusion was mistaken. To this end, the recognition processing unit 430 includes a voice recognition algorithm for determining based on the result recognized using the microphone, and an image recognition algorithm for determining based on the result recognized using the image camera.

방범 처리부(440)는 영상카메라, 레이져 스캔, 열화상카메라 중 적어도 하나의 장치로부터 전달받은 감지 정보를 해당 알고리즘을 이용하여 보안 로봇(40)이 보안을 담당하는 해당 지점에 승인되지 않은 사람이 들어오거나, 반입 금지 물품이 반입되거나, 화재 등(이하 "침입 이상"이라고 함)이 발생하였는지를 판단한다. 이를 위하여, 방범 처리부(440)는 영상카메라로부터 전달받은 정보를 토대로 침입 이상이 발생하였는지 판단하는 영상 침입감지 알고리즘, 레이져 스캔으로부터 전달받은 정보를 토대로 침입 이상이 발생하였는지 판단하는 레이져 침입감지 알고리즘, 및 열화상카메라로부터 전달받은 정보를 토대로 침입 이상이 발생하였는지 판단하는 열화상 침입감지 알고리즘을 포함한다. The crime prevention processing unit 440 includes a person who is not authorized at the point where the security robot 40 is responsible for security by using the corresponding algorithm to detect information received from at least one device among an image camera, a laser scan, and a thermal imaging camera. It is determined whether or not a prohibited article is brought in or a fire or the like (hereinafter referred to as “intrusion abnormality”) occurs. To this end, the crime prevention processing unit 440 is an image intrusion detection algorithm for determining whether an intrusion abnormality occurred based on the information received from the image camera, a laser intrusion detection algorithm for determining whether an intrusion abnormality occurred based on the information received from the laser scan, and It includes a thermal image intrusion detection algorithm that determines whether an intrusion abnormality occurred based on the information received from the thermal imaging camera.

로봇 맵 처리부(460)는 보안 로봇(40)의 현재의 제1 위치 좌표와 보안 로봇(40)이 이동해야 하는 제2 위치 좌표 등을 포함하는 위치 정보를 로봇 동작 처리부(470)로 제공한다. The robot map processor 460 provides the robot motion processor 470 with position information including the current first position coordinates of the security robot 40 and the second position coordinates to which the security robot 40 should move.

예를 들어, 로봇 맵 처리부(460)는 보안 로봇(40)이 방범모드 또는 순찰모드 중에 방범 시스템(10)으로부터 침입 확인 신호를 수신한 경우, 침입 확인 신호에 대응하는 제2 위치 좌표를 로봇 동작 처리부(470)로 제공한다. 그러면, 로봇 동작 처리부(470)는 보안 로봇(40)의 운용모드를 출동모드로 전환하고, 보안 로봇(40)이 제2 위치 좌표로 이동 할 수 있도록 로봇의 동작을 제어한다. For example, when the security robot 40 receives the intrusion confirmation signal from the security system 10 during the security mode or the patrol mode, the robot map processing unit 460 operates the second position coordinates corresponding to the intrusion confirmation signal. It is provided to the processor 470. Then, the robot motion processing unit 470 switches the operation mode of the security robot 40 to dispatch mode, and controls the operation of the robot so that the security robot 40 can move to the second position coordinate.

로봇 동작 처리부(470)는 순간변화 대응 알고리즘을 이용하여 동작 센서, 레이져 스캔, 진동 및 터치 센서 중 적어도 하나의 장치로부터 전달받은 정보, 즉, 환경 변화 정보를 수집한다. 여기서, 환경 변화 정보는 보안 로봇(40)의 특정 반경 내에 갑작스런 장애물이 출현하거나 외부 환경이 변화하였는지에 해당하는 정보이다. The robot motion processor 470 collects information received from at least one device among a motion sensor, a laser scan, a vibration, and a touch sensor, that is, environment change information, using an instantaneous change response algorithm. Here, the environment change information is information corresponding to whether a sudden obstacle appears within a specific radius of the security robot 40 or the external environment changes.

다음, 로봇 동작 처리부(470)는 환경 변화 정보, 인식 처리부(430)와 방범 처리부(440)에서 판단한 결과 즉, 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한 결과 중 적어도 하나를 이용하여 보안 로봇(40)의 동작과 운영모드를 결정한다. 또한, 로봇 동작 처리부(470)는 결정한 보안 로봇(40)의 동작에 대응하는 보안 로봇(40)의 각 기관에 해당 명령 신호를 전송하여 보안 로봇(40)의 동작을 제어한다. 여기서, 보안 로봇(40)의 각 기관은 보안 로봇(40)의 얼굴표정, 로봇 팔, 구동부 등을 포함할 수 있다. Next, the robot motion processing unit 470 uses at least one of the result of the environment change information, the result determined by the recognition processing unit 430 and the crime prevention processing unit 440, that is, whether the intrusion has occurred or whether the intrusion has been incorrectly recognized. 40) decide the operation and operation mode. In addition, the robot operation processor 470 controls the operation of the security robot 40 by transmitting a corresponding command signal to each engine of the security robot 40 corresponding to the determined operation of the security robot 40. Here, each engine of the security robot 40 may include a facial expression of the security robot 40, a robot arm, a drive unit and the like.

다음, 본 발명의 실시예에 따른 보안 로봇을 제어하는 방법을 도 3을 참조하여 상세하게 설명한다. Next, a method of controlling a security robot according to an embodiment of the present invention will be described in detail with reference to FIG. 3.

도 3은 본 발명의 실시예에 따른 보안 로봇을 제어하는 방법을 나타내는 흐름도이다. 3 is a flowchart illustrating a method of controlling a security robot according to an embodiment of the present invention.

먼저, 보안 로봇(40)은 방범 시스템(10) 및 로봇 운영 시스템(20)과 연동하여 동작한다. First, the security robot 40 operates in conjunction with the security system 10 and the robot operating system 20.

도 3에 도시된 바와 같이, 방범 시스템(10)은 해당 경비 영역의 특정 장치에서 소정의 신호가 인식되는 경우, 경비 영역에 침입이 발생하였는지를 확인하는 침입 확인 신호를 보안 로봇(40)으로 전달한다(S301). 또한, 로봇 운영 시스템(20)은 보안 로봇(40) 수행해야 하는 스케줄에 해당하는 시간, 동작 등을 포함하는 수행정보를 보안 로봇(40)으로 전달한다(S301).As shown in FIG. 3, when a predetermined signal is recognized by a specific device in the guard area, the security system 10 transmits an intrusion confirmation signal to the security robot 40 to confirm whether an intrusion has occurred in the guard area. (S301). In addition, the robot operating system 20 transmits performance information including a time, an operation, and the like corresponding to a schedule to be performed by the security robot 40 to the security robot 40 (S301).

다음, 보안 로봇(40)은 감지 장치로부터 전달받은 정보들을 해당 알고리즘을 이용하여 침입 이상이 발생하였는지 판단한 결과들을 통계화하고, 통계화한 정보를 토대로 알고리즘의 감도를 조절한다(S302). 여기서, 알고리즘은 음성인식 알고리즘, 영상인식 알고리즘, 영상 침입감지 알고리즘, 레이져 침입감지 알고리즘, 열화상 침입감지 알고리즘 및 순간변화 대응 알고리즘 등을 포함한다. Next, the security robot 40 statistically analyzes the results of determining whether an intrusion abnormality has occurred using the corresponding algorithm using the information transmitted from the sensing device, and adjusts the sensitivity of the algorithm based on the statistical information (S302). The algorithm may include a voice recognition algorithm, an image recognition algorithm, an image intrusion detection algorithm, a laser intrusion detection algorithm, a thermal image intrusion detection algorithm, an instantaneous change corresponding algorithm, and the like.

보안 로봇(40)은 감지 장치 중 마이크와 영상카메라를 이용하여 외부의 음성 및 영상을 인식한다(S303). 다음, 보안 로봇(40)은 음성 및 영상을 인식한 결과를 해당 알고리즘을 이용하여 보안 로봇(40)이 보안을 담당하는 해당 지점에 외부로부터 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한다(S304).The security robot 40 recognizes an external voice and an image by using a microphone and an image camera among the sensing devices (S303). Next, the security robot 40 determines whether an intrusion occurs from the outside or incorrectly recognizes the intrusion at the point where the security robot 40 is responsible for security by using a result of recognizing the voice and the image (S304). ).

보안 로봇(40)은 영상카메라, 레이져 스캔, 열화상카메라 중 적어도 하나의 장치로부터 감지 정보를 전달받는다(S305). 보안 로봇(40)은 감지 정보를 해당 알고리즘을 이용하여 해당 지점에 침입 이상이 발생하였는지를 판단한다(S306).The security robot 40 receives sensing information from at least one device of an image camera, a laser scan, and a thermal imaging camera (S305). The security robot 40 determines whether an intrusion abnormality has occurred at a corresponding point using the detection information using the corresponding algorithm (S306).

보안 로봇(40)은 자신의 현재 위치에 해당하는 제1 위치 좌표와, 침입 확인 신호에 대응하는 제2 위치 좌표 즉, 이동해야 하는 위치 정보를 확인한다(S307).The security robot 40 checks the first position coordinate corresponding to its current position and the second position coordinate corresponding to the intrusion confirmation signal, that is, the position information to be moved (S307).

보안 로봇(40)은 동작 센서, 레이져 스캔, 진동 및 터치 센서 중 적어도 하나의 장치로부터 전달받은 정보를 순간변화 대응 알고리즘을 이용하여, 특정 반경 내에 갑작스런 장애물이 출현하거나 외부 환경이 변화하였는지에 해당하는 환경 변화 정보를 수집한다(S308).The security robot 40 uses an instantaneous change response algorithm to receive information received from at least one device among a motion sensor, a laser scan, a vibration, and a touch sensor, and an environment corresponding to a sudden obstacle or a change in the external environment within a specific radius. The change information is collected (S308).

보안 로봇(40)은 제2 위치 좌표로 이동하고, 수집한 환경 변화 정보, 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한 결과 중 적어도 하나를 이용하여 각 기관의 동작을 제어한다(S309). 여기서, 보안 로봇(40)의 각 기관은 보안 로봇(40)의 얼굴표정, 로봇 팔, 구동부 등을 포함할 수 있다.The security robot 40 moves to the second location coordinates, and controls the operation of each engine by using at least one of the collected environmental change information, the result of determining whether the intrusion has occurred or whether the intrusion has been incorrectly recognized (S309). Here, each engine of the security robot 40 may include a facial expression of the security robot 40, a robot arm, a drive unit and the like.

다음, 보안 로봇(40)은 각 기관의 동작을 제어한 결과, 즉 자신의 상태 정보를 방범 시스템(10)과 로봇 운영 시스템(20)으로 전송한다(S310).Next, the security robot 40 controls the operation of each engine, that is, transmits its state information to the security system 10 and the robot operating system 20 (S310).

이로써, 본 발명의 실시예에 따른 보안 로봇(40)은 인간이 경험을 축적하여 사고하고 판단하는 것과 같이, 특정 데이터를 축적 및 통계화하여 최적의 판단을 할 수 있다.As a result, the security robot 40 according to the embodiment of the present invention may accumulate and statistically determine specific data and make an optimal judgment, as humans accumulate experience and think and judge.

이상에서 설명한 본 발명의 실시예는 장치 및 방법을 통해서만 구현이 되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있으며, 이러한 구현은 앞서 설명한 실시예의 기재로부터 본 발명이 속하는 기술분야의 전문가라면 쉽게 구현할 수 있는 것이다. The embodiments of the present invention described above are not only implemented by the apparatus and method but may be implemented through a program for realizing the function corresponding to the configuration of the embodiment of the present invention or a recording medium on which the program is recorded, The embodiments can be easily implemented by those skilled in the art from the description of the embodiments described above.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements of those skilled in the art using the basic concepts of the present invention defined in the following claims are also provided. It belongs to the scope of rights.

Claims (12)

방범 시스템이 해당 경비 영역 내에 침입이 발생하였는지 보안 로봇으로 확인을 요청한 경우, 상기 보안 로봇을 제어하는 방법에 있어서,
상기 보안 로봇이 포함하는 적어도 하나의 감지 장치로부터 전달받은 이전 감지 정보들을 특정 보안 알고리즘을 이용하여 침입이 발생하였는지 판단한 결과를 통계화하는 단계,
통계화한 결과를 토대로 상기 보안 알고리즘의 감도를 조절하는 단계,
상기 적어도 하나의 감지 장치로부터 현재 감지 정보를 전달받아, 감도를 조절한 보안 알고리즘을 이용하여 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단하는 단계,
특정 반경 내에 갑작스런 장애물이 출현하거나 외부 환경이 변화하였는지에 해당하는 환경 변화 정보를 수집하는 단계, 그리고
상기 환경 변화 정보, 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한 결과 중 적어도 하나를 토대로 상기 보안 로봇의 각 기관의 동작을 제어하는 단계
를 포함하는 보안 로봇 제어 방법.
In the method for controlling the security robot when the security system has requested the security robot to confirm whether an intrusion occurred in the security area,
Statistically determining the result of the intrusion occurred using a specific security algorithm from the previous detection information received from the at least one detection device included in the security robot,
Adjusting the sensitivity of the security algorithm based on the statistical result;
Receiving current sensing information from the at least one sensing device, and determining whether an intrusion has occurred or if the intrusion has been incorrectly recognized by using a security algorithm having adjusted sensitivity;
Collecting environmental change information corresponding to the appearance of sudden obstacles or changes in the external environment within a certain radius, and
Controlling the operation of each engine of the security robot based on at least one of the environmental change information, the result of determining whether an intrusion has occurred or whether the intrusion has been recognized incorrectly;
Security robot control method comprising a.
제1항에 있어서,
상기 보안 로봇의 각 기관의 동작을 제어하는 단계는
상기 보안 로봇의 현재 위치에 해당하는 제1 위치 좌표와 상기 보안 로봇이 이동해야 하는 위치에 해당하는 제2 위치 좌표를 포함하는 위치 정보를 확인하는 단계, 그리고
상기 보안 로봇을 상기 제2 위치 좌표로 이동하도록 제어하고, 각 기관의 동작을 제어하는 단계
를 포함하는 보안 로봇 제어 방법.
The method of claim 1,
Controlling the operation of each engine of the security robot
Confirming location information including a first location coordinate corresponding to a current location of the security robot and a second location coordinate corresponding to a location to which the security robot should move; and
Controlling the security robot to move to the second position coordinates, and controlling an operation of each engine
Security robot control method comprising a.
제1항에 있어서,
상기 현재 감지 정보는 영상카메라, 레이져 스캔, 열화상카메라 중 적어도 하나의 감지 장치로부터 전달받은 정보를 포함하며,
상기 판단하는 단계는
상기 영상카메라로부터 전달받은 감지 정보를 영상 침입감지 알고리즘을 이용하여 침입이 발생하였는지 판단하는 단계,
상기 레이져 스캔으로부터 전달받은 감지 정보를 레이져 침입감지 알고리즘을 이용하여 침입이 발생하였는지 판단하는 단계, 그리고
상기 열화상카메라로부터 전달받은 감지 정보를 열화상 침입감지 알고리즘을 이용하여 침입이 발생하였는지 판단하는 단계
를 포함하는 보안 로봇 제어 방법.
The method of claim 1,
The current sensing information includes information received from at least one sensing device of an image camera, a laser scan, and a thermal imaging camera.
The determining step
Determining whether an intrusion has occurred using the video intrusion detection algorithm based on the detection information received from the video camera;
Determining whether an intrusion has occurred using the laser intrusion detection algorithm based on the detection information received from the laser scan; and
Determining whether intrusion has occurred using the thermal image intrusion detection algorithm based on the detection information received from the thermal imaging camera;
Security robot control method comprising a.
제1항에 있어서,
상기 감지 정보는 마이크와 영상카메라를 이용하여 외부의 음성 및 영상을 인식한 결과를 포함하고,
상기 판단하는 단계는
상기 마이크를 이용하여 외부의 음성을 인식하고, 인식한 결과를 음성인식 알고리즘을 이용하여 침입을 잘못 인식하였는지를 판단하는 단계, 그리고
상기 영상카메라를 이용하여 외부의 영상을 인식하고, 인식한 결과를 음성인식 알고리즘을 이용하여 침입을 잘못 인식하였는지를 판단하는 단계
를 포함하는 보안 로봇 제어 방법.
The method of claim 1,
The detection information includes a result of recognizing an external voice and an image using a microphone and an image camera,
The determining step
Recognizing an external voice using the microphone, and determining whether the intrusion was recognized incorrectly by using a speech recognition algorithm, and
Recognizing an external image using the video camera, and determining whether the intrusion is incorrectly recognized using a voice recognition algorithm based on the recognized result.
Security robot control method comprising a.
제1항에 있어서,
상기 수집하는 단계는
순간변화 대응 알고리즘을 이용하여 동작 센서, 레이져 스캔, 진동 및 터치 센서 중 적어도 하나의 감지 장치로부터 상기 환경 변화 정보를 수집하는 보안 로봇 제어 방법.
The method of claim 1,
The collecting step
And collecting the environment change information from at least one sensing device among a motion sensor, a laser scan, a vibration, and a touch sensor using an instantaneous change response algorithm.
제1항에 있어서,
상기 보안 알고리즘의 감도를 조절하는 단계는
상기 통계화한 결과를 사용자에게 제공하는 단계, 그리고
상기 사용자로부터 보안 알고리즘의 감도 설정값을 전달받아, 상기 보안 알고리즘의 감도를 조절하는 보안 로봇 제어 방법.
The method of claim 1,
Adjusting the sensitivity of the security algorithm
Providing the statistical result to a user, and
The security robot control method for adjusting the sensitivity of the security algorithm by receiving a sensitivity setting value of the security algorithm from the user.
해당 경비 영역의 보안을 담당하는 방범 시스템과 연동하여 동작하는 보안 로봇에 있어서,
보안 알고리즘과 축적된 정보를 토대로 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단하는 제1 판단 처리부, 그리고
갑작스런 장애물이 출현하거나 외부 환경이 변화하였는지에 해당하는 환경 변화 정보를 수집하고, 상기 환경 변화 정보와 침입이 발생하였는지 또는 침입을 잘못 인식하였는지를 판단한 결과 중 적어도 하나를 토대로 각 기관의 동작을 제어하는 제2 판단 처리부
를 포함하는 보안 로봇.
In the security robot operating in conjunction with the security system in charge of security of the security area,
A first judgment processing unit that determines whether an intrusion has occurred or has incorrectly recognized the intrusion based on the security algorithm and the accumulated information, and
Collecting a change information on the environment corresponding to the sudden occurrence of an obstacle or a change in the external environment, and controlling the operation of each organization based on at least one of the result of the determination of the change in the environment and whether the intrusion has occurred or the intrusion is incorrectly recognized. Judgment processing unit
Security robot comprising a.
제7항에 있어서,
상기 제1 판단 처리부는
상기 축적된 정보를 통계화하고, 통계화한 정보를 토대로 상기 보안 알고리즘의 감도를 조절하는 감도 처리부,
외부의 음성 및 영상을 인식하고, 인식한 결과를 특정 보안 알고리즘을 이용하여 침입을 잘못 인식하였는지를 판단하는 인식 처리부, 그리고
감지 장치로부터 전달받은 감지 정보를 특정 보안 알고리즘을 이용하여 침입이 발생하였는지를 판단하는 방범 처리부
를 포함하는 보안 로봇.
The method of claim 7, wherein
The first judgment processing unit
A sensitivity processor configured to statistics the accumulated information and adjust the sensitivity of the security algorithm based on the statistical information;
Recognition processing unit for recognizing external voice and video, and judging whether the intrusion was wrongly recognized using a specific security algorithm, and
Security processing unit that determines whether an intrusion occurred by using a specific security algorithm based on the detection information received from the detection device
Security robot comprising a.
제8항에 있어서,
상기 인식 처리부는
상기 음성을 인식한 결과에 해당하는 음성인식 알고리즘과, 영상을 인식한 결과에 해당하는 영상인식 알고리즘을 포함하는 보안 로봇.
The method of claim 8,
The recognition processing unit
And a voice recognition algorithm corresponding to a result of recognizing the voice and an image recognition algorithm corresponding to a result of recognizing the image.
제7항에 있어서,
상기 제2 판단 처리부는
현재 위치에 해당하는 제1 위치 좌표와 이동해야 하는 위치에 해당하는 제2 위치 좌표를 포함하는 위치 정보를 확인하는 로봇 맵 처리부, 그리고
순간변화 대응 알고리즘을 이용하여 상기 환경 변화 정보를 수집하고, 상기환경 변화 정보와 상기 제1 판단 처리부의 결과를 토대로 동작과 운영 모드를 결정하는 로봇 동작 처리부
를 포함하는 보안 로봇.
The method of claim 7, wherein
The second judgment processing unit
A robot map processor for identifying location information including a first location coordinate corresponding to a current location and a second location coordinate corresponding to a location to be moved; and
The robot motion processor which collects the environment change information using an instantaneous change corresponding algorithm and determines an operation and an operation mode based on the environment change information and the result of the first determination processor.
Security robot comprising a.
제10항에 있어서,
상기 운영 모드는 방범모드, 순찰모드, 출동모드, 보수모드, 안내모드를 포함하는 보안 로봇.
The method of claim 10,
The operation mode includes a security mode, patrol mode, dispatch mode, maintenance mode, guidance mode security.
제7항에 있어서,
상기 마이크, 영상카메라, 레이져 스캔, 열화상카메라, 동작 센서, 진동 및 터치 센서 중 적어도 하나를 포함하는 감지 장치를 포함하는 보안 로봇.
The method of claim 7, wherein
And a sensing device including at least one of the microphone, an image camera, a laser scan, a thermal imaging camera, a motion sensor, a vibration, and a touch sensor.
KR1020100058756A 2010-06-21 2010-06-21 Security robot and its control method Ceased KR20110138711A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100058756A KR20110138711A (en) 2010-06-21 2010-06-21 Security robot and its control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100058756A KR20110138711A (en) 2010-06-21 2010-06-21 Security robot and its control method

Publications (1)

Publication Number Publication Date
KR20110138711A true KR20110138711A (en) 2011-12-28

Family

ID=45504479

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100058756A Ceased KR20110138711A (en) 2010-06-21 2010-06-21 Security robot and its control method

Country Status (1)

Country Link
KR (1) KR20110138711A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101537959B1 (en) * 2013-10-08 2015-07-23 김병준 wild animals extermination robot and using Driving method Thereof
KR20150106251A (en) * 2014-03-11 2015-09-21 한화테크윈 주식회사 Emergency response system
KR20190122900A (en) * 2013-03-14 2019-10-30 구글 엘엘씨 Security in a smart-sensored home
CN111277816A (en) * 2018-12-05 2020-06-12 北京奇虎科技有限公司 Testing method and device of video detection system

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190122900A (en) * 2013-03-14 2019-10-30 구글 엘엘씨 Security in a smart-sensored home
US10853733B2 (en) 2013-03-14 2020-12-01 Google Llc Devices, methods, and associated information processing for security in a smart-sensored home
US12055905B2 (en) 2013-03-14 2024-08-06 Google Llc Smart-home environment networking systems and methods
KR101537959B1 (en) * 2013-10-08 2015-07-23 김병준 wild animals extermination robot and using Driving method Thereof
KR20150106251A (en) * 2014-03-11 2015-09-21 한화테크윈 주식회사 Emergency response system
CN111277816A (en) * 2018-12-05 2020-06-12 北京奇虎科技有限公司 Testing method and device of video detection system
CN111277816B (en) * 2018-12-05 2024-05-14 北京奇虎科技有限公司 Method and device for testing video detection system

Similar Documents

Publication Publication Date Title
EP2772810B1 (en) Recognition-based industrial automation control with person and object discrimination
EP2772336B1 (en) Recognition-based industrial automation control with position and derivative decision reference
EP2772811B1 (en) Recognition-based industrial automation control with confidence-based decision support
JP7052583B2 (en) Monitoring system
JP4942676B2 (en) Mobile robot
KR101381924B1 (en) System and method for monitoring security using camera monitoring apparatus
KR20140077726A (en) Robot monitering baby
EP2772812B1 (en) Recognition-based industrial automation control with redundant system input support
JP4057324B2 (en) Robot security system
JP2009050970A (en) Robot system and rescue robot
KR20110138711A (en) Security robot and its control method
TWI611355B (en) Barrier Door Controlling System and Barrier Door Controlling Method
KR101370982B1 (en) Apparatus for detecting motion using wireless tag and security apparatus comprising the same, and method for detecting motion using the same
KR100681840B1 (en) Robot monitoring system and robot monitoring method using same
JP4741940B2 (en) Monitoring system and control device for mobile robot constituting the system
JP2009029582A (en) Elevator door control device and method
JP2008165289A (en) Robot system
KR100721486B1 (en) Robot monitoring system capable of bypass communication and its monitoring method
JP2020530635A (en) Alarm device that distinguishes between legitimate residents and intruders
JP7393231B2 (en) Security system control device and security system
KR101083811B1 (en) Intrusion Detection Method and Security Robot Using the Same
KR20220022942A (en) Apparatus and method for handling dangerous situations outside of autonomous vehicles
KR20160086623A (en) Surveillance Robot System for abnormal behavior detection
JP7705255B2 (en) Security system, server, security device and work robot
JP7672847B2 (en) Security system, server, security device and work robot

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20100621

PA0201 Request for examination
PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20120522

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20121119

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20120522

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I