[go: up one dir, main page]

KR100744301B1 - 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법 - Google Patents

음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법 Download PDF

Info

Publication number
KR100744301B1
KR100744301B1 KR1020060049386A KR20060049386A KR100744301B1 KR 100744301 B1 KR100744301 B1 KR 100744301B1 KR 1020060049386 A KR1020060049386 A KR 1020060049386A KR 20060049386 A KR20060049386 A KR 20060049386A KR 100744301 B1 KR100744301 B1 KR 100744301B1
Authority
KR
South Korea
Prior art keywords
voice
power saving
saving mode
signal
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020060049386A
Other languages
English (en)
Inventor
김영득
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020060049386A priority Critical patent/KR100744301B1/ko
Priority to US11/516,588 priority patent/US7567827B2/en
Priority to CN2007100065186A priority patent/CN101083809B/zh
Application granted granted Critical
Publication of KR100744301B1 publication Critical patent/KR100744301B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/60—Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6008—Substation equipment, e.g. for use by subscribers including speech amplifiers in the transmitter circuit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231—Monitoring the presence, absence or movement of users
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/3287—Power saving characterised by the action undertaken by switching off individual functional units in the computer system
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W52/00—Power management, e.g. Transmission Power Control [TPC] or power classes
    • H04W52/02—Power saving arrangements
    • H04W52/0209—Power saving arrangements in terminal devices
    • H04W52/0251—Power saving arrangements in terminal devices using monitoring of local events, e.g. events related to user activity
    • H04W52/0254—Power saving arrangements in terminal devices using monitoring of local events, e.g. events related to user activity detecting a user operation or a tactile contact or a motion of the device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/74—Details of telephonic subscriber devices with voice recognition means
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 휴대 단말기에 있어서, 상기 휴대 단말기에 입력되는 음성 신호의 출력 경로를 스위칭하는 마이크(MIC) 경로 전환부와, 인터럽트 신호의 발생 여부를 판단하기 위한 소정 음성 정보를 저장하며, 상기 마이크 경로 전환부로부터 출력된 음성 신호의 정보와 상기 저장된 음성 정보와 비교하여 서로 일치하면 상기 인터럽트 신호를 발생하는 인터럽트 발생부와, 상기 휴대 단말기의 동작 모드가 절전모드로 진입할 경우 상기 마이크 경로 전환부가 상기 입력되는 음성 신호를 상기 인터럽트 발생부로 출력하도록 제어하고, 상기 절전모드에서 인터럽트 신호가 발생되면 상기 절전모드를 해제하는 제어부를 포함함을 특징으로 한다. 따라서 본 발명은 휴대 단말기가 절전모드로 진입한 상태에서도 특정 음성이나 소리가 입력되면 절전모드를 해제하고 음성 인식 모드로 전환하므로 사용자는 손을 사용할 수 없을 때 단말기가 절전모드 상태이더라도 특정 음성을 보내어 전화를 걸거나 단문 메시지를 전송할 수 있다.
음성 인식, 절전모드, 휴대 단말기

Description

음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기 및 그 방법{MOBILE TERMINAL FOR CHANGING OPERATION MODE BY USING SPEECH RECOGNITION AND A METHOD THEREOF}
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 블록 구성도.
도 2는 도 1의 마이크 경로 전환부를 상세히 도시한 도.
도 3은 도 1의 인터럽트 발생부를 상세히 도시한 도.
도 4는 본 발명의 실시 예에 따른 휴대 단말기의 동작 과정을 나타낸 순서도.
본 발명은 휴대 단말기에 관한 것으로, 특히 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기 및 그 방법에 관한 것이다.
휴대 단말기는 기본 통화 기능 이외에 음성 인식 기능 등의 부가 기능을 갖추게 되면서, 사용자가 다이얼링(Dialing)을 할 때 직접 전화번호에 해당하는 키를 선택하여 입력할 필요 없이 전화번호에 해당하는 음성을 입력하여 입력된 전화번호 로 음성 다이얼링을 수행할 수 있는 등 사용자 중심의 다양하고 편리한 기능들이 융합되고 있다.
한편, 음성 인식 기능을 구비한 기존 휴대 단말기는 절전모드(Power Saving Mode) 혹은 슬립모드(Sleep Mode)로 진입한 상태에서는 단말기의 베이스밴드 칩(Baseband Chip)(예컨대, 제어부(MSM), 오디오처리부, 모뎀부, 메모리 등)이 비활성화 되기 때문에 음성 인식을 수행할 수 없다. 따라서 단말기 사용자는 음성 인식 기능을 이용하고자 할 경우 소정 이벤트(예컨대, 키입력, 폴더 오픈 등)를 발생시켜 휴대 단말기의 절전모드를 해제한 후, 음성 인식 기능으로 진입하기 위한 특정키를 입력하여 상기 휴대 단말기가 음성 인식 모드로 진입해야만 음성 인식 관련 기능을 이용할 수 있는 불편함이 있었다.
따라서 본 발명의 목적은 음성 인식을 이용하여 절전 모드 상태를 해제할 수 있는 휴대 단말기 및 그 방법을 제공하는 데 있다.
본 발명의 다른 목적은 음성 인식을 이용하여 절전 모드에서 음성 인식 모드로 바로 전환할 수 있는 휴대 단말기 및 그 방법을 제공하는 데 있다.
본 발명의 또 다른 목적은 사용자가 절전 모드 상태에 진입한 단말기의 위치를 모르더라도 음성 인식을 이용하여 단말기의 위치를 용이하게 찾을 수 있는 방법을 제공하는 데 있다.
상기한 목적을 달성하기 위해 본 발명은 상기 휴대 단말기에 입력되는 음성 신호의 출력 경로를 스위칭하는 마이크(MIC) 경로 전환부와, 인터럽트 신호의 발생 여부를 판단하기 위한 소정 음성 정보를 저장하며, 상기 마이크 경로 전환부로부터 출력된 음성 신호의 정보와 상기 저장된 음성 정보와 비교하여 서로 일치하면 상기 인터럽트 신호를 발생하는 인터럽트 발생부와, 상기 휴대 단말기의 동작 모드가 절전모드로 진입할 경우 상기 마이크 경로 전환부가 상기 입력되는 음성 신호를 상기 인터럽트 발생부로 출력하도록 제어하고, 상기 절전모드에서 인터럽트 신호가 발생되면 상기 절전모드를 해제하는 제어부를 포함함을 특징으로 한다.
또한 본 발명은 휴대 단말기의 음성인식을 이용한 동작 모드 전환 제어 방법에 있어서, 상기 휴대 단말기의 절전모드 해제 여부를 판단하기 위한 음성 정보를 저장하는 과정과, 상기 휴대 단말기의 동작 모드가 절전모드인 상태에서 상기 휴대 단말기에 음성 신호가 입력되면 상기 입력된 음성 신호의 정보와 상기 저장된 음성 정보를 비교하는 과정과, 상기 비교결과 상기 두 정보가 서로 일치하면 상기 절전모드를 해제하는 과정을 포함함을 특징으로 한다.
이하 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 블록 구성도이다.
도시된 휴대 단말기(100)는 무선송수신부(110), 모뎀(120), 키입력부(130), 제어부(140), 표시부(150), 메모리(160), 오디오처리부(170), 인터럽트 발생부(180) 및 마이크 경로 전환부(190)를 포함한다. 또한 마이크 경로 전환부(190)는 아날로그 스위치(195) 및 단말기 모드 체크부(196)를 포함하며, 마이크 경로 전환부(190)는 오디오처리부(170)에 포함되어 구성될 수 있다.
도 2는 도 1의 마이크 경로 전환부(190)를 상세히 도시한 도이며, 도 3은 인터럽트 발생부(180)를 상세히 도시한 도이다.
도 1 내지 도 3을 참조하면, 무선송수신부(110)는 제어부(140)의 제어 하에 음성 데이터, 문자 데이터, 영상 데이터 및 제어 데이터의 송수신을 담당하며 이를 위해 송신되는 신호의 주파수를 상승변환 및 증폭하는 RF 송신기(미도시)와, 수신되는 신호를 저잡음 증폭하고 주파수를 하강 변환하는 RF 수신기(미도시) 등을 포함한다.
모뎀(MODEM)(120)은 상기 송신되는 신호를 부호화 및 변조하는 송신기(미도시) 및 상기 수신되는 신호를 복조 및 복호화 하는 수신기(미도시) 등을 구비한다.
키입력부(130)는 키 매트릭스 구조(도시하지 않음)를 가지며 문자 키, 숫자 키, 각종 기능 키 및 외부 볼륨 키를 구비하여 사용자가 입력하는 키에 대응하는 키 입력 신호를 제어부(140)로 출력한다.
제어부(140)는 본 발명의 실시 예에 따른 휴대 단말기(100)의 전반적인 동작을 제어한다. 또한 제어부(140)는 휴대 단말기(100)의 동작 모드 전환 여부를 판단하기 위한 소정 음성 정보를 마이크를 통해 입력받아 인터럽트 발생부(180)에 저장 한다. 본 발명의 실시 예에서 상기 동작 모드 전환은 음성 인식을 이용한 절전모드의 해제를 의미한다. 또한 상기 음성 정보는 사용자의 음성인 것이 바람직하나, 특정 소리가 될 수도 있으며, 제어부(140)는 사용자의 음성 또는 특정 소리를 디지털 정보로 변환시켜 인터럽트 발생부(180)에 저장한다.
제어부(140)는 휴대 단말기(100)의 동작 모드를 절전모드로 전환할 경우 이와 동시에 마이크 경로 전환부(190)에 제어신호를 출력하고, 휴대 단말기(100)의 동작 모드를 절전모드로 전환한다. 이 때 상기 제어신호는 마이크 경로 전환부(190)가 마이크를 통해 입력되는 음성 신호를 아날로그 스위치(195)를 통해 인터럽트 발생부로 출력하도록 제어하는 신호를 의미한다.
제어부(140)는 절전모드 상태에서 인터럽트 발생부(180)에서 발생된 인터럽트 신호가 수신되면 활성화 되어 상기 절전모드를 해제한다. 이 때 제어부(140)는 상기 절전모드를 해제함과 동시에 휴대 단말기(100)의 동작 모드를 음성 인식 기능을 수행하는 음성 인식 모드로 전환할 수 있다.
또한 제어부(140)는 상기 절전모드를 해제하면 이를 알리는 알람음 또는 진동을 발생시키거나, 표시부(150)의 백라이트를 활성화시킨다. 또한 제어부(140)는 사용자의 옵션 설정에 따라 특정 문자(예컨대, "주인님 부르셨습니까?")나 그림을 표시부(150)에 표시하도록 제어할 수도 있다.
표시부(150)는 LCD(Liquid Crystal Display) 등으로 이루어질 수 있으며, 휴대 단말기(100)에서 발생하는 각종 표시 데이터를 출력한다. 이 때, 상기 LCD를 터치스크린(touch screen) 방식으로 구현하는 경우, 표시부(150)는 입력부로 동작할 수도 있다.
메모리(160)는 프로그램 메모리, 데이터 메모리들로 구성될 수 있으며, 본 발명의 실시 예에 따른 휴대 단말기(100)의 동작 제어를 위해 필요한 각종 정보 및 사용자 선택정보에 의거하여 선택된 각종 정보들을 저장한다. 즉. 휴대 단말기(100)의 전반적인 동작을 위해 제어부(140)를 통해 액세스되는 운영 알고리즘을 저장하는 롬(ROM)과, 제어부(140)의 데이터 처리 과정에서 제어 명령어에 따라 데이터를 저장하는 램(RAM)으로 구성된다.
오디오처리부(170)는 마이크(Microphone)로부터 입력된 전기신호를 변조하여 음성 데이터로 변환하고, 무선송수신부(110)로부터 입력된 부호화된 음성 데이터를 전기신호로 복조하여 스피커(Speaker)로 출력한다. 또한 오디오처리부(170)는 무선송수신부(110)로 수신되는 디지털 오디오 신호를 아날로그 신호로 변환하여 재생하거나 마이크로부터 발생되는 아날로그 오디오 신호를 디지털 오디오신호로 변환하기 위해 코덱(Codec)을 구비하는 것이 바람직하다. 상기 코덱은 패킷 데이터 등을 처리하는 데이터 코덱과 음성 등의 오디오 신호를 처리하는 오디오 코덱으로 구성된다. 상기 코덱은 제어부(140)에 포함될 수도 있다.
인터럽트 발생부(180)는 아날로그/디지털컨버터(ADC)(181), 레지스터(183) 및 비교기(185)를 포함한다.
아날로그/디지털 컨버터(181)는 휴대 단말기(100)의 동작 모드가 절전모드일 때 마이크 경로 전환부(190)로부터 음성 신호가 출력되면 상기 음성 신호를 디지털 정보로 변환하여 비교기(185)로 출력한다.
레지스터(183)는 비활성화 상태의 제어부(140)를 활성화 시키는 인터럽트 신호 발생 여부를 판단하기 위한 음성 정보를 제어부(140)의 제어에 의해 저장한다. 즉, 레지스터(183)에 저장되는 음성 정보는 인터럽트 발생부(180)가 인터럽트 신호를 발생시키기 위한 기준이 되며, 결과적으로 휴대 단말기(100)의 절전모드 해제 여부를 판단하기 위한 신호가 된다.
비교기(185)는 아날로그/디지털 컨버터(181)에서 출력된 정보와 레지스터(185)에 저장된 음성 정보를 비교하고, 상기 비교결과 상기 두 정보가 서로 일치하면 인터럽트 신호를 제어부(140)로 출력한다. 즉, 레지스터(183)에 저장된 음성 정보가 "깨어나라"일 경우, 상기 아날로그/디지털 컨버터(181)에서 출력된 정보가 "깨어나라"이면 두 정보가 서로 일치하므로 비교기(185)는 인터럽트 신호를 발생하여 제어부(140)로 출력하게 된다.
마이크 경로 전환부(190)는 마이크로 입력되는 음성 신호의 출력 경로를 제어부(140)에서 출력된 제어신호에 의해 오디오처리부(170) 또는 인터럽트 발생부(180)로 스위칭한다. 이를 위해 마이크 경로 전환부(190)는 아날로그 스위치(195) 및 단말기 동작 모드 체크부(196)를 포함하는 것이 바람직하다. 상기 단말기 동작 모드 체크부(196)는 트랜지스터 1개 또는 풀-업(Pull-UP) 저항으로 구현 가능하다.
아날로그 스위치(195)는 휴대 단말기(100)의 동작 모드가 절전모드가 아닐 때에는 마이크로 입력되는 음성 신호의 출력 경로를 오디오처리부(170)로 스위칭하고, 상기 동작 모드가 절전모드일 경우에는 상기 출력 경로를 인터럽트 발생 부(180)로 스위칭 한다. 상기 오디오처리부(170)로 출력된 음성 신호는 제어부(140)로 전달된다.
단말기 동작 모드 체크부(196)는 제어부(140)로부터 제어신호가 입력되면 휴대 단말기(100)의 동작 모드가 절전모드 상태로 전환됨을 감지하고 상기 입력된 제어신호를 아날로그 스위치(195)로 전달한다.
도 4는 본 발명의 실시 예에 따른 휴대 단말기의 동작 과정을 나타낸 순서도이다.
도 1 내지 도 3을 참조하여 도 4를 설명하면 다음과 같다.
제어부(140)는 휴대 단말기(100)의 절전모드 해제여부를 판단하기 위한 음성 정보를 인터럽트 발생부(180)의 레지스터(183)에 저장한다(S110). 즉, 상기 음성 정보는 사용자의 음성 또는 특정 소리가 될 수 있으며, 인터럽트 발생부(180)가 인터럽트 신호를 발생시키기 위한 기준이 된다.
제어부(140)는 미리 설정된 시간동안 어떠한 이벤트(예컨대, 키입력, 호 송수신 등)도 발생되지 않으면 휴대 단말기(100)의 동작 모드를 절전모드로 전환한다(S120). 이 때 제어부(140)는 상기 절전모드로 전환하기 전에 오디오처리부(170)가 마이크로부터 입력되는 음성 신호의 출력 경로를 인터럽트 발생부(180)로 스위칭 하도록 제어한다. 즉, 마이크 경로 전환부(190)의 단말기 동작 모드 체크부(196)는 제어부(140)에서 출력된 제어신호를 입력받아, 아날로그 스위치(195)가 마이크로부터 입력되는 음성 신호의 출력 경로를 인터럽트 발생부(180)로 스위칭하도록 제어한다. 따라서 절전모드 상태에서 마이크를 통해 마이크 경로 전환부(190) 에 입력되는 음성 신호는 아날로그 스위치(195)에 의해 인터럽트 발생부(180)로 전달된다.
인터럽트 발생부(180)는 마이크 경로 전환부(190)의 마이크를 통해 입력된 음성 신호가 전달되는지 확인한다(S130).
인터럽트 발생부(180)는 상기 음성 신호가 전달되면 상기 전달된 음성 신호를 ADC(181)를 통해 디지털정보로 변환하고, 상기 변환된 정보와 레지스터(183)에 저장된 음성 정보를 비교기(185)를 통해 비교한다(S140).
인터럽트 발생부(180)는 상기 비교결과 상기 두 정보가 서로 일치하는지 확인한다(S150).
인터럽트 발생부(180)는 상기 두 정보가 일치하면 인터럽트 신호를 발생하여 제어부(140)로 출력하고, 제어부(140)는 상기 인터럽트 신호가 출력되면 활성화 되어 상기 절전모드를 해제한다(S160).
제어부(140)는 상기 절전모드를 해제하고, 휴대 단말기(100)의 동작 모드를 음성 인식 기능을 수행하는 음성 인식 모드로 전환한다(S170). 이 때 제어부(140)는 상기 음성 인식 모드에서 사용자의 음성 다이얼링 요청이 있으면 상기 사용자에 의해 요청된 전화번호로 호를 연결할 수 있으며, 단문 메시지 전송 요청에 따라 단문 메시지를 전송할 수도 있다.
또한 제어부(140)는 상기 절전모드를 해제한 후, 상기 절전모드의 해제를 알리는 알람음 또는 진동을 발생하도록 제어하거나, 표시부(150)의 백라이트를 활성화 하도록 제어할 수도 있다.
상술한 본 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 여러 가지 변형이 본 발명의 범위에서 벗어나지 않고 실시될 수 있다. 따라서 본 발명의 범위는 설명된 실시 예에 의하여 정할 것이 아니고 특허청구범위 뿐만 아니라 특허청구범위와 균등한 것에 의해 정해져야 한다.
상술한 바와 같이 본 발명은 휴대 단말기가 절전모드로 진입한 상태에서도 특정 음성이나 소리가 입력되면 절전모드를 해제하고 음성 인식 모드로 전환하므로 사용자는 손을 사용할 수 없을 때 단말기가 절전모드 상태이더라도 특정 음성을 보내어 전화를 걸거나 단문 메시지를 전송할 수 있다.
또한 본 발명은 절전모드의 단말기가 특정 음성이나 소리에 반응하여 절전모드를 해제하고 알람을 출력함으로써 사용자가 단말기의 위치를 모르더라도 특정 음성 신호를 보내면 알람을 발생하거나 진동을 발생하는 단말기의 반응을 통해 위치 파악이 가능하다.

Claims (20)

  1. 휴대 단말기에 있어서,
    상기 휴대 단말기에 입력되는 음성 신호의 출력 경로를 스위칭하는 마이크(MIC) 경로 전환부와,
    인터럽트 신호의 발생 여부를 판단하기 위한 소정 음성 정보를 저장하며, 상기 마이크 경로 전환부로부터 출력된 음성 신호의 정보와 상기 저장된 음성 정보와 비교하여 서로 일치하면 상기 인터럽트 신호를 발생하는 인터럽트 발생부와,
    상기 휴대 단말기의 동작 모드가 절전모드로 진입할 경우 상기 마이크 경로 전환부가 상기 입력되는 음성 신호를 상기 인터럽트 발생부로 출력하도록 제어하고, 상기 절전모드에서 인터럽트 신호가 발생되면 상기 절전모드를 해제하는 제어부를 포함함을 특징으로 하는 휴대 단말기.
  2. 제1항에 있어서, 상기 인터럽트 신호는
    상기 절전모드 상태의 제어부를 활성화 시키는 신호임을 특징으로 하는 휴대 단말기.
  3. 제1항에 있어서,
    상기 마이크 경로 전환부를 포함하는 오디오처리부를 더 포함함을 특징으로 하는 휴대 단말기.
  4. 제3항에 있어서, 상기 마이크 경로 전환부는
    상기 제어부의 제어신호에 의거하여 상기 휴대 단말기에 입력되는 음성 신호의 출력 경로를 상기 인터럽트 발생부 또는 상기 제어부 중 어느 하나로 스위칭하는 아날로그 스위치를 포함함을 특징으로 하는 휴대 단말기.
  5. 제1항에 있어서, 상기 제어부는
    상기 휴대 단말기의 동작 모드가 절전모드로 진입하면 제어신호를 발생하여 상기 마이크 경로 전환부가 음성 신호의 출력 경로를 상기 인터럽트 발생부로 스위칭 하도록 제어함을 특징으로 하는 휴대 단말기.
  6. 제1항에 있어서, 상기 인터럽트 발생부는
    인터럽트 신호의 발생 여부를 판단하기 위한 소정 음성 정보를 저장하는 레지스터와,
    상기 마이크 경로 전환부로부터 입력된 음성 신호를 디지털 정보로 변환하는 아날로그/디지털 컨버터와,
    상기 변환된 디지털 정보와 상기 저장된 음성 정보를 비교하여 서로 일치하면 상기 인터럽트 신호를 발생하는 비교기를 포함함을 특징으로 하는 휴대 단말기.
  7. 제1항에 있어서, 상기 제어부는
    상기 휴대 단말기에 입력되는 사용자의 음성 신호 또는 특정 음성 신호를 디지털 정보로 변환시켜 상기 인터럽트 발생부에 저장하도록 제어함을 특징으로 하는 휴대 단말기.
  8. 제1항에 있어서, 상기 제어부는
    상기 절전모드를 해제한 후, 상기 휴대 단말기의 동작 모드를 음성 인식 기능을 수행하는 음성 인식 모드로 자동 전환하도록 제어함을 특징으로 하는 휴대 단말기.
  9. 제1항에 있어서, 상기 제어부는
    상기 절전모드를 해제한 후, 알람음 또는 진동을 발생시키도록 제어함을 특징으로 하는 휴대 단말기.
  10. 제1항에 있어서,
    상기 절전모드가 해제되면 상기 제어부의 제어에 의해 백라이트가 활성화 되는 표시부를 더 포함함을 특징으로 하는 휴대 단말기.
  11. 제10항에 있어서, 상기 표시부는
    상기 절전모드가 해제되면 상기 제어부의 제어에 의해 특정 문자나 그림을 표시함을 특징으로 하는 휴대 단말기.
  12. 삭제
  13. 휴대 단말기의 음성 인식을 이용한 동작 모드 전환 제어 방법에 있어서,
    상기 휴대 단말기의 절전모드 해제 여부를 판단하기 위한 음성 정보를 저장하는 과정과,
    상기 휴대 단말기의 동작 모드가 절전모드인 상태에서 상기 휴대 단말기에 음성 신호가 입력되면 상기 입력된 음성 신호의 정보와 상기 저장된 음성 정보를 비교하는 과정과,
    상기 비교결과 상기 두 정보가 서로 일치하면 상기 절전모드를 해제하는 과정을 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  14. 제13항에 있어서, 상기 음성 정보는
    상기 휴대 단말기 사용자의 음성 또는 특정 음성 정보 중 어느 하나임을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  15. 제13항에 있어서,
    상기 절전모드를 해제한 후, 상기 휴대 단말기의 동작 모드를 음성 인식 기능을 수행하는 음성 인식 모드로 전환하는 과정을 더 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  16. 제15항에 있어서,
    상기 음성 인식 모드에서 사용자에 의해 요청된 전화번호로 호를 연결하는 과정을 더 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  17. 제15항에 있어서,
    상기 음성 인식 모드에서 사용자에 의해 요청된 전화번호로 단문 메시지를 전송하는 과정을 더 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  18. 제13항에 있어서,
    상기 절전모드를 해제한 후, 알람음 또는 진동을 발생하는 과정을 더 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  19. 제13항에 있어서,
    상기 절전모드를 해제한 후, 상기 휴대 단말기 표시부의 백라이트를 활성화 하는 과정을 더 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
  20. 제13항에 있어서,
    상기 절전모드를 해제한 후, 상기 휴대 단말기 표시부의 백라이트를 활성화 하는 과정을 더 포함함을 특징으로 하는 휴대 단말기의 동작 모드 전환 제어 방법.
KR1020060049386A 2006-06-01 2006-06-01 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법 Active KR100744301B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020060049386A KR100744301B1 (ko) 2006-06-01 2006-06-01 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법
US11/516,588 US7567827B2 (en) 2006-06-01 2006-09-07 Mobile terminal and method for changing an operational mode using speech recognition
CN2007100065186A CN101083809B (zh) 2006-06-01 2007-02-01 使用语音识别来改变操作模式的移动终端及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060049386A KR100744301B1 (ko) 2006-06-01 2006-06-01 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법

Publications (1)

Publication Number Publication Date
KR100744301B1 true KR100744301B1 (ko) 2007-07-30

Family

ID=38499896

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060049386A Active KR100744301B1 (ko) 2006-06-01 2006-06-01 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법

Country Status (3)

Country Link
US (1) US7567827B2 (ko)
KR (1) KR100744301B1 (ko)
CN (1) CN101083809B (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101061443B1 (ko) * 2009-07-13 2011-09-02 엘지전자 주식회사 전자 기기, 이동 단말기 및 이를 이용한 기능 수행 방법
CN103118193A (zh) * 2013-01-30 2013-05-22 广东欧珀移动通信有限公司 基于移动终端的语音切换用户的方法和装置
WO2013163113A1 (en) * 2012-04-26 2013-10-31 Nuance Communications, Inc Embedded system for construction of small footprint speech recognition with user-definable constraints
KR101524673B1 (ko) * 2013-01-24 2015-06-01 에스케이 텔레콤주식회사 절전모드를 제공하는 방법 및 그를 위한 절전모드 제공장치
US9992745B2 (en) 2011-11-01 2018-06-05 Qualcomm Incorporated Extraction and analysis of buffered audio data using multiple codec rates each greater than a low-power processor rate
CN109979452A (zh) * 2019-03-21 2019-07-05 中山安信通机器人制造有限公司 车载机器人自然语言处理方法、计算机装置及计算机可读存储介质
US10381007B2 (en) 2011-12-07 2019-08-13 Qualcomm Incorporated Low power integrated circuit to analyze a digitized audio stream
US10455342B2 (en) 2013-06-05 2019-10-22 Samsung Electronics Co., Ltd. Sound event detecting apparatus and operation method thereof

Families Citing this family (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102781075B (zh) * 2011-05-12 2016-08-24 中兴通讯股份有限公司 一种降低移动终端通话功耗的方法及移动终端
US8666751B2 (en) * 2011-11-17 2014-03-04 Microsoft Corporation Audio pattern matching for device activation
KR20130133629A (ko) 2012-05-29 2013-12-09 삼성전자주식회사 전자장치에서 음성명령을 실행시키기 위한 장치 및 방법
US9142215B2 (en) * 2012-06-15 2015-09-22 Cypress Semiconductor Corporation Power-efficient voice activation
KR101925412B1 (ko) * 2012-07-03 2018-12-05 삼성전자주식회사 휴대 단말기의 슬립 모드 제어 방법 및 장치
CN103543814B (zh) * 2012-07-16 2016-12-07 瑞昱半导体股份有限公司 信号处理装置以及信号处理方法
CN103581419A (zh) * 2012-08-06 2014-02-12 百度在线网络技术（北京）有限公司 移动通信设备及其控制方法
US9081571B2 (en) * 2012-11-29 2015-07-14 Amazon Technologies, Inc. Gesture detection management for an electronic device
KR102179811B1 (ko) * 2012-12-03 2020-11-17 엘지전자 주식회사 포터블 디바이스 및 음성 인식 서비스 제공 방법
KR101732137B1 (ko) * 2013-01-07 2017-05-02 삼성전자주식회사 원격 제어 장치 및 전력 제어 방법
US20140244273A1 (en) * 2013-02-27 2014-08-28 Jean Laroche Voice-controlled communication connections
US11393461B2 (en) 2013-03-12 2022-07-19 Cerence Operating Company Methods and apparatus for detecting a voice command
US9361885B2 (en) 2013-03-12 2016-06-07 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9112984B2 (en) 2013-03-12 2015-08-18 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
CN104049707B (zh) * 2013-03-15 2019-02-15 马克西姆综合产品公司 永远接通低功率关键字检出
US9892729B2 (en) * 2013-05-07 2018-02-13 Qualcomm Incorporated Method and apparatus for controlling voice activation
US20140343949A1 (en) * 2013-05-17 2014-11-20 Fortemedia, Inc. Smart microphone device
CN103310792A (zh) * 2013-06-05 2013-09-18 苏州惠瑞自动化集成有限公司 带有中断功能的自动化语音信号处理系统
ITTO20130910A1 (it) 2013-11-08 2015-05-09 St Microelectronics Srl Dispositivo trasduttore acustico microelettromeccanico con migliorate funzionalita' di rilevamento e relativo apparecchio elettronico
CN103686962A (zh) * 2013-12-05 2014-03-26 深圳市中兴移动通信有限公司 低功耗唤醒移动终端的方法及装置
US9602920B2 (en) * 2014-01-30 2017-03-21 Dsp Group Ltd. Method and apparatus for ultra-low power switching microphone
CN105426155A (zh) * 2014-09-23 2016-03-23 联想(北京)有限公司 一种操作输入方法及电子设备
US9779725B2 (en) * 2014-12-11 2017-10-03 Mediatek Inc. Voice wakeup detecting device and method
US9775113B2 (en) 2014-12-11 2017-09-26 Mediatek Inc. Voice wakeup detecting device with digital microphone and associated method
CN104598192B (zh) * 2014-12-29 2018-08-07 联想(北京)有限公司 信息处理方法及电子设备
CN105739977A (zh) * 2016-01-26 2016-07-06 北京云知声信息技术有限公司 一种语音交互设备的唤醒方法及装置
US11437020B2 (en) 2016-02-10 2022-09-06 Cerence Operating Company Techniques for spatially selective wake-up word recognition and related systems and methods
CN105828252B (zh) * 2016-03-14 2019-06-25 联想(北京)有限公司 一种麦克风控制权的分配方法及电子设备
US11600269B2 (en) 2016-06-15 2023-03-07 Cerence Operating Company Techniques for wake-up word recognition and related systems and methods
GB2552721A (en) 2016-08-03 2018-02-07 Cirrus Logic Int Semiconductor Ltd Methods and apparatus for authentication in an electronic device
GB2545534B (en) 2016-08-03 2019-11-06 Cirrus Logic Int Semiconductor Ltd Methods and apparatus for authentication in an electronic device
GB2555660B (en) 2016-11-07 2019-12-04 Cirrus Logic Int Semiconductor Ltd Methods and apparatus for authentication in an electronic device
CN111971742B (zh) 2016-11-10 2024-08-20 赛轮思软件技术(北京)有限公司 与语言无关的唤醒词检测的技术
US10283117B2 (en) * 2017-06-19 2019-05-07 Lenovo (Singapore) Pte. Ltd. Systems and methods for identification of response cue at peripheral device
CN112837689B (zh) * 2019-11-25 2024-09-10 阿里巴巴集团控股有限公司 会议系统、数据通信系统及语音信息处理方法
JP6728507B2 (ja) * 2020-01-17 2020-07-22 クゥアルコム・インコーポレイテッドＱｕａｌｃｏｍｍ Ｉｎｃｏｒｐｏｒａｔｅｄ デジタル化された音声ストリームを分析するための低電力集積回路

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000349866A (ja) 1999-06-02 2000-12-15 Nec Shizuoka Ltd 移動端末およびモード切り替え方法、並びに記録媒体
KR20010063844A (ko) * 1999-12-24 2001-07-09 오길록 저전력 음성 명령어 구동 휴대 정보단말 장치 및 구동 방법
KR20030046926A (ko) * 2001-12-07 2003-06-18 엘지전자 주식회사 이동통신 단말기에서 음성을 이용한 호 신호 송수신방법
KR20050073958A (ko) * 2004-01-12 2005-07-18 삼성전자주식회사 이동 통신 단말기의 음성 인식을 이용한 호 신호 송수신방법
KR20060096684A (ko) * 2005-03-02 2006-09-13 주식회사 팬택앤큐리텔 단말기 사용자의 음성을 인식하여 단말기 사용자의 감정상태에 따라 반응하는 통신 단말기 및 그 방법과, 상기 통신단말기에서의 마이크 위치 제어 방법

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4331710A1 (de) * 1993-09-17 1995-03-23 Sel Alcatel Ag Verfahren und Vorrichtung zum Erstellen und Bearbeiten von Textdokumenten
US6449496B1 (en) * 1999-02-08 2002-09-10 Qualcomm Incorporated Voice recognition user interface for telephone handsets
US6901270B1 (en) * 2000-11-17 2005-05-31 Symbol Technologies, Inc. Apparatus and method for wireless communication
JP3905703B2 (ja) * 2000-11-29 2007-04-18 株式会社ルネサステクノロジ データプロセッサ及びデータ処理システム
KR100469919B1 (ko) * 2002-09-12 2005-02-21 주식회사 아이필소닉 다중선택 기능을 갖는 음향 장치 및 사운드 신호 제어 장치
KR100617681B1 (ko) 2003-04-15 2006-08-28 삼성전자주식회사 휴대용 단말기의 회전키 장치 사용 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000349866A (ja) 1999-06-02 2000-12-15 Nec Shizuoka Ltd 移動端末およびモード切り替え方法、並びに記録媒体
KR20010063844A (ko) * 1999-12-24 2001-07-09 오길록 저전력 음성 명령어 구동 휴대 정보단말 장치 및 구동 방법
KR20030046926A (ko) * 2001-12-07 2003-06-18 엘지전자 주식회사 이동통신 단말기에서 음성을 이용한 호 신호 송수신방법
KR20050073958A (ko) * 2004-01-12 2005-07-18 삼성전자주식회사 이동 통신 단말기의 음성 인식을 이용한 호 신호 송수신방법
KR20060096684A (ko) * 2005-03-02 2006-09-13 주식회사 팬택앤큐리텔 단말기 사용자의 음성을 인식하여 단말기 사용자의 감정상태에 따라 반응하는 통신 단말기 및 그 방법과, 상기 통신단말기에서의 마이크 위치 제어 방법

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101061443B1 (ko) * 2009-07-13 2011-09-02 엘지전자 주식회사 전자 기기, 이동 단말기 및 이를 이용한 기능 수행 방법
US9992745B2 (en) 2011-11-01 2018-06-05 Qualcomm Incorporated Extraction and analysis of buffered audio data using multiple codec rates each greater than a low-power processor rate
US10381007B2 (en) 2011-12-07 2019-08-13 Qualcomm Incorporated Low power integrated circuit to analyze a digitized audio stream
US11069360B2 (en) 2011-12-07 2021-07-20 Qualcomm Incorporated Low power integrated circuit to analyze a digitized audio stream
US11810569B2 (en) 2011-12-07 2023-11-07 Qualcomm Incorporated Low power integrated circuit to analyze a digitized audio stream
WO2013163113A1 (en) * 2012-04-26 2013-10-31 Nuance Communications, Inc Embedded system for construction of small footprint speech recognition with user-definable constraints
US9117449B2 (en) 2012-04-26 2015-08-25 Nuance Communications, Inc. Embedded system for construction of small footprint speech recognition with user-definable constraints
KR101524673B1 (ko) * 2013-01-24 2015-06-01 에스케이 텔레콤주식회사 절전모드를 제공하는 방법 및 그를 위한 절전모드 제공장치
CN103118193A (zh) * 2013-01-30 2013-05-22 广东欧珀移动通信有限公司 基于移动终端的语音切换用户的方法和装置
US10455342B2 (en) 2013-06-05 2019-10-22 Samsung Electronics Co., Ltd. Sound event detecting apparatus and operation method thereof
CN109979452A (zh) * 2019-03-21 2019-07-05 中山安信通机器人制造有限公司 车载机器人自然语言处理方法、计算机装置及计算机可读存储介质

Also Published As

Publication number Publication date
CN101083809A (zh) 2007-12-05
US7567827B2 (en) 2009-07-28
CN101083809B (zh) 2010-12-01
US20070281761A1 (en) 2007-12-06

Similar Documents

Publication Publication Date Title
KR100744301B1 (ko) 음성 인식을 이용하여 동작 모드를 전환하는 휴대 단말기및 그 방법
KR101305286B1 (ko) 휴대용 단말기 및 그의 응급전화 통화방법
KR100233169B1 (ko) 휴대폰에서 배경음악 송출 방법
KR100605820B1 (ko) 피디에이 기능과 폰 기능을 구비한 피디에이폰에서사용자데이터 보호방법
KR101091245B1 (ko) 휴대단말기의 알람모드에서 수신알림 제한방법
KR100762658B1 (ko) 휴대단말기에서 볼륨 조절 장치 및 방법
KR101196379B1 (ko) 휴대용 단말기의 알람 방법
KR100573481B1 (ko) 벨 모드 자동 전환을 통한 이동통신 단말기의 위치 알림방법
KR100606092B1 (ko) 휴대 단말기의 하울링 방지 방법
KR100790147B1 (ko) 휴대단말기에서 오디오 파일을 출력하는 장치 및 방법
KR100678030B1 (ko) 이동 통신 단말기의 자동 응답 기능 수행 방법
KR100770881B1 (ko) 음성 인식을 이용하여 호 수신을 거부하는 휴대 단말기 및그 방법
JP3806592B2 (ja) 携帯通信機器
KR100675185B1 (ko) 이동통신단말기에서 주변기기를 이용한 알람 및 호착신고지방법
KR100827173B1 (ko) 휴대 단말기의 통화 내용 녹음 방법
KR100713474B1 (ko) 휴대단말기와 헤드셋간에 정보 송수신 방법
KR100754640B1 (ko) 휴대단말기에서 스탑와치 동작장치
KR100776305B1 (ko) 휴대 단말기의 취침 모드 제어 방법
KR20050019174A (ko) 터치스크린 엘씨디를 구비한 단말기의 엘씨디 전원 제어방법 및 그 방법을 채택한 단말기
KR20050024179A (ko) 다음 알람 해제 방법
KR100797485B1 (ko) 일시정지기능을 가진 휴대폰
KR100678195B1 (ko) 휴대용 단말기의 매너모드에서 상황을 알리는 방법
KR100604600B1 (ko) 이동통신단말기에서의 알람 방법
KR101409587B1 (ko) 분실된 휴대 단말기 관리 방법
KR20040016476A (ko) 이동통신 단말기에서의 수신모드 자동변환 설정방법

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20060601

PA0201 Request for examination
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20070226

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20070612

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20070724

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20070724

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
G170 Re-publication after modification of scope of protection [patent]
PG1701 Publication of correction
PR1001 Payment of annual fee

Payment date: 20100629

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20110629

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20120628

Start annual number: 6

End annual number: 6

FPAY Annual fee payment

Payment date: 20130627

Year of fee payment: 7

PR1001 Payment of annual fee

Payment date: 20130627

Start annual number: 7

End annual number: 7

FPAY Annual fee payment

Payment date: 20140627

Year of fee payment: 8

PR1001 Payment of annual fee

Payment date: 20140627

Start annual number: 8

End annual number: 8

FPAY Annual fee payment

Payment date: 20150629

Year of fee payment: 9

PR1001 Payment of annual fee

Payment date: 20150629

Start annual number: 9

End annual number: 9

FPAY Annual fee payment

Payment date: 20160629

Year of fee payment: 10

PR1001 Payment of annual fee

Payment date: 20160629

Start annual number: 10

End annual number: 10

FPAY Annual fee payment

Payment date: 20170629

Year of fee payment: 11

PR1001 Payment of annual fee

Payment date: 20170629

Start annual number: 11

End annual number: 11

FPAY Annual fee payment

Payment date: 20180628

Year of fee payment: 12

PR1001 Payment of annual fee

Payment date: 20180628

Start annual number: 12

End annual number: 12

FPAY Annual fee payment

Payment date: 20190627

Year of fee payment: 13

PR1001 Payment of annual fee

Payment date: 20190627

Start annual number: 13

End annual number: 13

PR1001 Payment of annual fee

Payment date: 20220509

Start annual number: 16

End annual number: 16

PR1001 Payment of annual fee

Payment date: 20230807

Start annual number: 17

End annual number: 17

PR1001 Payment of annual fee

Payment date: 20240715

Start annual number: 18

End annual number: 18