[go: up one dir, main page]

KR20070006684A - 인간/머신 인터페이스 방법 및 디바이스 - Google Patents

인간/머신 인터페이스 방법 및 디바이스 Download PDF

Info

Publication number
KR20070006684A
KR20070006684A KR1020067013373A KR20067013373A KR20070006684A KR 20070006684 A KR20070006684 A KR 20070006684A KR 1020067013373 A KR1020067013373 A KR 1020067013373A KR 20067013373 A KR20067013373 A KR 20067013373A KR 20070006684 A KR20070006684 A KR 20070006684A
Authority
KR
South Korea
Prior art keywords
interactions
active zones
detected
active
zones
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020067013373A
Other languages
English (en)
Other versions
KR100933074B1 (ko
Inventor
로스 키리 잉
Original Assignee
센시티브 오브젝트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 센시티브 오브젝트 filed Critical 센시티브 오브젝트
Publication of KR20070006684A publication Critical patent/KR20070006684A/ko
Application granted granted Critical
Publication of KR100933074B1 publication Critical patent/KR100933074B1/ko
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명은 인간-머신 인터페이스 방법과 관련되는데, 상기 방법은: 인터페이스 객체가 속하는 활성 구역들과의 물리적 상호작용을 발생하는 단계와, 여기서 상기 활성 구역들은 소정의 정보 항목들과 관련되며; 적어도 하나의 물리적 크기를 측정함으로써 상기 상호작용이 발생하는 활성 구역들을 검출하는 단계와; 그리고 각 검출된 상호작용과 상기 상호작용이 검출된 활성 구역에 대응하는 소정의 정보 항목을 관련시키는 단계를 포함한다. 활성 구역들이 소정의 유한 길이의 시간에 대해 정의된 이후에 상기 소정의 시간 길이의 마지막에서 활성해제되며; 상기 활성 구역들이 활성해제되는 동안 상기 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 제 1 검출 상호작용들에 따라 자동으로 재정의된다.
인간-머신 인터페이스, 음파, 활성구역, 활성해제.

Description

인간/머신 인터페이스 방법 및 디바이스{MAN/MACHINE INTERFACE DEVICE AND METHOD}
본 발명은 인간-머신 인터페이스 방법 및 디바이스들에 관한 것이다.
보다 구체적으로는, 본 발명은 인간-머신 인터페이스 방법과 관련되는데, 상기 방법은: 인터페이스 객체가 속하는 활성 구역들과의 물리적 상호작용(interaction)을 발생하는 단계와, 여기서 상기 활성 구역들은 소정의 정보 항목들과 관련되며; 적어도 하나의 물리적 크기를 측정함으로써 상기 상호작용이 발생하는 활성 구역들을 검출하는 단계와; 그리고 각 검출된 상호작용과 상기 상호작용이 검출된 활성 구역에 대응하는 소정의 정보 항목을 관련시키는 단계를 포함한다.
문서 FR-A-2 811 107은 이러한 방법의 예를 설명한다. 하지만, 이러한 타입의 방법들은 특히, 인터페이스 객체의 노화 및 온도와 같은 주변 조건들의 변화들과 같이 시간이 지남에 따라 드리프팅(drifting) 문제가 발생한다. 마침내, 이는 인간-머신 인터페이스 오동작을 야기한다.
본 발명의 특정적인 목적은 이러한 결점들을 완화하는 것이다.
이를 위해, 본 발명에 따르면, 당해 종류의 방법은, 활성 구역들이 소정의 유한 길이의 시간에 대해 정의된 이후에 상기 소정의 시간 길이의 마지막에서 활성해제되며; 상기 활성 구역들이 활성해제되는 동안 상기 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 제 1 검출 상호작용들에 따라 자동으로 재정의되는 것을 특징으로 한다.
이러한 특징들에 의하여, 활성 구역들은 정상적으로 재정의되며, 이에 따라 상기의 드리프팅 문제들을 피하게 된다.
본 발명의 방법의 다양한 구현들에서, 또한 하기의 특징들 중 하나 이상에 대한 선택적인 의존(recourse)이 있어야 한다.
ㆍ상기 활성 구역들이 활성해제되는 동안에. 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 상호작용들의 소정의 초기 시퀀스가 검출되는 경우에만 자동으로 재정의된다;
ㆍ상호작용들의 상기 소정의 시퀀스는 소정의 시간기간보다 짧은 시간 간격 내에서 상기 인터페이스 객체 상의 하나의 위치에서 2개의 연속적인 상호작용들을 포함한다;
ㆍ상기 2개의 연속적인 상호작용들의 위치는 제 1 활성 구역을 결정한다;
ㆍ상기 초기 시퀀스에 후속하여 활성 구역들을 재정의하는 단계 동안에, 소정의 개수(K)의 활성 구역들이 상기 초기 소정의 시퀀스의 상호작용들 이후에 검출되는 K개의 제 1 상호작용들 위치들에서 연속하여 정의된다(따라서, K, 초기 시퀀스가 하나의 활성 구역을 정의하는 경우에는 K+1에 일치하거나 초기 시퀀스가 p개의 활성 구역들을 정의하는 경우에는 k+p개의 활성 구역들에 일치하는 총 N개의 활성 구역들을 정의한다);
ㆍ만일 상호작용이 검출된 이후 소정의 시간 경과 동안에 어떤 후속 상호작용이 검출되지 않는 경우에, 활성 구역들을 재정의하는 단계는 중단된다.
ㆍ활성 구역들을 재정의하는 단계 동안, 상기 측정된 물리적 크기가 제 1 소정의 한계보다 큰 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출되며, 활성 구역들을 재정의하는 상기 단계 이후에, 상기 측정된 물리적 크기가 자체적으로 상기 제 1 한계보다 작은 제 2 소정의 한계보다 큰 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출된다.
ㆍ활성 구역들을 재정의하는 단계 동안, 상기 측정된 물리적 크기가 제 1 소정의 한계 기간보다 긴 기간 동안 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출되며, 활성 구역들을 재정의하는 상기 단계 이후에, 상기 측정된 물리적 크기가 자체적으로 상기 제 1 한계 기간보다 짧은 제 2 소정의 한계 기간보다 긴 기간 동안 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출된다.
ㆍ활성 구역들이 활성해제되는 동안에, 인터페이스 객체와의 상호작용들이 검출되는 때에, P개의 제 1 검출 상호작용들이 기록 단계 동안에 기록되고, 여기서 P는 소정의 제로(zero)가 아닌 정수이며, 그리고 Z개의 활성 구역들이 상기 제 1의 P개의 검출 상호작용들에 따라 자동으로 재정의되고, 여기서 Z는 P보다 작은 제로 아닌 정수이며 다른 구역들에서 검출된 상호작용들에 대응하며, 이후에 P개의 제 1 검출 상호작용들에 대응하는 소정의 정보 항목들이 결정된다;
ㆍ만일 P개의 제 1 상호작용들 중 하나 이후에 소정의 시간경과 기간보다 짧은 시간 기간 내에서 후속 상호작용이 뒤따르지 않는 경우에, 상기 기록 단계는 중단된다;
ㆍ상기 활성 구역들이 활성해제되는 동안에, 인터페이스 객체와의 상호작용들이 검출되는 때에, P개의 제 1 검출 상호작용들이 기록 단계 동안에 기록되고, 여기서 P는 제로 아닌 정수이며, 상기 기록 단계는 상호작용(P)이 상기 기록 단계의 제 1 상호작용과 실질적으로 동일한 때에 종료되며, P-1개의 활성 구역들이 상기 P개의 제 1 검출 상호작용들에 따라 자동으로 재정의되는데, 여기서 이들은 다른 구역들에서 검출된 상호작용들에 대응하며, 이후에 상기 P-1개의 재정의된 활성 구역들에 대응하는 소정의 정보 항목들이 결정되는데, 여기서 상기 정보 항목들은 개수(P-1)에 의존한다;
ㆍ활성 구역들 세트는 복수의 활성 구역들 그룹으로 세분되며, 인터페이스 객체와의 상호작용들이 활성해제된 활성 구역들 그룹에 속하는 활성 구역에서 검출되는 때에, 상기 활성 구역들 그룹의 활성 구역들은 다른 활성 구역들 그룹들과 독립적인 방식으로 자동으로, 연속하여 재정의된다;
ㆍ상기 활성 구역들이 활성해제되는 동안에, 상기 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 연속하여 검출되는 제 1 상호작용들에 따라 자동으로, 연속하여 재정의되며, 상기 검출 상호작용들은 상기 소정의 정보 항목들과 실질적으로 동시에 관련된다; 그리고
ㆍ상기 물리적 크기 측정은 음파, 기계적 변형, 후방굴절된 광량, 및 전계로부터 선택된다.
본 발명은 또한 상술한 방법을 특정적으로 수행하는 인간-머신 인터페이스 디바이스를 제공한다.
본 발명의 다른 특징들 및 이점들은 비-제한적인 예에 의해 제공된 본 발명의 실시예의 상세한 설명으로부터, 그리고 첨부 도면을 참조하여 제공된다.
도 1은 본 발명에 따른 방법을 수행하는, 어코스틱(acoustic) 인터페이스 객체를 포함하는 디바이스의 예를 보여주는 투시도이다.
도 2는 도 1의 디바이스의 블록도이다.
도 1은 본 발명을 수행하는 디바이스(1)를 도시하는데, 이는 예를 들어:
ㆍ마이크로컴퓨터 중앙 처리 유닛(CPU)(2);
ㆍCPU(2)에 연결된 스크린(3); 그리고
ㆍ예에서 설명되는, 정보를 CPU(2)에 전달할 수 있는 인간-머신 인터페이스(4)를 포함한다.
인간-머신 인터페이스(4)는 고형의 인터페이스 객체(5)를 포함하는데, 이는 본 예에서 특히, 프랑스 특허출원 제 02/07208호에서 설명되는, 그 표면(9)상에 충격(impact)들을 발생함으로써 음파들이 전파되게 하는 테이블로 구성된다.
이에 불구하고, 인터페이스 객체는 단일 부품 또는 함께 조립되어 있거나 단순히 상호 접촉하고 있는 복수의 부품들로서 구성되는 임의의 다른 이종의 객체 또는 동종의 객체에 의해 구성될 수 있는데, 그 예로서, 창문, 유리창, 도어(door), 휴대용 평판(portable tablet), 컴퓨터 스크린, 디스플레이 패널, 상호작용 단말기, 완구, 자동차 대시보드, 비행기의 또는 자동차 전방의 좌석 뒷면의 후방 표면, 벽, 마루, 자동차 범퍼(여기서, 정보는 이후에 범퍼에 대한 충격 위치가 되는 어코스틱 인터페이스에 의해 송신되며) 등이 있다.
적어도 하나의 사운드 센서(6)가 객체(5)에 고정되는데, 상기 사운드 센서(6)는 케이블(8) 또는 임의의 다른 전송 수단(무선, 적외선 등)에 의해 예를 들어, CPU(2)의 마이크로폰(7)에 연결되어, 상기 음파들을 픽업하여 CPU(2)에 송신한다. 도시된 예에서, 단 하나의 센서(6)만이 있지만, 본 발명의 범위를 벗어남이 없이 복수의 센서들이 사용될 수 있다.
예로서, 사운드 센서(6)는 압전성 센서 또는 다른 종류의 센서(예를 들어, 커패시터 센서, 자기변형 센서, 전자기 센서, 속도 마이크로폰, 광 센서[레이저 간섭계, 레이저 진동 미터, ...] 등)이 될 수 있다. 예로서, 이는 어코스틱 인터페이스를 형성하는 객체(5)에서 전파하는 음파들로 인한 변위들의 진폭, 또는 사실상 이러한 변위들의 속도 또는 가속도와 같은 물리적 크기들을 측정할 수 있다. 또한, 센서(6)는 객체(5)에서 전파하는 음파들로 인한 압력 변화들을 측정하는 압력 센서가 될 수 있다.
객체(5)의 외부 표면(9)(특정적으로, 도 1에서 도시된 예에서 상기 객체(5)를 구성하는 테이블의 상부 표면)의 적어도 일부에 대하여, N개의 활성 구역들(10)이 정의되는데, 여기서 개수(N)는 일반적으로 1보다 크며, 활성 구역들은 물리적으로 정의될 필요는 없지만, 예를 들어 물리적 마킹(marking)에 의해, 사실상 이미지 를 표면(9)상에 투사함으로써 획득되는 광 마킹에 의해 잘 정의될 수 있다.
다양한 활성 구역들(10)은 단순히 표면(9)의 나머지와 동일한 표면(9)의 부분들이 될 수 있다. 이에 불구하고, 구역들(10)중 하나와의 상호작용(예를 들어, 충격)이 활성 구역들(10)의 다른 하나 또는 표면(9)의 다른 부분에 대한 충격에 의해 발생된 신호와는 다른 어코스틱 신호를 발생하는 한에서, 활성 구역들은 서로에 대해 다르며, 또한 표면(9)의 나머지와 다르다.
활성 구역들(10) 각각은 사용자가 중앙 유닛(2)에 송신하기 원할 수 있는 소정의 정보와 관련된다. 당해의 정보는 예를 들어, 명령, 숫자(digit), 문자, 표면(9)상의 위치, 또는 키보드, 제어 버튼들, 마우스 등과 같은 종래의 입력 인터페이스들에 의해 마이크로컴퓨터(또는 다른 전자 장치의 CPU)와 같은 전자 디바이스에 통상적으로 송신될 수 있는 임의의 다른 종류의 정보가 될 수 있다.
당해의 정보는 명시적이 아닐 수 있거나, 가능하게는 표면(9)상의 마킹(10a)에 의해 보통문으로(in the clear) 표시될 수 있다(구역들(10)을 정의하는 마킹과 마찬가지로, 이 마킹은 물리적으로 표면(9)에 인가될 수 있거나, 대신에 광 이미지들의 형태로 상기 표면(9)상으로 투사될 수 있다).
각 활성 구역(10)과 관련된 소정의 정보는 항상 동일하거나, 혹은 CPU(2)에서의 프로그램 실행에 따라 변할 수 있거나, 또는 다른 활성 구역들(10) 상에서의 이전의 동작들에 의존할 수 있다(예를 들어, 일정 활성 구역들(10)은 이후에 활성될 하나 이상의 활성 구역들(10)에 제공된 기능을 변경하도록 작동될 수 있는데, 이는 예를 들어, 특수 캐릭터(character)들, 특정 기능들에 대한 액세스를 위하거 나, 사실상 대문자들의 사용을 위한 것 등이다). 임의의 경우에서, 정보는 늦어도 각 활성 구역(10)이 활성화되는 순간에 효율적으로 결정되는 한 소정의 정보가 된다.
따라서, 객체(5)의 다양한 활성 구역들(10)은 손톱, 손가락 끝 또는 펜, 철필(stylus)과 같은 기구 등에 의해 동등하게 잘 이루어 수 있는 활성 구역들을 탭핑(tapping) 함으로써 활성화될 수 있는 진정한 가상 키보드를 구성한다.
도 2에 도시된 바와같이, 센서(6)(SENS.)는 통상적으로 입력(7)을 통해 증폭기(11)에 연결될 수 있는데, 여기서 증폭기(11)는 자체적으로 아날로그-대-디지털 변환기(A/D)(12)에 연결되며, A/D는 수신 신호를 CPU(2)의 프로세서(13)에 전송하며, 프로세서는 자체적으로 하나 이상의 메모리들(MEM.)(14)에 연결되며, 상기의 스크린(3)(SCR.) 또는 사용자에게 정보를 복귀시키는 임의의 다른 출력 인터페이스를 제어한다.
어코스틱 인터페이스(4)는 정보를 마이크로프로세서 이외의 임의의 전자 디바이스, 예를 들어 전문가용 또는 가정용 전자 기구, 도어 코드 패드(door code pad), 자동차 CPU 등에 입력하는 인터페이스로서 사용될 수 있다. 임의의 경우에서, 센서(들)(6)에 의해 발생된 전자 신호들은 전자 디바이스 또는 외부 디지털 신호 처리 프로세서(DSP) 디바이스에서 처리될 수 있다.
더욱이, 측정되는 물리적 크기는 반드시 음파일 필요는 없지만, 또한 하기와 같이 될 수 있다:
ㆍ기계적 변형(이를 위해, 인터페이스 객체(5)상의 다양한 위치들에 배치되 는 하나 이상의 변형 측정기를 사용한다);
ㆍ후방굴절된 광량(예를 들어, 만일 디바이스가 표면(9)상의 스침 입사(grazing incidence)에서 진폭변조 광빔[예를 들어, 40 Khz에서]을 방출하는 적외선 또는 기타 송신기와, 그리고 예를 들어 사용자가 [예를 들어, 표면(9)상의 객체상에 손가락을 놓음으로써] 상기 빔과 상호작용하는 때에, 후방굴절 광을 측정하는 하나 또는 2개[또는 그 이상]의 광 센서들을 포함하는 경우); 또는
ㆍ특히 표면(9) 근처의 안테나에 의해 고주파(예를 들어, 대략 100 KHZ)에서 방출되며 하나 이상의 센서들에 의해 픽업된 전계, 여기서 전계는 사용자의 손가락 또는 표면(9)상의 다른 객체의 존재에 의해 변하게 된다.
본 발명에 따르면, 활성 구역들(10)은 소정의 유한 길이의 시간(예를 들어, 의도된 응용들에 따라 수초 또는 수시간)에 대해 정의되는데, 이들은 상기 소정의 유한 길이 시간의 마지막에서 마이크로컴퓨터(2) 또는 다른 기구에 의해 활성해제된다. 활성 구역들(10)이 활성해제되는 동안에, 인터페이스 객체(5)와의 상호작용들이 검출되는 때에, 마이크로컴퓨터(2) 또는 다른 기구는 센서(6)에 의해 표면(9)상에서 검출된 제 1 상호작용에 따라 자동으로 상기 활성 구역들을 재정의하며, 이에 따라 시간이 지남에 따른 인터페이스 드리프팅 문제들을 피할 수 있다.
본 발명의 방법의 제 1 구현에서, 활성 구역들(10)이 활성해제되는 동안, 상호작용들이 검출되는 때에, 단지 소정의 초기 시퀀스의 상호작용들이 검출되는 경우에만 상기 활성 구역들이 자동으로 재정의되는데, 이는 예를 들어, 인터페이스 객체상의 하나의 위치에서, 소정의 기간(예를 들어, 수초)보다 짧은 시간 간격에 의해 이격된 2개의 연속적인 상호작용들의 경우이다. 2개의 상호작용이 동일 위치에서 발생한다는 사실은 동일한 어코스틱 신호가 센서(6)에 의해 2번 픽업됨을 의미한다.
유익하게, 상기 2개의 연속적인 상호작용들의 위치는 제 1 활성 구역(10)을 결정할 수 있다. 바꾸어 말하면, 정상 동작에서, 마이크로컴퓨터(2)가 상기 2개의 연속적인 상호작용들 각각 동안에 픽업된 어코스틱 신호를 인식하는 때에, 마이크로프로세서는 충격이 상기 제 1 정보 항목(디지트 문자 또는 다른 것)에 대응하는 제 1 활성 구역에서 발생한 것으로 판정한다.
이후에, 상기 초기 시퀀스에 후속하여 활성 구역들을 재정의하는 단계 동안에, 소정의 개수(K)의 활성 구역들이 상기 소정의 시퀀스의 상호작용들 이후에 검출된 K개의 제 1 상호작용들(여기서, 상술된 예에서, K=N-1, 또는 가능하게는 K=N, 또는 초기 시퀀스가 p 활성 구역들을 정의하는 경우에 사실상 K=N-P 활성 구역들이 된다)에 따라 연속하여 정의된다. 더욱 정확하게, 활성 구역들을 재정의하는 이러한 단계 동안에, 사용자는 인터페이스 객체의 표면(9)상에 K개의 다른 위치들에서 연속하여 충격들을 발생하며, 마이크로프로세서(2)는 각 충격에 대응하는 어코스틱 신호들을 기록한다. 따라서, 정상 동작에서, 마이크로컴퓨터(2)가 활성 구역들을 재정의하는 단계 동안에 픽업된 어코스틱 신호들 중 하나를 인식하는 때에, 마이크로컴퓨터는 충격이 소정의 정보 항목(숫자, 문자 또는 다른 것)에 대응하는 대응 활성 구역에서 발생한 것으로 판정한다.
서로다른 활성 구역들에 대응하는 서로다른 정보 항목들은, 단지 활성 구역 들을 재정의하는 단계 동안에 활성 구역들이 충격들을 받게 되는 순서에만 의존한다. 마이크로컴퓨터(2)는 선택적으로 메시지들이 스크린(3)상에 디스플레이 되게 하여, 이 단계 동안에, 특히 활성 구역들이 표면(9)상에서 마킹되는 때에 사용자를 안내할 수 있다.
활성 구역들을 재정의하는 단계는 중단 및 취소될 수 있는데, 이는 예를 들어, K-1개의 제 1 상호작용들 중 하나가 검출된 이후의 소정의 시간경과 동안에 어떤 추가의 상호작용도 검출되지 않는 경우이다. 이러한 시간경과 기간은 예를 들어, 수초가 될 수 있다.
유익하게, 활성 구역들을 재정의하는 단계 동안에, 상기 측정된 물리적 크기가 제 1 소정의 한계보다 큰 변화를 받기 쉬운 때에, 상호작용이 활성 구역에서 검출되며, 그리고 활성 구역들을 재정의하는 상기 단계 이후에, 상기 측정된 물리적 크기가 제 2 소정의 한계보다 큰 변화를 받기 쉬운 때에, 상호작용이 활성 구역에서 검출되는데, 여기서 제 2 소정의 한계는 자체적으로 제 1 소정의 한계보다 작다. 따라서, 인터페이스는 사용중에 후속 단계들에서 감도가 유지되지만, 활성 구역들을 재정의하는 단계 동안에 상기 측정된 물리적 크기에서 기생 변화들에 덜 민감하게 된다.
대조적으로, 물리적 크기 측정이 "정지 타입(static type)인 때에, 즉 상기 크기가 더 길게 지속되는 변화들을 받기 쉬운 때에, 검출 감도는 검출을 발생하는데에 요구되는 물리적 크기 변화의 최소 기간을 변화시킴으로써 변하게 된다. 이러한 환경들 하에서, 활성 구역들을 재정의하는 단계 동안에, 상기 측정된 물리적 크 기가 제 1 소정의 한계 기간보다 긴 시간 길이 동안의 변화를 받기 쉬운 때에, 상호작용이 활성 구역에서 검출되며, 활성 구역들을 재정의하는 상기 단계 이후에, 상기 측정된 물리적 크기가 제 2 소정의 한계 기간보다 긴 시간 길이에 대해 변화를 받기 쉬운 때에, 상호작용이 활성 구역에서 검출되는데, 여기서 제 2 한계 기간은 자체적으로 제 1 한계 기간보다 짧다. 이 기법은 상술한 바와같이, 특히 크기 측정이 비교적 긴 기간 동안 표면(9)을 누르는 것에 대응하는 변형, 표면(9) 근처에서 손가락 또는 객체에 의해 후방굴절된 광량, 또는 표면(9) 바로 근처에서 손가락 또는 객체의 존재에 의해 분포된 전계가 되는 때에 적용된다.
본 발명의 방법의 제 2 구현에서, 상기 활성 구역들이 활성해제되는 동안에, 인터페이스 객체와의 상호작용들이 검출되는 때에, 검출되는 P개의 제 1 상호작용들이 기록 단계 동안에 기록되는데, 여기서 P는 소정의 제로가 아닌 정수이며, 이후에 Z개의 활성 구역들이 상기 P개의 제 1 검출 상호작용들에 따라 자동으로 재정의되는데, 여기서 Z는 P와 같거나 작은 제로 아닌 정수이며 다른 구역들에서 검출된 상호작용들에 대응하며(즉, 다른 어코스틱 신호들에 대응하며), 이후에 제 1 검출 P개의 상호작용들에 대응하는 소정의 정보가 자체적으로 결정된다.
더욱 정확하게, 상술된 예에서, Z개의 활성 구역들의 재정의는 마이크로컴퓨터(2)가 기록 단계 동안에 인터페이스 객체(5)의 표면(9)상에서 발생한 P개의 충격들 동안에 센서(6)에 의해 픽업된 모든 어코스틱 신호들을 기록하게 함으로써 수행될 수 있다. 각 신호가 표면(9)의 하나의 구역에 특정되기 때문에, 이전에 측정된 어코스틱 신호와 다른 각 새로운 어코스틱 신호가 새로운 활성 구역, 예를 들어 순 위 k의 활성 구역에 할당된다(여기서, k는 1 내지 Z의 범위의 정수이다). 만일 동일 어코스틱 신호가 기록 단계 동안에 후속적으로 검출되는 경우에, 마이크로컴퓨터(2)는 이를 순위 k의 동일 활성 구역에 할당한다. 이 활성 구역 k와 관련된 정보 항목은 단순히 숫자(예를 들어, k)가 될 수 있거나, 문자 또는 각 기록된 어코스틱 신호와 관련된 다른 캐릭터가 될 수 있다.
유익하게, 이러한 본 발명의 제 2 구현은 예를 들어, 마킹되지 않은 표면을 사용하는 동안에 액세스 코드, 예를 들어 도어를 열기 위한 코드, 소프트웨어에 액세스하기 위한 코드 등을 입력하는데에 사용될 수 있다.
예에 의하여, 만일 액세스 코드가 1; 2; 1; 2; 3인 경우에, 사용자는 하기와 같이 탭핑해야 한다:
ㆍ표면(9)의 제 1 임의 위치에서 한 번 탭핑한다;
ㆍ표면(9)의 제 2 임의 위치에서 한 번 탭핑한다;
ㆍ표면(9)의 제 1 위치에서 두 번째 탭핑한다;
ㆍ표면(9)의 제 2 위치에서 두 번째 탭핑한다;
ㆍ표면(9)의 제 3 임의 위치에서 한 번 탭핑한다;
만일 P-1개의 제 1 상호작용들이 소정의 시간경과 기간보다 짧은 기간, 예를 들어 수초 내에 후속 상호작용이 계속되지 않는 경우에, 상기의 기록 단계는 중단 및 취소될 수 있다.
본 발명의 방법의 제 3 구현에서, 상기 활성 구역들이 활성해제되는 동안에, 인터페이스 객체와의 상호작용들이 검출되는 때에, 제 1 검출 상호작용들이 실질적 으로 제 1 상호작용과 동일한 최종 상호작용이 될 때까지 기록 단계 동안에 기록된다. 이는 P개의 제 1 상호작용들을 발생하며, 이에 따라 다른 구역들에서 검출된 상호작용들에 대응하는(즉, 다른 어코스틱 신호들에 대응하는) P-1개의 활성 구역들을 자동으로 재정의한다. 마침내, P-1개의 재정의된 활성 구역들에 대응하는 소정의 정보 항목들이 결정된다. 적절한 경우에, 이 항목들은 활성 구역들의 개수(P-1)에 의존한다.
따라서, 만일 P-1이 예를 들어 10에 일치하는 경우에, 소정의 활성 구역들 각각에 대응하는 정보 항목들은 0 내지 9의 숫자가 될 수 있는 반면에, P-1이 5에 일치하는 경우에, 활성 구역들은 예를 들어, 4개의 방향키와 하나의 엔터키에 대응한다. 임의의 경우에서, 스크린상의 그래픽이 선택적으로 사용자가 사용되는 기능들의 종류를 시각화하게 할 수 있다.
적절한 경우에, 이 구현은 하나의 인터페이스가 완전히 다른 기능들을 갖는 여러 타입의 키패드를 처리하게 할 수 있는데, 이는 초기에 발생되는 상호작용들의 개수에 따른다.
다른 구현에서, 상기 방법은 예를 들어, 복수의 사용자들에 의하거나 또는 하나의 사용자이지만 서로다른 타입들의 정보에 대응하는 단일 사용자에 의해, 서로에 대해 독립적으로 사용될 수 있는 복수의 활성 구역들의 그룹들이 정의되게 할 수 있다. 이를 위해, 활성 구역들 세트가 복수의 활성 구역들 그룹으로 세분되는 것이 필요하다(여기서, 각 활성 구역들 그룹은 예를 들어, 표면(9)의 소정의 부분에 대응할 수 있다). 따라서, 인터페이스 객체와의 상호작용들이 활성해제되는 활 성 구역들 그룹에 속하는 활성 구역들에서 검출되는 때에, 상기 활성 구역들의 활성해제된 그룹의 상기 활성 구역들은 활성 구역들의 다른 그룹들과는 독립적인 방식으로 연속으로, 자동으로 재정의된다.
다른 구현에서, 상기 활성 구역들이 활성해제되는 동안에 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 연속적으로 정의된 제 1 상호작용들에 따라 연속으로, 자동으로 재정의되며, 검출 상호작용들은 실질적으로 동시에 소정의 정보 항목들과 관련된다. 따라서, 객체의 활성 구역들을 재정의함으로써 시작할 필요가 없이, 디바이스를 활성화하거나 정보 항목을 관련시키는 것이 가능하다. 예를 들어, 만일 상기 방법이 도어 또는 블라인드(blind)를 활성화하도록 수행되는 경우에, 예를 들어, 객체상에 충격을 발생함으로써 구역을 재활성화하는 것이 가능하다. 충격은 블라인드가 이와 동시에 닫히게 할 것이다. 소정의 시간 길이 내에 발생된 상기 활성 구역상의 새로운 충격이 이러한 닫힘을 멈추게 하거나 블라인드를 개방을 개시시킬 수 있다. 소정의 시간 길이가 경과된 이후에, 활성 구역은 활성해제된다.

Claims (15)

  1. ㆍ인터페이스 객체(5)가 속하는 활성 구역들(10)과의 물리적 상호작용을 발생하는 단계와, 여기서 상기 활성 구역들은 소정의 정보 항목들과 관련되며;
    ㆍ적어도 하나의 물리적 크기를 측정함으로써 상기 상호작용이 발생하는 상기 활성 구역들을 검출하는 단계와; 그리고
    각 검출된 상호작용과 상기 상호작용이 검출된 활성 구역에 대응하는 소정의 정보 항목을 관련시키는 단계를 포함하는 인간-머신 인터페이스 방법에 있어서,
    상기 활성 구역들이 소정의 유한 길이의 시간에 대해 정의된 이후에 상기 소정의 시간 길이의 마지막에서 활성해제되며;
    상기 활성 구역들이 활성해제되는 동안에 상기 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 제 1 연속적인-검출 상호작용들에 따라 연속으로, 자동으로 재정의되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  2. 제 1항에 있어서, 상기 활성 구역들(10)이 활성해제되는 동안에. 인터페이스 객체(5)와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 만일 연속적인 상호작용들의 소정의 초기 시퀀스가 검출되는 경우에만 자동으로 재정의되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  3. 제 2항에 있어서, 상기 상호작용들의 소정의 시퀀스는 소정의 시간기간보다 짧은 시간 간격 내에서, 상기 인터페이스 객체 상의 하나의 위치에서 2개의 연속적인 상호작용들을 포함하는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  4. 제 3항에 있어서, 상기 2개의 연속적인 상호작용들의 위치는 제 1 활성 구역을 결정하는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  5. 제 2항 내지 제 4항 중 어느 한 항에 있어서, 상기 초기 시퀀스에 후속하여 활성 구역들을 재정의하는 단계 동안에, 소정의 개수(K)의 활성 구역들(10)이 상기 초기 소정의 시퀀스의 상호작용들 이후에 검출되는 K개의 제 1 상호작용들 위치들에서 연속하여 정의되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  6. 제 5항에 있어서, 만일 상호작용이 검출된 이후 소정의 시간 경과 동안에 어떤 후속 상호작용이 검출되지 않는 경우에, 상기 활성 구역들을 재정의하는 단계는 중단되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  7. 제 5항 또는 제 6항에 있어서, 활성 구역들을 재정의하는 단계 동안, 상기 측정된 물리적 크기가 제 1 소정의 한계보다 큰 변화를 받기 쉬운 때에, 활성 구역(10)에서 상호작용이 검출되며, 활성 구역들을 재정의하는 상기 단계 이후에, 상기 측정된 물리적 크기가 자체적으로 상기 제 1 한계보다 작은 제 2 소정의 한계보다 큰 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  8. 제 5항 또는 제 6항에 있어서, 활성 구역들을 재정의하는 단계 동안, 상기 측정된 물리적 크기가 제 1 소정의 한계 기간보다 긴 기간 동안 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출되며, 활성 구역들을 재정의하는 상기 단계 이후에, 상기 측정된 물리적 크기가 자체적으로 상기 제 1 한계 시간기간보다 짧은 제 2 소정의 한계 기간보다 긴 기간 동안 변화를 받기 쉬운 때에, 활성 구역에서 상호작용이 검출되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  9. 제 1항에 있어서, 상기 활성 구역(10)들이 활성해제되는 동안에, 상기 인터페이스 객체와의 상호작용들이 검출되는 때에, P개의 제 1 검출 상호작용들이 기록 단계 동안에 기록되고, 여기서 P는 소정의 제로(zero)가 아닌 정수이며, 그리고 Z개의 활성 구역들이 상기 P개의 제 1 검출 상호작용들에 따라 자동으로 재정의되고, 여기서 Z는 P보다 작은 제로 아닌 정수이며 다른 구역들에서 검출된 상호작용들에 대응하며, 그리고 이후에 P개의 제 1 검출 상호작용들에 대응하는 소정의 정보 항목들이 결정되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  10. 제 9항에 있어서, 만일 상기 P개의 제 1 상호작용들 중 하나 이후에 소정의 시간경과 기간보다 짧은 시간 기간 내에서 후속 상호작용이 계속되지 않는 경우에, 상기 기록 단계는 중단되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  11. 제 1항에 있어서, 상기 활성 구역들(10)이 활성해제되는 동안에, 인터페이스 객체(5)와의 상호작용들이 검출되는 때에, P개의 제 1 검출 상호작용들이 기록 단계 동안에 기록되고, 여기서 P는 제로 아닌 정수이며, 상기 기록 단계는 상기 상호작용(P)이 상기 기록 단계의 제 1 상호작용과 실질적으로 동일한 때에 종료되며, P-1개의 활성 구역들이 상기 P개의 제 1 검출 상호작용들에 따라 자동으로 재정의되는데, 여기서 P-1개의 활성 구역들은 다른 구역들에서 검출된 상호작용들에 대응하며, 그리고 이후에 상기 P-1개의 재정의된 활성 구역들에 대응하는 소정의 정보 항목들이 결정되는데, 여기서 상기 정보 항목들은 개수(P-1)에 의존하는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  12. 선행하는 청구항들 중 어느 한 항에 있어서, 활성 구역들 세트는 복수의 활성 구역들 그룹으로 세분되며, 상기 인터페이스 객체와의 상호작용들이 활성해제된 활성 구역들 그룹에 속하는 활성 구역에서 검출되는 때에, 상기 활성 구역들 그룹의 활성 구역들은 다른 활성 구역들 그룹들과 독립적인 방식으로 자동으로, 연속하여 재정의되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  13. 선행하는 청구항들 중 어느 한 항에 있어서, 상기 활성 구역들이 활성해제되는 동안에, 상기 인터페이스 객체와의 상호작용들이 검출되는 때에, 상기 활성 구역들은 연속하여 검출되는 제 1 상호작용들에 따라 자동으로, 연속하여 재정의되 며, 상기 검출 상호작용들은 실질적으로 동시에 상기 소정의 정보 항목들과 관련되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  14. 선행하는 청구항들 중 어느 한 항에 있어서, 상기 측정된 물리적 크기는 음파, 기계적 응력, 후방굴절된 광량, 그리고 전계로부터 선택되는 것을 특징으로 하는 인간-머신 인터페이스 방법.
  15. 임의의 선행하는 청구항에 따른 방법을 특정적으로 수행하는 인간-머신 인터페이스 디바이스.
KR1020067013373A 2003-12-02 2004-11-26 인간/머신 인터페이스 방법 및 디바이스 Expired - Fee Related KR100933074B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR0314165 2003-12-02
FR0314165A FR2863070B1 (fr) 2003-12-02 2003-12-02 Procede et dispositif d'interface homme - machine
PCT/FR2004/003047 WO2005057393A1 (fr) 2003-12-02 2004-11-26 Procede et dispositif d’interface homme - machine

Publications (2)

Publication Number Publication Date
KR20070006684A true KR20070006684A (ko) 2007-01-11
KR100933074B1 KR100933074B1 (ko) 2009-12-21

Family

ID=34566331

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067013373A Expired - Fee Related KR100933074B1 (ko) 2003-12-02 2004-11-26 인간/머신 인터페이스 방법 및 디바이스

Country Status (7)

Country Link
US (1) US7583255B2 (ko)
EP (1) EP1690177A1 (ko)
JP (1) JP4753877B2 (ko)
KR (1) KR100933074B1 (ko)
CN (1) CN100472416C (ko)
FR (1) FR2863070B1 (ko)
WO (1) WO2005057393A1 (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2874274B1 (fr) * 2004-08-11 2007-07-20 Sensitive Object Procede pour localiser un impact sur une surface et dispositif pour la mise en oeuvre de ce procede
US8907930B2 (en) 2010-08-06 2014-12-09 Motorola Mobility Llc Methods and devices for determining user input location using acoustic sensing elements
US8723699B2 (en) 2010-11-09 2014-05-13 Motorola Mobility Llc Method and apparatus for controlling a device
US9189109B2 (en) 2012-07-18 2015-11-17 Sentons Inc. Detection of type of object used to provide a touch contact input
US9477350B2 (en) 2011-04-26 2016-10-25 Sentons Inc. Method and apparatus for active ultrasonic touch devices
US11327599B2 (en) 2011-04-26 2022-05-10 Sentons Inc. Identifying a contact type
US10198097B2 (en) 2011-04-26 2019-02-05 Sentons Inc. Detecting touch input force
US9639213B2 (en) 2011-04-26 2017-05-02 Sentons Inc. Using multiple signals to detect touch input
TW201316240A (zh) * 2011-10-06 2013-04-16 Rich Ip Technology Inc 利用圖形用戶介面影像之觸碰處理方法及系統
US11340124B2 (en) 2017-08-14 2022-05-24 Sentons Inc. Piezoresistive sensor for detecting a physical disturbance
KR102070612B1 (ko) 2011-11-18 2020-01-30 센톤스 아이엔씨. 국소형 햅틱 피드백
US9594450B2 (en) 2011-11-18 2017-03-14 Sentons Inc. Controlling audio volume using touch input force
US10235004B1 (en) 2011-11-18 2019-03-19 Sentons Inc. Touch input detector with an integrated antenna
FR2988175B1 (fr) * 2012-03-13 2014-04-11 Nanotec Solution Procede de mesure capacitive par des electrodes non-regulieres, et appareil mettant en œuvre un tel procede
US9524063B2 (en) 2012-07-18 2016-12-20 Sentons Inc. Detection of a number of touch contacts of a multi-touch input
US9078066B2 (en) 2012-07-18 2015-07-07 Sentons Inc. Touch input surface speaker
US9348468B2 (en) 2013-06-07 2016-05-24 Sentons Inc. Detecting multi-touch inputs
US9588552B2 (en) 2013-09-11 2017-03-07 Sentons Inc. Attaching electrical components using non-conductive adhesive
US9459715B1 (en) 2013-09-20 2016-10-04 Sentons Inc. Using spectral control in detecting touch input
US9880671B2 (en) 2013-10-08 2018-01-30 Sentons Inc. Damping vibrational wave reflections
US10048811B2 (en) 2015-09-18 2018-08-14 Sentons Inc. Detecting touch input provided by signal transmitting stylus
US10908741B2 (en) 2016-11-10 2021-02-02 Sentons Inc. Touch input detection along device sidewall
US10296144B2 (en) 2016-12-12 2019-05-21 Sentons Inc. Touch input detection with shared receivers
US10126877B1 (en) 2017-02-01 2018-11-13 Sentons Inc. Update of reference data for touch input detection
US10585522B2 (en) 2017-02-27 2020-03-10 Sentons Inc. Detection of non-touch inputs using a signature
US11580829B2 (en) 2017-08-14 2023-02-14 Sentons Inc. Dynamic feedback for haptics

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4688020A (en) * 1984-05-14 1987-08-18 United States Data Corporation Reconfigurable keyboard
CA2203297A1 (en) 1991-12-13 1993-06-14 American Telephone And Telegraph Company Intelligent work surfaces
US5920308A (en) * 1995-10-30 1999-07-06 Samsung Electronics Co., Ltd. Keyboard with a wireless remote control receiver and a method of redefining a key function for remote control
US5790104A (en) * 1996-06-25 1998-08-04 International Business Machines Corporation Multiple, moveable, customizable virtual pointing devices
US6903728B1 (en) * 1999-03-19 2005-06-07 Avaya Technology Corp. State-based control of a terminal user interface containing soft-labeled keys
US7151528B2 (en) * 1999-06-22 2006-12-19 Cirque Corporation System for disposing a proximity sensitive touchpad behind a mobile phone keypad
FR2811107B1 (fr) 2000-06-29 2002-10-18 Jean Pierre Nikolovski Plaque acoustique interactive de precision
WO2003054680A2 (de) 2001-12-21 2003-07-03 Ralf Trachte Flexible computer-eingabe
DE10235546A1 (de) * 2002-03-25 2003-10-09 Agere Syst Guardian Corp Automatische Tastaturentriegelung für Mobiltelefone auf der Basis von mehreren Tasteneingaben
US7231231B2 (en) * 2003-10-14 2007-06-12 Nokia Corporation Method and apparatus for locking a mobile telephone touch screen

Also Published As

Publication number Publication date
FR2863070A1 (fr) 2005-06-03
EP1690177A1 (fr) 2006-08-16
US20070085821A1 (en) 2007-04-19
WO2005057393A1 (fr) 2005-06-23
KR100933074B1 (ko) 2009-12-21
JP4753877B2 (ja) 2011-08-24
CN100472416C (zh) 2009-03-25
CN1894655A (zh) 2007-01-10
US7583255B2 (en) 2009-09-01
JP2007513419A (ja) 2007-05-24
FR2863070B1 (fr) 2006-03-03

Similar Documents

Publication Publication Date Title
KR100933074B1 (ko) 인간/머신 인터페이스 방법 및 디바이스
CN100412777C (zh) 定位表面冲击的方法及其实现设备
US20240103667A1 (en) Controlling audio volume using touch input force
US10877581B2 (en) Detecting touch input force
EP3627296B1 (en) Localized haptic feedback
CA2850208C (en) Data glove having tactile feedback and method
US8624878B2 (en) Piezo-based acoustic and capacitive detection
US20140267065A1 (en) Contactor-based haptic feedback generation
KR20150115508A (ko) 감성터치 입력장치 및 이를 이용한 감성터치정보 생성방법
KR20110023621A (ko) 레이저를 이용한 디지털 입력 장치

Legal Events

Date Code Title Description
PA0105 International application

St.27 status event code: A-0-1-A10-A15-nap-PA0105

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U12-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R14-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R14-asn-PN2301

FPAY Annual fee payment

Payment date: 20121123

Year of fee payment: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

P22-X000 Classification modified

St.27 status event code: A-4-4-P10-P22-nap-X000

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20131212

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20131212