[go: up one dir, main page]

KR20130081580A - 표시 장치 및 그 제어 방법 - Google Patents

표시 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20130081580A
KR20130081580A KR1020120002639A KR20120002639A KR20130081580A KR 20130081580 A KR20130081580 A KR 20130081580A KR 1020120002639 A KR1020120002639 A KR 1020120002639A KR 20120002639 A KR20120002639 A KR 20120002639A KR 20130081580 A KR20130081580 A KR 20130081580A
Authority
KR
South Korea
Prior art keywords
pointer
screen
user
movement
moving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
KR1020120002639A
Other languages
English (en)
Inventor
배대규
유호정
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120002639A priority Critical patent/KR20130081580A/ko
Priority to JP2014551200A priority patent/JP2015508539A/ja
Priority to PCT/KR2013/000121 priority patent/WO2013105765A1/en
Priority to AU2013208426A priority patent/AU2013208426A1/en
Priority to MX2014008355A priority patent/MX2014008355A/es
Priority to US13/737,273 priority patent/US20130176219A1/en
Priority to EP13150671.9A priority patent/EP2613243A3/en
Priority to CN2013100080073A priority patent/CN103200439A/zh
Publication of KR20130081580A publication Critical patent/KR20130081580A/ko
Priority to AU2016202282A priority patent/AU2016202282A1/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Position Input By Displaying (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 일 실시예에 의한 표시 장치는 영상 획득부, 영상 처리부, 및 제어부를 포함한다. 영상 획득부는 사용자 영상을 획득한다. 영상 처리부는 상기 사용자 영상으로부터 사용자의 움직임을 감지한다. 제어부는 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 적어도 하나의 이동 영역에 위치하게 되면 그 시점부터 상기 포인터가 상기 적어도 하나의 이동 영역 내에서만 이동되도록 한다.

Description

표시 장치 및 그 제어 방법{DISPLAY APPARATUS AND CONTROLLING METHOD THEREOF}
본 발명은 화면 상에 포인터를 표시하고 사용자의 움직임에 따라 포인터를 이동하는 표시 장치 및 그 제어 방법에 관한 것이다.
일반적으로 표시 장치는 영상 신호를 처리하여 영상을 표시하는 장치로서, 대표적인 표시 장치로는 TV를 들 수 있다. 최근에는 스마트 TV가 보급되면서 TV로 방송 시청은 물론, VOD(Video On Demand), 게임, 영상 통화, 애플리케이션 등의 컴퓨터 기능을 사용자에게 제공할 수 있게 되었다.
사용자 편의를 위한 원격 제어 장치로는 리모컨이 이용되는데, 사용자는 TV 본체와 연결되는 리모컨을 이용하여 TV의 채널을 변경하거나 볼륨을 조절할 수 있다. 또한, 사용자는 리모컨 외에 TV 본체와 연결되는 스마트폰, PC 등의 전자 기기를 통해서도 TV를 제어할 수 있다. 또한, 원격 제어 기술이 발전됨에 따라 TV에도 사용자의 음성을 인식하거나, 사용자의 움직임에 따른 제스쳐를 인식하는 기능이 탑재되고 있다.
한편, 스마트 TV는 사용자의 제어를 위해 GUI(Graphic User Interface)를 지원하며, 사용자가 원격 제어 장치 등을 조작함에 따라 TV 화면에 표시되는 포인터가 움직이게 된다. 이에 따라 사용자는 TV 화면에 표시되는 채널 버튼, 볼륨 버튼 등의 위치로 포인터를 이동시키고 선택함으로써 TV의 채널, 볼륨 등을 조절할 수 있다.
본 발명의 일측면은 사용자의 움직임에 대응하여 포인터를 이동하고, 상기 포인터가 적어도 하나의 이동 영역에서만 이동되는 표시 장치 및 그 제어 방법을 제공한다. 또한, 포인터의 위치, 및 이동 방향에 따라 휠 기능을 수행하는 표시 장치 및 그 제어 방법을 제공한다.
이를 위한 본 발명의 일 실시예에 의한 표시 장치는 사용자 영상을 획득하는 영상 획득부, 상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부, 및 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하는 제어부를 포함한다.
또한, 상기 제어부는 상기 포인터가 적어도 하나의 이동 영역에 위치하게 되면 그 시점부터 상기 포인터가 상기 적어도 하나의 이동 영역 내에서만 이동되도록 한다.
또한, 상기 제어부는 상기 목표 위치가 적어도 하나의 이동 영역을 벗어나면 상기 포인터가 적어도 하나의 다른 이동 영역으로 이동되도록 한다.
또한, 상기 제어부는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 외곽에 위치하는 적어도 하나의 기준 영역에 위치하면 상기 적어도 하나의 기준 영역의 위치에 따라 상기 포인터의 이동 방향을 결정한다.
또한, 상기 제어부는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 내부에 위치하는 기준 영역의 모서리 상에 위치하면 상기 모서리의 위치에 따라 상기 포인터의 이동 방향을 결정한다.
본 발명의 다른 일 실시예에 의한 표시 장치는 사용자 영상을 획득하는 영상 획득부, 상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부, 및 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 상기 화면의 모서리 상에 위치하면 상기 화면의 페이지가 이동되도록 하는 제어부를 포함한다.
또한, 상기 제어부는 상기 포인터가 기준 시간 동안 상기 화면의 모서리 상에 위치하면 상기 포인터의 위치에 따라 상기 화면의 페이지가 이동되도록 한다.
또한, 상기 제어부는 상기 포인터가 상기 화면의 좌측, 또는 상측 모서리 상에 위치하면 상기 화면의 페이지가 이전 페이지로 이동되도록 하고, 상기 포인터가 상기 화면의 우측, 또는 하측 모서리 상에 위치하면 상기 화면의 페이지가 다음 페이지로 이동되도록 한다.
본 발명의 다른 일 실시예에 의한 표시 장치는 사용자 영상을 획득하는 영상 획득부, 상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부, 및 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 상기 화면의 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 스크롤되도록 하는 제어부를 포함한다.
또한, 상기 제어부는 상기 포인터가 기준 시간 동안 상기 화면의 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 스크롤되도록 한다.
또한, 상기 제어부는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면이 스크롤되도록 한다.
본 발명의 다른 일 실시예에 의한 표시 장치는 사용자 영상을 획득하는 영상 획득부, 상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부, 및 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 상기 화면의 제1 기준 영역에 위치하면 상기 제1 기준 영역에 적어도 하나의 버튼이 표시되도록 하는 제어부를 포함한다.
또한, 상기 제어부는 상기 적어도 하나의 버튼이 선택된 후 상기 포인터가 상기 화면의 제2 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 줌되도록 한다.
또한, 상기 제어부는 상기 포인터가 기준 시간 동안 상기 화면의 제2 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 줌되도록 한다.
또한, 상기 제어부는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면이 줌되도록 한다.
본 발명의 일 실시예에 의한 표시 장치의 제어 방법은 사용자 영상으로부터 사용자의 움직임을 감지하는 단계, 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계, 상기 포인터가 적어도 하나의 이동 영역에 위치하게 되면 그 시점부터 상기 포인터가 상기 적어도 하나의 이동 영역 내에서만 이동되도록 하는 단계; 및 상기 목표 위치가 적어도 하나의 이동 영역을 벗어나면 상기 포인터를 적어도 하나의 다른 이동 영역으로 이동하는 단계를 포함한다.
또한, 상기 포인터를 적어도 하나의 다른 이동 영역으로 이동하는 단계는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 외곽에 위치하는 적어도 하나의 기준 영역에 위치하면 상기 적어도 하나의 기준 영역의 위치에 따라 상기 포인터의 이동 방향을 결정한다.
또한, 상기 포인터를 적어도 하나의 다른 이동 영역으로 이동하는 단계는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 내부에 위치하는 기준 영역의 모서리 상에 위치하면 상기 모서리의 위치에 따라 상기 포인터의 이동 방향을 결정한다.
본 발명의 다른 일 실시예에 의한 표시 장치의 제어 방법은 사용자 영상으로부터 사용자의 움직임을 감지하는 단계, 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계, 및 상기 포인터가 상기 화면의 모서리 상에 위치하면 상기 화면의 페이지를 이동하는 단계를 포함한다.
또한, 상기 화면의 페이지를 이동하는 단계는 상기 포인터가 기준 시간 동안 상기 화면의 모서리 상에 위치하면 상기 포인터의 위치에 따라 상기 화면의 페이지를 이동한다.
본 발명의 다른 일 실시예에 의한 표시 장치의 제어 방법은 사용자 영상으로부터 사용자의 움직임을 감지하는 단계, 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계, 및 상기 포인터가 기준 시간 동안 상기 화면의 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면을 스크롤하는 단계를 포함한다.
또한, 상기 화면을 스크롤하는 단계는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면을 스크롤한다.
본 발명의 다른 일 실시예에 의한 표시 장치의 제어 방법은 사용자 영상으로부터 사용자의 움직임을 감지하는 단계, 상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계, 상기 포인터가 상기 화면의 제1 기준 영역에 위치하면 상기 제1 기준 영역에 적어도 하나의 버튼을 표시하는 단계, 및 상기 적어도 하나의 버튼이 선택된 후 상기 포인터가 기준 시간 동안 상기 화면의 제2 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 줌되도록 하는 단계를 포함한다.
또한, 상기 화면이 줌되도록 하는 단계는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면이 줌되도록 한다.
상술한 본 발명의 일측면에 의하면 포인터가 적어도 하나의 이동 영역에서만 이동되고, 목표 위치가 적어도 하나의 이동 영역을 벗어나면 상기 포인터를 적어도 하나의 다른 이동 영역으로 신속하게 이동하므로, 사용자가 표시 장치를 조작하기 위해서 포인터를 멀리 이동하는 수고와 시간을 감소할 수 있다. 또한, 포인터의 위치, 및 이동 방향에 따라 휠 기능을 수행하므로 표시 장치에 마우스 등과 같은 주변 기기를 연결하지 않은 경우에도 사용자의 간단한 움직임에 따라 페이지 스크롤, 휠 스크롤, 줌 기능 등을 수행할 수 있다.
도 1은 본 발명의 일 실시예에 의한 표시 장치의 외관을 도시하는 정면도이다.
도 2는 본 발명의 일 실시예에 의한 표시 장치의 구성을 도시하는 블록도이다.
도 3은 본 발명의 일 실시예에 의한 표시 장치의 사용자의 움직임을 감지하는 방법을 도시하는 흐름도이다.
도 4는 본 발명의 일 실시예에 의한 표시 장치에서 포인터를 이동하는 일 예를 도시하는 도면이다.
도 5는 본 발명의 일 실시예에 의한 표시 장치의 포인터를 이동하는 방법을 도시하는 흐름도이다.
도 6은 본 발명의 일 실시예에 의한 표시 장치에서 포인터를 이동 영역에서만 이동하는 일 예를 도시하는 도면이다.
도 7은 본 발명의 일 실시예에 의한 표시 장치에서 포인터의 점프 이동 방향을 결정하는 일 예를 도시하는 도면이다.
도 8은 본 발명의 일 실시예에 의한 표시 장치에서 포인터의 점프 이동 방향을 결정하는 다른 일 예를 도시하는 도면이다.
도 9 내지 도 10은 본 발명의 일 실시예에 의한 표시 장치에서 포인터가 점프 이동되는 경우 그래픽 효과를 도시하는 도면이다.
도 11은 본 발명의 일 실시예에 의한 표시 장치의 화면의 페이지를 이동하는 방법을 도시하는 흐름도이다.
도 12는 본 발명의 일 실시예에 의한 표시 장치에서 포인터가 화면의 모서리 상에 위치하는 일 예를 도시하는 도면이다.
도 13 내지 도 14는 본 발명의 일 실시예에 의한 표시 장치에서 화면의 페이지가 이동되는 경우 그래픽 효과를 도시하는 도면이다.
도 15는 본 발명의 일 실시예에 의한 표시 장치의 화면을 스크롤 하는 방법을 도시하는 흐름도이다.
도 16은 본 발명의 일 실시예에 의한 표시 장치에서 포인터가 기준 영역에 위치하는 일 예를 도시하는 도면이다.
도 17 내지 도 18은 본 발명의 일 실시예에 의한 표시 장치에서 화면이 스크롤되는 경우 그래픽 효과를 도시하는 도면이다.
도 19는 본 발명의 일 실시예에 의한 표시 장치의 버튼이 선택된 상태에서 휠 스크롤 기능을 수행하는 방법을 도시하는 흐름도이다.
도 20은 본 발명의 일 실시예에 의한 표시 장치에서 포인터가 자주 위치하지 않는 제1 기준 영역을 도시하는 도면이다.
도 21은 본 발명의 일 실시예에 의한 표시 장치에서 화면에 표시되는 버튼을 도시하는 도면이다.
도 22 내지 도 23은 본 발명의 일 실시예에 의한 표시 장치에서 포인터의 줌 기능이 수행되는 일 예를 도시하는 도면이다.
이하에서는 첨부된 도면을 참조하여 본 발명의 실시예를 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 의한 표시 장치의 외관을 도시하는 정면도이다.
도 1을 참조하면, 표시 장치(1)의 전면에는 영상이 표시되는 화면(51)이 마련된다. 표시 장치(1)의 상단에는 이미지 센서(61)가 설치되고, 이미지 센서(61)는 표시 장치(1)의 전방에 관한 영상을 획득한다. 이를 위해, 이미지 센서(61)는 디지털 영상 데이터를 획득하는 CMOS 센서, 또는 CCD 센서 등으로 구성될 수 있다. 또한, 이미지 센서(61)는 아날로그 영상 데이터를 획득하는 카메라, 및 아날로그 영상 데이터를 디지털 영상 데이터로 변환하는 아날로그-디지털 변환기 등으로 구성될 수 있다. 한편, 이미지 센서(61)는 표시 장치(1)의 상단에 내장되어 설치되거나, 외장품으로 구성되어 표시 장치(1)의 상단에 장착될 수 있다.
도 2는 본 발명의 일 실시예에 의한 표시 장치의 구성을 도시하는 블록도이다.
도 2를 참조하면, 표시 장치(1)는 방송 수신부(101), 신호 처리부(102), 디스플레이부(103), 컨텐츠 생성부(104), 영상 획득부(105), 영상 처리부(106), 메모리부(107), 및 제어부(108)를 포함한다.
방송 수신부(101)는 방송 신호를 수신한다. 여기서, 방송 신호는 영상 신호, 음성 신호, 또는 데이터 신호 중 적어도 하나를 포함하며, 전파로 송출되는 지상파 방송 신호이거나, 케이블을 통해 송출되는 케이블 방송 신호이거나, 또는 위성을 통해 송출되는 위성 방송 신호일 수 있다.
신호 처리부(102)는 수신된 신호를 처리하여 영상 데이터, 및 음성 데이터로 복원한다. 예를 들어, 신호 처리부(102)는 수신된 방송 신호에 대하여 디코딩, 또는 스케일링 등의 처리를 수행한다. 그리고, 신호 처리부(102)는 표시 장치(1)의 화면(51)에 포인터가 표시될 수 있도록 영상 데이터를 처리한다. 또한, 신호 처리부(102)는 UI 등을 생성하여 표시 장치(1)의 화면(51)에 함께 표시되도록 한다.
디스플레이부(103)는 수신된 영상 데이터에 기초하여 표시 장치(1)의 화면(51)에 영상, 포인터, 및 UI 등을 표시한다. 이 때, 화면(51)에 표시되는 포인터(11)는 사용자의 손의 위치와 대응되는 위치에 표시된다. 그리고, 디스플레이부(103)는 일반적으로 사용되는 CRT, LCD, PDP 등의 형태로 구성될 수 있다.
컨텐츠 생성부(104)는 표시 장치(1)에 저장된 데이터, 또는 네트워크를 통해 연결된 서버에 저장된 데이터를 통해 컨텐츠 신호를 생성한다. 여기서, 컨텐츠는 영화, 드라마, 동영상, 게임, 만화, 문서, 또는 이미지 등을 포함한다. 그리고, 컨텐츠 신호는 신호 처리부(102)에 의해 영상 데이터, 및 음성 데이터로 복원되고, 복원된 영상 데이터는 디스플레이부(103)에 의해서 표시 장치(1)의 화면(51)에 표시될 수 있다.
영상 획득부(105)는 이미지 센서(61)를 구동하여 표시 장치(1)의 전방에 위치하는 사용자 영상을 획득한다. 영상 획득부(105)에서 획득된 사용자 영상은 프레임 단위의 영상 데이터로 영상 처리부(106)에 전송된다.
영상 처리부(106)는 사용자 영상을 분석하여 사용자의 움직임을 감지한다. 이를 위해, 영상 처리부(106)는 사용자 영상에서 움직임이 존재하는 영역의 움직임 벡터를 검출한다. 움직임 벡터를 검출하는 방법은 종래 기술에 의해 다양한 방법이 채택될 수 있으며, 일 예로 영상 처리부(106)는 연속하는 두 영상 프레임의 차분 연산을 통해 움직임 벡터를 검출할 수 있다.
한편, 사용자는 크고 자연스러운 움직임을 표현할 수 있도록 손을 이용하여 움직임을 표현하는 것이 바람직하다. 이하 본 발명의 실시예에서는 사용자의 손의 움직임을 감지하는 경우에 대해 설명한다.
영상 처리부(106)는 손이 아닌 다른 신체 부위의 움직임을 구별하기 위해서, 움직임 벡터를 검출하기 위한 영역의 크기를 손의 크기로 제한하고, 움직임 벡터가 검출되는 영역이 둘 이상이면 손의 크기가 아닌 다른 영역을 다른 신체 부위로 간주할 수 있다.
또한, 영상 처리부(106)는 검출된 움직임 벡터의 크기와 미리 정해진 임계값을 비교하고, 비교 결과 검출된 움직임 벡터의 크기가 미리 정해진 임계값보다 클 때 검출된 움직임 벡터를 유효한 것으로 판단할 수 있다. 이에 따라, 영상 처리부(106)는 사용자의 손이 소정의 범위보다 크게 움직인 경우에만 유효한 움직임으로 감지할 수 있다.
그리고, 영상 처리부(106)는 유효한 움직임 벡터를 분석하여 사용자의 손의 움직임의 크기 및 방향을 결정한다. 이를 위해, 영상 처리부(106)는 움직임 벡터를 수직 성분과 수평 성분으로 구별할 수 있다. 여기서, 수직 성분은 실제 좌표계에서 Y축 성분에 해당하고, 수평 성분은 실제 좌표계에서 X축 성분에 해당한다. 그리고, 영상 처리부(106)는 수직 성분, 및 수평 성분의 크기를 산출하여, 사용자의 손의 움직임의 크기를 결정할 수 있다. 또한, 영상 처리부(106)는 수직 성분, 및 수평 성분의 합을 통해 사용자의 손의 움직임의 방향을 결정할 수 있다.
메모리부(107)에는 표시 장치(1)를 구동하기 위한 제어 프로그램과 제어 프로그램의 수행에 따라 발생되는 데이터가 저장된다. 이를 위해, 메모리부(107)는 EEPROM, EPROM, 플래수 메모리 등의 비휘발성 메모리 기기로 구성될 수 있다.
제어부(108)는 제어 프로그램에 따라 표시 장치(1)의 전반적인 동작을 제어한다.
제어부(108)는 사용자 영상을 분석하고 사용자의 손(21)의 위치와 대응되는 위치에 포인터(11)가 표시되도록 한다. 그리고, 제어부(108)는 사용자의 손(21)의 움직임에 대응하여 화면(51)에 표시되는 포인터(11)가 목표 위치로 이동되도록 한다. 그리고, 제어부(108)는 포인터(11)의 위치를 분석하여 포인터(11)가 화면(51)의 모서리 상에 위치하거나, 또는 현재 포인터(11)의 위치를 기준으로 일정한 범위의 기준 영역에 위치하는지 등을 판단할 수 있다.
사용자는 포인터(11)를 이동하면서 화면(51)에 표시되는 버튼 등을 클릭(click)하여 표시 장치(1)를 조작할 수 있다.
이하에서는 본 발명의 일 실시예에 의한 표시 장치(1)의 제어 방법을 상세하게 설명한다.
도 3은 본 발명의 일 실시예에 의한 표시 장치의 사용자의 움직임을 감지하는 방법을 도시하는 흐름도이다.
도 3을 참조하면, 영상 획득부(105)는 표시 장치(1)의 전방에 위치하는 사용자 영상을 획득한다(201).
다음으로, 영상 처리부(106)는 획득된 사용자 영상에서 움직임이 존재하는 영역의 움직임 벡터를 검출한다(202). 이 때 사용자의 움직임은 상술한 바와 같이 사용자의 손(21)의 움직임인 것이 바람직하다.
다음으로, 영상 처리부(106)는 검출된 움직임 벡터의 크기를 미리 정해진 임계값과 비교하여, 검출된 움직임 벡터의 크기가 미리 정해진 임계값보다 큰지 판단한다(203). 그리고, 영상 처리부(106)는 검출된 움직임 벡터의 크기가 미리 정해진 임계값보다 크면, 움직임 벡터를 분석하여 사용자의 손(21)의 움직임의 크기 및 방향을 결정한다(204).
도 4는 본 발명의 일 실시예에 의한 표시 장치에서 포인터의 이동을 도시하는 도면이다.
도 4를 참조하면, 사용자의 손(21)이 움직이는 경우 이미지 센서(61)는 사용자의 손(21)이 움직이는 영상을 획득한다. 그리고, 영상 처리부(106)는 획득된 사용자 영상으로부터 사용자의 손(21)의 움직임을 감지한다. 일 예로 영상 처리부(106)는 사용자의 손(21)의 움직임의 수평 방향 크기(mX), 및 수직 방향 크기(mY)를 감지할 수 있다.
그리고, 제어부(108)는 사용자의 손(21)의 움직임에 대응하여 포인터(11)의 목표 위치를 산출한다. 일 예로 제어부(108)는 포인터(11)를 현재 위치로부터 목표 위치까지 이동하기 위한 수평 방향 크기(nX), 및 수직 방향 크기(nY)를 산출할 수 있다. 이 때, 수평 방향에서 우측으로, 또는 수직 방향에서 상측으로 이동하는 경우에 대한 크기를 양의 값으로 정의하고, 수평 방향에서 좌측으로, 또는 수직 방향에서 하측으로 이동하는 경우에 대한 크기를 음의 값으로 정의한다.
그리고, 제어부(108)는 사용자의 손(21)의 움직임에 대응하여 현재 화면(51)에 표시되는 포인터(11)가 목표 위치로 이동되도록 한다. 여기서, 사용자의 손(21)의 위치는 일반적으로 사용자의 손바닥의 중심(22)과 관련되며, 포인터(11)의 위치는 일반적으로 포인터(11)의 좌측 상단의 모서리의 위치(12)와 관련된다.
한편, 도 4에서는 포인터(11)의 형태를 화살표로 도시하였으나, 포인터(11)의 형태에는 화살표 뿐만 아니라, 펜, 인체의 손, 또는 모래 시계 등의 다양한 형태가 적용될 수 있다.
도 5는 본 발명의 일 실시예에 의한 표시 장치의 포인터를 이동하는 방법을 도시하는 흐름도이다.
도 5를 참조하면, 영상 처리부(106)는 사용자의 움직임을 감지한다(301).
다음으로, 제어부(108)는 감지된 사용자의 움직임에 따라 화면(51) 상의 포인터(11)가 목표 위치로 이동되도록 한다(302). 그리고, 제어부(108)는 포인터(11)가 미리 정해진 적어도 하나의 이동 영역에서만 이동되도록 할 수 있다. 여기서, 포인터(11)가 적어도 하나의 이동 영역에서만 이동되는 경우를 포인터(11)의 점프 모드로, 포인터(11)가 화면(51)의 모든 위치에서 이동되는 경우를 포인터(11)의 자유 모드로 정의할 수 있다. 그리고, 점프 모드에서의 포인터(11)의 형태와 자유 모드에서의 포인터(11)의 형태는 다르게 표시될 수 있다.
그리고, 제어부(108)는 포인터(11)를 점프 모드로 동작시키기 전에 먼저, 표시 장치(1)가 턴 온(turn-on) 된 후 기준 시간이 경과하면 포인터(11)를 자유 모드로 동작시킨다. 그리고, 포인터(11)가 자유롭게 이동되다가 미리 정해진 적어도 하나의 이동 영역에 위치하게 되면, 그 시점부터 포인터(11)를 점프 모드로 동작시킨다.
포인터(11)의 점프 모드에서, 제어부(108)는 포인터(11)의 이동 속도를 기본 속도보다 느리게 할 수 있다. 또한, 제어부(108)는 사용자의 움직임 크기에 대응되는 포인터(11)의 이동 크기를 줄일 수도 있다. 이에 따라, 포인터(11)가 점프 모드로 동작 되는 경우에도 사용자의 움직임에 대한 민감도가 조절되어 자연스럽게 이동될 수 있다.
포인터(11)를 이동 영역에서만 이동하는 구체적인 방법은 도 6을 참조하여 보다 상세하게 설명한다.
도 6을 참조하면, 화면(51)에 표시되는 포인터(11)는 상술한 바와 같이 미리 정해진 적어도 하나의 이동 영역에서만 이동된다. 일 예로, 이동 영역은 표시 장치(1)의 화면(51)에 표시되는 적어도 하나의 그래픽 이미지로서, 볼륨 버튼(31, 32), 또는 채널 버튼(33, 34) 등의 영역일 수 있다.
그리고, 제어부(108)는 적어도 하나의 이동 영역에서 적어도 하나의 다른 이동 영역으로 포인터(11)가 이동되는 경우 포인터(11)가 점프하여 이동되도록 한다. 도 6에 도시된 바와 같이, 제어부(108)는 현재 포인터(11)가 볼륨 증가 버튼(31)의 영역에 위치하는 경우, 사용자의 손(21)의 수평 방향의 움직임(a)에 따라 포인터(11)가 채널 증가 버튼(33)의 영역으로 점프하여 이동(a')되도록 하거나, 사용자의 손(21)의 수직 방향의 움직임(b)에 따라 포인터(11)가 볼륨 감소 버튼(32)의 영역으로 점프하여 이동(b')되도록 하거나, 또는 사용자의 손(21)의 대각 방향의 움직임(c)에 따라 포인터(11)가 채널 감소 버튼(34)의 영역으로 점프하여 이동(c')되도록 할 수 있다.
여기서, 포인터(11)가 점프하여 이동되는 것은 일반적인 포인터(11)의 이동과 구별된다. 보다 상세하게, 제어부(108)는 적어도 하나의 이동 영역에서 포인터(11)가 이동될 때에는 사용자의 손(21)의 움직임을 추종하여 사용자의 손(21)의 위치와 대응되는 목표 위치로 포인터(11)가 이동되지만, 포인터(11)가 점프하여 이동될 때에는 사용자의 손(21)의 움직임을 추종하지 않고 임의적으로 적어도 하나의 다른 이동 영역의 임의의 위치로 포인터(11)가 이동되도록 한다.
다음으로, 제어부(108)는 포인터(11)의 목표 위치가 적어도 하나의 이동 영역을 벗어나는지 판단하고(303), 포인터(11)의 이동 방향을 결정하여 포인터(11)가 이동되어야 하는 이동 영역을 결정한다(304). 이 때, 포인터(11)의 목표 위치가 이동 영역을 벗어나는지 판단하고 포인터(11)의 이동 방향을 결정하는 방법은 도 7 내지 도 8을 참조하여 보다 상세하게 설명한다.
도 7을 참조하면, 적어도 하나의 이동 영역의 외곽에는 포인터(11)의 점프 이동 방향을 결정하기 위한 적어도 하나의 기준 영역이 위치한다.
일 예로 현재 포인터(11)가 위치하는 볼륨 증가 버튼(31)의 영역의 외곽에는 사각형의 기준 영역이 위치한다. 보다 상세하게, 볼륨 증가 버튼(31)의 영역의 수평 방향에는 제1 기준 영역(AA)이 위치하고, 볼륨 증가 버튼(31)의 영역의 수직 방향에는 제2 기준 영역(AB)이 위치하며, 볼륨 증가 버튼(31)의 영역의 대각 방향에는 제3 기준 영역(AC)이 위치한다.
그리고, 사용자의 손(21)의 수평 방향의 움직임(a)에 따라 포인터(11)가 이동(a')되어야 하는 목표 위치(12)가 제1 기준 영역(AA)인 경우, 제어부(108)는 포인터(11)의 점프 이동 방향을 우측 수평 방향으로 결정하고, 포인터(11)가 채널 증가 버튼(33)의 영역으로 점프 이동되도록 한다. 마찬가지로, 사용자의 손(21)의 수직 방향의 움직임(b)에 따라 포인터(11)가 이동(b')되어야 하는 목표 위치(12)가 제2 기준 영역(AB)인 경우, 제어부(108)는 포인터(11)의 점프 이동 방향을 하측 수직 방향으로 결정하고, 포인터(11)가 볼륨 감소 버튼(32)의 영역으로 점프 이동되도록 한다. 그리고, 사용자의 손(21)의 대각 방향의 움직임(c)에 따라 포인터(11)가 이동(c')되어야 하는 목표 위치(12)가 제3 기준 영역(AC)인 경우, 제어부(108)는 포인터(11)의 점프 이동 방향을 우하측 대각 방향으로 결정하고, 포인터(11)가 채널 감소 버튼(34)의 영역으로 점프 이동되도록 한다.
도 8을 참조하면, 적어도 하나의 이동 영역의 내부에는 포인터(11)가 점프 모드로 이동되는 기준 영역이 위치한다. 이 때, 제어부는 포인터(11)가 이동 영역 뿐만 아니라 기준 영역 내에서만 이동되도록 한다.
일 예로 현재 포인터(11)가 위치하는 볼륨 증가 버튼(31)의 영역의 내부에는 사각형의 기준 영역(AI)이 위치한다. 이에 따라, 포인터(11)는 이동 영역에서만 이동되는 것이 아니라, 이동 영역의 내부에 위치하는 기준 영역(AI)에서만 이동될 수 있다.
그리고, 사용자의 손(21)의 수평 방향의 움직임(a)에 따라 포인터(11)의 위치(12)가 이동(a')되어 기준 영역(AI)의 우측 모서리에 위치하면, 제어부(108)는 포인터(11)의 점프 이동 방향을 우측 수평 방향으로 결정하고, 포인터(11)를 채널 증가 버튼(33)의 영역으로 점프 이동되도록 할 수 있다. 동일한 방식으로, 사용자의 손(21)의 수직 방향의 움직임(b)에 대해서도 제어부(108)는 포인터(11)의 점프 이동 방향을 하측 수직 방향으로 결정할 수 있다.
한편, 제어부(108)는 사용자의 손(21)의 대각 방향의 움직임(c)에 따라 포인터(11)의 위치가 이동(c')되어 기준 영역(AI)의 우하측 꼭지점에 위치하면, 제어부(108)는 포인터(11)의 점프 이동 방향을 우하측 대각 방향으로 결정할 수 있다. 또한, 제어부(108)는 포인터(11)의 위치가 기준 영역(AI)의 우측 모서리의 하단의 소정의 범위, 및 하측 모서리의 우단의 소정의 범위에 위치하는 경우에도 포인터(11)의 점프 이동 방향을 우하측 대각 방향으로 결정할 수 있다.
또한, 제어부(108)는 포인터(11)가 수평 방향으로 점프 이동될 때의 이동 속도와 수직 방향으로 점프 이동될 때의 이동 속도를 다르게 조절할 수 있다. 예를 들어, 포인터(11)가 볼륨 증가 버튼(31)의 영역에서 채널 증가 버튼(33)의 영역으로 점프 이동되는 경우에는 이동 거리가 상대적으로 멀어 이동 속도를 상대적으로 빠르게 하고, 볼륨 증가 버튼(31)의 영역에서 볼륨 감소 버튼(32)의 영역으로 점프 이동되는 경우에는 이동 거리가 상대적으로 가까우므로 이동 속도를 상대적으로 느리게 할 수 있다.
다음으로, 제어부(108)는 결정된 이동 방향에 따라 포인터(11)가 적어도 하나의 다른 이동 영역의 임의의 위치로 이동되도록 한다(305). 적어도 하나의 다른 이동 영역의 임의의 위치는 일 예로 이동 영역의 중심일 수 있다. 그리고, 포인터(11)가 적어도 하나의 다른 이동 영역으로 이동되면서 적어도 하나의 그래픽 효과가 사용될 수 있다.
일 예로, 도 9 내지 도 10을 참조하면, 포인터(11)가 볼륨 증가 버튼(31) 영역에서 채널 증가 버튼(33) 영역으로 점프하여 이동되면서 다음과 같은 그래픽 효과가 사용될 수 있다. 즉, 포인터(11)가 수평 방향으로 이동(a')되면서, 도 9에 도시된 바와 같이 화면(51)에 포인터(11)의 자취(15)를 표시하면서 이동되거나, 도 10에 도시된 바와 같이 화면(51)에 포인터(11)의 그림자(16)를 표시하면서 이동될 수 있다. 한편, 포인터(11)가 이동되면서 사용되는 그래픽 효과는 상술한 실시예 외에도 종래 기술에 의해 다양한 그래픽 효과가 채택될 수 있다.
도 11은 본 발명의 일 실시예에 의한 표시 장치의 화면의 페이지를 이동하는 방법을 도시하는 흐름도이다. 도 5와 중복되는 단계에 대해서는 상세한 설명을 생략한다.
도 11를 참조하면, 제어부(108)는 포인터(11)가 화면(51)의 모서리 상에 위치하는지 판단한다(403). 이 때, 포인터(11)는 화면(51)의 좌측 모서리, 우측 모서리, 상측 모서리, 또는 하측 모서리 상에 위치할 수 있다.
도 12를 참조하면, 사용자의 손(21)의 움직임의 방향에 따라 포인터(11)가 화면(51)의 적어도 하나의 모서리 상에 위치할 수 있다. 일 예로 사용자의 손(21)이 현재 위치에서 좌측으로 움직이는 경우(e), 사용자의 손(21)의 움직임의 크기에 따라 포인터(11)가 수평 방향으로 이동(e')되어 화면(51)의 좌측 모서리(43) 상에 위치할 수 있다. 마찬가지로, 사용자의 손(21)이 현재 위치에서 우측으로 움직이는 경우(d), 사용자의 손(21)의 움직임의 크기에 따라 포인터(11)가 수평 방향으로 이동(d')되어 화면(51)의 우측 모서리(44) 상에 위치할 수 있다. 그리고, 사용자의 손(21)이 현재 위치에서 상측으로 움직이는 경우(f), 사용자의 손(21)의 움직임의 크기에 따라 포인터(11)가 수직 방향으로 이동(f')되어 화면(51)의 상측 모서리(41) 상에 위치할 수 있다. 그리고, 사용자의 손(21)이 현재 위치에서 하측으로 움직이는 경우(g), 사용자의 손(21)의 움직임의 크기에 따라 포인터(11)가 수직 방향으로 이동(g')되어 화면(51)의 하측 모서리(42) 상에 위치할 수 있다.
한편, 상술한 바와 같이 포인터(11)의 위치는 포인터(11)의 좌측 상단의 모서리의 위치와 관련되므로, 포인터(11)가 화면(51)의 우측 모서리(44), 또는 하측 모서리(42) 상에 위치하는 경우에는 화면(51)에 표시되지 않을 수 있다.
다음으로, 제어부(108)는 포인터(11)가 화면(51)의 모서리 상에 위치한 시간이 기준 시간을 경과했는지 판단한다(404). 그리고, 제어부(108)는 기준 시간을 경과했으면, 기준 시간 이후에는 포인터(11)의 위치에 따라 화면(51)의 페이지가 이동되도록 한다(405). 즉, 이 때 포인터(11)는 페이지 스크롤 모드를 수행한다. 일 예로 제어부(108)는 포인터(11)가 화면(51)의 좌측 모서리, 또는 상측 모서리 상에 위치하면, 화면(51)의 현재 페이지를 이전 페이지로 이동하고, 포인터(11)가 화면(51)의 우측 모서리, 또는 하측 모서리 상에 위치하면, 화면(51)의 현재 페이지를 다음 페이지로 이동할 수 있다. 이 때, 화면(51)의 페이지를 이동하는 방법은 도 13 내지 도 14를 참조하여 보다 상세하게 설명한다.
도 13 내지 도 14를 참조하면, 표시 장치(1)의 화면(51)에는 다양한 컨텐츠가 표시될 수 있다. 여기서, 페이지가 이동될 수 있는 컨텐츠는 도면, 문서, 이미지 등이 포함될 수 있다. 예를 들어, 컨텐츠가 문서인 경우 문서의 규격에 따라 페이지가 정의되어 있으며, 컨텐츠가 도면, 또는 이미지 집합인 경우 현재 도면, 또는 이미지에서 이전 도면, 또는 이미지를 이전 페이지, 그리고, 현재 도면, 또는 이미지에서 다음 도면, 또는 이미지를 다음 페이지로 정의할 수 있다.
그리고, 화면(51)에 표시되는 컨텐츠의 페이지가 이전 페이지, 또는 다음 페이지로 이동되면서 적어도 하나의 그래픽 효과가 사용될 수 있다. 일 예로 포인터(11)가 기준 시간 동안 화면(51)의 좌측 모서리(43) 상에 위치하여 컨텐츠의 페이지가 이동되면서 다음과 같은 그래픽 효과가 사용될 수 있다.
컨텐츠의 페이지가 이전 페이지로 이동되면서, 도 13에 도시된 바와 같이 컨텐츠의 현재 페이지(52)는 화면(51)의 우측으로 미끄러지면서 사라지고, 컨텐츠의 이전 페이지(53)는 화면(51)의 좌측에서 미끄러지면서 나타나는 것으로 표시될 수 있다. 이 때, 컨텐츠의 현재 페이지(52)와 이전 페이지(53) 사이에는 페이지를 구분하기 위한 영역(54)이 화면(51)에 표시될 수 있다. 그리고, 도 14에 도시된 바와 같이 컨텐츠의 현재 페이지(52)가 화면(51)에서 사라지고, 컨텐츠의 이전 페이지(53)가 즉각적으로 화면(51)에 나타나면서 표시될 수 있다. 한편, 컨텐츠의 페이지가 이동되면서 사용되는 그래픽 효과는 상술한 실시예 외에도 종래 기술에 의해 다양한 그래픽 효과가 채택될 수 있다.
도 15는 본 발명의 일 실시예에 의한 표시 장치의 화면을 스크롤 하는 방법을 도시하는 흐름도이다. 도 5 내지 도 11과 중복되는 단계에 대해서는 상세한 설명을 생략한다.
도 15를 참조하면, 제어부(108)는 포인터(11)가 기준 영역에 의치하는지 판단한다(503). 그리고, 제어부(108)는 포인터(11)가 기준 영역에 위치한 시간이 기준 시간을 경과했는지 판단한다(504).
도 16을 참조하면, 사용자의 손(21)이 움직이지 않거나 일정한 범위(23)에서 움직이면, 화면(51)에 표시되는 포인터(11)도 이동되지 않거나 일정한 범위(13)에서 이동하게 된다. 그리고, 포인터(11)가 기준 시간동안 현재 포인터(11)의 위치를 기준으로 일정한 범위에 해당하는 기준 영역(13)에 위치하면, 기준 시간 이후에는 포인터(11)의 목표 위치에 따라 화면(51)을 스크롤할 수 있다. 이 때, 화면(51)의 우측, 또는 하측에는 화면(51)을 스크롤 하기 위한 스크롤 바(55, 56)가 표시될 수 있다.
다음으로, 기준 시간 이후에는, 영상 처리부(106)는 사용자의 움직임을 감지하고(505), 제어부(108)는 포인터(11)의 목표 위치에 따라 화면(51)이 스크롤되도록 한다(506). 일 예로 제어부(108)는 포인터(11)의 목표 위치가 포인터(11)의 현재 위치에서 좌측 방향이면 화면(51)을 좌측으로 스크롤하고, 포인터(11)의 목표 위치가 포인터(11)의 현재 위치에서 우측 방향이면 화면(51)을 우측으로 스크롤할 수 있다. 마찬가지로, 제어부(108)는 화면(51)을 상측으로 스크롤하고, 하측으로 스크롤할 수 있다.
그리고, 포인터(11)의 목표 위치에 따라 화면(51)이 스크롤되면서 적어도 하나의 그래픽 효과가 사용될 수 있다. 일 예로, 도 17 내지 도 18을 참조하면, 사용자의 손(21)이 좌측 방향으로 움직임(h)에 따라 포인터(11)의 목표 위치가 좌측 방향(h')인 경우 다음과 같은 그래픽 효과가 사용될 수 있다.
화면(51)이 좌측으로 스크롤되면서, 도 17에 도시된 바와 같이 화면(51)에 표시되지 않았던 컨텐츠의 좌측 영상(57)이 나타나고, 화면(51)에 표시되었던 컨텐츠의 우측 영상이 사라지면서 표시될 수 있다. 또한, 사용자에게 현재 포인터(11)가 휠 스크롤 모드를 수행함을 나타낼 수 있도록 포인터(11)의 형태를 휠 스크롤 모드에 대응하는 다른 형태(17)로 표시할 수 있다. 그리고, 다른 형태의 포인터(117)는 사용자의 손(21)의 움직임에 따라 목표 위치로 이동(h')될 수 있다.
또한, 도 18에 도시된 바와 같이 현재 포인터(11)의 형태를 유지하면서, 사용자의 손(21)의 좌측 방향의 움직임(h)에 따라 화면(51)만 좌측으로 스크롤할 수 있다. 이 때, 화면(51)의 하측에 표시되는 스크롤 바(56)는 화면(51)의 스크롤 방향, 즉 사용자의 손(21)의 움직임(h)과 반대 방향으로 이동된다. 한편, 화면(51)이 스크롤되면서 사용되는 그래픽 효과는 상술한 실시예 외에도 종래 기술에 의해 다양한 그래픽 효과가 채택될 수 있다.
도 19는 본 발명의 일 실시예에 의한 표시 장치의 줌기능 수행 방법을 도시하는 흐름도이다. 도 5 , 도 11 내지 도 15와 중복되는 단계에 대해서는 상세한 설명을 생략한다.
도 19를 참조하면, 제어부(108)는 포인터(11)가 제1 기준 영역에 위치하는지 판단한다(603). 그리고, 제어부(108)는 포인터(11)가 제1 기준 영역에 위치한 시간이 기준 시간을 경과했는지 판단한다(604). 이 때, 제1 기준 영역은 도 20에 도시된 바와 같이 화면(51)의 외곽에 위치하여 포인터(11)가 자주 위치하지 않는 영역(14)인 것이 바람직하다.
다음으로, 제어부(108)는 포인터(11)가 기준 시간동안 제1 기준 영역에 위치했으면, 화면(51)의 적어도 하나의 영역에 적어도 하나의 그래픽 이미지로서, 소정의 버튼을 표시할 수 있다(605).
도 21에 도시된 바와 같이, 제어부(108)는 그래픽 이미지(58)가 포인터(11)가 위치하는 제1 기준 영역(14)에 표시되도록 할 수 있다. 여기서, 소정의 버튼은 일 예로 단축키 기능을 위해 사용되는 Shift, Ctrl, 또는 Alt 키 버튼 등일 수 있다. 이하 본 발명의 실시예에서는 Ctrl 키 버튼인 경우에 대해 설명한다.
다음으로, 사용자의 손(21)의 움직임에 따라 적어도 하나의 버튼이 선택(click)된다(606). 이 때, 사용자의 손(21)이 미리 저장된 선택 동작과 동일한 동작을 취하는 경우 버튼이 선택될 수 있으며, 이외에도 버튼의 선택 방법은 종래 기술에 의한 다양한 방법이 채택될 수 있다.
다음으로, 영상 처리부(106)는 사용자의 움직임을 감지하고(607), 제어부(108)는 감지된 움직임에 따라 포인터(11)를 목표 위치로 이동한다(608). 그리고, 제어부(108)는 포인터(11)가 제2 기준 영역에 위치하는지 판단한다(609). 이 때 제2 기준 영역은 도 15에서 상술한 바와 같이 표시 장치(1)의 화면(51)을 스크롤하기 위해 판단하는 기준 영역(13)이다. 그리고, 제어부(108)는 포인터(11)가 기준 영역(13)에 위치한 시간이 기준 시간을 경과했는지 판단한다(610).
다음으로, 기준 시간 이후에는, 영상 처리부(106)는 사용자의 움직임을 감지하고(611), 제어부(108)는 포인터(11)의 목표 위치에 따라 버튼이 선택된 상태에서 포인터(11)의 휠 스크롤 기능을 수행한다(612). 일 예로 Ctrl 키 버튼이 선택된 경우에는 포인터(11)의 휠 스크롤 동작에 따라 줌 기능이 수행될 수 있다.
이에 따라, 도 22에 도시된 바와 같이 사용자의 손(21)이 상측 방향으로 움직임(i)에 따라 화면(51)에는 확대된 컨텐츠의 영상(58)이 표시될 수 있다. 이 때 포인터(11)는 사용자에게 줌 인 모드를 수행하고 있음을 알리기 위해 줌 인 모드에 대응하는 형태(18)로 표시될 수 있다. 또한, 도 23에 도시된 바와 같이 사용자의 손(21)이 하측 방향으로 움직임(j)에 따라 화면(51)에는 축소된 컨텐츠의 영상(59)이 표시될 수 있다. 이 때 포인터(11)는 사용자에게 줌 아웃 모드를 수행하고 있음을 알리기 위해 줌 아웃 모드에 대응하는 형태(19)로 표시될 수 있다.
101: 방송 수신부 102: 신호 처리부
103: 디스플레이부 104: 컨텐츠 생성부
105: 영상 획득부 106: 영상 처리부
107: 메모리부 108: 제어부

Claims (24)

  1. 사용자 영상을 획득하는 영상 획득부;
    상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부; 및
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하는 제어부; 를 포함하는 표시 장치.
  2. 제1항에 있어서,
    상기 제어부는 상기 포인터가 적어도 하나의 이동 영역에 위치하게 되면 그 시점부터 상기 포인터가 상기 적어도 하나의 이동 영역 내에서만 이동되도록 하는 표시 장치.
  3. 제2항에 있어서,
    상기 제어부는 상기 목표 위치가 적어도 하나의 이동 영역을 벗어나면 상기 포인터가 적어도 하나의 다른 이동 영역으로 이동되도록 하는 표시 장치.
  4. 제3항에 있어서,
    상기 제어부는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 외곽에 위치하는 적어도 하나의 기준 영역에 위치하면 상기 적어도 하나의 기준 영역의 위치에 따라 상기 포인터의 이동 방향을 결정하는 표시 장치.
  5. 제3항에 있어서,
    상기 제어부는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 내부에 위치하는 기준 영역의 모서리 상에 위치하면 상기 모서리의 위치에 따라 상기 포인터의 이동 방향을 결정하는 표시 장치.
  6. 사용자 영상을 획득하는 영상 획득부;
    상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부; 및
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 상기 화면의 모서리 상에 위치하면 상기 화면의 페이지가 이동되도록 하는 제어부; 를 포함하는 표시 장치.
  7. 제6항에 있어서,
    상기 제어부는 상기 포인터가 기준 시간 동안 상기 화면의 모서리 상에 위치하면 상기 포인터의 위치에 따라 상기 화면의 페이지가 이동되도록 하는 표시 장치.
  8. 제7항에 있어서,
    상기 제어부는 상기 포인터가 상기 화면의 좌측, 또는 상측 모서리 상에 위치하면 상기 화면의 페이지가 이전 페이지로 이동되도록 하고, 상기 포인터가 상기 화면의 우측, 또는 하측 모서리 상에 위치하면 상기 화면의 페이지가 다음 페이지로 이동되도록 하는 표시 장치.
  9. 사용자 영상을 획득하는 영상 획득부;
    상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부; 및
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 상기 화면의 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 스크롤되도록 하는 제어부; 를 포함하는 표시 장치.
  10. 제9항에 있어서,
    상기 제어부는 상기 포인터가 기준 시간 동안 상기 화면의 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 스크롤되도록 하는 표시 장치.
  11. 제10항에 있어서,
    상기 제어부는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면이 스크롤되도록 하는 표시 장치.
  12. 사용자 영상을 획득하는 영상 획득부;
    상기 사용자 영상으로부터 사용자의 움직임을 감지하는 영상 처리부; 및
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터가 목표 위치로 이동되도록 하고, 상기 포인터가 상기 화면의 제1 기준 영역에 위치하면 상기 제1 기준 영역에 적어도 하나의 버튼이 표시되도록 하는 제어부; 를 포함하는 표시 장치.
  13. 제12항에 있어서,
    상기 제어부는 상기 적어도 하나의 버튼이 선택된 후 상기 포인터가 상기 화면의 제2 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 줌되도록 하는 표시 장치.
  14. 제13항에 있어서,
    상기 제어부는 상기 포인터가 기준 시간 동안 상기 화면의 제2 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 줌되도록 하는 표시 장치.
  15. 제14항에 있어서,
    상기 제어부는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면이 줌되도록 하는 표시 장치.
  16. 사용자 영상으로부터 사용자의 움직임을 감지하는 단계;
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계;
    상기 포인터가 적어도 하나의 이동 영역에 위치하게 되면 그 시점부터 상기 포인터가 상기 적어도 하나의 이동 영역 내에서만 이동되도록 하는 단계; 및
    상기 목표 위치가 적어도 하나의 이동 영역을 벗어나면 상기 포인터를 적어도 하나의 다른 이동 영역으로 이동하는 단계; 를 포함하는 표시 장치의 제어 방법.
  17. 제16항에 있어서,
    상기 포인터를 적어도 하나의 다른 이동 영역으로 이동하는 단계는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 외곽에 위치하는 적어도 하나의 기준 영역에 위치하면 상기 적어도 하나의 기준 영역의 위치에 따라 상기 포인터의 이동 방향을 결정하는 표시 장치의 제어 방법.
  18. 제16항에 있어서,
    상기 포인터를 적어도 하나의 다른 이동 영역으로 이동하는 단계는 상기 목표 위치가 상기 적어도 하나의 이동 영역의 내부에 위치하는 기준 영역의 모서리 상에 위치하면 상기 모서리의 위치에 따라 상기 포인터의 이동 방향을 결정하는 표시 장치의 제어 방법.
  19. 사용자 영상으로부터 사용자의 움직임을 감지하는 단계;
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계; 및
    상기 포인터가 상기 화면의 모서리 상에 위치하면 상기 화면의 페이지를 이동하는 단계; 를 포함하는 표시 장치의 제어 방법.
  20. 제19항에 있어서,
    상기 화면의 페이지를 이동하는 단계는 상기 포인터가 기준 시간 동안 상기 화면의 모서리 상에 위치하면 상기 포인터의 위치에 따라 상기 화면의 페이지를 이동하는 표시 장치의 제어 방법.
  21. 사용자 영상으로부터 사용자의 움직임을 감지하는 단계;
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계; 및
    상기 포인터가 기준 시간 동안 상기 화면의 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면을 스크롤하는 단계; 를 포함하는 표시 장치의 제어 방법.
  22. 제21항에 있어서,
    상기 화면을 스크롤하는 단계는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면을 스크롤하는 표시 장치의 제어 방법.
  23. 사용자 영상으로부터 사용자의 움직임을 감지하는 단계;
    상기 감지된 사용자의 움직임에 대응하여 화면에 표시되는 포인터를 목표 위치로 이동하는 단계;
    상기 포인터가 상기 화면의 제1 기준 영역에 위치하면 상기 제1 기준 영역에 적어도 하나의 버튼을 표시하는 단계; 및
    상기 적어도 하나의 버튼이 선택된 후 상기 포인터가 기준 시간 동안 상기 화면의 제2 기준 영역에 위치하면 상기 목표 위치에 따라 상기 화면이 줌되도록 하는 단계; 를 포함하는 표시 장치의 제어 방법.
  24. 제23항에 있어서,
    상기 화면이 줌되도록 하는 단계는 상기 포인터의 위치를 고정하고 상기 목표 위치에 따라 상기 화면이 줌되도록 하는 표시 장치의 제어 방법.
KR1020120002639A 2012-01-09 2012-01-09 표시 장치 및 그 제어 방법 Ceased KR20130081580A (ko)

Priority Applications (9)

Application Number Priority Date Filing Date Title
KR1020120002639A KR20130081580A (ko) 2012-01-09 2012-01-09 표시 장치 및 그 제어 방법
JP2014551200A JP2015508539A (ja) 2012-01-09 2013-01-08 表示装置及びその制御方法
PCT/KR2013/000121 WO2013105765A1 (en) 2012-01-09 2013-01-08 Display apparatus and controlling method thereof
AU2013208426A AU2013208426A1 (en) 2012-01-09 2013-01-08 Display apparatus and controlling method thereof
MX2014008355A MX2014008355A (es) 2012-01-09 2013-01-08 Aparato de despliegue y metodo de control del mismo.
US13/737,273 US20130176219A1 (en) 2012-01-09 2013-01-09 Display apparatus and controlling method thereof
EP13150671.9A EP2613243A3 (en) 2012-01-09 2013-01-09 Display apparatus and controlling method thereof
CN2013100080073A CN103200439A (zh) 2012-01-09 2013-01-09 显示装置及其控制方法
AU2016202282A AU2016202282A1 (en) 2012-01-09 2016-04-12 Display apparatus and controlling method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120002639A KR20130081580A (ko) 2012-01-09 2012-01-09 표시 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20130081580A true KR20130081580A (ko) 2013-07-17

Family

ID=47845704

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120002639A Ceased KR20130081580A (ko) 2012-01-09 2012-01-09 표시 장치 및 그 제어 방법

Country Status (8)

Country Link
US (1) US20130176219A1 (ko)
EP (1) EP2613243A3 (ko)
JP (1) JP2015508539A (ko)
KR (1) KR20130081580A (ko)
CN (1) CN103200439A (ko)
AU (2) AU2013208426A1 (ko)
MX (1) MX2014008355A (ko)
WO (1) WO2013105765A1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160019293A (ko) * 2014-08-11 2016-02-19 엘지전자 주식회사 전자기기 및 그것의 제어방법
CN110418059A (zh) * 2019-07-30 2019-11-05 联想(北京)有限公司 应用于电子设备的图像处理方法、装置、电子设备、介质
CN112956207A (zh) * 2018-08-30 2021-06-11 三星电子株式会社 用于在外部电子设备中连续再现多媒体内容的电子设备和方法
WO2023106622A1 (ko) * 2021-12-09 2023-06-15 삼성전자주식회사 플렉서블 디스플레이를 가지는 전자 장치
US11983380B2 (en) 2021-12-09 2024-05-14 Samsung Electronics Co., Ltd. Electronic device having a flexible display

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9405375B2 (en) * 2013-09-13 2016-08-02 Qualcomm Incorporated Translation and scale invariant features for gesture recognition
CN103488296B (zh) * 2013-09-25 2016-11-23 华为软件技术有限公司 体感交互手势控制方法及装置
CN103677992B (zh) * 2013-12-20 2017-02-22 深圳泰山在线科技有限公司 体感方式的页面切换方法及系统
CN105302404A (zh) * 2014-07-25 2016-02-03 深圳Tcl新技术有限公司 鼠标指针快速移动的方法及系统
CN105307014A (zh) * 2014-07-29 2016-02-03 冠捷投资有限公司 基于手势辨识的密码输入方法
US20160092726A1 (en) * 2014-09-30 2016-03-31 Xerox Corporation Using gestures to train hand detection in ego-centric video
US11980821B2 (en) * 2019-01-24 2024-05-14 Sony Interactive Entertainment Inc. Information processing apparatus, method of controlling information processing apparatus, and program
JP7090790B2 (ja) * 2019-02-19 2022-06-24 株式会社Ｎｔｔドコモ 情報処理装置
JP7105984B2 (ja) * 2019-03-05 2022-07-25 株式会社Ｎｔｔドコモ 情報処理装置
USD900129S1 (en) * 2019-03-12 2020-10-27 AIRCAP Inc. Display screen or portion thereof with graphical user interface
CN111601129B (zh) * 2020-06-05 2022-04-01 北京字节跳动网络技术有限公司 控制方法、装置、终端及存储介质
USD1077828S1 (en) * 2021-12-31 2025-06-03 Cole Gurman Display screen with an icon

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5454043A (en) * 1993-07-30 1995-09-26 Mitsubishi Electric Research Laboratories, Inc. Dynamic and static hand gesture recognition through low-level image analysis
US5594469A (en) * 1995-02-21 1997-01-14 Mitsubishi Electric Information Technology Center America Inc. Hand gesture machine control system
US6014140A (en) * 1997-01-10 2000-01-11 International Business Machines Corporation Method and system for locating and displaying the position of a cursor contained within a page of a compound document
KR19990011180A (ko) * 1997-07-22 1999-02-18 구자홍 화상인식을 이용한 메뉴 선택 방법
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
JP2000089884A (ja) * 1998-09-09 2000-03-31 Hitachi Business Solution Kk 情報処理システム
US6147683A (en) * 1999-02-26 2000-11-14 International Business Machines Corporation Graphical selection marker and method for lists that are larger than a display window
JP3773716B2 (ja) * 1999-09-13 2006-05-10 富士通株式会社 グラフィカルユーザインターフェース表示装置及びその装置での処理をコンピュータにて行なわせるためのプログラムを格納した記録媒体
US6562929B2 (en) * 2000-08-30 2003-05-13 Jsr Corporation Conjugated diene-based rubber and method of producing the same, oil extended rubber and rubber composition containing the same
JP5039911B2 (ja) * 2000-10-11 2012-10-03 インターナショナル・ビジネス・マシーンズ・コーポレーション データ処理装置、入出力装置、タッチパネルの制御方法、記憶媒体及びプログラム伝送装置
JP2003114750A (ja) * 2001-10-04 2003-04-18 Sony Corp 表示装置及びスクロール制御方法
JP4172198B2 (ja) * 2002-04-17 2008-10-29 日本電気株式会社 携帯電話機
US6885363B2 (en) * 2002-05-09 2005-04-26 Gateway, Inc. Pointing device dwell time
CN100432912C (zh) * 2004-05-07 2008-11-12 索尼株式会社 便携式电子设备及其显示方法和图形用户接口装置
JP2006068315A (ja) * 2004-09-02 2006-03-16 Sega Corp ポーズ検出プログラム、ビデオゲーム装置、ポーズ検出方法、および、プログラムを記録したコンピュータ読み取り可能な記録媒体
TW200639681A (en) * 2005-05-05 2006-11-16 Elan Microelectronics Corp Touchpad with smart automatic scroll function and its control method
JP4405430B2 (ja) * 2005-05-12 2010-01-27 任天堂株式会社 ゲームプログラムおよびゲーム装置
JP2006330848A (ja) * 2005-05-23 2006-12-07 Nec Corp 画像編集システム、画像編集方法及び画像編集プログラム
US8726194B2 (en) * 2007-07-27 2014-05-13 Qualcomm Incorporated Item selection using enhanced control
US8487881B2 (en) * 2007-10-17 2013-07-16 Smart Technologies Ulc Interactive input system, controller therefor and method of controlling an appliance
KR101079598B1 (ko) * 2007-12-18 2011-11-03 삼성전자주식회사 디스플레이장치 및 그 제어방법
US9772689B2 (en) * 2008-03-04 2017-09-26 Qualcomm Incorporated Enhanced gesture-based image manipulation
KR20100009023A (ko) * 2008-07-17 2010-01-27 (주)마이크로인피니티 움직임을 인식하는 장치 및 방법
US20100235786A1 (en) * 2009-03-13 2010-09-16 Primesense Ltd. Enhanced 3d interfacing for remote devices
JP5182202B2 (ja) * 2009-04-14 2013-04-17 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
EP2256590A1 (en) * 2009-05-26 2010-12-01 Topspeed Technology Corp. Method for controlling gesture-based remote control system
TWI411946B (zh) * 2009-11-06 2013-10-11 Elan Microelectronics Corp The touchpad controls how the cursor on the display is on the screen
US8843857B2 (en) * 2009-11-19 2014-09-23 Microsoft Corporation Distance scalable no touch computing
CN102096549A (zh) * 2011-01-05 2011-06-15 深圳桑菲消费通信有限公司 一种在触屏手机界面实现动态快捷按钮的系统及方法
US8497838B2 (en) * 2011-02-16 2013-07-30 Microsoft Corporation Push actuation of interface controls
US8654219B2 (en) * 2011-04-26 2014-02-18 Lg Electronics Inc. Method and apparatus for restoring dead pixel using light intensity map in a time-of-flight camera
US8769409B2 (en) * 2011-05-27 2014-07-01 Cyberlink Corp. Systems and methods for improving object detection
KR101794000B1 (ko) * 2011-06-13 2017-11-06 삼성전자주식회사 터치 스크린을 구비하는 기기에서 스크롤 장치 및 방법
CN102306065A (zh) * 2011-07-20 2012-01-04 无锡蜂巢创意科技有限公司 交互式光感触摸微型投影系统的实现方法
JP5649535B2 (ja) * 2011-08-05 2015-01-07 株式会社東芝 コマンド発行装置、コマンド発行方法およびプログラム

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160019293A (ko) * 2014-08-11 2016-02-19 엘지전자 주식회사 전자기기 및 그것의 제어방법
CN112956207A (zh) * 2018-08-30 2021-06-11 三星电子株式会社 用于在外部电子设备中连续再现多媒体内容的电子设备和方法
CN112956207B (zh) * 2018-08-30 2023-10-13 三星电子株式会社 用于在外部电子设备中连续再现多媒体内容的电子设备和方法
CN110418059A (zh) * 2019-07-30 2019-11-05 联想(北京)有限公司 应用于电子设备的图像处理方法、装置、电子设备、介质
WO2023106622A1 (ko) * 2021-12-09 2023-06-15 삼성전자주식회사 플렉서블 디스플레이를 가지는 전자 장치
US11983380B2 (en) 2021-12-09 2024-05-14 Samsung Electronics Co., Ltd. Electronic device having a flexible display

Also Published As

Publication number Publication date
EP2613243A3 (en) 2014-02-19
AU2016202282A1 (en) 2016-05-05
EP2613243A2 (en) 2013-07-10
CN103200439A (zh) 2013-07-10
MX2014008355A (es) 2015-05-15
WO2013105765A1 (en) 2013-07-18
AU2013208426A1 (en) 2014-07-24
US20130176219A1 (en) 2013-07-11
JP2015508539A (ja) 2015-03-19

Similar Documents

Publication Publication Date Title
KR20130081580A (ko) 표시 장치 및 그 제어 방법
JP5412227B2 (ja) 映像表示装置、および、その表示制御方法
KR101585466B1 (ko) 움직임 검출에 의한 전자장치 동작 제어방법 및 이를 채용하는 전자장치
US9874946B2 (en) Information processing to select an image
US9405373B2 (en) Recognition apparatus
US10769468B2 (en) Mobile surveillance apparatus, program, and control method
KR102252321B1 (ko) 디스플레이 장치 및 디스플레이 방법
CN111475059A (zh) 基于近距离传感器和图像传感器的手势检测
US8884991B2 (en) Control system, control apparatus, handheld apparatus, control method, and program
KR20070036075A (ko) 3-ｄ 터치 상호작용에서의 터치-다운 피드-포워드
US20170068418A1 (en) Electronic apparatus, recording medium, and operation method of electronic apparatus
US20150339026A1 (en) User terminal device, method for controlling user terminal device, and multimedia system thereof
KR20140105691A (ko) 터치스크린을 구비하는 사용자 기기의 오브젝트 조작 방법 및 그 장치
US10928919B2 (en) Information processing device and information processing method for virtual objects operability
KR20140085061A (ko) 디스플레이 장치 및 이의 제어 방법
CN105159582A (zh) 一种视频区域调整方法及终端
JP2008070968A (ja) 表示処理装置
JP2013114647A (ja) ジェスチャー入力システム
KR101134245B1 (ko) 3차원 가상 리모콘을 포함한 전자기기 및 그의 구동 방법
CN103677992A (zh) 体感方式的页面切换方法及系统
JP2015525927A (ja) 表示装置を制御するための方法及び装置
KR20080094200A (ko) 포인터가 위치한 영역에 메뉴 아이템을 나타내는 ｇｕｉ제공방법 및 이를 적용한 영상기기
CN103716673B (zh) 体感方式的点击按钮操控方法及系统
KR101227875B1 (ko) 사용자 동작 기반 디스플레이 장치
KR101320236B1 (ko) 휴대용 단말기 및 그를 이용한 가상 화면 제어방법

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20120109

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20170109

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20120109

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20180227

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20180503

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20180227

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I