[go: up one dir, main page]

WO2019151570A1 - 디스플레이 장치 - Google Patents

디스플레이 장치 Download PDF

Info

Publication number
WO2019151570A1
WO2019151570A1 PCT/KR2018/003432 KR2018003432W WO2019151570A1 WO 2019151570 A1 WO2019151570 A1 WO 2019151570A1 KR 2018003432 W KR2018003432 W KR 2018003432W WO 2019151570 A1 WO2019151570 A1 WO 2019151570A1
Authority
WO
WIPO (PCT)
Prior art keywords
pointer
button
controller
display
menu area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/KR2018/003432
Other languages
English (en)
French (fr)
Inventor
김자연
김명선
염정호
오주현
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Priority to US16/967,027 priority Critical patent/US11789547B2/en
Priority to DE112018006791.2T priority patent/DE112018006791T5/de
Publication of WO2019151570A1 publication Critical patent/WO2019151570A1/ko
Anticipated expiration legal-status Critical
Priority to US18/242,838 priority patent/US12498801B2/en
Ceased legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 

Definitions

  • the present invention relates to a display device capable of moving a fixed pointer in a specific direction despite a shaking pointer input.
  • Digital TV services using wired or wireless communication networks are becoming common.
  • Digital TV service can provide a variety of services that could not be provided in the conventional analog broadcasting service.
  • IPTV Internet Protocol Television
  • smart TV service provide bidirectionality that allows a user to actively select a type of viewing program and a viewing time.
  • IPTV, smart TV service may provide a variety of additional services, such as Internet search, home shopping, online games, etc. based on this bidirectionality.
  • the user holds the remote control device in his hand and performs various controls by moving the remote control device.
  • the pointer is obliquely moved or the distance of the pointer cannot be precisely controlled, thus making it difficult to move the pointer to a desired menu.
  • An object of the present invention is to provide a display device that can be fixed by moving the pointer in a specific direction despite the shaking pointer input.
  • a display device may include a display unit for displaying a pointer, a user input interface unit for receiving a user input for moving the pointer, and actual coordinates of the pointer corresponding to the user input in the menu. And a control unit configured to move the pointer by fixing the pointer in a specific direction when a user input is received within the area and moves the pointer.
  • the present invention can facilitate moving the pointer to a desired menu by moving the pointer in a straight line despite the shaking of the remote control apparatus.
  • the pointer when the menus are horizontally arranged, the pointer is moved horizontally, and when the menus are vertically arranged, the pointer is moved vertically, which has the advantage of moving the pointer according to the user's intention.
  • FIG. 1 is a block diagram illustrating a configuration of a display apparatus according to an exemplary embodiment.
  • FIG. 2 is a block diagram of a remote control apparatus according to an embodiment of the present invention.
  • Figure 3 shows an example of the actual configuration of the remote control device according to an embodiment of the present invention.
  • FIG. 4 shows an example of using a remote control device according to an embodiment of the present invention.
  • 5A and 5B are diagrams for describing a problem that may occur when the pointer moves in response to the movement of the remote control apparatus.
  • FIG. 6 is a view for explaining a method of operating a display apparatus according to an exemplary embodiment.
  • FIG. 7 is a diagram for describing a method of fixing and moving a pointer in a specific direction according to an exemplary embodiment of the present invention.
  • 8A to 8C are diagrams for describing a moving direction of a pointer according to various arrangements of a menu.
  • FIG. 9 is a diagram for describing a display position of a pointer according to an embodiment of the present invention.
  • FIG. 10 is a diagram for describing a method of displaying a pointer so as not to block an identifier in a menu according to an exemplary embodiment of the present disclosure.
  • FIG. 11 is a diagram illustrating a problem that may occur when a pointer entering a menu area moves to a fixed height according to an embodiment of the present disclosure.
  • FIG. 12 is a diagram for describing a method of changing a real coordinate, according to an exemplary embodiment.
  • FIG. 13 is a view for explaining another embodiment for solving the problem described with reference to FIG. 11.
  • 14 to 15 are diagrams for explaining a method of warning of deviation of a pointer by changing and displaying a menu.
  • 16 to 17 are diagrams for explaining a method of warning of deviation of a pointer by changing and displaying the pointer.
  • 18 is a diagram for explaining a method of warning of deviation of a pointer by displaying a second pointer corresponding to real coordinates.
  • 19 to 20 are diagrams for describing a method of moving a pointer according to a pointer movement mode according to an embodiment of the present invention.
  • FIG. 21 is a diagram for describing a method of attracting a pointer to a menu area according to an exemplary embodiment.
  • FIG. 22 is a diagram for describing a method of attracting a pointer to a button according to another exemplary embodiment.
  • FIG. 23 is a diagram for describing the size of the magnetic region.
  • 24 is a diagram for describing a size of a magnetic region, according to another exemplary embodiment.
  • FIG. 25 is a diagram for describing a magnetic area including a plurality of buttons according to an exemplary embodiment.
  • FIG. 26 is a diagram for describing a method of moving a pointer outside a menu area or a magnetic area, according to an exemplary embodiment.
  • FIG. 27 is a diagram illustrating a keyboard UI according to an embodiment of the present invention.
  • FIG. 28 is a diagram for describing a display position of a pointer according to an embodiment of the present invention.
  • 29 is a diagram for describing a method of displaying a specific character 2711 according to a movement of a pointer according to an embodiment of the present invention.
  • FIG. 30 is a diagram for describing a method of determining a next character and a method of setting a magnetic region according to an exemplary embodiment of the present disclosure.
  • FIG. 31 is a diagram for describing a method of displaying a next letter based on contextual probability according to an embodiment of the present invention.
  • 32 is a diagram for describing a method of moving a pointer to the next letter based on contextual probability according to an embodiment of the present invention.
  • 33 is a diagram for explaining a method of moving a pointer based on contextual probability according to an embodiment of the present invention.
  • 34 is a diagram for describing a method of determining an autocomplete word and a method of setting a magnetic region according to an exemplary embodiment of the present invention.
  • 35 is a diagram for describing a method of adjusting a size of a button including an autocomplete character based on contextual probability according to an embodiment of the present invention.
  • 36 is a diagram for describing an acceleration region according to an exemplary embodiment of the present invention.
  • FIG. 1 is a block diagram illustrating a configuration of a display apparatus according to an exemplary embodiment.
  • the display apparatus 100 may be implemented as a TV, a monitor, a projector, or a device including the same.
  • the display apparatus 100 may include a broadcast receiver 130, an external device interface 135, a storage 140, a user input interface 150, a camera 160, a controller 170, a display 180, The audio output unit 185 and the power supply unit 190 may be included.
  • the broadcast receiver 130 may include a tuner 131, a demodulator 132, and a network interface unit 133.
  • the tuner 131 may tune a specific broadcast channel according to a channel tuning command.
  • the tuner 131 may receive a broadcast signal for a tuned specific broadcast channel.
  • the demodulator 132 may separate the received broadcast signal into a video signal, an audio signal, and a data signal associated with a broadcast program, and may restore the separated video signal, the audio signal, and the data signal into a form capable of outputting the broadcast signal.
  • the network interface unit 133 may provide an interface for connecting the display apparatus 100 to a wired / wireless network including an internet network.
  • the network interface unit 133 may transmit or receive data with another user or another electronic device through the connected network or another network linked to the connected network.
  • some content data stored in the display apparatus 100 may be transmitted to a user selected from another user or another electronic device registered in the display apparatus 100 or a selected electronic apparatus.
  • the network interface unit 133 may access a predetermined web page through a connected network or another network linked to the connected network. That is, by accessing a predetermined web page through the network, it is possible to send or receive data with the server.
  • the network interface unit 133 may receive content or data provided by a content provider or a network operator. That is, the network interface unit 133 may receive content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network.
  • content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network.
  • the network interface unit 133 may receive the update information and the update file of the firmware provided by the network operator, and may transmit data to the Internet or the content provider or the network operator.
  • the network interface unit 133 may select and receive a desired application from among applications that are open to the public through the network.
  • the external device interface unit 135 may receive an application or a list of applications in a neighboring external device and transmit the received application to the controller 170 or the storage 140.
  • the external device interface unit 135 may provide a connection path between the display apparatus 100 and the external device.
  • the display apparatus 100 may be connected to the external device by wire or wirelessly through the external device interface unit 135.
  • the external device interface unit 135 may receive one or more of an image and audio output from the external device and transmit the received one or more to the controller 170.
  • the external device connectable to the external device interface unit 135 may be any one of a set top box, a Blu-ray player, a DVD player, a game machine, a sound bar, a terminal such as a smartphone, a PC, a USB memory, and a home theater.
  • the storage unit 140 may store a program for processing and controlling each signal in the controller 170, and may store a signal-processed video, audio, or data signal.
  • the storage 140 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface 135, the network interface 133, or the camera 160.
  • the channel storage function may also store information about a predetermined image.
  • the storage 140 may store an application or a list of applications input from the external device interface 135 or the network interface 133.
  • the display apparatus 100 may reproduce and provide a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage 140 to the user.
  • a content file video file, still image file, music file, document file, application file, etc.
  • the user input interface unit 150 may transmit a signal input by the user to the controller 170, or may transmit a signal from the controller 170 to the user.
  • the user input interface unit 150 may be configured according to various communication methods such as Bluetooth, Ultra Wideband (UWB), ZigBee, RF (Radio Frequency) communication, or Infrared (IR) communication.
  • the remote controller 200 may receive and process a control signal such as power on / off, channel selection, screen setting, or the like, or transmit a control signal from the controller 170 to the remote controller 200.
  • the user input interface unit 150 may transmit a control signal input from a local key (not shown) such as a power key, a channel key, a volume key, and a set value to the controller 170.
  • a local key such as a power key, a channel key, a volume key, and a set value
  • the image signal processed by the controller 170 may be input to the display unit 180 and displayed as an image corresponding to the image signal.
  • the image signal processed by the controller 170 may be input to the external output device through the external device interface unit 135.
  • the audio signal processed by the controller 170 may be audio output to the audio output unit 185.
  • the voice signal processed by the controller 170 may be input to the external output device through the external device interface unit 135.
  • controller 170 may control overall operations of the display apparatus 100.
  • controller 170 may control the display apparatus 100 by a user command or an internal program input through the user input interface unit 150, and access the network to display an application or a list of applications desired by the user. It can be downloaded into the device 100.
  • the controller 170 may output the channel information selected by the user together with the processed video or audio signal through the display unit 180 or the audio output unit 185.
  • controller 170 may output an external device input through the external device interface unit 135 according to an external device image playback command received through the user input interface unit 150, for example, from a camera or a camcorder.
  • the video signal or the audio signal may be output through the display unit 180 or the audio output unit 185.
  • the controller 170 may control the display unit 180 to display an image, for example, a broadcast image input through the tuner 131, or an external input input through the external device interface unit 135.
  • An image, an image input through a network interface unit, or an image stored in the storage 140 may be controlled to be displayed on the display unit 180.
  • the image displayed on the display unit 180 may be a still image or a video, and may be a 2D image or a 3D image.
  • the controller 170 may control the content stored in the display apparatus 100, the received broadcast content, or the external input content input from the outside to be reproduced.
  • the content may include a broadcast image, an external input image, an audio file, It may be in various forms such as a still image, a connected web screen, and a document file.
  • the display unit 180 converts an image signal, a data signal, an OSD signal processed by the controller 170, or an image signal, data signal, etc. received from the external device interface unit 135 into R, G, and B signals, respectively. You can generate a signal.
  • the display device 100 shown in FIG. 1 is only an embodiment of the present invention. Some of the illustrated components may be integrated, added, or omitted according to the specifications of the display apparatus 100 that is actually implemented.
  • two or more components may be combined into one component as needed, or one component may be divided into two or more components.
  • the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.
  • the display apparatus 100 does not include the tuner 131 and the demodulator 132, as shown in FIG. 1, but the network interface unit 133 or the external device interface unit ( 135 may be received and played back.
  • the display apparatus 100 may be divided into an image processing apparatus such as a set-top box, such as for receiving broadcast signals or contents according to various network services, and a content reproducing apparatus for playing contents input from the image processing apparatus. Can be implemented.
  • an image processing apparatus such as a set-top box, such as for receiving broadcast signals or contents according to various network services
  • a content reproducing apparatus for playing contents input from the image processing apparatus. Can be implemented.
  • the operation method of the display apparatus according to the embodiment of the present invention described below is not only the display apparatus 100 as described with reference to FIG. 1, but also an image processing apparatus or a display unit such as the separated set-top box, etc. 180 may be performed by any one of the content reproduction device including the audio output unit 185.
  • FIG. 2 is a block diagram of a remote control apparatus according to an embodiment of the present invention
  • Figure 3 shows an actual configuration of the remote control apparatus according to an embodiment of the present invention.
  • the remote control apparatus 200 includes a fingerprint recognition unit 210, a wireless communication unit 220, a user input unit 230, a sensor unit 240, an output unit 250, and a power supply unit 260. ), A storage unit 270, a control unit 280, and a voice acquisition unit 290.
  • the wireless communication unit 220 transmits and receives a signal to and from a display device according to an embodiment of the present invention described above.
  • the remote control apparatus 200 includes an RF module 221 capable of transmitting and receiving a signal with the display apparatus 100 according to the RF communication standard, and capable of transmitting and receiving a signal with the display apparatus 100 according to the IR communication standard.
  • IR module 223 may be provided.
  • the remote control apparatus 200 may include a Bluetooth module 225 capable of transmitting and receiving a signal with the display apparatus 100 according to the Bluetooth communication standard.
  • the remote control apparatus 200 includes an NFC module 227 capable of transmitting and receiving a signal to and from the display apparatus 100 according to a Near Field Communication (NFC) communication standard, and displaying according to a WLAN (Wireless LAN) communication standard.
  • WLAN module 229 capable of transmitting and receiving signals to and from device 100 may be provided.
  • the remote control apparatus 200 transmits a signal containing information regarding the movement of the remote control apparatus 200 to the display apparatus 100 through the wireless communication unit 220.
  • the remote control device 200 may receive a signal transmitted from the display device 100 through the RF module 221, and if necessary, the power supply to the display device 100 via the IR module 223 / Commands regarding off, channel change, volume change, etc. can be sent.
  • the user input unit 230 may include a keypad, a button, a touch pad, or a touch screen.
  • the user may input a command related to the display apparatus 100 to the remote control apparatus 200 by manipulating the user input unit 230.
  • the user input unit 230 includes a hard key button, the user may input a command related to the display apparatus 100 to the remote control apparatus 200 through a push operation of the hard key button. This will be described with reference to FIG. 3.
  • the remote control apparatus 200 may include a plurality of buttons.
  • the plurality of buttons may include a fingerprint recognition button 212, a power button 231, a home button 232, a live button 233, an external input button 234, a volume control button 235, a voice recognition button 236, It may include a channel change button 237, a confirmation button 238, and a back button 239.
  • the fingerprint recognition button 212 may be a button for recognizing a fingerprint of a user. In one embodiment, the fingerprint recognition button 212 may be pushed to receive a push operation and a fingerprint recognition operation.
  • the power button 231 may be a button for turning on / off the power of the display apparatus 100.
  • the home button 232 may be a button for moving to the home screen of the display apparatus 100.
  • the live button 233 may be a button for displaying a live broadcast program.
  • the external input button 234 may be a button for receiving an external input connected to the display apparatus 100.
  • the volume control button 235 may be a button for adjusting the volume of the volume output from the display apparatus 100.
  • the voice recognition button 236 may be a button for receiving a user's voice and recognizing the received voice.
  • the channel change button 237 may be a button for receiving a broadcast signal of a specific broadcast channel.
  • the confirmation button 238 may be a button for selecting a specific function, and the back button 239 may be
  • the user input unit 230 When the user input unit 230 includes a touch screen, the user may input a command related to the display apparatus 100 to the remote control apparatus 200 by touching a soft key of the touch screen.
  • the user input unit 230 may include various kinds of input means that the user can operate, such as a scroll key or a jog key, and the embodiment does not limit the scope of the present invention.
  • the sensor unit 240 may include a gyro sensor 241 or an acceleration sensor 243, and the gyro sensor 241 may sense information about the movement of the remote controller 200.
  • the gyro sensor 241 may sense information about the operation of the remote control device 200 based on the x, y, and z axes, and the acceleration sensor 243 may move the speed of the remote control device 200. Information about the data can be sensed.
  • the remote control device 200 may further include a distance measuring sensor, it is possible to sense the distance to the display unit 180 of the display device 100.
  • the output unit 250 may output a video or audio signal corresponding to an operation of the user input unit 235 or a signal transmitted from the display apparatus 100.
  • the user may recognize whether the user input unit 235 is manipulated or whether the display apparatus 100 is controlled through the output unit 250.
  • the output unit 250 is an LED module 251 that is turned on when the user input unit 235 is manipulated or a signal is transmitted to or received from the display apparatus 100 through the wireless communication unit 225, and a vibration module generating vibration. 253, a sound output module 255 for outputting sound, or a display module 257 for outputting an image.
  • the power supply unit 260 supplies power to the remote control device 200, and can reduce power waste by stopping the power supply when the remote control device 200 does not move for a predetermined time.
  • the power supply unit 260 may resume power supply when a predetermined key provided in the remote control apparatus 200 is operated.
  • the storage unit 270 may store various types of programs, application data, and the like necessary for controlling or operating the remote control apparatus 200. If the remote control apparatus 200 transmits and receives a signal wirelessly through the display apparatus 100 and the RF module 221, the remote control apparatus 200 and the display apparatus 100 transmit and receive signals through a predetermined frequency band. .
  • the control unit 280 of the remote control apparatus 200 stores and refers to the storage unit 270 with information about a frequency band for transmitting and receiving a signal wirelessly with the display apparatus 100 paired with the remote control apparatus 200. can do.
  • the controller 280 controls various matters related to the control of the remote controller 200.
  • the controller 280 may display a signal corresponding to a predetermined key manipulation of the user input unit 235 or a signal corresponding to the movement of the remote controller 200 sensed by the sensor unit 240 through the wireless communication unit 220. 100).
  • the voice acquisition unit 290 of the remote control device 200 may obtain a voice.
  • the voice acquirer 290 may include at least one microphone, and may obtain a voice through the microphone.
  • FIG. 4 is demonstrated.
  • FIG. 4 shows an example of using a remote control device according to an embodiment of the present invention.
  • FIG. 4A illustrates that a pointer 205 corresponding to the remote control apparatus 200 is displayed on the display unit 180.
  • the user may move or rotate the remote control apparatus 200 vertically, left and right.
  • the pointer 205 displayed on the display unit 180 of the display apparatus 100 corresponds to the movement of the remote control apparatus 200.
  • the remote control apparatus 200 may be referred to as a spatial remote controller because the pointer 205 is moved and displayed according to the movement in the 3D space as shown in the figure.
  • FIG. 4B illustrates that when the user moves the remote control apparatus 200 to the left side, the pointer 205 displayed on the display unit 180 of the display apparatus 100 also moves to the left side correspondingly.
  • the display apparatus 100 may calculate the coordinates of the pointer 205 from the information about the movement of the remote control apparatus 200.
  • the display apparatus 100 may display the pointer 205 to correspond to the calculated coordinates.
  • FIG. 4C illustrates a case in which the user moves the remote control apparatus 200 away from the display unit 180 while pressing a specific button in the remote control apparatus 200.
  • the selection area in the display unit 180 corresponding to the pointer 205 may be zoomed in to be enlarged and displayed.
  • the selection area in the display unit 180 corresponding to the pointer 205 may be zoomed out and reduced.
  • the selection area may be zoomed out, and when the remote control apparatus 200 approaches the display unit 180, the selection area may be zoomed in.
  • recognition of up, down, left and right movements may be excluded when a specific button in the remote control apparatus 200 is pressed. That is, when the remote control apparatus 200 moves away from or approaches the display unit 180, the up, down, left, and right movements are not recognized, and only the front and back movements may be recognized. In a state in which a specific button in the remote control apparatus 200 is not pressed, only the pointer 205 moves according to the up, down, left, and right movements of the remote control apparatus 200.
  • the moving speed or the moving direction of the pointer 205 may correspond to the moving speed or the moving direction of the remote control apparatus 200.
  • the pointer in the present specification refers to an object displayed on the display unit 180 in response to the operation of the remote control apparatus 200.
  • the pointer 205 may be an object of various shapes in addition to the arrow shape shown in the drawing.
  • the concept may include a point, a cursor, a prompt, a thick outline, and the like.
  • the pointer 205 may be displayed corresponding to any one of the horizontal axis and the vertical axis of the display unit 180, or may be displayed corresponding to a plurality of points such as a line and a surface. Do.
  • 5A and 5B are diagrams for describing a problem that may occur when the pointer moves in response to the movement of the remote control apparatus.
  • the user holds the remote control device 200 in his hand and performs various controls by moving the remote control device.
  • a user who wants to move the pointer 510 in the horizontal direction moves the remote control in the horizontal direction, but if the arm shakes or fails to maintain the level of the arm, the remote control also fails to maintain the horizontal level.
  • the pointer can be moved crookedly.
  • FIG. 6 is a view for explaining a method of operating a display apparatus according to an exemplary embodiment.
  • the method may include moving the pointer in a specific direction. It may include a step of fixing and moving to (S630).
  • the user input interface unit may receive a user input for moving the pointer.
  • the user input interface unit may receive a signal corresponding to the movement of the remote control apparatus from the remote control apparatus.
  • the controller may determine the coordinates of the pointer corresponding to the user input. Specifically, when the user moves the remote control device, the control unit may receive a signal corresponding to the movement of the remote control device from the remote control device. Also, when a signal corresponding to the movement of the remote control device is received, the controller may determine the coordinates on which the pointer is to be displayed based on the movement of the remote control device.
  • the controller may control the display unit to move and display the pointer according to the movement of the remote control apparatus.
  • FIG. 7 is a diagram for describing a method of fixing and moving a pointer in a specific direction according to an exemplary embodiment of the present invention.
  • the screen may include a menu area 710.
  • the menu area 710 may include a plurality of menus 711, 712, 713, 714, 715, 716, 717, 718, 719, 720, 1721, and 722.
  • the plurality of menus 710, 712, 713, 714, 715, 716, 717, 718, 719, 720, 1721, and 722 included in the menu area may be arranged in a horizontal direction as illustrated in FIG. 7. have.
  • the controller may determine whether the actual coordinates of the pointer 720 corresponding to the user input are located in the menu area 710.
  • the control unit fixes the pointer 720 in a specific direction. Can be moved.
  • the controller may include a pointer.
  • the 720 may be fixed and moved in the horizontal direction.
  • the first direction 730 illustrated in FIG. 7 is a moving direction of the actual coordinates of the pointer corresponding to the user input, and the specific direction 740 is a direction in which the pointer 720 is displayed while being actually moved.
  • the actual coordinates of the pointer may refer to coordinates determined according to the movement of the remote controller, regardless of the coordinates on which the pointer is displayed.
  • the movement direction of the actual coordinates of the pointer corresponding to the user input may mean a direction in which the pointer moves by reflecting the movement of the remote control apparatus when the movement of the pointer is fixed and fixed in a specific direction.
  • the specific direction 740 in which the pointer 720 moves may be different from the moving direction of the actual coordinates of the pointer according to the movement of the remote control apparatus.
  • the pointer 720 may move to the right direction.
  • the pointer 720 may move in the right direction even when the real coordinate of the object moves in a direction that forms an angle of -30 degrees from the right direction.
  • the pointer 720 can move fixedly in a specific direction (horizontal).
  • the movement distance of the pointer 720 may correspond to a movement component in a specific direction of the remote control apparatus. For example, when the pointer moves by 2 in a direction forming a 60 degree angle in the right direction, the pointer 720 may move by 1 in the right direction.
  • 8A to 8C are diagrams for describing a moving direction of a pointer according to various arrangements of a menu.
  • the controller may determine whether the actual coordinates of the pointer 840 corresponding to the user input are located in the first menu area 810.
  • the controller may move the pointer 840 in a specific direction. Can be fixed and moved
  • the controller may move the pointer 840 by fixing it in the horizontal direction.
  • the controller may determine whether the actual coordinates of the pointer 840 corresponding to the user input are located in the second menu area 820.
  • the control unit moves the pointer 840 in a specific direction. Can be fixed and moved
  • the controller may move the pointer 840 by fixing it in the vertical direction.
  • the control unit moves the fixed pointer in the horizontal direction based on the moving direction of the real coordinates of the pointer 840. Can be fixed or moved vertically.
  • the controller may move the pointer by fixing the pointer in the vertical direction.
  • the controller may determine whether real coordinates of the first pointer 870 corresponding to the user input are located in the first menu area 850.
  • the controller may control the first pointer ( 870 may be fixed and moved in a specific direction.
  • the controller may move the fixed first pointer 870 in the horizontal direction.
  • the controller may determine whether the actual coordinates of the second pointer 880, which is a pointer after the movement, are located in the first menu area 850.
  • the control unit moves the second pointer 880 in a specific direction. Can be fixed and moved.
  • the controller may move the fixed second pointer 880 in the vertical direction.
  • the controller may determine whether the actual coordinates of the pointer 870 corresponding to the user input are located in the first menu area 890.
  • the plurality of menus are arranged in the vertical direction in the first menu area 890.
  • the controller moves the pointer 891 in the vertical direction. Can be fixed and moved.
  • the present invention may facilitate moving the pointer to a desired menu by moving the pointer in a straight line despite the shaking of the remote control apparatus.
  • the pointer when the menus are horizontally arranged, the pointer is moved horizontally, and when the menus are vertically arranged, the pointer is moved vertically, which has the advantage of moving the pointer according to the user's intention.
  • FIG. 9 is a diagram for describing a display position of a pointer according to an embodiment of the present invention.
  • the controller may display the pointer at a fixed height h.
  • the control unit moves the pointer 920 at a fixed height h. It can be displayed.
  • the controller may move the pointer entering the menu area 920 such that the pointer entering the menu area 920 is displayed at a fixed height h. In this case, a process of moving the pointer entering the menu area 920 to a new position may be displayed.
  • the coordinate of the new position where the pointer is moved may be referred to as a correction coordinate.
  • the controller may move the pointer 920 in a horizontal direction.
  • the pointer can always maintain a fixed height h.
  • FIG. 9 may be applied to a plurality of menus arranged in a vertical direction.
  • the controller may display the pointer at a fixed width. That is, when a plurality of menus included in the menu area are arranged in the vertical direction and the actual coordinates of the pointer enter the menu area, the controller may display the pointer 920 at a fixed width.
  • the controller may move the pointer entering the menu area such that the pointer entering the menu area is displayed at a fixed width. Accordingly, a process of moving the pointer entering the menu area to a new position may be displayed.
  • the controller may move the pointer by fixing it in the vertical direction.
  • the pointer can always maintain a fixed width.
  • FIG. 10 is a diagram for describing a method of displaying a pointer so as not to block an identifier in a menu according to an exemplary embodiment of the present disclosure.
  • the controller may display the identifier included in the menu in the menu area so as not to be hidden by the pointer displayed at a fixed height or width.
  • the controller may display the pointer at a fixed height h1.
  • the fixed height h1 may be lower than the height at which the identifier 1011 in the menu is located.
  • the identifier may be text or an image for identifying a menu including the identifier.
  • the present invention can prevent the identifier from being blocked by the pointer by displaying the pointer under the identifier in the menu.
  • the controller controls the specific menu 715 so that the pointer 1020 does not cover the identifier 1021 indicating the specific menu 715. Move to display.
  • the pointer 1020 may be displayed on the identifier 1021 indicating the specific menu 715. have. In this case, the identifier 1021 may be hidden by the pointer 1020 and may not be visible.
  • the controller may move and display the specific menu 715 so that the identifier 1021 and the pointer 1020 are not displayed in the same area. .
  • the identifier 1021 included in the specific menu 715 also moves, so that the overlap between the identifier 1021 and the pointer 1020 can be prevented.
  • FIG. 10 may be applied to the embodiment in which the pointer is displayed at a fixed width.
  • the controller may display the pointer at a fixed width.
  • the fixed width may be smaller or larger than the width of the identifier in the menu.
  • the present invention can prevent the identifier from being covered by the pointer by displaying the pointer next to the identifier in the menu.
  • the controller may move and display the specific menu so that the pointer does not cover the identifier indicating the specific menu.
  • the pointer may be displayed on the identifier indicating the specific menu.
  • the identifier may be hidden because it is hidden by the pointer.
  • the controller may move and display the specific menu so that the identifier and the pointer are not displayed in the same area.
  • the identifier included in the particular menu is also moved, so that the overlap of the identifier and the pointer can be prevented.
  • FIG. 11 is a diagram illustrating a problem that may occur when a pointer entering a menu area moves to a fixed height according to an embodiment of the present disclosure.
  • the pointer is also displayed in the menu area 910.
  • the pointer needs to leave the menu area 910. For example, the pointer moves out of the menu area 910 to another menu area 1190. Therefore, when the real coordinates of the pointer are located outside the menu area 910, the controller displays the pointer in the real coordinates.
  • the pointer 1120 is moved downward and displayed at a fixed height.
  • the user recognizes the position of the real coordinate 1130 of the pointer as the position of the displayed pointer 1120.
  • the real coordinates 1130 of the pointer are the same as when the real coordinates of the pointer enter the menu area 910.
  • the actual coordinates 1130 of the pointer may move in the first direction 1150, in which case the actual coordinates may leave the menu area 910.
  • the pointer 1140 may be displayed outside the menu area 910.
  • the controller may change the real coordinates to coordinates corresponding to a fixed height.
  • the controller may display the pointer 1120 moved to a fixed height.
  • the controller may change the real coordinates 1130 of the pointer to the new real coordinates 1140.
  • the new real coordinates 1140 may be coordinates corresponding to a fixed height, that is, coordinates on which the moved pointer 1120 is displayed.
  • the position of the actual displayed pointer 1120 and the position of the real coordinate 1140 of the pointer may be the same.
  • the user recognizes the displayed position of the pointer 1120 as the position of the real coordinate 1140 of the pointer.
  • the height at which the pointer 1120 is displayed may be a middle height of the entire height of the menu area 910.
  • the height at which the pointer 1120 is displayed may be a height moved close to the middle height from the point where the pointer enters the menu area 910.
  • the pointer 1120 may be stably moved in a specific direction 1220.
  • FIG. 12 may be applied even when the pointer is displayed at a fixed width.
  • the controller may display the pointer moved to a fixed width.
  • the controller may change the real coordinates of the pointer to new real coordinates.
  • the new real coordinates may be coordinates corresponding to a fixed width, that is, coordinates on which the moved pointer is displayed.
  • the position of the actually displayed pointer and the position of the actual coordinates of the pointer may be the same.
  • the user recognizes the displayed position of the pointer as the actual coordinate of the pointer.
  • the width at which the pointer is displayed may be the middle width of the full width of the menu area.
  • the width at which the pointer is displayed may be a width moved close to the middle width from the point where the pointer enters the menu area.
  • FIG. 13 is a view for explaining another embodiment for solving the problem described with reference to FIG. 11.
  • the screen may include another menu area 1360.
  • the other menu area 1360 may include one or more menus 1360a, 1360b, and 1360c.
  • the controller may move the pointer in the moving direction of the real coordinates.
  • the controller may fix the pointer in a specific direction and move the same.
  • the movement direction 1350 of the real coordinates of the pointer is a direction 1330 toward the other menu area 1360, which means that the user's intention is not to move the pointer in the menu area 910 but to another menu area 1360. Let's assume that the pointer moves.
  • the user's intention in the menu area 910 is that the moving direction 1350 of the real coordinates of the pointer is a direction 1320 between the direction 1330 facing the other menu area 1360 and the specific direction 1340. It is inferred that the pointer of the pointer is not moved or controlled correctly.
  • the present invention has an advantage of determining whether or not to leave the pointer according to the moving direction of the actual coordinates of the pointer, thereby performing control in accordance with the intention of the user.
  • 14 to 18 are diagrams for describing a method of warning of deviation of a pointer according to an embodiment of the present invention.
  • the actual coordinates of the pointer and the correction coordinates on which the pointer is actually displayed are different from each other, and the actual coordinates of the pointer are not known to the user, so that if the user moves the remote control device incorrectly, the pointer is displayed in the menu area. You can deviate from Therefore, a warning is needed to prevent the departure of the pointer.
  • the controller may change and display the shape of the menu where the pointer is located.
  • the controller may determine whether the actual coordinates of the pointer attempt to leave the menu area.
  • the controller may It may be determined that the actual coordinates of the pointer do not intend to leave the menu area.
  • the controller may control the pointer. It may be determined that the true coordinates of the outer circle are intended to leave the menu area.
  • the controller may tilt and display the menu 715 in which the pointer 1410 is located.
  • the menu 715 in which the pointer 1410 is located may be a three-dimensional image. If the actual coordinates of the pointer are determined to be out of the menu area, the controller may display an effect of tilting the three-dimensional image.
  • the controller may change and display the position of the menu where the pointer is located.
  • the controller may determine that the real coordinates of the pointer do not intend to leave the menu area. .
  • the controller may determine that the real coordinates 1420 of the pointer are about to leave the menu area. Can be.
  • the controller may change and display the position of the menu 715 where the pointer 1410 is located.
  • 16 to 17 illustrate a method of warning the deviation of the pointer by changing and displaying the pointer 1410.
  • the controller may change the shape of the pointer and display the same.
  • the controller may determine whether the actual coordinates of the pointer attempt to leave the menu area.
  • the actual coordinates 1420 of the pointer are not intended to leave the menu area, and the actual coordinates 1420 of the pointer are intended to leave the menu area.
  • the controller may tilt the pointer 1410 and display the same.
  • the pointer 1410 may be a three-dimensional image, and if it is determined that the actual coordinates of the pointer leave the menu area, the controller may display an effect of tilting the three-dimensional image.
  • the controller may change the position of the pointer to display.
  • the controller may determine whether the actual coordinates of the pointer attempt to leave the menu area.
  • the actual coordinates 1420 of the pointer are not intended to leave the menu area, and the actual coordinates 1420 of the pointer are intended to leave the menu area.
  • the controller may change the position of the pointer 1410 and display the same.
  • the position of the changed pointer 1410 may be a position higher than the position of the pointer 1410 before the change. That is, as the pointer 1410 moving in the horizontal direction moves upward, the warning can be clearly transmitted to the user.
  • the controller may display the second pointer 1820 corresponding to the actual coordinates of the pointer together with the pointer 1810.
  • the second pointer 1820 may be displayed at the actual coordinates of the pointer.
  • the second pointer 1820 may be displayed in a different size or color than the pointer 1810.
  • the pointer 1810 may be colored, whereas the second pointer 1820 may be achromatic or high brightness.
  • the second pointer 1820 may be displayed only when the actual coordinates of the pointer are about to leave the menu area 910.
  • the controller may determine that the actual coordinates of the pointer are about to leave the menu area.
  • the controller may display the second pointer 1920 corresponding to the actual coordinates of the pointer together with the pointer 1910.
  • the controller may display the second pointer 1920 using an elastic effect.
  • the present invention warns the user of the deviation of the pointer through various methods, thereby preventing the sudden departure of the pointer due to the deviation of the real coordinates.
  • 19 to 20 are diagrams for describing a method of moving a pointer according to a pointer movement mode according to an embodiment of the present invention.
  • the pointer movement mode may include a first mode and a second mode.
  • the first mode and the second mode may be determined according to the tilt of the remote control apparatus 200 that transmits a user input.
  • the first mode may be a mode in which the remote control apparatus 200 moves in a first tilted state.
  • the second mode may be a mode in which the remote control apparatus 200 moves in the second tilted state, as shown in FIG. 20B.
  • the user input interface may receive user input for moving the pointer and mode information of the remote control apparatus.
  • the user input interface unit may receive a signal corresponding to the movement of the remote control apparatus from the remote control apparatus and information that the remote control apparatus is in the first mode.
  • the user input interface unit may receive a signal corresponding to the movement of the remote control device from the remote control device and information that the remote control device is in the second mode.
  • the controller may move the pointer 1910 according to the moving direction 1920 of the real coordinates.
  • the controller may move the pointer 1910 by fixing it in a specific direction irrespective of the moving direction 1920 of the real coordinates.
  • the user has an advantage of changing the method of moving the pointer through a simple method of changing the method of holding the remote control device.
  • 21 to 37 are diagrams for describing a magnetic effect of attracting a pointer according to an embodiment of the present invention.
  • FIG. 21 is a diagram for describing a method of attracting a pointer to a menu area according to an exemplary embodiment.
  • the screen may include the magnetic area 2110.
  • the magnetic region 2110 may include a menu region 910.
  • the size of the magnetic area 2110 may be larger than the size of the menu area 910.
  • the magnetic area 2110 may be an area in which the pointer moves to the menu area 910 without a user input for moving the pointer.
  • the controller may move and display the pointer 2120 in the menu area 910. .
  • the control unit may move the pointer 2120 to the menu area without a user input for moving the pointer. 910 may be moved and displayed.
  • the controller may display a process in which the pointer 2120 entering the magnetic area 2110 is moved into the menu area 910 and displayed at a new location.
  • the controller may perform a function corresponding to the selected menu.
  • FIG. 22 is a diagram for describing a method of attracting a pointer to a button according to another exemplary embodiment.
  • the controller may display a button 2211 for performing a specific function when selected.
  • the second magnetic region 2210 may include a button 2211.
  • the size of the second magnetic region 2210 may be larger than the size of the button 2211.
  • the controller may move the pointer 2220 to the button 2211 and display the pointer 2220.
  • the controller may move the pointer 2220 to the button 2211 and display the same without a user input.
  • the controller may display a process in which the pointer 2220 entering the second magnetic region 2210 moves to the button 2211 and is displayed at a new position.
  • the controller may perform a function corresponding to the button 2211.
  • the controller may determine whether to activate the magnetic region according to the pointer movement mode.
  • the controller may deactivate the magnetic region. In this case, even if the pointer 2220 enters the second magnetic area 2210 including the button 2211, a user input for moving the pointer 2220 to the button 2211 must be received before the pointer 2220 receives the button ( 2211).
  • the controller may activate the magnetic region.
  • the controller may move the pointer 2220 to the button 2211 and display it.
  • the present invention can provide an environment in which a user can easily select a menu or a button in a control environment using movement of a remote control apparatus.
  • FIG. 23 is a diagram for describing the size of the magnetic region.
  • the size of the magnetic region may be determined based on at least one of the importance and the frequency of use of the button.
  • the controller may display the first button 2211 performing the first function when selecting and the second button 2311 performing the second function when selecting.
  • the first magnetic region 2210 may include a first button 2211.
  • the size of the first magnetic region 2210 may be larger than the size of the button 2211.
  • the second magnetic region 2310 may include a second button 2311.
  • the size of the second magnetic region 2310 may be larger than the size of the second button 2311.
  • the size of the first magnetic region 2210 may be determined based on at least one of importance and frequency of use of the first button 2211.
  • the size of the second magnetic region 2310 may be determined based on at least one of the importance and the frequency of use of the second button 2311.
  • the size of the first magnetic region 2210 corresponding to the first button 2211 corresponds to the second button 2311. May be larger than the size of the second magnetic region 2310.
  • the size of the first magnetic region 2210 corresponding to the first button 2211 may be the second button. It may be larger than the size of the second magnetic region 2310 corresponding to 2311.
  • 24 is a diagram for describing a size of a magnetic region, according to another exemplary embodiment.
  • the size of the magnetic area may be determined based on the distance from other buttons.
  • the controller displays a first button 2411 that performs a first function when selected, a second button 2421 that performs a second function when selected, and a third button 2431 that performs a third function when selected. can do.
  • the first magnetic region 2410 may include a first button 2411.
  • the second magnetic region 2420 may include a second button 2421.
  • the third magnetic region 2430 may include a third button 2431.
  • the size of the first magnetic region 2410 may be determined based on a distance between the first button 2411 and another button.
  • the size of the second magnetic region 2420 may be determined based on a distance between the second button 2421 and another button.
  • the distance between the first button 2411 and the second button 2421 or the distance between the first button 2411 and the third button 2431 may be different from the second button 2421 and the third button 2431. Can be farther than
  • the size of the first magnetic region 2410 corresponding to the first button 2411 may be larger than the size of the second magnetic region 2420 corresponding to the second button 2421.
  • FIG. 25 is a diagram for describing a magnetic area including a plurality of buttons according to an exemplary embodiment.
  • buttons 2511, 2512, 2513 may have their own magnetic regions, the plurality of buttons 2511, 2512, 2513 may have a single magnetic region 2520.
  • the controller moves the pointer 2530 to any one of the plurality of buttons 2511, 2512, and 2513. It can be displayed.
  • the controller may move the pointer 2530 to any one of the plurality of buttons 2511, 2512, and 2513 based on the entry direction of the pointer, and display the pointer 2530.
  • the controller may move the pointer 2530 to the first button 2511 positioned in the first direction 2551 and display the pointer 2530.
  • the controller may move the pointer 2530 to the second button 2512 positioned in the second direction 2542 and display the pointer 2530.
  • FIG. 26 is a diagram for describing a method of moving a pointer out of a menu area 910 or a magnetic area, according to an exemplary embodiment.
  • the controller may move the pointer 2610 based on a user input for moving the pointer 2610.
  • the controller may correct the movement path of the pointer 2610.
  • the controller may determine a main direction of the user input based on a signal corresponding to the movement of the remote control apparatus.
  • the controller may determine whether the user input is an input for vertical movement, an input for horizontal movement, or an input for diagonal movement, based on a signal corresponding to the movement of the remote control apparatus.
  • the controller may move the pointer 2610 according to the corrected moving paths 2630, 2620, 2640, and 2650 instead of the moving paths 2625, 2635, 2645, and 2655 corresponding to the actual coordinates of the pointer.
  • the controller may determine a movement path of the pointer according to the pointer movement mode.
  • the controller may move the pointer along the movement paths 2625, 2635, 2645, and 2655 corresponding to the actual coordinates of the pointer.
  • the controller may move the pointer according to the corrected moving paths 2630, 2620, 2640, and 2650.
  • FIG. 27 is a diagram illustrating a keyboard UI according to an embodiment of the present invention.
  • the controller may display a carboard UI for text input (characters, numbers, special symbols).
  • the controller may receive an input for selecting a specific character 2711.
  • the controller may display the specific character in the input window 2730.
  • FIG. 28 is a diagram for describing a display position of a pointer according to an embodiment of the present invention.
  • the controller may display the pointer 2720 such that the specific character 2711 is not covered by the pointer 2720.
  • the controller may display below the specific character 2711.
  • 29 is a diagram for describing a method of displaying a specific character 2711 according to a movement of a pointer according to an embodiment of the present invention.
  • the controller may display an icon 2710 including the specific character 2711.
  • the controller may display an icon 2710 including the specific character 2711 on the keyboard UI.
  • the icon 2710 including the specific character 2711 may be displayed so as not to overlap with the pointer 2720 or may be displayed on the pointer 2720 to cover part or all of the pointer 2720.
  • FIG. 30 is a diagram for describing a method of determining a next character and a method of setting a magnetic region according to an exemplary embodiment of the present disclosure.
  • the contextual probability may mean a probability that a character may come after a specific character when a specific character is selected.
  • the contextual probability may be determined by the importance of each of a plurality of words including a specific letter, the frequency of use of each of the plurality of words including a specific letter, and the frequency with which the specific letter and the next letter are combined.
  • the controller may determine the priority of the character following the specific character 2711 based on the contextual probability.
  • the control unit determines, based on the contextual probability, that the letter of the first priority that comes after “A” is “T” and the letter of the second priority is “ N ”can be determined.
  • the controller may display a first button 3011 indicating a first character associated with a specific character and a second button 3021 indicating a second character associated with the specific character.
  • the character related to the specific character may mean a character having a high priority next to the specific character 2711 among the plurality of characters.
  • the controller may set the first magnetic region 3010 including the first button 3011 and the second magnetic region 3020 including the second button 3021.
  • the controller may move the pointer to the first button and display the same.
  • the controller may move the pointer to the second button and display the pointer.
  • sizes of the first magnetic region 3010 and the second magnetic region 3020 may be determined according to contextual probability.
  • the size of the first magnetic region corresponding to the first character corresponds to the second character. It may be larger than the size of the second magnetic region.
  • FIG. 31 is a diagram for describing a method of displaying a next letter based on contextual probability according to an embodiment of the present invention.
  • the controller may determine the priority of the character following the specific character 2711 based on the contextual probability.
  • the controller may display the first button 3111 indicating the first character related to the specific character to be distinguishable.
  • the controller may enlarge and display the first button 3111 representing the first character related to the specific character.
  • 32 is a diagram for describing a method of moving a pointer to the next letter based on contextual probability according to an embodiment of the present invention.
  • the controller may determine the priority of the character following the specific character 2711 based on the contextual probability.
  • controller may display the pointer 3210 on the first button 3111 indicating the first character related to the specific character.
  • 33 is a diagram for explaining a method of moving a pointer based on contextual probability according to an embodiment of the present invention.
  • the controller may determine the priority of the character following the specific character 2711 based on the contextual probability.
  • the controller may receive an input for moving the pointer.
  • the controller may display the pointer to pass through the lower priority letter 3331.
  • 34 is a diagram for describing a method of determining an autocomplete word and a method of setting a magnetic region according to an exemplary embodiment of the present invention.
  • the contextual probability may refer to a probability that a certain letter may be completed by any word including the specific letter.
  • the contextual probability may be determined by the importance of each of the plurality of words including a specific letter, the frequency of use of each of the plurality of words including the specific letter, and the like.
  • the controller may determine the priority of a word including the specific character 2711 based on the contextual probability.
  • control unit when an input for selecting the letter “A” is received, the control unit “apple” the autocomplete word of the first priority and “apple” the second priority based on the contextual probability. Can be determined.
  • the controller may display a first button 3241 indicating a first autocomplete word associated with a specific letter and a second button 3411 indicating a second autocomplete word associated with the specific letter.
  • the autocomplete word associated with the specific letter may mean an autocomplete word having a high priority among a plurality of autocomplete words including the specific letter.
  • the controller may set the first magnetic region 3420 including the first button 341 and the second magnetic region 3410 including the second button 3411.
  • the controller may move the pointer to the first button 341 and display the pointer.
  • the controller may move the pointer to the second button 3411 and display the pointer.
  • sizes of the first magnetic region 3420 and the second magnetic region 3410 may be determined according to contextual probability.
  • the first autocomplete word when the first autocomplete word has a higher contextual probability than the second autocomplete word and the priority of the first autocomplete word is higher than the priority of the second autocomplete word, the first autocomplete word corresponds to the first autocomplete word.
  • the size of the magnetic region may be larger than the size of the second magnetic region corresponding to the second autocomplete word.
  • 35 is a diagram for describing a method of adjusting a size of a button including an autocomplete character based on contextual probability according to an embodiment of the present invention.
  • the controller may determine the priority of the autocomplete word including the specific character 2711 based on the contextual probability.
  • the controller may display a first button 341 including a first autocomplete word associated with a specific character and a second button 3411 including a second autocomplete word associated with a specific character.
  • the size of the first button 341 and the size of the second button 3411 may be determined according to contextual probability.
  • the first autocomplete word when the first autocomplete word has a higher contextual probability than the second autocomplete word and the priority of the first autocomplete word is higher than the priority of the second autocomplete word, the first autocomplete word corresponds to the first autocomplete word.
  • the size of the button 341 may be larger than the size of the second button 3411 corresponding to the second autocomplete word.
  • the size of the first autocomplete word included in the first button 341 and the size of the second autocomplete word included in the second button 3411 may be determined according to a contextual probability.
  • the first button 341 is included.
  • the size of the first autocomplete word may be larger than the size of the second autocomplete word included in the second button 3411.
  • the controller may determine whether to display a character related to a specific character or an autocomplete word related to the specific character according to the pointer movement mode.
  • the controller may display a button including a character related to the specific character.
  • the controller may display a button including an autocomplete word associated with the specific character.
  • 36 is a diagram for describing an acceleration region according to an exemplary embodiment of the present invention.
  • the screen may include an acceleration area.
  • the acceleration region 3630 may include a button 3621.
  • the size of the acceleration area 3630 may be larger than the size of the button 3621.
  • the acceleration region 3630 may include a magnetic region 3620.
  • the size of the acceleration region 3630 may be larger than the size of the magnetic region 3620.
  • the controller controls the moving speed of the pointer 3640. Can be increased.
  • the controller may continuously apply acceleration to the pointer 3640. That is, as the acceleration is continuously applied to the pointer 3640, the moving speed of the pointer 3640 may gradually increase.
  • the controller may move the pointer 3640 to the button 3621 and display the pointer 3640.
  • the size of the acceleration region may be determined based on the distance between the button 3621 and another button.
  • the size of the acceleration area 3630 may be large.
  • the present invention can enable the fast movement of the pointer by adjusting the size of the acceleration area according to the distance from other buttons.
  • the controller may or may not display the boundary between the magnetic region and the acceleration region on the screen.
  • the boundary In the case of not displaying the boundary, there is an advantage of preventing the complexity of the screen, and in the case of displaying the boundary, there is an advantage that the user can determine the position of the boundary and control the pointer.
  • control unit is generally in charge of controlling the device, and may be used interchangeably with terms such as a central processing unit, a microprocessor, and a processor.
  • the present invention described above can be embodied as computer readable codes on a medium in which a program is recorded.
  • the computer-readable medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of computer-readable media include hard disk drives (HDDs), solid state disks (SSDs), silicon disk drives (SDDs), ROMs, RAMs, CD-ROMs, magnetic tapes, floppy disks, optical data storage devices, and the like. It includes.
  • the computer may include a controller of a display device. Accordingly, the above detailed description should not be construed as limiting in all aspects and should be considered as illustrative. The scope of the invention should be determined by reasonable interpretation of the appended claims, and all changes within the equivalent scope of the invention are included in the scope of the invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Selective Calling Equipment (AREA)

Abstract

디스플레이 장치가 개시된다. 본 발명의 실시 예에 따른 디스플레이 장치는, 포인터를 디스플레이 하는 디스플레이부, 상기 포인터를 움직이기 위한 사용자 입력을 수신하는 사용자 입력 인터페이스부, 및, 상기 사용자 입력에 대응하는 상기 포인터의 실 좌표가 상기 메뉴 영역 내에 위치하고 상기 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 상기 포인터를 특정 방향으로 고정하여 이동하는 제어부를 포함한다.

Description

디스플레이 장치
본 발명은, 흔들리는 포인터 입력에도 불구하고 포인터를 특정 방향으로 고정하여 이동시킬 수 있는 디스플레이 장치에 관한 것이다.
유선 또는 무선 통신망을 이용한 디지털 TV 서비스가 보편화되고 있다. 디지털 TV 서비스는 기존의 아날로그 방송 서비스에서는 제공할 수 없었던 다양한 서비스를 제공할 수 있다.
예를 들어, 디지털 TV 서비스의 종류인 IPTV(Internet Protocol Television), smart TV 서비스의 경우 사용자로 하여금 시청 프로그램의 종류, 시청 시간 등을 능동적으로 선택할 수 있도록 하는 양방향성을 제공한다. IPTV, smart TV서비스는 이러한 양방향성을 기반으로 하여 다양한 부가 서비스, 예컨대 인터넷 검색, 홈쇼핑, 온라인 게임 등을 제공할 수도 있다.
한편 최근에는 원격 제어 장치의 움직임을 감지하고, 원격 제어 장치의 움직임에 대응하여 포인터를 이동함으로써 각종 제어를 수행하는 기술이 나타나고 있다.
이 경우 사용자는 원격 제어 장치를 손에 쥐고, 원격 제어 장치를 움직임으로써 각종 제어를 수행한다.
다만 사용자의 팔의 흔들림 때문에 원격 제어 장치의 이동 방향이나 움직임의 정도를 정밀하게 제어하는 것이 어렵다.
이에 따라 포인터가 삐뚤 빼뚤 하게 이동하거나, 포인터의 이동 거리를 정확하게 제어할 수 없게 되며, 따라서 포인터를 원하는 메뉴로 이동하는 것이 어렵게 되는 문제가 발생할 수 있었다.
본 발명의 목적은, 흔들리는 포인터 입력에도 불구하고 포인터를 특정 방향으로 고정하여 이동시킬 수 있는 디스플레이 장치를 제공하기 위함이다.
본 발명의 또 다른 목적은, 포인터가 메뉴에 근접한 경우, 사용자의 제어 없이도 포인터를 메뉴로 이동시킬 수 있는 디스플레이 장치를 제공하기 위함이다.
본 발명의 실시 예에 따른 디스플레이 장치는, 포인터를 디스플레이 하는 디스플레이부, 상기 포인터를 움직이기 위한 사용자 입력을 수신하는 사용자 입력 인터페이스부, 및, 상기 사용자 입력에 대응하는 상기 포인터의 실 좌표가 상기 메뉴 영역 내에 위치하고 상기 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 상기 포인터를 특정 방향으로 고정하여 이동하는 제어부를 포함한다.
본 발명은 원격 제어 장치의 흔들림에도 불구하고, 포인터를 직선으로 이동시켜 포인터를 원하는 메뉴로 이동하는 것을 용이하게 할 수 있다.
특히 메뉴가 수평으로 나열되어 있는 경우에는 포인터를 수평으로 이동시키고, 메뉴가 수직으로 나열되어 있는 경우에는 포인터를 수직으로 이동시킴으로써, 포인터를 사용자의 의도에 부합하도록 이동시킬 수 있는 장점이 있다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 2은 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 5a 및 도 5b는, 원격 제어 장치의 움직임에 대응하여 포인터를 이동하는 제어 시, 발생할 수 있는 문제점을 설명하기 위한 도면이다.
도 6은 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 실시 예에 따른, 포인터를 특정 방향으로 고정하여 이동하는 방법을 설명하기 위한 도면이다.
도 8a 내지 도 8c는 메뉴의 다양한 배열에 따른 포인터의 이동 방향을 설명하기 위한 도면이다.
도 9는 본 발명의 실시 예에 따른, 포인터의 표시 위치를 설명하기 위한 도면이다.
도 10은 본 발명의 실시 예에 따른, 메뉴 내 식별자를 가리지 않도록 포인터를 디스플레이 하는 방법을 설명하기 위한 도면이다.
도 11은 본 발명의 실시 예에 따른, 메뉴 영역에 진입한 포인터가 고정된 높이로 이동하는 경우 발생할 수 있는 문제점을 설명하기 위한 도면이다.
도 12는 본 발명의 실시 예에 따른, 실좌표의 변경 방법을 설명하기 위한 도면이다.
도 13은 도 11에서 설명한 문제점을 해결하기 위한 또 다른 실시 예를 설명하는 도면이다.
도 14 내지 도 15는, 메뉴를 변경하여 표시함으로써 포인터의 이탈을 경고하는 방법을 설명하기 위한 도면이다.
도 16 내지 도 17은, 포인터를 변경하여 표시함으로써 포인터의 이탈을 경고하는 방법을 설명하기 위한 도면이다.
도 18은, 실 좌표에 대응하는 제2 포인터를 표시함으로써 포인터의 이탈을 경고하는 방법을 설명하기 위한 도면이다.
도 19 내지 도 20은 본 발명의 실시 예에 따른, 포인터 이동 모드에 따라 포인터가 이동하는 방법을 설명하기 위한 도면이다.
도 21은 본 발명의 실시 예에 따른, 메뉴 영역에 포인터를 끌어들이는 방법을 설명하기 위한 도면이다.
도 22는 본 발명의 또 다른 실시 예에 따른, 버튼에 포인터를 끌어들이는 방법을 설명하기 위한 도면이다.
도 23은 마그네틱 영역의 크기를 설명하기 위한 도면이다.
도 24는 본 발명의 또 다른 실시 예에 따른, 마그네틱 영역의 크기를 설명하기 위한 도면이다.
도 25는 본 발명의 실시 예에 따른 복수의 버튼을 포함하는 마그네틱 영역을 설명하기 위한 도면이다.
도 26은 본 발명의 실시 예에 따른, 메뉴 영역 또는 마그네틱 영역 밖에서의 포인터의 이동 방법을 설명하기 위한 도면이다.
도 27은 본 발명의 실시 예에 따른, 키보드 UI를 도시한 도면이다.
도 28은 본 발명의 실시 예에 따른, 포인터의 디스플레이 위치를 설명하기 위한 도면이다.
도 29는 본 발명의 실시 예에 따른, 포인터의 이동에 따른 특정 문자(2711)의 디스플레이 방법을 설명하기 위한 도면이다.
도 30은 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 다음 문자를 결정하는 방법 및 마그네틱 영역을 설정하는 방법을 설명하기 위한 도면이다.
도 31은 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 다음 문자를 표시하는 방법을 설명하기 위한 도면이다.
도 32는 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 다음 문자로 포인터를 이동하는 방법을 설명하기 위한 도면이다.
도 33은 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 포인터를 이동하는 방법을 설명하기 위한 도면이다.
도 34는 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 자동 완성 단어를 결정하는 방법 및 마그네틱 영역을 설정하는 방법을 설명하기 위한 도면이다.
도 35는 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 자동 완성 문자를 포함하는 버튼의 크기를 조절하는 방법을 설명하기 위한 도면이다.
도 36은 본 발명의 실시 예에 따른 가속도 영역을 설명하기 위한 도면이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 명세서에 첨부된 도면들을 참조하여 본 발명의 실시 예들을 상세히 설명한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 1을 참조하면, 디스플레이 장치(100)는 TV, 모니터, 프로젝터 또는 이를 포함하는 장치 등으로 구현될 수 있다.
디스플레이 장치(100)는 방송 수신부(130), 외부기기 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 카메라(160), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 및 전원공급부(190)를 포함할 수 있다.
방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부 (133)를 포함할 수 있다.
튜너(131)는 채널 선국 명령에 따라 특정 방송 채널을 선국할 수 있다. 튜너 (131)는 선국된 특정 방송 채널에 대한 방송 신호를 수신할 수 있다.
복조부(132)는 수신한 방송 신호를 비디오 신호, 오디오 신호, 방송 프로그램과 관련된 데이터 신호로 분리할 수 있고, 분리된 비디오 신호, 오디오 신호 및 데이터 신호를 출력이 가능한 형태로 복원할 수 있다.
네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.
또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.
네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.
그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.
또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.
네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.
외부기기 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.
외부기기 인터페이스부(135)는 디스플레이 장치(100)와 외부장치 간의 연결 경로를 제공할 수 있다. 디스플레이 장치(100)는 외부기기 인터페이스부(135)를 통해 외부장치와 유선 또는 무선으로 연결될 수 있다.
외부기기 인터페이스부(135)는 외부장치로부터 출력된 영상, 오디오 중 하나 이상을 수신하여, 제어부(170)로 전달할 수 있다. 외부기기 인터페이스부(135)에 연결 가능한 외부장치는 셋톱박스, 블루레이 플레이어, DVD 플레이어, 게임기, 사운드 바, 스마트폰과 같은 단말기, PC, USB 메모리, 홈 씨어터 중 어느 하나일 수 있다.
저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램을 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
또한, 저장부(140)는 외부기기 인터페이스부(135), 네트워크 인터페이스부 (133), 또는 카메라(160)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.
저장부(140)는 외부기기 인터페이스부(135) 또는 네트워크 인터페이스부 (133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.
디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일 (동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.
사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), UWB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있다.
또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부기기 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부기기 인터페이스부 (135)를 통하여 외부 출력장치로 입력될 수 있다.
*그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다.
*또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.
제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부기기 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.
한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부기기 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.
디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부기기 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.
한편, 도 1에 도시된 디스플레이 장치(100)는 본 발명의 일실시예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부기기 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.
예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.
이 경우, 이하에서 설명할 본 발명의 실시예에 따른 디스플레이 장치의 동작 방법은 도 1을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.
다음으로, 도 2 내지 도 3을 참조하여, 본 발명의 일 실시 예에 따른 원격제어장치에 대해 설명한다.
도 2는 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이고, 도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
먼저, 도 2를 참조하면, 원격제어장치(200)는 지문인식부(210), 무선통신부 (220), 사용자 입력부(230), 센서부(240), 출력부(250), 전원공급부(260), 저장부 (270), 제어부(280), 음성 획득부(290)를 포함할 수 있다.
도 2을 참조하면, 무선통신부(220)는 전술하여 설명한 본 발명의 실시 예에 따른 디스플레이 장치와 신호를 송수신한다.
원격제어장치(200)는 RF 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 RF 모듈(221)을 구비하며, IR 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 IR 모듈(223)을 구비할 수 있다. 또한, 원격제어장치(200)는 블루투스 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 블루투스 모듈(225)을 구비할 수 있다. 또한, 원격제어장치 (200)는 NFC(Near Field Communication) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수할 수 있는 NFC 모듈(227)을 구비하며, WLAN(Wireless LAN) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 WLAN 모듈(229)을 구비할 수 있다.
또한, 원격제어장치(200)는 디스플레이 장치(100)로 원격제어장치(200)의 움직임 등에 관한 정보가 담긴 신호를 무선 통신부(220)를 통해 전송한다.
한편, 원격제어장치(200)는 디스플레이 장치(100)가 전송한 신호를 RF 모듈(221)을 통하여 수신할 수 있으며, 필요에 따라 IR 모듈(223)을 통하여 디스플레이 장치(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.
사용자 입력부(230)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(230)를 조작하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(230)가 하드키 버튼을 구비할 경우 사용자는 하드키 버튼의 푸쉬 동작을 통하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 이에 대해서는 도 3을 참조하여 설명한다.
도 3을 참조하면, 원격제어장치(200)는 복수의 버튼을 포함할 수 있다. 복수의 버튼은 지문 인식 버튼(212), 전원 버튼(231), 홈 버튼(232), 라이브 버튼(233), 외부 입력 버튼(234), 음량 조절 버튼(235), 음성 인식 버튼(236), 채널 변경 버튼(237), 확인 버튼(238) 및 뒤로 가기 버튼(239)을 포함할 수 있다.
지문 인식 버튼(212)은 사용자의 지문을 인식하기 위한 버튼일 수 있다. 일 실시예로, 지문 인식 버튼(212)은 푸쉬 동작이 가능하여, 푸쉬 동작 및 지문 인식 동작을 수신할 수도 있다. 전원 버튼(231)은 디스플레이 장치(100)의 전원을 온/오프 하기 위한 버튼일 수 있다. 홈 버튼(232)은 디스플레이 장치(100)의 홈 화면으로 이동하기 위한 버튼일 수 있다. 라이브 버튼(233)은 실시간 방송 프로그램을 디스플레이 하기 위한 버튼일 수 있다. 외부 입력 버튼(234)은 디스플레이 장치(100)에 연결된 외부 입력을 수신하기 위한 버튼일 수 있다. 음량 조절 버튼(235)은 디스플레이 장치(100)가 출력하는 음량의 크기를 조절하기 위한 버튼일 수 있다. 음성 인식 버튼(236)은 사용자의 음성을 수신하고, 수신된 음성을 인식하기 위한 버튼일 수 있다. 채널 변경 버튼(237)은 특정 방송 채널의 방송 신호를 수신하기 위한 버튼일 수 있다. 확인 버튼(238)은 특정 기능을 선택하기 위한 버튼일 수 있고, 뒤로 가기 버튼(239)은 이전 화면으로 되돌아가기 위한 버튼일 수 있다.
다시 도 2를 설명한다.
사용자 입력부(230)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트키를 터치하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 또한, 사용자 입력부(230)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있으며 본 실시 예는 본 발명의 권리범위를 제한하지 아니한다.
센서부(240)는 자이로 센서(241) 또는 가속도 센서(243)를 구비할 수 있으며, 자이로 센서(241)는 원격제어장치(200)의 움직임에 관한 정보를 센싱할 수 있다.
예를 들어, 자이로 센서(241)는 원격제어장치(200)의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있으며, 가속도 센서(243)는 원격제어장치(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 원격제어장치(200)는 거리측정센서를 더 구비할 수 있어, 디스플레이 장치(100)의 디스플레이부 (180)와의 거리를 센싱할 수 있다.
출력부(250)는 사용자 입력부(235)의 조작에 대응하거나 디스플레이 장치(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(250)를 통하여 사용자는 사용자 입력부(235)의 조작 여부 또는 디스플레이 장치(100)의 제어 여부를 인지할 수 있다.
예를 들어, 출력부(250)는 사용자 입력부(235)가 조작되거나 무선 통신부(225)를 통하여 디스플레이 장치(100)와 신호가 송수신되면 점등되는 LED 모듈(251), 진동을 발생하는 진동 모듈(253), 음향을 출력하는 음향 출력 모듈(255), 또는 영상을 출력하는 디스플레이 모듈(257)을 구비할 수 있다.
또한, 전원공급부(260)는 원격제어장치(200)로 전원을 공급하며, 원격제어장치(200)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다. 전원공급부(260)는 원격제어장치(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.
저장부(270)는 원격제어장치(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 만일 원격제어장치(200)가 디스플레이 장치(100)와 RF 모듈(221)을 통하여 무선으로 신호를 송수신할 경우 원격제어장치(200)과 디스플레이 장치(100)는 소정 주파수 대역을 통하여 신호를 송수신한다.
원격제어장치(200)의 제어부(280)는 원격제어장치(200)와 페어링된 디스플레이 장치(100)와 신호를 무선으로 송수신할 수 있는 주파수 대역 등에 관한 정보를 저장부(270)에 저장하고 참조할 수 있다.
제어부(280)는 원격제어장치(200)의 제어에 관련된 제반사항을 제어한다. 제어부(280)는 사용자 입력부(235)의 소정 키 조작에 대응하는 신호 또는 센서부(240)에서 센싱한 원격제어장치(200)의 움직임에 대응하는 신호를 무선 통신부(220)를 통하여 디스플레이 장치(100)로 전송할 수 있다.
또한, 원격제어장치(200)의 음성 획득부(290)는 음성을 획득할 수 있다.
음성 획득부(290)는 적어도 하나 이상의 마이크를 포함할 수 있고, 마이크를 통해 음성을 획득할 수 있다.
다음으로 도 4를 설명한다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 4의 (a)는 원격 제어 장치(200)에 대응하는 포인터(205)가 디스플레이부 (180)에 표시되는 것을 예시한다.
사용자는 원격 제어 장치(200)를 상하, 좌우로 움직이거나 회전할 수 있다. 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)는 원격 제어 장치(200)의 움직임에 대응한다. 이러한 원격 제어 장치(200)는, 도면과 같이, 3D 공간 상의 움직임에 따라 해당 포인터(205)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수 있다.
도 4의 (b)는 사용자가 원격 제어 장치(200)를 왼쪽으로 이동하면, 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.
원격 제어 장치(200)의 센서를 통하여 감지된 원격 제어 장치(200)의 움직임에 관한 정보는 디스플레이 장치(100)로 전송된다. 디스플레이 장치(100)는 원격 제어 장치(200)의 움직임에 관한 정보로부터 포인터(205)의 좌표를 산출할 수 있다. 디스플레이 장치(100)는 산출한 좌표에 대응하도록 포인터(205)를 표시할 수 있다.
도 4의 (c)는, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌인되어 확대 표시될 수 있다.
이와 반대로, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에 가까워지도록 이동하는 경우, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌아웃되어 축소 표시될 수 있다.
한편, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지는 경우, 선택 영역이 줌아웃되고, 원격 제어 장치(200)가 디스플레이부(180)에 가까워지는 경우, 선택 영역이 줌인될 수도 있다.
또한, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서는 상하, 좌우 이동의 인식이 배제될 수 있다. 즉, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지거나 접근하도록 이동하는 경우, 상, 하, 좌, 우 이동은 인식되지 않고, 앞뒤 이동만 인식되도록 할 수 있다. 원격 제어 장치(200) 내의 특정 버튼을 누르지 않은 상태에서는, 원격 제어 장치(200)의 상, 하, 좌, 우 이동에 따라 포인터(205)만 이동하게 된다.
한편, 포인터(205)의 이동속도나 이동방향은 원격 제어 장치(200)의 이동속도나 이동방향에 대응할 수 있다.
한편, 본 명세서에서의 포인터는, 원격 제어 장치(200)의 동작에 대응하여, 디스플레이부(180)에 표시되는 오브젝트를 의미한다. 따라서, 포인터(205)로 도면에 도시된 화살표 형상 외에 다양한 형상의 오브젝트가 가능하다. 예를 들어, 점, 커서, 프롬프트, 두꺼운 외곽선 등을 포함하는 개념일 수 있다. 그리고, 포인터(205)가 디스플레이부(180) 상의 가로축과 세로축 중 어느 한 지점(point)에 대응하여 표시되는 것은 물론, 선(line), 면(surface) 등 복수 지점에 대응하여 표시되는 것도 가능하다.
도 5a 및 도 5b는, 원격 제어 장치의 움직임에 대응하여 포인터를 이동하는 제어 시, 발생할 수 있는 문제점을 설명하기 위한 도면이다.
사용자는 원격 제어 장치(200)를 손에 쥐고, 원격 제어 장치를 움직임으로써 각종 제어를 수행한다.
다만 사용자의 팔의 흔들림 때문에 원격 제어 장치의 이동 방향을 정밀하게 제어하는 것이 어렵다.
예를 들어 포인터(510)를 수평 방향으로 이동하기를 원하는 사용자는 원격 제어 장치를 수평 방향으로 이동하게 되나, 팔이 흔들리거나 팔의 수평 유지를 실패하는 경우 원격 제어 장치 역시 수평을 유지 하지 못하게 되며, 이에 따라 도 5a 및 도 5b에서 도시하는 바와 같이, 포인터가 삐뚤 빼뚤 하게 이동할 수 있다.
이 경우 사용자가 이동하기를 원하는 메뉴로 포인터를 이동하는 것이 어렵게 되는 문제가 발생할 수 있다.
도 6은 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 도면이다.
도 6에 따르면, 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법은, 포인터를 움직이기 위한 사용자 입력을 수신하는 단계(S610) 및 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 포인터를 특정 방향으로 고정하여 이동하는 단계(S630)를 포함할 수 있다.
먼저 포인터를 움직이기 위한 사용자 입력을 수신하는 단계(S610)에 대하여 설명한다.
사용자 입력 인터페이스부는 포인터를 움직이기 위한 사용자 입력을 수신할 수 있다. 구체적으로 사용자 입력 인터페이스부는 원격 제어 장치로부터 원격 제어 장치의 움직임에 대응하는 신호를 수신할 수 있다.
제어부는 사용자 입력에 대응하는 포인터의 좌표를 결정할 수 있다. 구체적으로 사용자가 원격 제어 장치를 움직이는 경우, 제어부는 원격 제어 장치의 움직임에 대응하는 신호를 원격 제어 장치로부터 수신할 수 있다. 또한 원격 제어 장치의 움직임에 대응하는 신호가 수신되면, 제어부는 원격 제어 장치의 움직임에 기초하여 포인터가 디스플레이 될 좌표를 결정할 수 있다.
한편 포인터를 움직이기 위한 사용자 입력이 사용자 입력 인터페이스부를 통하여 수신되면, 제어부는 원격 제어 장치의 움직임에 따라 포인터를 이동하여 디스플레이 하도록 디스플레이부를 제어할 수 있다.
한편 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 포인터를 특정 방향으로 고정하여 이동하는 단계(S630)에 대해서는 도 7 내지 도 18을 참고하여 설명한다.
도 7은 본 발명의 실시 예에 따른, 포인터를 특정 방향으로 고정하여 이동하는 방법을 설명하기 위한 도면이다.
화면은 메뉴 영역(710)을 포함할 수 있다. 여기서 메뉴 영역(710)은 복수의 메뉴(711, 712, 713, 714, 715, 716, 717, 718, 719, 720, 1721, 722)를 포함할 수 있다.
또한 메뉴 영역에 포함되는 복수의 메뉴(710, 712, 713, 714, 715, 716, 717, 718, 719, 720, 1721, 722)는, 도 7에서 도시하는 바와 같이, 수평 방향으로 배열될 수 있다.
한편 제어부는 사용자 입력에 대응하는 포인터(720)의 실 좌표가 메뉴 영역(710)에 위치하는지 결정할 수 있다.
또한 사용자 입력에 대응하는 포인터(720)의 실 좌표가 메뉴 영역(710)에 위치하는 상태에서 포인터(720)를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 포인터(720)를 특정 방향으로 고정하여 이동할 수 있다.
예를 들어 도 7에서 도시하는 바와 같이, 복수의 메뉴(710, 712, 713, 714, 715, 716, 717, 718, 719, 720, 1721, 722)가 수평 방향으로 배열되는 경우, 제어부는 포인터(720)를 수평 방향으로 고정하여 이동할 수 있다.
도 7에서 도시한 제1 방향(730)은 사용자 입력에 대응하는 포인터의 실 좌표의 이동 방향을 것이고, 특정 방향(740)은 포인터(720)가 실제 움직이면서 디스플레이 되는 방향을 도시한 것이다.
여기서 포인터의 실 좌표란, 포인터가 디스플레이 되는 좌표와 관계 없이, 원격 제어 장치의 움직임에 따라 결정되는 좌표를 의미할 수 있다.
따라서 사용자 입력에 대응하는 포인터의 실 좌표의 이동 방향은, 포인터를 특정 방향으로 고정하여 이동하는 것을 적용하지 않은 경우, 원격 제어 장치의 움직임을 반영하여 포인터가 이동하는 방향을 의미할 수 있다.
도 7에서 도시하는 바와 같이, 포인터(720)가 이동하는 특정 방향(740)은, 원격 제어 장치의 움직임에 따른 포인터의 실 좌표의 이동 방향과 상이할 수 있다.
즉 원격 제어 장치가 위 아래로 흔들리면서 수평으로 이동한 경우를 가정하면, 포인터의 실 좌표가 우측 방향으로부터 45도 각도를 이루는 방향으로 이동한 경우에도 포인터(720)는 우측 방향으로 이동할 수 있으며, 포인터의 실 좌표가 우측 방향으로부터 -30도 각도를 이루는 방향으로 이동한 경우에도 포인터(720)는 우측 방향으로 이동할 수 있다.
즉, 원격 제어 장치가 위 아래로 흔들리면서 수평으로 이동했음에도 불구하고, 포인터(720)는 특정 방향(수평)으로 고정하여 이동할 수 있다.
한편 포인터(720) 특정 방향으로 이동하는 경우 포인터(720)의 이동 거리는, 원격 제어 장치의 특정 방향으로의 움직임 성분에 대응할 수 있다. 예를 들어 포인터가 우측 방향에서 60도 각도를 형성하는 방향으로 2만큼 움직인 경우, 포인터(720)는 우측 방향으로 1만큼 움직일 수 있다.
도 8a 내지 도 8c는 메뉴의 다양한 배열에 따른 포인터의 이동 방향을 설명하기 위한 도면이다.
도 8a에 따르면, 제어부는 사용자 입력에 대응하는 포인터(840)의 실 좌표가 제1 메뉴 영역(810)에 위치하는지 판단할 수 있다.
또한 사용자 입력에 대응하는 포인터(840)의 좌표가 제1 메뉴 영역(810)에 위치하는 상태에서 포인터(840)를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 포인터(840)를 특정 방향으로 고정하여 이동할 수 있다.
예를 들어 도 8a에서 도시하는 바와 같이, 제1 메뉴 영역(810) 내의 복수의 메뉴가 수평 방향으로 배열되는 경우, 제어부는 포인터(840)를 수평 방향으로 고정하여 이동할 수 있다.
또한 도 8a에 따르면, 제어부는 사용자 입력에 대응하는 포인터(840)의 실 좌표가 제2 메뉴 영역(820)에 위치하는지 판단할 수 있다.
그리고 사용자 입력에 대응하는 포인터(840)의 좌표가 제2 메뉴 영역(820)에 위치하는 상태에서 포인터(840)를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 포인터(840)를 특정 방향으로 고정하여 이동할 수 있다.
예를 들어 도 8a에서 도시하는 바와 같이, 제2 메뉴 영역(820) 내의 복수의 메뉴가 수직 방향으로 배열되는 경우, 제어부는 포인터(840)를 수직 방향으로 고정하여 이동할 수 있다.
포인터(840)의 실 좌표가 복수의 영역(제1 메뉴 영역 및 제2 메뉴 영역)에 위치하는 경우, 제어부는 포인터(840)의 실 좌표의 이동 방향에 기초하여 포인터를 수평 방향으로 고정하여 이동하거나 수직 방향으로 고정하여 이동할 수 있다.
구체적으로 포인터(840)의 실 좌표의 이동 방향의 수평 성분보다 실 좌표의 이동 방향의 수직 성분이 큰 경우, 제어부는 포인터를 수직 방향으로 고정하여 이동할 수 있다.
도 8b를 참고하면, 제어부는 사용자 입력에 대응하는 제1 포인터(870)의 실 좌표가 제1 메뉴 영역(850)에 위치하는지 판단할 수 있다.
그리고 사용자 입력에 대응하는 제1 포인터(870)의 좌표가 제1 메뉴 영역(850)에 위치하는 상태에서 제1 포인터(870)를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 제1 포인터(870)를 특정 방향으로 고정하여 이동할 수 있다.
이 경우 제1 포인터(870)의 실 좌표의 이동 방향의 수평 성분이 실 좌표의 이동 방향의 수직 성분보다 큰 경우, 제어부는 제1 포인터(870)를 수평 방향으로 고정하여 이동할 수 있다.
또한 제어부는 이동 후의 포인터인 제2 포인터(880)의 실 좌표가 제1 메뉴 영역(850)에 위치하는지 판단할 수 있다.
그리고 제2 포인터(880)의 좌표가 제1 메뉴 영역(850)에 위치하는 상태에서 제2 포인터(880)를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 제2 포인터(880)를 특정 방향으로 고정하여 이동할 수 있다.
이 경우 제2 포인터(880)의 실 좌표의 이동 방향의 수직 성분이 실 좌표의 이동 방향의 수평 성분보다 큰 경우, 제어부는 제2 포인터(880)를 수직 방향으로 고정하여 이동할 수 있다.
도 8c를 참고하면, 제어부는 사용자 입력에 대응하는 포인터(870)의 실 좌표가 제1 메뉴 영역(890)에 위치하는지 판단할 수 있다.
그리고 제1 메뉴 영역(890) 내에는 복수의 메뉴가 수직 방향으로 배열되어 있다.
그리고 사용자 입력에 대응하는 포인터(891)의 실 좌표가 제1 메뉴 영역(890)에 위치하는 상태에서 포인터(891)를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 포인터(891)를 수직 방향으로 고정하여 이동할 수 있다.
이와 같이 본 발명은 원격 제어 장치의 흔들림에도 불구하고, 포인터를 직선으로 이동시켜 포인터를 원하는 메뉴로 이동하는 것을 용이하게 할 수 있다.
특히 메뉴가 수평으로 나열되어 있는 경우에는 포인터를 수평으로 이동시키고, 메뉴가 수직으로 나열되어 있는 경우에는 포인터를 수직으로 이동시킴으로써, 포인터를 사용자의 의도에 부합하도록 이동시킬 수 있는 장점이 있다.
도 9는 본 발명의 실시 예에 따른, 포인터의 표시 위치를 설명하기 위한 도면이다.
도 9a에서 도시하는 바와 같이 포인터(920)의 실 좌표가 메뉴 영역(910) 내에 진입하면, 도 9b에서 도시하는 바와 같이 제어부는 포인터를 고정된 높이(h)에서 디스플레이 할 수 있다.
구체적으로 메뉴 영역(920)에 포함되는 복수의 메뉴가 수평 방향으로 배열되고 포인터(920)의 실 좌표가 메뉴 영역(920) 내에 진입하면, 제어부는 포인터(920)를 고정된 높이(h)에서 디스플레이 할 수 있다.
이 경우 제어부는 메뉴 영역(920)에 진입한 포인터가 고정 된 높이(h)에서 디스플레이 되도록 메뉴 영역(920)에 진입한 포인터를 이동할 수 있다. 이 경우 메뉴 영역(920)에 진입한 포인터가 새로운 위치로 이동하는 과정이 디스플레이 될 수 있다.
한편 포인터가 이동한 새로운 위치의 좌표를 보정 좌표라고 명칭할 수 있다.
한편 포인터(920)가 고정된 높이(h)에서 디스플레이 된 상태에서 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 포인터(920)를 수평 방향으로 고정하여 이동할 수 있다.
즉 포인터가 좌우로 이동하더라도, 포인터는 항상 고정된 높이(h)를 유지할 수 있다.
한편 도 9의 실시 예는 수직 방향으로 배열된 복수의 메뉴에도 적용될 수 있다.
구체적으로 포인터의 실 좌표가 메뉴 영역 내에 진입하면, 제어부는 포인터를 고정된 너비에서 디스플레이 할 수 있다. 즉 메뉴 영역에 포함되는 복수의 메뉴가 수직 방향으로 배열되고 포인터의 실 좌표가 메뉴 영역 내에 진입하면, 제어부는 포인터(920)를 고정된 너비에서 디스플레이 할 수 있다.
*이 경우 제어부는 메뉴 영역에 진입한 포인터가 고정 된 너비에서 디스플레이 되도록 메뉴 영역에 진입한 포인터를 이동할 수 있다. 이에 따라 메뉴 영역에 진입한 포인터가 새로운 위치로 이동하는 과정이 디스플레이 될 수 있다.
한편 포인터가 고정된 너비에서 디스플레이 된 상태에서 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 제어부는 포인터를 수직 방향으로 고정하여 이동할 수 있다.
즉 포인터가 상하로 이동하더라도, 포인터는 항상 고정된 너비를 유지할 수 있다.
도 10은 본 발명의 실시 예에 따른, 메뉴 내 식별자를 가리지 않도록 포인터를 디스플레이 하는 방법을 설명하기 위한 도면이다.
제어부는 메뉴 영역 내의 메뉴에 포함되는 식별자를 고정된 높이 또는 너비에서 디스플레이 되는 포인터에 의해 가려지지 않도록 디스플레이 할 수 있다.
구체적으로 도 10a에서 도시하는 바와 같이 포인터의 실 좌표가 메뉴 영역 내에 진입하면, 제어부는 포인터를 고정된 높이(h1)에서 디스플레이 할 수 있다.
여기서 고정된 높이(h1)는 메뉴 내 식별자(1011)가 위치한 높이보다 낮을 수 있다. 여기서 식별자는, 식별자를 포함하는 메뉴를 식별하기 위한 텍스트 또는 이미지일 수 있다.
즉 본 발명은 포인터를 메뉴 내 식별자 아래에 디스플레이 함으로써, 포인터에 의하여 식별자가 가려지는 것을 방지할 수 있다.
한편 도 10b에서 도시하는 바와 같이, 포인터(1020)가 특정 메뉴(715) 상에 위치하면, 제어부는 포인터(1020)가 특정 메뉴(715)를 나타내는 식별자(1021)를 가리지 않도록 특정 메뉴(715)를 이동하여 디스플레이 할 수 있다.
구체적으로 특정 메뉴(715)를 나타내는 식별자(1021)가 표시되는 높이와 포인터(1020)가 표시되는 높이가 동일한 경우, 포인터(1020)는 특정 메뉴(715)를 나타내는 식별자(1021) 위에 디스플레이 될 수 있다. 이 경우 식별자(1021)가 포인터(1020)에 가려져서 보이지 않을 수 있다.
이를 방지하기 위하여, 포인터(1020)가 특정 메뉴(715) 상에 위치하면, 제어부는 식별자(1021)와 포인터(1020)가 동일 영역에 디스플레이 되지 않도록 특정 메뉴(715)를 이동하여 디스플레이 할 수 있다.
특정 메뉴(715)가 이동하는 경우 특정 메뉴(715)에 포함되는 식별자(1021) 역시 이동하기 때문에, 식별자(1021)와 포인터(1020)의 중첩이 방지될 수 있다.
한편 도 10의 설명은, 포인터가 고정된 너비에서 디스플레이 되는 실시 예에서도 그대로 적용될 수 있다.
구체적으로 포인터의 실 좌표가 메뉴 영역 내에 진입하면, 제어부는 포인터를 고정된 너비에서 디스플레이 할 수 있다.
여기서 고정된 너비는 메뉴 내 식별자가 위치한 너비보다 작거나 클 수 있다.
즉 본 발명은 포인터를 메뉴 내 식별자 옆에 디스플레이 함으로써, 포인터에 의하여 식별자가 가려지는 것을 방지할 수 있다.
한편 포인터가 특정 메뉴 상에 위치하면, 제어부는 포인터가 특정 메뉴를 나타내는 식별자를 가리지 않도록 특정 메뉴를 이동하여 디스플레이 할 수 있다.
구체적으로 특정 메뉴를 나타내는 식별자가 표시되는 너비와 포인터가 표시되는 너비가 동일한 경우, 포인터는 특정 메뉴를 나타내는 식별자 위에 디스플레이 될 수 있다. 이 경우 식별자가 포인터에 가려져서 보이지 않을 수 있다.
이를 방지하기 위하여, 포인터가 특정 메뉴 상에 위치하면, 제어부는 식별자와 포인터가 동일 영역에 디스플레이 되지 않도록 특정 메뉴를 이동하여 디스플레이 할 수 있다.
특정 메뉴가 이동하는 경우 특정 메뉴에 포함되는 식별자 역시 이동하기 때문에, 식별자와 포인터의 중첩이 방지될 수 있다.
도 11은 본 발명의 실시 예에 따른, 메뉴 영역에 진입한 포인터가 고정된 높이로 이동하는 경우 발생할 수 있는 문제점을 설명하기 위한 도면이다.
포인터의 실좌표가 메뉴 영역(910) 내에 위치하는 경우에는, 포인터 역시 메뉴 영역(910) 내에서 디스플레이 되게 된다.
다만 포인터는 메뉴 영역(910)을 벗어날 필요가 있다. 포인터가 메뉴 영역(910)을 벗어나 다른 메뉴 영역(1190)으로 이동하는 경우를 그 예로 들 수 있다. 따라서 포인터의 실 좌표가 메뉴 영역(910) 외에 위치하는 경우, 제어부는 포인터를 실 좌표에 디스플레이 하게 된다.
한편 포인터의 실 좌표(1130)가 메뉴 영역으로 진입한 경우, 포인터(1120)는 아래로 이동하여 고정된 높이에 디스플레이 된다.
이 경우 사용자는 포인터의 실 좌표(1130)의 위치를 디스플레이 된 포인터(1120)의 위치로 인식하게 된다. 다만 포인터의 실 좌표(1130)는 포인터의 실 좌표가 메뉴 영역(910)에 진입한 시점과 동일하다.
따라서 사용자가 원격 제어 장치의 조작에 조금만 부주의 하게 되도 포인터의 실 좌표(1130)가 제1 방향(1150)으로 이동할 수 있으며, 이 경우 실 좌표가 메뉴 영역(910)을 벗어날 수 있다.
그리고 포인터의 실 좌표가 메뉴 영역(910)을 벗어나게 되면, 포인터(1140)는 메뉴 영역(910) 밖에 표시될 수 있다.
즉 사용자는 포인터(1120)가 수평 방향(1170)으로 이동하는 것을 기대하였으나, 실제로는 메뉴 영역(910) 밖에 디스플레이 되게 되는 문제가 발생할 수 있다.
이를 방지하기 위하여, 포인터의 실 좌표가 메뉴 영역 내에 진입하면, 제어부는 실 좌표를 고정된 높이에 대응하는 좌표로 변경할 수 있다.
이와 관련해서는 도 12를 참고하여 설명한다.
도 12에 따르면, 포인터의 실 좌표(1130)가 메뉴 영역(910) 내에 진입한 경우, 제어부는 고정된 높이로 이동한 포인터(1120)를 디스플레이 할 수 있다.
이 경우 제어부는 포인터의 실 좌표(1130)를 새로운 실 좌표(1140)로 변경할 수 있다. 여기서 새로운 실 좌표(1140)는, 고정된 높이에 대응하는 좌표, 즉 이동한 포인터(1120)가 디스플레이 되는 좌표일 수 있다.
즉, 실제 디스플레이 된 포인터(1120)의 위치와 포인터의 실 좌표(1140)의 위치는 동일할 수 있다.
이 경우 사용자는, 디스플레이 된 포인터(1120)의 위치를 포인터의 실 좌표(1140)의 위치로 인식하게 된다.
또한 포인터(1120)가 디스플레이 되는 높이는, 메뉴 영역(910)의 전체 높이의 중간 높이일 수 있다. 또는 포인터(1120)가 디스플레이 되는 높이는, 포인터가 메뉴 영역(910)으로 진입한 지점으로부터 중간 높이와 가깝게 이동한 높이일 수 있다.
이에 따라, 사용자가 원격 제어 장치의 조작을 잘못하여 포인터의 실 좌표(1140)가 제1 방향(1210)으로 이동하더라도, 포인터의 실 좌표(1140)가 메뉴 영역(910)을 이탈할 가능성이 줄어들게 되며, 따라서 포인터(1120)는 특정 방향(1220)으로 안정적으로 이동할 수 있게 된다.
도 12의 설명은, 포인터가 고정된 너비에서 디스플레이 되는 경우에도 그대로 적용될 수 있다.
구체적으로 포인터의 실 좌표가 메뉴 영역 내에 진입한 경우, 제어부는 고정된 너비로 이동한 포인터를 디스플레이 할 수 있다.
이 경우 제어부는 포인터의 실 좌표를 새로운 실 좌표로 변경할 수 있다. 여기서 새로운 실 좌표는, 고정된 너비에 대응하는 좌표, 즉 이동한 포인터가 디스플레이 되는 좌표일 수 있다.
즉, 실제 디스플레이 된 포인터의 위치와 포인터의 실 좌표의 위치는 동일할 수 있다.
이 경우 사용자는, 디스플레이 된 포인터의 위치를 포인터의 실 좌표(의 위치로 인식하게 된다.
또한 포인터가 디스플레이 되는 너비는, 메뉴 영역의 전체 너비의 중간 너비일 수 있다. 또는 포인터가 디스플레이 되는 너비는, 포인터가 메뉴 영역으로 진입한 지점으로부터 중간 너비와 가깝게 이동한 너비일 수 있다.
도 13은 도 11에서 설명한 문제점을 해결하기 위한 또 다른 실시 예를 설명하는 도면이다.
앞서, 포인터의 실 좌표가 메뉴 영역(910)을 이탈하면, 포인터가 메뉴 영역(910) 밖에 디스플레이 되는 것으로 설명한 바 있다.
다만 포인터의 실 좌표가 메뉴 영역(910)을 이탈하는 것에 관계 없이, 실 좌표의 이동 방향에 기초하여 포인터의 메뉴 영역(910)의 이탈 여부를 결정할 수 있다.
구체적으로 화면은 다른 메뉴 영역(1360) 포함할 수 있다. 여기서 다른 메뉴 영역(1360)은, 하나 이상의 메뉴(1360a, 1360b, 1360c)를 포함할 수 있다.
한편 포인터의 실 좌표의 이동 방향(1350)이 다른 메뉴 영역(1360)을 향하는 방향(1330)이면, 제어부는 포인터를 실 좌표의 이동 방향으로 이동할 수 있다.
또한 포인터의 실 좌표의 이동 방향(1370)이 다른 메뉴 영역(1360)을 향하는 방향(1330)과 특정 방향(1340) 사이의 방향(1320)이면, 제어부는 포인터를 특정 방향으로 고정하여 이동할 수 있다.
포인터의 실 좌표의 이동 방향(1350)이 다른 메뉴 영역(1360)을 향하는 방향(1330)이라는 것은, 사용자의 의도가 메뉴 영역(910) 내에서의 포인터의 이동이 아닌 다른 메뉴 영역(1360)으로의 포인터의 이동임을 추단하게 한다.
또한 포인터의 실 좌표의 이동 방향(1350)이 다른 메뉴 영역(1360)을 향하는 방향(1330)과 특정 방향(1340) 사이의 방향(1320)이라는 것은, 사용자의 의도가 메뉴 영역(910) 내에서의 포인터의 이동이나 제어가 올바르게 되지 않았음을 추단케 한다.
따라서 본 발명은 포인터의 실 좌표의 이동 방향에 따라 포인터를 이탈 여부를 결정함으로써, 사용자의 의도에 부합하는 제어를 수행할 수 있는 장점이 있다.
도 14 내지 도 18은 본 발명의 실시 예에 따른, 포인터의 이탈을 경고하는 방법을 설명하기 위한 도면이다.
앞서 설명한 바와 같이, 포인터의 실 좌표와 포인터가 실제로 디스플레이 되는 보정 좌표는 서로 상이하게 되며, 포인터의 실 좌표는 사용자가 알 수 없기 때문에, 사용자가 원격 제어 장치를 잘 못 움직이는 경우에는 포인터가 메뉴 영역에서 이탈할 수 있다. 따라서, 포인터의 이탈을 방지하기 위한 경고가 필요하다.
도 14 내지 도 15에서는, 메뉴(715)를 변경하여 표시함으로써 포인터의 이탈을 경고하는 방법을 설명한다.
포인터의 실 좌표가 메뉴 영역(910)을 벗어나려 하는 경우, 제어부는 포인터가 위치한 메뉴의 형상을 변경하여 디스플레이 할 수 있다.
구체적으로 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려고 하는지 판단할 수 있다.
예를 들어 도 14a에서 도시하는 바와 같이, 포인터의 실 좌표(1420)가 메뉴 영역(910)의 경계로부터 기 설정된 범위 밖인 경우(즉 메뉴 영역(910)의 경계로부터 거리가 먼 경우), 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려고 하는 것이 아닌 것으로 판단할 수 있다.
다른 예를 들어 도 14b에서 도시하는 바와 같이, 포인터의 실 좌표(1420)가 메뉴 영역의 경계로부터 기 설정된 범위 이내인 경우(즉 메뉴 영역(910)의 경계로부터 거리가 가까운 경우), 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려 하는 것으로 판단할 수 있다.
그리고 포인터의 실 좌표가 메뉴 영역을 벗어나려는 것으로 판단되면, 도 14b에서 도시하는 바와 같이, 제어부는 포인터(1410)가 위치하고 있는 메뉴(715)를 틸팅(tilting)하여 디스플레이 할 수 있다.
한편 포인터(1410)가 위치하고 있는 메뉴(715)는 입체적인 영상일 수 있으며, 포인터의 실 좌표가 메뉴 영역을 벗어나려는 것으로 판단되면, 제어부는 입체적 영상이 기울어지는 효과를 디스플레이 할 수 있다.
한편 포인터의 실 좌표가 메뉴 영역(910)을 벗어나려 하는 경우, 제어부는 포인터가 위치한 메뉴의 위치를 변경하여 디스플레이 할 수 있다.
예를 들어 도 15a에서 도시하는 바와 같이, 포인터의 실 좌표(1420)가 메뉴 영역(910)의 경계로부터 먼 경우, 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려고 하는 것이 아닌 것으로 판단할 수 있다.
다른 예를 들어 도 15b에서 도시하는 바와 같이, 포인터의 실 좌표(1420)가 메뉴 영역(910)의 경계로부터 가까운 경우, 제어부는 포인터의 실 좌표(1420)가 메뉴 영역을 벗어나려 하는 것으로 판단할 수 있다.
그리고 포인터의 실 좌표가 메뉴 영역을 벗어나려는 것으로 판단되면, 도 15b에서 도시하는 바와 같이, 제어부는 포인터(1410)가 위치하고 있는 메뉴(715)의 위치를 변경하여 디스플레이 할 수 있다.
도 16 내지 도 17에서는, 포인터(1410)를 변경하여 표시함으로써 포인터의 이탈을 경고하는 방법을 설명한다.
포인터의 실 좌표가 메뉴 영역(910)을 벗어나려 하는 경우, 제어부는 포인터의 형상을 변경하여 디스플레이 할 수 있다.
구체적으로 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려고 하는지 판단할 수 있다.
도 16a에서는 포인터의 실 좌표(1420)가 메뉴 영역을 벗어나려고 하는 것이 아닌 상태, 도 16b에서는 포인터의 실 좌표(1420)가 메뉴 영역을 벗어나려고 하는 상태를 도시하였다.
그리고 포인터의 실 좌표가 메뉴 영역을 벗어나려는 것으로 판단되면, 도 16b에서 도시하는 바와 같이, 제어부는 포인터(1410)를 틸팅(tilting)하여 디스플레이 할 수 있다.
한편 포인터(1410)는 입체적인 영상일 수 있으며, 포인터의 실 좌표가 메뉴 영역을 벗어나려는 것으로 판단되면, 제어부는 입체적 영상이 기울어지는 효과를 디스플레이 할 수 있다.
한편 포인터의 실 좌표가 메뉴 영역(910)을 벗어나려 하는 경우, 제어부는 포인터의 위치를 변경하여 디스플레이 할 수 있다.
구체적으로 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려고 하는지 판단할 수 있다.
도 17a에서는 포인터의 실 좌표(1420)가 메뉴 영역을 벗어나려고 하는 것이 아닌 상태, 도 17b에서는 포인터의 실 좌표(1420)가 메뉴 영역을 벗어나려고 하는 상태를 도시하였다.
그리고 포인터의 실 좌표가 메뉴 영역을 벗어나려는 것으로 판단되면, 도 17b에서 도시하는 바와 같이, 제어부는 포인터(1410)의 위치를 변경하여 디스플레이 할 수 있다.
이 경우 변경되는 포인터(1410)의 위치는 변경 전의 포인터(1410)의 위치보다 높은 위치일 수 있다. 즉 수평 방향으로 움직이던 포인터(1410)가 위로 움직임으로써, 경고가 사용자에게 명확하게 전달될 수 있다.
도 18에서는, 실 좌표에 대응하는 제2 포인터를 표시함으로써 포인터의 이탈을 경고하는 방법을 설명한다.
도 18a에서 도시하는 바와 같이, 제어부는 포인터(1810)와 함께 포인터의 실 좌표에 대응하는 제2 포인터(1820)를 디스플레이 할 수 있다.
여기서 보정 좌표에 디스플레이 되는 포인터(1810)와는 달리, 제2 포인터(1820)는 포인터의 실 좌표에 디스플레이 될 수 있다.
한편 제2 포인터(1820)는 포인터(1810)와 다른 크기 또는 다른 색상으로 디스플레이 될 수 있다.
예를 들어 포인터(1810)는 유채색인데 반해, 제2 포인터(1820)는 높은 명도의 무채색이거나 낮은 명도의 무채색일 수 있다.
한편, 포인터의 실 좌표가 메뉴 영역(910)을 벗어나려고 하는 경우에만 제2 포인터(1820)를 디스플레이 하는 방식으로도 구현이 가능하다.
구체적으로, 도 18b에서 도시하는 바와 같이, 포인터의 실 좌표가 메뉴 영역(910)의 경계로부터 가까운 경우, 제어부는 포인터의 실 좌표가 메뉴 영역을 벗어나려 하는 것으로 판단할 수 있다.
그리고 포인터의 실 좌표가 메뉴 영역을 벗어나려 하는 경우, 제어부는 포인터(1910)와 함께 포인터의 실 좌표에 대응하는 제2 포인터(1920)를 디스플레이 할 수 있다.
이 경우 제어부는 도 18c에서 도시하는 바와 같이, 엘라스틱(elastic) 효과를 사용하여 제2 포인터(1920)를 디스플레이 할 수 있다.
이와 같이 본 발명은 다양한 방법을 통하여 포인터의 이탈을 사용자에게 경고함으로써, 실 좌표의 이탈에 따른 포인터의 갑작스런 이탈을 방지할 수 있다.
도 19 내지 도 20은 본 발명의 실시 예에 따른, 포인터 이동 모드에 따라 포인터가 이동하는 방법을 설명하기 위한 도면이다.
포인터 이동 모드는 제1 모드 및 제2 모드를 포함할 수 있다.
여기서 제1 모드 및 제2 모드는, 사용자 입력을 전송하는 원격 제어 장치(200)의 기울임에 따라 결정될 수 있다.
예를 들어 제1 모드는, 도 19b에서 도시하는 바와 같이, 원격 제어 장치(200)가 제1 기울임 상태에서 움직이는 모드일 수 있다.
또 다른 예를 들어 제2 모드는, 도 20b에서 도시하는 바와 같이, 원격 제어 장치(200)가 제2 기울임 상태에서 움직이는 모드일 수 있다.
이 경우 사용자 입력 인터페이스부는 포인터를 움직이기 위한 사용자 입력 및 원격 제어 장치의 모드 정보를 수신할 수 있다.
구체적으로 도 19b에서, 사용자 입력 인터페이스부는 원격 제어 장치로부터 원격 제어 장치의 움직임에 대응하는 신호 및 원격 제어 장치가 제1 모드라는 정보를 수신할 수 있다.
또한 도 20b에서, 사용자 입력 인터페이스부는 원격 제어 장치로부터 원격 제어 장치의 움직임에 대응하는 신호 및 원격 제어 장치가 제2 모드라는 정보를 수신할 수 있다.
한편 도 19a에서 도시하는 바와 같이, 제1 모드에서, 제어부는 포인터(1910)를 실 좌표의 이동 방향(1920)에 따라 이동할 수 있다.
또한 도 20a에서 도시하는 바와 같이, 제2 모드에서, 제어부는 포인터(1910)를 실 좌표의 이동 방향(1920)과는 관계 없이 특정 방향으로 고정하여 이동할 수 있다.
이와 같이 본 발명에 따르면, 사용자는 원격 제어 장치를 쥐는 방법을 변경하는 간단한 방법을 통하여, 포인터의 이동 방법을 변경할 수 있는 장점이 있다.
도 21 내지 도 37은 본 발명의 실시 예에 따른, 포인터를 끌어들이는 마그네틱 효과를 설명하기 위한 도면이다.
도 21은 본 발명의 실시 예에 따른, 메뉴 영역에 포인터를 끌어들이는 방법을 설명하기 위한 도면이다.
화면은 마그네틱 영역(2110)을 포함할 수 있다.
여기서 마그네틱 영역(2110)은 메뉴 영역(910)을 포함할 수 있다. 이 경우 마그네틱 영역(2110)의 크기는 메뉴 영역(910)의 크기보다 클 수 있다.
여기서 마그네틱 영역(2110)은, 포인터를 움직이기 위한 사용자 입력 없이도 포인터가 메뉴 영역(910)으로 움직이는 영역일 수 있다.
구체적으로 도 21a에서 도시하는 바와 같이 포인터(2120)가 메뉴 영역(910)을 포함하는 마그네틱 영역(2110)에 진입하면, 제어부는 포인터(2120)를 메뉴 영역(910) 내로 이동하여 디스플레이 할 수 있다.
더욱 구체적으로, 도 21a에서 도시하는 바와 같이 포인터(2120)가 메뉴 영역(910)을 포함하는 마그네틱 영역(2110)에 진입하면, 제어부는 포인터를 움직이기 위한 사용자 입력 없이도 포인터(2120)를 메뉴 영역(910) 내로 이동하여 디스플레이 할 수 있다.
한편 도 21b에서 도시하는 바와 같이, 제어부는 마그네틱 영역(2110)에 진입한 포인터(2120)가 메뉴 영역(910) 내로 이동하여 새로운 위치에 표시되는 과정을 디스플레이 할 수 있다.
한편 포인터(2130)가 위치한 곳의 메뉴를 선택하는 입력이 수신되면, 제어부는 선택된 메뉴에 대응하는 기능을 수행할 수 있다.
도 22는 본 발명의 또 다른 실시 예에 따른, 버튼에 포인터를 끌어들이는 방법을 설명하기 위한 도면이다.
제어부는 선택 시 특정 기능을 수행하는 버튼(2211)을 디스플레이 할 수 있다.
한편 제2 마그네틱 영역(2210)은 버튼(2211)을 포함할 수 있다. 이 경우 제2 마그네틱 영역(2210)의 크기는 버튼(2211)의 크기보다 클 수 있다.
도 22a에서 도시하는 바와 같이 포인터(2220)가 버튼(2211)을 포함하는 제2 마그네틱 영역(2210)에 진입하면, 제어부는 포인터(2220)를 버튼(2211)으로 이동하여 디스플레이 할 수 있다.
즉 포인터(2220)가 버튼(2211)을 포함하는 제2 마그네틱 영역(2210)에 진입하면, 제어부는 사용자 입력 없이도 포인터(2220)를 버튼(2211)으로 이동하여 디스플레이 할 수 있다.
한편 도 22b에서 도시하는 바와 같이, 제어부는 제2 마그네틱 영역(2210)에 진입한 포인터(2220)가 버튼(2211)으로 이동하여 새로운 위치에 표시되는 과정을 디스플레이 할 수 있다.
한편 포인터(2250)가 위치한 곳의 버튼(2211)을 선택하는 입력이 수신되면, 제어부는 버튼(2211)에 대응하는 기능을 수행할 수 있다.
한편 제어부는 포인터 이동 모드에 따라 마그네틱 영역의 활성화 여부를 결정할 수 있다.
구체적으로 제1 모드에서, 제어부는 마그네틱 영역을 비 활성화 할 수 있다. 이 경우 포인터(2220)가 버튼(2211)을 포함하는 제2 마그네틱 영역(2210)에 진입하더라도, 포인터(2220)를 버튼(2211)으로 이동하기 위한 사용자 입력이 수신되어야 포인터(2220)가 버튼(2211)으로 이동할 수 있다.
한편 제2 모드에서, 제어부는 마그네틱 영역을 활성화 할 수 있다. 이 경우 포인터(2220)가 버튼(2211)을 포함하는 제2 마그네틱 영역(2210)에 진입하면, 제어부는 포인터(2220)를 버튼(2211)으로 이동하여 디스플레이 할 수 있다.
이와 같이 본 발명은 원격 제어 장치의 움직임을 이용하는 제어 환경에서, 사용자가 메뉴 또는 버튼을 용이하게 선택할 수 있는 환경을 제공할 수 있다.
도 23은 마그네틱 영역의 크기를 설명하기 위한 도면이다.
마그네틱 영역의 크기는, 버튼의 중요도 및 사용 빈도 중 적어도 하나에 기초하여 결정될 수 있다.
*구체적으로 제어부는 선택 시 제1 기능을 수행하는 제1 버튼(2211) 및 선택 시 제2 기능을 수행하는 제2 버튼(2311)을 디스플레이 할 수 있다.
한편 제1 마그네틱 영역(2210)은 제1 버튼(2211)을 포함할 수 있다. 이 경우 제1 마그네틱 영역(2210)의 크기는 버튼(2211)의 크기보다 클 수 있다.
또한 제2 마그네틱 영역(2310)은 제2 버튼(2311)을 포함할 수 있다. 이 경우 제2 마그네틱 영역(2310)의 크기는 제2 버튼(2311)의 크기보다 클 수 있다.
한편 제1 마그네틱 영역(2210)의 크기는, 제1 버튼(2211)의 중요도 및 사용 빈도 중 적어도 하나에 기초하여 결정될 수 있다.
또한 제2 마그네틱 영역(2310)의 크기는, 제2 버튼(2311)의 중요도 및 사용 빈도 중 적어도 하나에 기초하여 결정될 수 있다.
예를 들어 제1 버튼(2211)의 중요도가 제2 버튼(2311)의 중요도보다 높으면, 제1 버튼(2211)에 대응하는 제1 마그네틱 영역(2210)의 크기는 제2 버튼(2311)에 대응하는 제2 마그네틱 영역(2310)의 크기보다 클 수 있다.
다른 예를 들어, 제1 버튼(2211)의 사용 빈도가 제2 버튼(2311)의 사용 빈도보다 잦으면, 제1 버튼(2211)에 대응하는 제1 마그네틱 영역(2210)의 크기는 제2 버튼(2311)에 대응하는 제2 마그네틱 영역(2310)의 크기보다 클 수 있다.
도 24는 본 발명의 또 다른 실시 예에 따른, 마그네틱 영역의 크기를 설명하기 위한 도면이다.
마그네틱 영역의 크기는, 다른 버튼과의 거리에 기초하여 결정될 수 있다.
구체적으로 제어부는 선택 시 제1 기능을 수행하는 제1 버튼(2411), 선택 시 제2 기능을 수행하는 제2 버튼(2421) 및 선택 시 제3 기능을 수행하는 제3 버튼(2431)을 디스플레이 할 수 있다.
한편 제1 마그네틱 영역(2410)은 제1 버튼(2411)을 포함할 수 있다.
또한 제2 마그네틱 영역(2420)은 제2 버튼(2421)을 포함할 수 있다.
또한 제3 마그네틱 영역(2430)은 제3 버튼(2431)을 포함할 수 있다.
한편 제1 마그네틱 영역(2410)의 크기는, 제1 버튼(2411)과 다른 버튼 과의 거리에 기초하여 결정될 수 있다. 또한 제2 마그네틱 영역(2420)의 크기는, 제2 버튼(2421)과 다른 버튼 과의 거리에 기초하여 결정될 수 있다.
구체적으로 제1 버튼(2411)과 제2 버튼(2421)과의 거리 또는 제1 버튼(2411)과 제3 버튼(2431)과의 거리는, 제2 버튼(2421)과 제3 버튼(2431)과의 거리보다 멀 수 있다.
이 경우 제1 버튼(2411)에 대응하는 제1 마그네틱 영역(2410)의 크기는, 제2 버튼(2421)에 대응하는 제2 마그네틱 영역(2420)의 크기보다 클 수 있다.
도 25는 본 발명의 실시 예에 따른 복수의 버튼을 포함하는 마그네틱 영역을 설명하기 위한 도면이다.
복수의 버튼(2511, 2512, 2513)이 각각 자신의 마그네틱 영역을 가질 수도 있지만, 복수의 버튼(2511, 2512, 2513)이 하나의 마그네틱 영역(2520)을 가질수도 있다.
그리고 포인터(2530)가 복수의 버튼(2511, 2512, 2513)을 포함하는 마그네틱 영역(2520)에 진입하면, 제어부는 포인터(2530)를 복수의 버튼(2511, 2512, 2513) 중 어느 하나로 이동하여 디스플레이 할 수 있다.
이 경우 제어부는 포인터의 진입 방향에 기초하여, 포인터(2530)를 복수의 버튼(2511, 2512, 2513) 중 어느 하나로 이동하여 디스플레이 할 수 있다.
구체적으로 포인터(2530)의 진입 방향이 제1 방향(2541)인 경우, 제어부는 포인터(2530)를 제1 방향(2541)에 위치한 제1 버튼(2511)으로 이동하여 디스플레이 할 수 있다.
또한 포인터(2530)의 진입 방향이 제2 방향(2542)인 경우, 제어부는 포인터(2530)를 제2 방향(2542)에 위치한 제2 버튼(2512)으로 이동하여 디스플레이 할 수 있다.
도 26은 본 발명의 실시 예에 따른, 메뉴 영역(910) 또는 마그네틱 영역 밖에서의 포인터의 이동 방법을 설명하기 위한 도면이다.
제어부는 포인터(2610)를 움직이기 위한 사용자 입력에 기초하여 포인터(2610)를 이동할 수 있다.
이 경우 제어부는 포인터(2610)의 이동 경로를 보정할 수 있다.
구체적으로 제어부는 원격 제어 장치의 움직임에 대응하는 신호에 기초하여, 사용자 입력의 주된 방향을 결정할 수 있다.
예를 들어 제어부는 원격 제어 장치의 움직임에 대응하는 신호에 기초하여, 사용자 입력이 상하 이동을 위한 입력인지, 좌우 이동을 위한 입력인지, 대각선 이동을 위한 입력인지 결정할 수 있다.
이 경우 제어부는 포인터의 실 좌표에 대응하는 이동 경로(2625, 2635, 2645, 2655) 대신 보정된 이동 경로(2630, 2620, 2640, 2650)에 따라 포인터(2610)를 이동할 수 있다.
한편 제어부는 포인터 이동 모드에 따라 포인터의 이동 경로를 결정할 수 있다.
구체적으로 제1 모드에서, 제어부는 포인터의 실 좌표에 대응하는 이동 경로(2625, 2635, 2645, 2655)로 포인터를 이동할 수 있다.
또한 제2 모드에서, 제어부는 보정된 이동 경로(2630, 2620, 2640, 2650)에 따라 포인터를 이동할 수 있다.
도 27은 본 발명의 실시 예에 따른, 키보드 UI를 도시한 도면이다.
도 27을 참고하면, 제어부는 텍스트(문자, 숫자, 특수 기호) 입력을 위한 카보드 UI를 디스플레이 할 수 있다.
한편 제어부는 특정 문자(2711)를 선택하는 입력을 수신할 수 있다. 그리고 특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 입력창(2730)에 특정 문자를 디스플레이 할 수 있다.
도 28은 본 발명의 실시 예에 따른, 포인터의 디스플레이 위치를 설명하기 위한 도면이다.
특정 문자(2711)를 선택하기 위하여 포인터가 이동한 경우 제어부는 특정 문자(2711)가 포인터(2720)에 의해 가려지지 않도록 포인터(2720)를 디스플레이 할 수 있다.
예를 들어 포인터의 실 좌표가 특정 문자(2711)가 디스플레이 된 지점에 위치하는 경우에도, 제어부는 특정 문자(2711)의 아래에 디스플레이 할 수 있다.
도 29는 본 발명의 실시 예에 따른, 포인터의 이동에 따른 특정 문자(2711)의 디스플레이 방법을 설명하기 위한 도면이다.
특정 문자(2711)를 선택하기 위하여 포인터(2720)가 이동한 경우 제어부는 특정 문자(2711)를 포함하는 아이콘(2710)을 디스플레이 할 수 있다.
예를 들어 포인터(2720)의 실 좌표가 특정 문자(2711)가 디스플레이 된 지점에 위치하는 경우, 제어부는 키보드 UI 상에 특정 문자(2711)를 포함하는 아이콘(2710)을 디스플레이 할 수 있다.
이 경우 특정 문자(2711)를 포함하는 아이콘(2710)은, 포인터(2720)와 중첩되지 않도록 디스플레이 되거나, 포인터(2720) 위에 디스플레이 되어 포인터(2720)의 일부 또는 전부를 가릴 수 있다.
도 30은 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 다음 문자를 결정하는 방법 및 마그네틱 영역을 설정하는 방법을 설명하기 위한 도면이다.
맥락적 확률이란, 특정 문자가 선택된 경우 어느 문자가 특정 문자의 다음에 올 수 있는 확률을 의미할 수 있다. 여기서 맥락적 확률은, 특정 문자를 포함하는 복수의 단어 각각의 중요도, 특정 문자를 포함하는 복수의 단어 각각의 사용 빈도, 특정 문자와 다음 문자가 조합되는 빈도 등에 의하여 결정될 수 있다.
특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 특정 문자(2711) 다음에 올 문자의 우선 순위를 결정할 수 있다.
예를 들어 문자 “A”를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 “A” 다음에 올 제1 우선 순위의 문자를 “T”로, 제2 우선 순위의 문자를 “N”으로 결정할 수 있다.
그리고 제어부는 특정 문자와 관련된 제1 문자를 나타내는 제1 버튼(3011) 및 특정 문자와 관련된 제2 문자를 나타내는 제2 버튼(3021)을 디스플레이 할 수 있다. 여기서 특정 문자와 관련된 문자란, 복수의 문자 중 특정 문자(2711) 다음에 올 우선 순위가 높은 문자를 의미할 수 있다.
한편 제어부는 제1 버튼(3011)을 포함하는 제1 마그네틱 영역(3010) 및 제2 버튼(3021)을 포함하는 제2 마그네틱 영역(3020)을 설정할 수 있다.
또한 포인터가 제1 버튼(3011)을 포함하는 제1 마그네틱 영역(3010)에 진입하면, 제어부는 포인터를 제1 버튼으로 이동하여 디스플레이 할 수 있다.
또한 포인터가 제2 버튼(3021)을 포함하는 제2 마그네틱 영역(3020)에 진입하면, 제어부는 포인터를 제2 버튼으로 이동하여 디스플레이 할 수 있다.
한편 제1 마그네틱 영역(3010)과 제2 마그네틱 영역(3020)의 크기는 맥락적 확률에 따라 결정될 수 있다.
구체적으로 제1 문자가 제2 문자보다 맥락적 확률이 높아서 제1 문자의 우선 순위가 제2 문자의 우선 순위보다 높은 경우, 제1 문자에 대응하는 제1 마그네틱 영역의 크기는 제2 문자에 대응하는 제2 마그네틱 영역의 크기보다 클 수 있다.
도 31은 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 다음 문자를 표시하는 방법을 설명하기 위한 도면이다.
특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 특정 문자(2711) 다음에 올 문자의 우선 순위를 결정할 수 있다.
그리고 제어부는 특정 문자와 관련된 제1 문자를 나타내는 제1 버튼(3111)을 식별 가능하도록 디스플레이 할 수 있다.
구체적으로 제어부는 특정 문자와 관련된 제1 문자를 나타내는 제1 버튼(3111)을 확대하여 디스플레이 할 수 있다.
도 32는 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 다음 문자로 포인터를 이동하는 방법을 설명하기 위한 도면이다.
특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 특정 문자(2711) 다음에 올 문자의 우선 순위를 결정할 수 있다.
그리고 제어부는 특정 문자와 관련된 제1 문자를 나타내는 제1 버튼(3111)에 포인터(3210)를 디스플레이 할 수 있다.
도 33은 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 포인터를 이동하는 방법을 설명하기 위한 도면이다.
특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 특정 문자(2711) 다음에 올 문자의 우선 순위를 결정할 수 있다.
한편 제어부는 포인터를 이동하기 위한 입력을 수신할 수 있다. 그리고 포인터의 이동 경로에 우선 순위가 낮은 문자(3321)가 위치하는 경우, 제어부는 우선 순위가 낮은 문자(3321)를 통과하도록 포인터를 디스플레이 할 수 있다.
도 34는 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 자동 완성 단어를 결정하는 방법 및 마그네틱 영역을 설정하는 방법을 설명하기 위한 도면이다.
맥락적 확률이란, 특정 문자가 선택된 경우 특정 문자를 포함하는 어느 단어로 완성될 수 있는 확률을 의미할 수 있다. 여기서 맥락적 확률은, 특정 문자를 포함하는 복수의 단어 각각의 중요도, 특정 문자를 포함하는 복수의 단어 각각의 사용 빈도 등에 의하여 결정될 수 있다.
특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 특정 문자(2711)를 포함하는 단어의 우선 순위를 결정할 수 있다.
예를 들어 문자 “A”를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 제1 우선 순위의 자동 완성 단어를 “april”으로, 제2 우선 순위의 자동 완성 단어를 “apple”로 결정할 수 있다.
그리고 제어부는 특정 문자와 관련된 제1 자동 완성 단어를 나타내는 제1 버튼(3421) 및 특정 문자와 관련된 제2 자동 완성 단어를 나타내는 제2 버튼(3411)을 디스플레이 할 수 있다. 여기서 특정 문자와 관련된 자동 완성 단어란, 특정 문자를 포함하는 복수의 자동 완성 단어 중 우선순위가 높은 자동 완성 단어를 의미할 수 있다.
한편 제어부는 제1 버튼(3421)을 포함하는 제1 마그네틱 영역(3420) 및 제2 버튼(3411)을 포함하는 제2 마그네틱 영역(3410)을 설정할 수 있다.
또한 포인터가 제1 버튼(3421)을 포함하는 제1 마그네틱 영역(3420)에 진입하면, 제어부는 포인터를 제1 버튼(3421)으로 이동하여 디스플레이 할 수 있다.
또한 포인터가 제2 버튼(3411)을 포함하는 제2 마그네틱 영역(3410)에 진입하면, 제어부는 포인터를 제2 버튼(3411)으로 이동하여 디스플레이 할 수 있다.
한편 제1 마그네틱 영역(3420)과 제2 마그네틱 영역(3410)의 크기는 맥락적 확률에 따라 결정될 수 있다.
구체적으로 제1 자동 완성 단어가 제2 자동 완성 단어보다 맥락적 확률이 높아서 제1 자동 완성 단어의 우선 순위가 제2 자동 완성 단어의 우선 순위보다 높은 경우, 제1 자동 완성 단어에 대응하는 제1 마그네틱 영역의 크기는 제2 자동 완성 단어에 대응하는 제2 마그네틱 영역의 크기보다 클 수 있다.
도 35는 본 발명의 실시 예에 따른, 맥락적 확률에 기초하여 자동 완성 문자를 포함하는 버튼의 크기를 조절하는 방법을 설명하기 위한 도면이다.
특정 문자(2711)를 선택하는 입력이 수신되는 경우, 제어부는 맥락적 확률에 기초하여 특정 문자(2711)를 포함하는 자동 완성 단어의 우선 순위를 결정할 수 있다.
또한 제어부는 특정 문자와 관련된 제1 자동 완성 단어를 포함하는 제1 버튼(3421) 및 특정 문자와 관련된 제2 자동 완성 단어를 포함하는 제2 버튼(3411)을 디스플레이 할 수 있다.
한편 제1 버튼(3421)의 크기와 제2 버튼(3411)의 크기는 맥락적 확률에 따라 결정될 수 있다.
구체적으로 제1 자동 완성 단어가 제2 자동 완성 단어보다 맥락적 확률이 높아서 제1 자동 완성 단어의 우선 순위가 제2 자동 완성 단어의 우선 순위보다 높은 경우, 제1 자동 완성 단어에 대응하는 제1 버튼(3421)의 크기는 제2 자동 완성 단어에 대응하는 제2 버튼(3411)의 크기보다 클 수 있다.
또는, 제1 버튼(3421)에 포함되는 제1 자동 완성 단어의 크기와 제2 버튼(3411)에 포함되는 제2 자동 완성 단어의 크기는 맥락적 확률에 따라 결정될 수 있다.
구체적으로 제1 자동 완성 단어가 제2 자동 완성 단어보다 맥락적 확률이 높아서 제1 자동 완성 단어의 우선 순위가 제2 자동 완성 단어의 우선 순위보다 높은 경우, 제1 버튼(3421)에 포함되는 제1 자동 완성 단어의 크기는 제2 버튼(3411)에 포함되는 제2 자동 완성 단어의 크기보다 클 수 있다.
한편 제어부는 포인터 이동 모드에 따라 특정 문자와 관련된 문자를 디스플레이 할 것인지 또는 특정 문자와 관련된 자동 완성 단어를 디스플레이 할 것인지 결정할 수 있다.
*구체적으로 제1 모드에서 특정 문자를 선택하는 입력이 수신되는 경우, 제어부는 특정 문자와 관련된 문자를 포함하는 버튼을 디스플레이 할 수 있다.
반면에, 제2 모드에서 특정 문자를 선택하는 입력이 수신되는 경우, 제어부는 특정 문자와 관련된 자동 완성 단어를 포함하는 버튼을 디스플레이 할 수 있다.
도 36은 본 발명의 실시 예에 따른 가속도 영역을 설명하기 위한 도면이다.
화면은 가속도 영역을 포함할 수 있다. 여기서 가속도 영역(3630)은 버튼(3621)을 포함할 수 있다. 이 경우 가속도 영역(3630)의 크기는 버튼(3621)의 크기보다 클 수 있다.
또한 가속도 영역(3630)은 마그네틱 영역(3620)을 포함할 수 있다. 이 경우 가속도 영역(3630)의 크기는 마그네틱 영역(3620)의 크기보다 클 수 있다.
한편 도 36a에서 도시하는 바와 같이, 포인터(3640)가 가속도 영역(3630)에 진입하고 포인터(3640)의 이동 방향이 버튼(3621)이 위치하는 방향인 경우, 제어부는 포인터(3640)의 이동 속도를 증가시킬 수 있다.
이 경우 제어부는 포인터(3640)에 가속도를 계속적으로 가할 수 있다. 즉 포인터(3640)에 가속도가 계속적으로 가해짐에 따라, 포인터(3640)의 이동 속도는 점점 증가할 수 있다.
한편 도 36b에서 도시하는 바와 같이 포인터(3640)가 마그네틱 영역(3620)에 진입한 경우, 도 36c에서 도시하는 바와 같이 제어부는 포인터(3640)를 버튼(3621)으로 이동하여 디스플레이 할 수 있다.
한편 가속도 영역의 크기는 버튼(3621)과 다른 버튼과의 거리에 기초하여 결정될 수 있다.
구체적으로 버튼(3621)과 다른 버튼과의 거리가 먼 경우 가속도 영역(3630)의 크기는 클 수 있다.
즉 버튼(3621)과 다른 버튼과의 거리가 멀수록 포인터의 이동에 많은 시간이 소요되게 된다. 따라서 본 발명은 다른 버튼과의 거리에 따라 가속도 영역의 크기를 조절함으로써, 포인터의 빠른 이동을 가능하게 할 수 있다.
한편 제어부는 마그네틱 영역의 경계와 가속도 영역의 경계를, 화면 상에 표시할 수도, 표시하지 않을 수도 있다. 경계를 표시하지 않는 경우에는 화면의 복잡함을 방지할 수 있는 장점이 있으며, 경계를 표시하는 경우에는 사용자가 경계의 위치를 파악하고 포인터를 제어할 수 있는 장점이 있다.
한편, 제어부는 일반적으로 장치의 제어를 담당하는 구성으로, 중앙처리장치, 마이크로 프로세서, 프로세서 등의 용어와 혼용될 수 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등을 포함한다. 또한, 상기 컴퓨터는 디스플레이 장치의 제어부를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (15)

  1. 포인터를 디스플레이 하는 디스플레이부;
    상기 포인터를 움직이기 위한 사용자 입력을 수신하는 사용자 입력 인터페이스부; 및
    상기 사용자 입력에 대응하는 상기 포인터의 실 좌표가 상기 메뉴 영역 내에 위치하고 상기 포인터를 움직이기 위한 사용자 입력이 수신되는 경우, 상기 포인터를 특정 방향으로 고정하여 이동하는 제어부를 포함하는
    디스플레이 장치.
  2. 제 1항에 있어서,
    상기 메뉴 영역 내에 포함되는 복수의 메뉴는,
    수직 방향 또는 수평 방향으로 배열되고,
    상기 제어부는,
    상기 복수의 메뉴가 수평 방향으로 배열 되는 경우, 상기 포인터를 수평 방향으로 고정하여 이동하고,
    상기 복수의 메뉴가 수직 방향으로 배열 되는 경우, 상기 포인터를 수직 방향으로 고정하여 이동하는
    디스플레이 장치.
  3. 제 1항에 있어서,
    상기 특정 방향은,
    상기 사용자 입력에 대응하는 상기 포인터의 실 좌표의 이동 방향과 상이한
    디스플레이 장치.
  4. 제 3항에 있어서,
    상기 제어부는,
    상기 실 좌표의 이동 방향이 다른 메뉴 영역을 향하는 방향이면, 상기 포인터를 상기 실 좌표의 이동 방향으로 이동하고,
    상기 실 좌표의 이동 방향이 상기 다른 메뉴 영역을 향하는 방향과 상기 특정 방향 사이의 방향이면, 상기 포인터를 상기 특정 방향으로 고정하여 이동하는
    디스플레이 장치.
  5. 제 1항에 있어서,
    상기 제어부는,
    상기 포인터의 실 좌표가 상기 메뉴 영역 내에 진입하면, 상기 포인터를 고정된 높이 또는 고정된 너비에서 디스플레이 하는
    디스플레이 장치.
  6. 제 5항에 있어서,
    상기 제어부는,
    상기 포인터의 실 좌표가 상기 메뉴 영역 내에 진입하면, 상기 실 좌표를 상기 고정된 높이 또는 너비에 대응하는 좌표로 변경하는
    디스플레이 장치.
  7. 제 5항에 있어서,
    상기 제어부는,
    상기 메뉴 영역 내의 메뉴에 포함되는 텍스트 또는 이미지를, 상기 고정된 높이 또는 너비에서 디스플레이 되는 포인터에 의해 가려지지 않도록 디스플레이 하는
    디스플레이 장치.
  8. 제 1항에 있어서,
    상기 제어부는,
    상기 포인터의 실 좌표가 상기 메뉴 영역을 벗어나려고 하는 경우, 상기 포인터의 형상 또는 위치를 변경하여 디스플레이 하는
    디스플레이 장치.
  9. 제 1항에 있어서,
    상기 제어부는,
    상기 포인터를 디스플레이 하는 것과 함께, 상기 실 좌표에 대응하는 제2 포인터를 상기 실 좌표에 디스플레이 하는
    디스플레이 장치.
  10. 제 1항에 있어서,
    상기 제어부는,
    제1 모드에서 상기 포인터를 상기 실 좌표의 이동 방향에 따라 이동하고,
    제2 모드에서 상기 포인터를 상기 특정 방향으로 고정하여 이동하고,
    상기 제1 모드 및 상기 제2 모드는,
    상기 사용자 입력을 전송하는 원격 제어 장치의 기울임에 따라 결정되는
    디스플레이 장치.
  11. 제 1항에 있어서,
    상기 제어부는,
    상기 포인터가 상기 메뉴 영역을 포함하는 제1 마그네틱 영역에 진입하면, 상기 포인터를 상기 메뉴 영역 내로 이동하여 디스플레이 하는
    디스플레이 장치.
  12. 제 1항에 있어서,
    상기 제어부는,
    제1 버튼을 디스플레이 하고,
    상기 포인터가 상기 제1 버튼을 포함하는 제2 마그네틱 영역에 진입하면, 상기 포인터를 상기 제1 버튼으로 이동하여 디스플레이 하는
    디스플레이 장치.
  13. 제 12항에 있어서,
    상기 제어부는,
    제1 모드에서 상기 제2 마그네틱 영역을 비활성화 하고,
    제2 모드에서 상기 제2 마그네틱 영역을 활성화 하고,
    상기 제1 모드 및 상기 제2 모드는,
    상기 사용자 입력을 전송하는 원격 제어 장치의 기울임에 따라 결정되는
    디스플레이 장치.
  14. 제 1항에 있어서,
    상기 제어부는,
    제1 버튼 및 제2 버튼을 디스플레이 하고,
    상기 포인터가 상기 제1 버튼 및 제2 버튼을 포함하는 제3 마그네틱 영역에 진입하면, 상기 포인터의 진입 방향에 기초하여 상기 포인터를 상기 제1 버튼 및 제2 버튼 중 어느 하나로 이동하여 디스플레이 하는
    디스플레이 장치.
  15. 제 12항에 있어서,
    상기 제2 마그네틱 영역의 크기는,
    상기 제1 버튼의 중요도, 사용 빈도 및 맥락적 확률 중 적어도 하나에 기초하여 결정되는
    디스플레이 장치.
PCT/KR2018/003432 2018-02-05 2018-03-23 디스플레이 장치 Ceased WO2019151570A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/967,027 US11789547B2 (en) 2018-02-05 2018-03-23 Display apparatus
DE112018006791.2T DE112018006791T5 (de) 2018-02-05 2018-03-23 Anzeigevorrichtung
US18/242,838 US12498801B2 (en) 2018-02-05 2023-09-06 Display apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020180014163A KR102624185B1 (ko) 2018-02-05 2018-02-05 디스플레이 장치
KR10-2018-0014163 2018-02-05

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US16/967,027 A-371-Of-International US11789547B2 (en) 2018-02-05 2018-03-23 Display apparatus
US18/242,838 Continuation US12498801B2 (en) 2018-02-05 2023-09-06 Display apparatus

Publications (1)

Publication Number Publication Date
WO2019151570A1 true WO2019151570A1 (ko) 2019-08-08

Family

ID=67478339

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2018/003432 Ceased WO2019151570A1 (ko) 2018-02-05 2018-03-23 디스플레이 장치

Country Status (4)

Country Link
US (2) US11789547B2 (ko)
KR (2) KR102624185B1 (ko)
DE (1) DE112018006791T5 (ko)
WO (1) WO2019151570A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102624185B1 (ko) * 2018-02-05 2024-01-15 엘지전자 주식회사 디스플레이 장치
CN114020386B (zh) * 2021-11-01 2025-07-22 联想(北京)有限公司 一种显示控制方法及显示设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070042344A (ko) * 2005-10-18 2007-04-23 삼성전자주식회사 포인터 표시 장치 및 방법
KR20100028012A (ko) * 2007-06-20 2010-03-11 소니 가부시끼가이샤 제어 장치, 입력 장치, 제어 시스템, 핸드헬드형 정보 처리 장치 및 제어 방법
KR20100078366A (ko) * 2008-12-30 2010-07-08 삼성전자주식회사 중력에 의해 이동되는 시각적 효과를 나타내는 포인터를 이용한 gui 제공방법 및 이를 적용한 전자장치
KR101370834B1 (ko) * 2012-10-18 2014-03-07 삼성전자주식회사 디스플레이 장치 및 이의 문자 입력 방법
KR20140090074A (ko) * 2013-01-07 2014-07-16 엘지전자 주식회사 영상표시장치 및 그것의 제어방법

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7661075B2 (en) * 2003-05-21 2010-02-09 Nokia Corporation User interface display for set-top box device
KR101354020B1 (ko) * 2007-08-08 2014-01-22 에스케이 텔레콤주식회사 메시지 작성을 위한 단어 db 생성 방법, 단어 자동 완성방법 및 그를 위한 단말기
JP4737296B2 (ja) 2009-01-19 2011-07-27 ソニー株式会社 入力装置および方法、情報処理装置および方法、情報処理システム、並びにプログラム
JP2010204810A (ja) * 2009-03-02 2010-09-16 Panasonic Corp 携帯情報端末
US8756502B2 (en) * 2010-09-08 2014-06-17 Sony Corporation Minimal and preferential option user interface
JP5095021B2 (ja) 2011-04-04 2012-12-12 シャープ株式会社 表示装置、情報処理システム、プログラム及びテレビジョン受信機
KR20130072638A (ko) 2011-12-22 2013-07-02 엘지전자 주식회사 영상표시장치의 동작 방법
EP2752758A3 (en) 2013-01-07 2016-10-26 LG Electronics Inc. Image display device and controlling method thereof
US20140240225A1 (en) * 2013-02-26 2014-08-28 Pointgrab Ltd. Method for touchless control of a device
KR20150037014A (ko) * 2013-09-30 2015-04-08 삼성전자주식회사 전자장치 및 전자장치의 사용자 인터페이스 제공방법
KR102145739B1 (ko) * 2014-02-28 2020-08-19 엘지전자 주식회사 이동단말기 및 그 제어방법
JP6050784B2 (ja) * 2014-05-28 2016-12-21 京セラ株式会社 電子機器及び制御プログラム並びに電子機器の動作方法
KR20160084146A (ko) * 2015-01-05 2016-07-13 삼성전자주식회사 사용자 입력의 제어 방법 및 상기 방법이 적용되는 전자장치
KR20160139810A (ko) * 2015-05-28 2016-12-07 삼성전자주식회사 의료 영상 디스플레이 장치 및 그에 따른 의료 영상 디스플레이 방법
KR102354328B1 (ko) * 2015-09-22 2022-01-21 삼성전자주식회사 영상 표시 장치 및 그 동작 방법
KR102388082B1 (ko) * 2017-05-23 2022-04-19 엘지전자 주식회사 디스플레이 디바이스 및 그의 동작 방법
KR102624185B1 (ko) * 2018-02-05 2024-01-15 엘지전자 주식회사 디스플레이 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070042344A (ko) * 2005-10-18 2007-04-23 삼성전자주식회사 포인터 표시 장치 및 방법
KR20100028012A (ko) * 2007-06-20 2010-03-11 소니 가부시끼가이샤 제어 장치, 입력 장치, 제어 시스템, 핸드헬드형 정보 처리 장치 및 제어 방법
KR20100078366A (ko) * 2008-12-30 2010-07-08 삼성전자주식회사 중력에 의해 이동되는 시각적 효과를 나타내는 포인터를 이용한 gui 제공방법 및 이를 적용한 전자장치
KR101370834B1 (ko) * 2012-10-18 2014-03-07 삼성전자주식회사 디스플레이 장치 및 이의 문자 입력 방법
KR20140090074A (ko) * 2013-01-07 2014-07-16 엘지전자 주식회사 영상표시장치 및 그것의 제어방법

Also Published As

Publication number Publication date
US11789547B2 (en) 2023-10-17
KR102624185B1 (ko) 2024-01-15
KR20190094701A (ko) 2019-08-14
US12498801B2 (en) 2025-12-16
DE112018006791T5 (de) 2020-11-12
US20210041960A1 (en) 2021-02-11
KR20240010068A (ko) 2024-01-23
US20230418393A1 (en) 2023-12-28

Similar Documents

Publication Publication Date Title
WO2016017945A1 (en) Mobile device and method of pairing the same with electronic device
WO2014042445A1 (en) Display apparatus and method for controlling display apparatus thereof
WO2016144044A1 (en) Remote controller and method for controlling screen of display apparatus
WO2018062715A1 (en) Apparatus and control method for displaying content of peripheral device
WO2017003007A1 (ko) 영상표시장치 및 이동 단말기
WO2018088667A1 (en) Display device
WO2017111321A1 (ko) 영상표시장치
WO2021132757A1 (ko) 디스플레이 장치
WO2016093510A1 (en) Display apparatus and display method
WO2021117953A1 (ko) 디스플레이 장치
WO2016126048A1 (ko) 디스플레이 장치
WO2017010651A1 (ko) 디스플레이 시스템
WO2016182133A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2016013705A1 (ko) 원격제어장치 및 그의 동작 방법
WO2016182124A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2021070976A1 (ko) 소스 기기 및 무선 시스템
WO2016125966A1 (ko) 영상 투사 장치 및 그의 동작 방법
WO2019151570A1 (ko) 디스플레이 장치
WO2017039130A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2017047866A1 (ko) 디스플레이 장치 및 그의 휘도 제어 방법
WO2022270655A1 (ko) 원격제어장치 및 이를 구비하는 영상표시장치
WO2021137333A1 (ko) 디스플레이 장치
WO2015170938A1 (ko) 영상제공장치
WO2022260196A1 (ko) 영상표시장치 및 이를 구비하는 영상 표시 시스템
WO2022234874A1 (ko) 무선 디스플레이 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18903266

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 18903266

Country of ref document: EP

Kind code of ref document: A1