[go: up one dir, main page]

KR20130114475A - Image display apparatus and method for operating the same - Google Patents

Image display apparatus and method for operating the same Download PDF

Info

Publication number
KR20130114475A
KR20130114475A KR1020120036890A KR20120036890A KR20130114475A KR 20130114475 A KR20130114475 A KR 20130114475A KR 1020120036890 A KR1020120036890 A KR 1020120036890A KR 20120036890 A KR20120036890 A KR 20120036890A KR 20130114475 A KR20130114475 A KR 20130114475A
Authority
KR
South Korea
Prior art keywords
image
signal
display apparatus
image display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020120036890A
Other languages
Korean (ko)
Other versions
KR101924062B1 (en
Inventor
양인창
이종명
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020120036890A priority Critical patent/KR101924062B1/en
Publication of KR20130114475A publication Critical patent/KR20130114475A/en
Application granted granted Critical
Publication of KR101924062B1 publication Critical patent/KR101924062B1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PURPOSE: An image displaying device and an operating method thereof are provided for a user to conveniently and variably manage and utilize various contents by sharing various contents with other electronic devices. CONSTITUTION: An external device interface part (135) receives an external input image signal. An image processing part produces a first image based on a broadcasting image signal or the received external input image signal. A network interface part (130) receives a second image and control information from a first device. A synthesizing part synthesizes the first image and the second image based on the control information. A display part (180) displays the synthesized image. [Reference numerals] (110) Tuner; (120) Demodulation unit; (130) Network interface unit; (135) External interface unit; (140) Storing unit; (150) User input interface unit; (170) Control unit; (180) Display unit; (185) Audio output unit; (190) Power supply unit; (200) Remote controller

Description

영상표시장치 및 그 동작 방법{Image display apparatus and method for operating the same}Image display apparatus and method for operating the same}

본 발명은 영상표시장치 및 그 동작 방법에 관한 것이며, 더욱 상세하게는 다양하고 효율적으로 화면을 전송, 공유하고 제어할 수 있는 영상표시장치 및 그 동작 방법에 관한 것이다.The present invention relates to an image display apparatus and an operation method thereof, and more particularly, to an image display apparatus and an operation method capable of transmitting, sharing and controlling a screen in a variety of ways.

영상표시장치는 사용자가 시청할 수 있는 영상을 표시하는 기능을 갖춘 장치이다. 사용자는 영상표시장치를 통하여 방송을 시청할 수 있다. 영상표시장치는 방송국에서 송출되는 방송 신호 중 사용자가 선택한 방송을 디스플레이에 표시한다. 현재 방송은 전세계적으로 아날로그 방송에서 디지털 방송으로 전환하고 있는 추세이다. A video display device is a device having a function of displaying an image that a user can view. The user can view the broadcast through the video display device. The image display apparatus displays a broadcast selected by a user on a display among broadcast signals transmitted from a broadcasting station. Currently, broadcasting is changing from analog broadcasting to digital broadcasting around the world.

디지털 방송은 디지털 영상 및 음성 신호를 송출하는 방송을 의미한다. 디지털 방송은 아날로그 방송에 비해, 외부 잡음에 강해 데이터 손실이 작으며, 에러 정정에 유리하며, 해상도가 높고, 선명한 화면을 제공한다. 또한, 디지털 방송은 아날로그 방송과 달리 양방향 서비스가 가능하다. Digital broadcasting refers to broadcasting in which digital video and audio signals are transmitted. Digital broadcasting is more resistant to external noise than analog broadcasting, so it has less data loss, is advantageous for error correction, has a higher resolution, and provides a clearer picture. Also, unlike analog broadcasting, digital broadcasting is capable of bidirectional service.

본 발명의 목적은, 화면 중 적어도 일부를 효율적으로 전송, 공유하고 제어할 수 있는 영상표시장치 및 그 동작 방법을 제공함에 있다.An object of the present invention is to provide an image display apparatus and an operation method thereof capable of efficiently transmitting, sharing and controlling at least a portion of a screen.

또한, 본 발명의 다른 목적은, 사용자의 이용 편의성을 향상시킬 수 있는 영상표시장치 및 그 동작 방법을 제공함에 있다.In addition, another object of the present invention is to provide an image display apparatus and an operation method thereof that can improve user convenience.

상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치의 동작 방법은 수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성하는 단계, 제1 장치로부터 제2 영상 및 제어 정보를 수신하는 단계, 제어 정보에 기초하여 제1 영상과 2 영상을 합성하는 단계와 합성된 영상을 표시하는 단계를 포함한다.According to another aspect of the present invention, there is provided a method of operating an image display apparatus, the method including generating a first image based on a received broadcast image signal or an external input image signal, and controlling the second image from the first apparatus. Receiving information, synthesizing the first image and the second image based on the control information, and displaying the synthesized image.

상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치의 동작 방법은 소정 영상의 제어를 위한 메뉴 오브젝트를 표시하는 단계, 소정 영상을 재생하는 단계, 소정 영상 중 적어도 일부에 대한 전송 명령을 수신하는 단계, 소정 영상 중 적어도 일부와 관련된 데이터를 제1 영상표시장치로 전송하는 단계와 소정 영상의 표시를 종료하는 단계를 포함한다.According to an aspect of the present invention, there is provided a method of operating an image display apparatus, the method including displaying a menu object for controlling a predetermined image, playing a predetermined image, and transmitting a command to at least some of the predetermined image. And receiving the data related to at least a portion of the predetermined image to the first image display device and ending displaying of the predetermined image.

상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치는 방송 영상 신호를 수신하는 튜너부, 외부 입력 영상 신호를 수신하는 외부장치 인터페이스부, 수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성하는 영상처리부, 제1 장치로부터 제2 영상 및 제어 정보를 수신하는 네트워크 인터페이스부, 제어 정보에 기초하여 제1 영상과 제2 영상을 합성하는 합성부와 합성된 영상을 표시하는 디스플레이부를 포함한다.According to an embodiment of the present invention, a video display device includes a tuner unit for receiving a broadcast video signal, an external device interface unit for receiving an external input video signal, and based on a received broadcast video signal or an external input video signal. An image processor to generate a first image, a network interface unit to receive the second image and control information from the first device, and a synthesizer to synthesize the first image and the second image based on the control information. It includes a display unit.

상기 목적을 달성하기 위한 본 발명의 실시예에 따른 영상표시장치는 디스플레이부, 방송 영상 신호를 수신하는 튜너부, 외부 입력 영상 신호를 수신하는 외부장치 인터페이스부, 제1 장치로부터 제2 영상 및 제어 정보를 수신하는 네트워크 인터페이스부와 수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성하는 제어부를 포함하고, 제어부는 제어 정보에 기초하여 제1 영상과 제2 영상을 합성하고, 합성된 영상을 디스플레이부에 표시하도록 제어하는 것을 특징으로 한다.According to an embodiment of the present invention, a display unit, a tuner unit for receiving a broadcast image signal, an external device interface unit for receiving an external input image signal, and a second image and control from the first device And a controller configured to generate a first image based on the network interface unit receiving the information and the received broadcast image signal or the external input image signal, wherein the controller synthesizes the first image and the second image based on the control information, And display the synthesized image on the display unit.

본 발명의 실시예에 따르면, 각종 컨텐츠를 다른 전자기기와 공유함으로써, 사용자는 각종 컨텐츠를 더욱 편리하고 다양하게 관리하고 활용할 수 있다. 특히, 다수의 전자기기의 화면을 동시에 공유하고 제어할 수 있다. 또한, 사용자의 이용 편의성이 증대될 수 있다. According to an embodiment of the present invention, by sharing various contents with other electronic devices, a user can manage and utilize various contents more conveniently and variously. In particular, it is possible to simultaneously share and control the screen of a plurality of electronic devices. In addition, user convenience may be increased.

도 1은 본 발명의 일실시예에 따른 영상표시장치 시스템을 개략적으로 나타낸 도면이다.
도 2는 도 1의 영상표시장치의 내부 블록도이다.
도 3은 도 2의 제어부의 내부 블록도이다.
도 4는 본 발명의 일실시예에 따른 영상표시장치의 전면을 예시한 도면이고, 도 5는 본 발명의 일실시예에 따른 영상표시장치의 내부 블록도이다.
도 6은 본 발명의 일실시예에 따른 영상표시장치 시스템을 개략적으로 나타낸 도면이다.
도 7은 본 발명의 실시예에 따른 영상표시장치의 동작 방법을 보여주는 순서도이다.
도 8은 본 발명의 실시예에 따른 영상표시장치의 동작 방법을 보여주는 순서도이다.
도 9 내지 도 19는 본 발명의 실시예에 따른 영상표시장치의 동작 방법의 다양한 예를 설명하기 위해 참조되는 도면이다.
1 is a view schematically showing an image display device system according to an embodiment of the present invention.
FIG. 2 is an internal block diagram of the image display device of FIG. 1.
3 is an internal block diagram of the controller of FIG. 2.
4 is a diagram illustrating a front surface of an image display apparatus according to an embodiment of the present invention, and FIG. 5 is an internal block diagram of the image display apparatus according to an embodiment of the present invention.
6 is a schematic view of an image display device system according to an embodiment of the present invention.
7 is a flowchart illustrating a method of operating an image display apparatus according to an exemplary embodiment of the present invention.
8 is a flowchart illustrating a method of operating an image display apparatus according to an exemplary embodiment of the present invention.
9 to 19 are diagrams for describing various examples of an operating method of an image display apparatus according to an exemplary embodiment of the present invention.

이하에서는 도면을 참조하여 본 발명을 더욱 상세하게 설명한다. Hereinafter, the present invention will be described in more detail with reference to the drawings.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 단순히 본 명세서 작성의 용이함만이 고려되어 부여되는 것으로서, 그 자체로 특별히 중요한 의미 또는 역할을 부여하는 것은 아니다. 따라서, 상기 "모듈" 및 "부"는 서로 혼용되어 사용될 수도 있다.The suffix "module" and " part "for components used in the following description are given merely for convenience of description, and do not give special significance or role in themselves. Accordingly, the terms "module" and "part" may be used interchangeably.

도 1은 본 발명의 일실시예에 따른 영상표시장치 시스템을 개략적으로 나타낸 도면이다.1 is a view schematically showing an image display device system according to an embodiment of the present invention.

도면을 참조하여 설명하면, 본 발명의 실시예에 따른 영상표시장치 시스템은, 수신 영상표시장치(100a), 송신 영상표시장치(100b)를 포함할 수 있다.Referring to the drawings, an image display apparatus system according to an embodiment of the present invention may include a reception image display apparatus 100a and a transmission image display apparatus 100b.

최근에 스마트 테이블과 같이 거실 내에 두어 TV 및 가전기기를 제어하는 상품이 등장하고 있다. 테이블 내의 화면을 이용하여 거실에서 집안의 모든 가전기기를 제어할 경우 스마트 테이블 내에서 찾은 동영상을 TV 화면에 즉시 끊어짐 없이 보고 싶은 욕구가 있다. 이 경우 TV의 화면과 스마트 테이블의 화면이 일치되어야 하는 복잡한 과정을 요구하게 된다. Recently, products that control TVs and home appliances, such as smart tables, have been introduced. If you control all the home appliances in the living room using the screen in the table, there is a desire to watch the video found in the smart table on the TV screen immediately. In this case, it requires a complicated process in which the screen of the TV and the screen of the smart table must match.

또한 개인이 사용하는 노트북이나 PC, 모바일 기기 등 다수의 장비를 동시에 사용하는 경우가 많다. 하나의 기기를 통해 다수의 기기의 화면을 동시에 공유하고, 이용하려는 욕구가 증가하고 있고, 또한 프로젝터의 경우 한 사람이 독점하여 사용하기 때문에 여러 사람이 화면을 동시에 공유, 사용하기 어렵다. 이런 문제점을 극복하고 여러 모니터 혹은 화면을 하나의 장비에 연결된 것처럼 쓰는 장치에 대한 욕구가 증가하고 있다. In addition, many people use multiple devices such as laptops, PCs, and mobile devices. The desire to share and use the screens of multiple devices at the same time through a single device is increasing, and since the projector is used exclusively by one person, it is difficult for several people to share and use the screen at the same time. There is an increasing need for devices that overcome these problems and write multiple monitors or screens as if they were connected to a single device.

본 발명은 스마트 테이블, 스마트폰, MID (Mobile Internet Device) , 노트북 등 컨트롤 기기, 송신 영상표시장치(100b)와 TV, 모니터, 프로젝터 등 화상기기 장비, 수신 영상표시장치(100a)를 동시에 사용하는 경우, 하나의 기기를 통해 다수의 기기의 화면을 동시에 제어 공유하고 이용할 수 있는 방법에 관한 것이다.The present invention uses a smart table, a smart phone, a mobile Internet device (MID), a control device such as a laptop, a transmission image display device 100b and a video device device such as a TV, a monitor, a projector, and a reception image display device 100a. In this case, the present invention relates to a method of simultaneously controlling and sharing screens of a plurality of devices through one device.

한편, 종래의 수신 영상표시장치는 송신 측이 전송한 영상을 종속적으로 그대로 표시할 뿐이다. 예를 들어, 유/무선 HDMI로 영상표시장치와 연결된 수신 영상표시장치는 TV인 경우에도 자체적인 로컬 영상을 표시하지 않고, 모니터와 같이 수신한 영상을 표시할 뿐이다.On the other hand, the conventional reception image display apparatus only displays the image transmitted by the transmitting side as it is. For example, a reception image display apparatus connected to an image display apparatus via wired / wireless HDMI does not display its own local image even when the TV is displayed, but merely displays the received image like a monitor.

하지만, 본 발명의 실시예에 따르면, 수신 영상표시장치는 송신 영상표시장치로부터 수신한 영상 외에 다른 전자기기 또는 방송국 등으로부터 수신하거나 생성한 로컬 영상을 합성하여 표시할 수 있다.However, according to an exemplary embodiment of the present invention, the reception image display apparatus may synthesize and display a local image received or generated from another electronic device or broadcasting station in addition to the image received from the transmission image display apparatus.

한편, 본 발명에 따른 송신 영상표시장치, 예를 들어, 스마트 테이블, 휴대 단말기, TV, 태블릿 PC 등은 다중 모니터를 지원하는 것처럼 작동할 수 있다.Meanwhile, the transmission image display device according to the present invention, for example, a smart table, a portable terminal, a TV, a tablet PC, etc., may operate as if it supports multiple monitors.

도 1은 스마트 테이블과 같이 디스플레이부를 구비하고 다른 전자기기를 제어할 수 있는 송신 영상표시장치와 제어할 대상인 독립적인 화면을 가지는 수신 영상표시장치(TV)에 영상을 전송하는 방법 및 시스템에 대한 개념을 나타낸다. 1 is a concept of a method and system for transmitting an image to a receiving image display apparatus (TV) having a display unit, such as a smart table, and having a display unit capable of controlling other electronic devices and an independent screen to be controlled. Indicates.

이전의 상품은 직접 케이블을 연결하여 TV가 종속적인 형태의 모니터로 작동하거나, 케이블이 없는 무선 방식으로 연결되어도 동일한 종속적인 형태로 작동하는 형태이다. 하지만, 본 발명에 따르면 TV를 독립적인 형태의 영상표시장치로 작동하면서도, 가상적인 클라이언트 디바이스를 생성하여 스마트 테이블과 같은 제어기기를 통해 종속적으로 제어할 수 있다. Earlier products were connected directly by cable, so that the TV acts as a dependent monitor, or even when connected wirelessly without a cable. However, according to the present invention, while operating the TV as an independent image display device, a virtual client device can be created and controlled independently through a controller such as a smart table.

예를 들어 TV를 보면서 스마트 테이블로 동영상 검색을 하고 원하는 동영상을 불러 실행을 할 경우, 스마트 테이블의 종속 화면(가상 화면 - 실제 TV가 제어하는 화면)으로 이 동영상을 넘기면 끊김 없이 이 영상을 TV에서 보게 될 것이다. 실제 동영상은 스마트 테이블에서 재생하시지만, 보는 것은 TV 화면을 통해 볼 수 있다.For example, when watching a TV and searching for a video on a smart table and calling up the desired video, if you pass the video to the subordinate screen of the smart table (virtual screen-the screen controlled by the actual TV), the video is displayed on the TV without interruption. You will see The actual video is played on the smart table, but the video can be seen on the TV screen.

한편, 수신 영상표시장치(100a)와 송신 영상표시장치(100b)가 직접 또는 네트워크로 일대일 연결될 수 있고, 송신 영상표시장치(100b)의 데이터가 수신 영상표시장치(100a)로 전송될 수 있다. 또는, 수신 영상표시장치(100a)와 송신 영상표시장치(100b)는 네트워크 장치 또는 서버(210)를 경유하여 연결될 수 있다.Meanwhile, the reception image display apparatus 100a and the transmission image display apparatus 100b may be directly or one-to-one connected to a network, and data of the transmission image display apparatus 100b may be transmitted to the reception image display apparatus 100a. Alternatively, the reception image display apparatus 100a and the transmission image display apparatus 100b may be connected via a network device or a server 210.

한편, 본 발명의 실시예에 따른 송신 영상표시장치(100b)는 수신 영상표시장치(100a)에 대한 제어를 담당할 수 있다.On the other hand, the transmission image display apparatus 100b according to an embodiment of the present invention may be in charge of controlling the reception image display apparatus 100a.

또한, 1:1 제어 뿐만 아니라 N:1 제어, 다대다 제어가 가능하다.In addition to 1: 1 control, N: 1 control and many-to-many control are possible.

한편, 서버(server)(210)는, 클라이언트 디바이스인 수신 영상표시장치(100a)에 소정 데이터를 전송하는 역할을 수행할 수 있다. 서버(210)는, 영상표시장치(100a, 100b)와 유/무선으로 접속될 수 있으며, 영상표시장치(100b)로부터의 데이터 전송 요청에 따라, 영상표시장치(100a)로 데이터를 전송할 수 있다. 그 외, 영상표시장치(100a, 100b)에 대한 각종 제어 동작을 수행할 수도 있다. Meanwhile, the server 210 may serve to transmit predetermined data to the reception image display apparatus 100a which is a client device. The server 210 may be connected to the image display apparatuses 100a and 100b by wire / wireless, and may transmit data to the image display apparatus 100a in response to a data transmission request from the image display apparatus 100b. . In addition, various control operations may be performed on the image display apparatuses 100a and 100b.

이러한 서버(210)는, 영상표시장치(100)에 근접한 서버로서, 홈 서버(home server)일 수 있다. 특히, 서버(210)는, 스마트 TV에서의 각종 기능들에 대한 신호 처리를 수행할 수 있으며, 이에 따라 처리된 데이터를 영상표시장치(100a)로 전송할 수 있다.The server 210 may be a server adjacent to the image display apparatus 100 and may be a home server. In particular, the server 210 may perform signal processing on various functions of the smart TV, and transmit the processed data to the image display apparatus 100a.

또한, 하나의 서버(210)를 통해, 복수의 영상표시장치에 대한, 신호 처리 및 이에 대한 데이터 제공이 가능하게 된다. In addition, through one server 210, it is possible to provide signal processing and data for the plurality of image display apparatuses.

한편, 상술한 영상표시장치(100a, 100b)는, 고정형 또는 이동형 디지털 방송 수신 가능한 디지털 방송 수신기일 수 있다. Meanwhile, the above-described image display apparatuses 100a and 100b may be digital broadcasting receivers capable of receiving fixed or mobile digital broadcasting.

한편, 본 명세서에서 기술되는 영상표시장치(100a, 100b)는, 방송 영상 표시가 가능한 TV 수상기, 모니터, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.On the other hand, the video display device (100a, 100b) described in this specification is a TV receiver capable of displaying a broadcast image, a monitor, a mobile phone, a smart phone (notebook computer), a digital broadcasting terminal, PDA (Personal) Digital Assistants, Portable Multimedia Players (PMPs), and the like.

또는, 상기 예로 나열하지 않은 디스플레이부를 구비하는 외부 장치일 수 있다. 외부 장치는, 영상표시장치(100)와 유/무선으로 접속될 수 있으며, 영상표시장치(100)와 입력/출력 동작을 수행할 수 있다.Alternatively, it may be an external device having a display unit not listed above. The external device may be connected to the image display apparatus 100 by wire / wireless and perform an input / output operation with the image display apparatus 100.

한편, 일부 실시예에서는 송신 영상표시장치(100b)는, 영상 디스플레이부를 구비하지 않으나, 영상 신호를 송신할 수 있는 DVD(Digital Versatile Disk) 플레이어, 블루레이(Blu-ray) 플레이어, 게임기기, 셋탑 박스 등으로 대체될 수 있다. On the other hand, in some embodiments, the transmission image display apparatus 100b does not include an image display unit, but a digital versatile disk (DVD) player, a blu-ray player, a game device, and a set-top capable of transmitting a video signal. Box or the like.

도 2는 도 1의 영상표시장치의 내부 블록도이다. 도 2에 예시된 영상표시장치(100)는, 수신 영상표시장치(100a)와 송신 영상표시장치(100b) 중 적어도 하나에 대응할 수 있다.FIG. 2 is an internal block diagram of the image display device of FIG. 1. The image display apparatus 100 illustrated in FIG. 2 may correspond to at least one of the reception image display apparatus 100a and the transmission image display apparatus 100b.

도 2를 참조하면, 본 발명의 일실시예에 의한 영상표시장치(100)는, 방송 수신부(105), 네트워크 인터페이스부(130), 외부장치 인터페이스부(135), 저장부(140), 사용자 입력 인터페이스부(150), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 및 전원공급부(190)를 포함할 수 있다. 이 중 방송 수신부(105)는, 튜너(110), 및 복조부(120)를 포함할 수 있다. 한편, 방송 수신부(105)는, 네트워크 인터페이스부(130)를 더 포함할 수도 있다. Referring to FIG. 2, the image display apparatus 100 according to an exemplary embodiment of the present invention may include a broadcast receiver 105, a network interface 130, an external device interface 135, a storage 140, and a user. It may include an input interface unit 150, a control unit 170, a display unit 180, an audio output unit 185, and a power supply unit 190. Among these, the broadcast receiver 105 may include a tuner 110 and a demodulator 120. Meanwhile, the broadcast receiving unit 105 may further include a network interface unit 130.

튜너(110)는, 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널 또는 기저장된 모든 채널에 해당하는 RF 방송 신호를 선택한다. 또한, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다. The tuner 110 selects an RF broadcast signal corresponding to a channel selected by a user or all pre-stored channels among RF (Radio Frequency) broadcast signals received through an antenna. Also, the selected RF broadcast signal is converted into an intermediate frequency signal, a baseband image, or a voice signal.

예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성 신호(CVBS/SIF)로 변환할 수 있다. For example, if the selected RF broadcast signal is a digital broadcast signal, it can be converted into a digital IF signal (DIF). If the selected RF broadcast signal is an analog broadcast signal, it can be converted into an analog baseband image or an audio signal (CVBS / SIF).

한편, 튜너(110)는, 안테나를 통해 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성 신호로 변환할 수 있다. Meanwhile, the tuner 110 may sequentially select RF broadcast signals of all broadcast channels stored through a channel memory function among RF broadcast signals received through an antenna and convert them to intermediate frequency signals or baseband video or audio signals. have.

한편, 영상표시장치(100)가 복수의 튜너를 구비하는 경우, 튜너부로 명명될 수도 있다.Meanwhile, when the image display apparatus 100 includes a plurality of tuners, the image display apparatus 100 may be referred to as a tuner unit.

복조부(120)는, 튜너(110)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. The demodulator 120 receives the digital IF signal DIF converted by the tuner 110 and performs a demodulation operation.

복조부(120)는, 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때, 스트림 신호는 영상 신호, 음성 신호 또는 데이터 신호가 다중화된 신호일 수 있다. The demodulator 120 may output a stream signal TS after performing demodulation and channel decoding. At this time, the stream signal may be a signal in which a video signal, a voice signal, or a data signal is multiplexed.

복조부(120)에서 출력한 스트림 신호는 제어부(170)로 입력될 수 있다. 제어부(170)는 역다중화, 영상/음성 신호 처리 등을 수행한 후, 디스플레이부(180)에 영상을 출력하고, 오디오 출력부(185)로 음성을 출력한다. The stream signal output from the demodulator 120 may be input to the controller 170. After performing demultiplexing, image / audio signal processing, and the like, the controller 170 outputs an image to the display unit 180 and outputs an audio to the audio output unit 185.

외부장치 인터페이스부(135)는 외부 장치와 영상표시장치(100)를 접속할 수 있다. 이를 위해, 외부장치 인터페이스부(135)는, A/V 입출력부(미도시) 또는 무선 통신부(미도시)를 포함할 수 있다. The external device interface unit 135 may connect the external device to the image display device 100. To this end, the external device interface unit 135 may include an A / V input / output unit (not shown) or a wireless communication unit (not shown).

외부장치 인터페이스부(130)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북), 셋탑 박스 등과 같은 외부 장치와 유/무선으로 접속될 수 있으며, 외부 장치와 입력/출력 동작을 수행할 수도 있다. The external device interface unit 130 can be connected to an external device such as a DVD (Digital Versatile Disk), a Blu ray, a game device, a camera, a camcorder, a computer , And may perform an input / output operation with an external device.

또한, 외부장치 인터페이스부(130)는 다른 영상표시장치와도 연결되어 신호 및 데이터를 송수신할 수 있다.In addition, the external device interface unit 130 may be connected to other image display devices to transmit and receive signals and data.

A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 입력받을 수 있다. 한편, 무선 통신부는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. The A / V input / output unit can receive video and audio signals from an external device. Meanwhile, the wireless communication unit can perform short-range wireless communication with other electronic devices.

네트워크 인터페이스부(135)는, 영상표시장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 예를 들어, 네트워크 인터페이스부(135)는, 네트워크를 통해, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. The network interface unit 135 provides an interface for connecting the video display device 100 to a wired / wireless network including the Internet network. For example, the network interface unit 135 can receive, via the network, content or data provided by the Internet or a content provider or a network operator.

한편, 네트워크 인터페이스부(130)는, 네트워크로 연결된 다른 영상표시장치로 제어신호, 데이터 등을 수신할 수 있고, 다른 영상표시장치로부터 제어신호, 데이터 등을 수신할 수 있다. Meanwhile, the network interface unit 130 may receive control signals, data, and the like from another image display device connected through a network, and may receive control signals, data, etc. from another image display device.

한편, 네트워크 인터페이스부(130)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다. 그 외, 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. Meanwhile, the network interface unit 130 may access a predetermined web page through a connected network or another network linked to the connected network. That is, by accessing a predetermined web page through the network, it is possible to send or receive data with the server. In addition, content or data provided by a content provider or a network operator may be received.

또한, 네트워크 인터페이스부(130)는, 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다. In addition, the network interface unit 130 may select and receive a desired application from among applications that are open to the public through the network.

저장부(140)는, 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수도 있다. The storage 140 may store a program for processing and controlling each signal in the controller 170, or may store a signal processed video, audio, or data signal.

또한, 저장부(140)는 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(130)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(140)는, 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다. In addition, the storage 140 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface 135 or the network interface 130. In addition, the storage 140 may store information on a predetermined broadcast channel through a channel storage function.

또한, 저장부(140)는, 외부장치 인터페이스부(135) 또는 네트워크 인터페이스부(130)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다. In addition, the storage 140 may store an application or a list of applications input from the external device interface 135 or the network interface 130.

영상표시장치(100)는, 저장부(140) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.The image display apparatus 100 may reproduce and provide a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage 140 to a user.

도 2는 저장부(140)가 제어부(170)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(140)는 제어부(170) 내에 포함될 수도 있다. 2 illustrates an embodiment in which the storage 140 is provided separately from the controller 170, but the scope of the present invention is not limited thereto. The storage unit 140 may be included in the control unit 170.

사용자 입력 인터페이스부(150)는, 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달한다. The user input interface unit 150 transmits a signal input by the user to the controller 170 or transmits a signal from the controller 170 to the user.

예를 들어, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 사용자 입력 신호를 송신/수신하거나, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 사용자 입력 신호를 제어부(170)에 전달하거나, 사용자의 제스처를 센싱하는 센서부(미도시)로부터 입력되는 사용자 입력 신호를 제어부(170)에 전달하거나, 제어부(170)로부터의 신호를 센서부(미도시)로 송신할 수 있다. (Not shown), such as a power key, a channel key, a volume key, and a set value, from the remote control apparatus 200, (Not shown) that senses a user's gesture to the control unit 170 or transmits a signal from the control unit 170 to the control unit 170 It is possible to transmit it to the sensor unit (not shown).

제어부(170)는, 튜너(110) 또는 복조부(120) 또는 외부장치 인터페이스부(135)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. The control unit 170 demultiplexes the input stream or processes the demultiplexed signals through the tuner 110, the demodulator 120, or the external device interface unit 135, and outputs a video or audio signal. You can create and output.

제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다. The image signal processed by the controller 170 may be input to the display unit 180 and displayed as an image corresponding to the image signal. The video signal processed by the controller 170 may be input to the external output device through the external device interface 135. [

제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부장치 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다. The audio signal processed by the control unit 170 may be output to the audio output unit 185 through audio. In addition, the voice signal processed by the controller 170 may be input to the external output device through the external device interface unit 135.

도 2에는 도시되어 있지 않으나, 제어부(170)는 역다중화부, 영상처리부 등을 포함할 수 있다. 이에 대해서는 도 3를 참조하여 후술한다.Although not shown in FIG. 2, the controller 170 may include a demultiplexer, an image processor, and the like. This will be described later with reference to FIG. 3.

그 외, 제어부(170)는, 영상표시장치(100) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(170)는, 튜너(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다. In addition, the control unit 170 can control the overall operation in the video display device 100. [ For example, the controller 170 may control the tuner 110 to control the tuner 110 to select an RF broadcast corresponding to a channel selected by a user or a pre-stored channel.

또한, 제어부(170)는 사용자 입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다. 특히, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 영상표시장치(100) 내로 다운받을 수 있도록 할 수 있다.In addition, the controller 170 may control the image display apparatus 100 by a user command or an internal program input through the user input interface unit 150. In particular, the user can access a network and download a list of applications or applications desired by the user to the video display device 100.

예를 들어, 제어부(170)는, 사용자 입력 인터페이스부(150)를 통하여 수신한 소정 채널 선택 명령에 따라 선택한 채널의 신호가 입력되도록 튜너(110)를 제어한다. 그리고, 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(170)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다. For example, the controller 170 controls the tuner 110 to input a signal of a selected channel according to a predetermined channel selection command received through the user input interface unit 150. Then, video, audio, or data signals of the selected channel are processed. The controller 170 allows the channel information selected by the user to be output through the display unit 180 or the audio output unit 185 together with the processed image or audio signal.

다른 예로, 제어부(170)는, 네트워크 인터페이스부(130)를 통하여 입력되는 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다. As another example, the controller 170 may output an image signal or an audio signal input through the network interface unit 130 through the display unit 180 or the audio output unit 185.

다른 예로, 제어부(170)는, 사용자 입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다. As another example, the controller 170 may receive an external device image playback command from the external device, for example, a camera or a camcorder, according to an external device image playback command received through the user input interface unit 150. The video signal or the audio signal may be output through the display unit 180 or the audio output unit 185.

한편, 제어부(170)는, 영상을 표시하도록 디스플레이부(180)를 제어할 수 있다. 이때, 디스플레이부(180)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.The controller 170 may control the display 180 to display an image. In this case, the image displayed on the display unit 180 may be a still image or a video, and may be a 2D image or a 3D image.

한편, 제어부(170)는 디스플레이부(180)에 표시되는 영상 중에, 소정 2D 오브젝트에 대해 3D 오브젝트로 생성하여 표시되도록 할 수 있다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다. The controller 170 may generate and display a 3D object with respect to a predetermined 2D object in an image displayed on the display 180. For example, the object may be at least one of a connected web screen (newspaper, magazine, etc.), EPG (Electronic Program Guide), various menus, widgets, icons, still images, moving images, and text.

한편, 제어부(170)는, 촬영부(미도시)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식할 수 있다. 예를 들어, 사용자와 영상표시장치(100)간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이부(180) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.On the other hand, the control unit 170 can recognize the position of the user based on the image photographed from the photographing unit (not shown). For example, the distance (z-axis coordinate) between the user and the image display apparatus 100 can be grasped. In addition, the x-axis coordinates and the y-axis coordinates in the display unit 180 corresponding to the user position may be grasped.

한편, 제어부(170)는, 애플리케이션 보기 항목에 진입하는 경우, 영상표시장치(100) 내 또는 외부 네트워크로부터 다운로드 가능한 애플리케이션 또는 애플리케이션 목록을 표시하도록 제어할 수 있다. On the other hand, when entering the application viewing item, the control unit 170 can control to display a list of applications or applications that can be downloaded from the video display device 100 or from an external network.

제어부(170)는, 다양한 유저 인터페이스와 더불어, 외부 네트워크로부터 다운로드되는 애플리케이션을 설치 및 구동하도록 제어할 수 있다. 또한, 사용자의 선택에 의해, 실행되는 애플리케이션에 관련된 영상이 디스플레이부(180)에 표시되도록 제어할 수 있다.The controller 170 may control to install and run an application downloaded from an external network along with various user interfaces. In addition, by selecting a user, an image related to an executed application may be controlled to be displayed on the display unit 180.

디스플레이부(180)는, 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부장치 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성한다. The display unit 180 converts an image signal, a data signal, an OSD signal processed by the controller 170, or an image signal, data signal, etc. received from the external device interface unit 135 into R, G, and B signals, respectively. Generate a drive signal.

디스플레이부(180)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 또한, 3차원 디스플레이(3D display)가 가능할 수 있다. The display unit 180 may be a PDP, an LCD, an OLED, a flexible display, or a 3D display.

한편, 디스플레이부(180)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.The display unit 180 may be configured as a touch screen and used as an input device in addition to the output device.

오디오 출력부(185)는, 제어부(170)에서 음성 처리된 신호를 입력 받아 음성으로 출력한다. The audio output unit 185 receives the signal processed by the control unit 170 and outputs it as a voice.

전원 공급부(190)는, 영상표시장치(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip,SOC)의 형태로 구현될 수 있는 제어부(170)와, 영상 표시를 위한 디스플레이부(180), 및 오디오 출력을 위한 오디오 출력부(185)에 전원을 공급할 수 있다. The power supply unit 190 supplies power to the entire image display apparatus 100. In particular, power may be supplied to the controller 170, which may be implemented in the form of a System On Chip (SOC), a display unit 180 for displaying an image, and an audio output unit 185 for audio output. Can be.

이를 위해, 전원 공급부(190)는, 교류 전원을 직류 전원으로 변환하는 컨버터(미도시)를 구비할 수 있다. 한편, 예를 들어, 디스플레이부(180)가 다수의 백라이트 램프를 구비하는 액정패널로서 구현되는 경우, 휘도 가변 또는 디밍(dimming) 구동을 위해, PWM 동작이 가능한 인버터(미도시)를 더 구비할 수도 있다.To this end, the power supply unit 190 may include a converter (not shown) for converting the AC power into DC power. Meanwhile, for example, when the display unit 180 is implemented as a liquid crystal panel having a plurality of backlight lamps, an inverter (not shown) capable of PWM operation may be further provided for driving of variable brightness or dimming. It may be.

원격제어장치(200)는, 사용자 입력을 사용자 입력 인터페이스부(150)로 송신한다. 이를 위해, 원격제어장치(200)는, RF(Radio Frequency) 통신, 적외선(IR) 통신, 블루투스(Bluetooth), UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. The remote control apparatus 200 transmits a user input to the user input interface unit 150. To this end, the remote control apparatus 200 may use RF (Radio Frequency) communication, infrared (IR) communication, Bluetooth, Bluetooth (UWB), ZigBee (ZigBee) method and the like.

또한, 원격제어장치(200)는, 사용자 입력 인터페이스부(150)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(200)에서 표시하거나 음성 또는 진동을 출력할 수 있다.In addition, the remote control apparatus 200 may receive an image, an audio or a data signal output from the user input interface unit 150, display it on the remote control apparatus 200 or output an audio or vibration.

한편, 원격제어장치(200)는, 원격제어장치(200)의 움직임에 대응하는 좌표 정보를 영상표시장치(100)로 전송할 수 있다. 이에 의해, 원격제어장치(200)의 움직임에 대응하는 포인터가 영상표시장치의 디스플레이에 표시될 수 있다. 이와 같이, 3D 공간 상의 움직임에 따라 해당 포인터가 이동되어 표시되므로, 이를 3D 포인팅 장치(3D pointing device)라 명명할 수 있다. On the other hand, the remote control device 200 can transmit the coordinate information corresponding to the motion of the remote control device 200 to the video display device 100. [ Thus, a pointer corresponding to the motion of the remote control apparatus 200 can be displayed on the display of the image display apparatus. As such, since the corresponding pointer is moved and displayed according to the movement in the 3D space, this may be referred to as a 3D pointing device.

한편, 도 2에 도시된 영상표시장치(100)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 영상표시장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.Meanwhile, a block diagram of the image display device 100 shown in FIG. 2 is a block diagram for an embodiment of the present invention. Each component of the block diagram may be integrated, added, or omitted according to the specifications of the image display apparatus 100 actually implemented. That is, two or more constituent elements may be combined into one constituent element, or one constituent element may be constituted by two or more constituent elements, if necessary. In addition, the functions performed in each block are intended to illustrate the embodiments of the present invention, and the specific operations and apparatuses do not limit the scope of the present invention.

한편, 영상표시장치(100)는 도 2에 도시된 바와 달리, 도 2의 도시된 튜너부(110)와 복조부(120)를 구비하지 않고, 네트워크 인터페이스부(130) 또는 외부장치 인터페이스부(135)를 통해서, 방송 영상을 수신하고, 이를 재생할 수도 있다.On the other hand, the image display device 100, unlike shown in Figure 2, does not include the tuner 110 and the demodulator 120 shown in Figure 2, the network interface unit 130 or the external device interface unit ( Through 135, a broadcast image may be received and reproduced.

도 3은 도 2의 제어부의 내부 블록도이다.3 is an internal block diagram of the controller of FIG. 2.

도면을 참조하면, 본 발명의 일실시예에 의한 제어부(170)는, 역다중화부(310), 영상 처리부(320), OSD 생성부(340), 믹서(350), 프레임 레이트 변환부(355), 및 포맷터(360)를 포함할 수 있다. 그 외 음성 처리부(미도시), 데이터 처리부(미도시)를 더 포함할 수 있다.Referring to the drawings, the control unit 170 according to an embodiment of the present invention, the demultiplexer 310, the image processor 320, the OSD generator 340, the mixer 350, the frame rate converter 355 ), And a formatter 360. A voice processing unit (not shown), and a data processing unit (not shown).

역다중화부(310)는, 입력되는 스트림을 역다중화한다. 예를 들어, MPEG-2 TS가 입력되는 경우 이를 역다중화하여, 각각 영상, 음성 및 데이터 신호로 분리할 수 있다. 여기서, 역다중화부(310)에 입력되는 스트림 신호는, 튜너(110) 또는 복조부(120) 또는 외부장치 인터페이스부(135)에서 출력되는 스트림 신호일 수 있다.The demultiplexer 310 demultiplexes the input stream. For example, when an MPEG-2 TS is input, it can be demultiplexed into video, audio, and data signals, respectively. Here, the stream signal input to the demultiplexer 310 may be a stream signal output from the tuner 110, the demodulator 120, or the external device interface unit 135.

영상 처리부(320)는, 역다중화된 영상 신호의 영상 처리를 수행할 수 있다. 이를 위해, 영상 처리부(320)는, 영상 디코더(325), 및 스케일러(335)를 구비할 수 있다. The image processor 320 may perform image processing of the demultiplexed image signal. For this, the image processing unit 320 may include a video decoder 325 and a scaler 335.

영상 디코더(325)는, 역다중화된 영상신호를 복호화하며, 스케일러(335)는, 복호화된 영상신호의 해상도를 디스플레이부(180)에서 출력 가능하도록 스케일링(scaling)을 수행한다.The image decoder 325 decodes the demultiplexed image signal, and the scaler 335 performs scaling to output the resolution of the decoded image signal on the display unit 180.

영상 디코더(325)는 다양한 규격의 디코더를 구비하는 것이 가능하다. The video decoder 325 can include a decoder of various standards.

한편, 영상 처리부(320)에서 복호화된 영상 신호는, 믹서(350)로 입력되게 된다.On the other hand, the video signal decoded by the image processor 320 is input to the mixer 350.

프로세서(330)는, 영상표시장치(100) 내 또는 제어부(170) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 프로세서(330)는 튜너(110)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다. The processor 330 may control the overall operation in the image display apparatus 100 or in the control unit 170. [ For example, the processor 330 may control the tuner 110 to select a channel selected by the user or an RF broadcast corresponding to a previously stored channel.

또한, 프로세서(330)는, 사용자 입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(100)를 제어할 수 있다. In addition, the processor 330 may control the image display apparatus 100 by a user command or an internal program input through the user input interface unit 150.

또한, 프로세서(330)는, 네트워크 인터페이스부(135) 또는 외부장치 인터페이스부(130)와의 데이터 전송 제어를 수행할 수 있다. In addition, the processor 330 may perform data transfer control with the network interface unit 135 or the external device interface unit 130.

또한, 프로세서(330)는, 제어부(170) 내의 역다중화부(310), 영상 처리부(320), OSD 생성부(340) 등의 동작을 제어할 수 있다. The processor 330 may control operations of the demultiplexing unit 310, the image processing unit 320, the OSD generating unit 340, and the like in the controller 170.

OSD 생성부(340)는, 사용자 입력에 따라 또는 자체적으로 OSD 신호를 생성한다. 예를 들어, 사용자 입력 신호 또는 제어 신호에 기초하여, 디스플레이부(180)의 화면에 각종 정보를 그래픽(Graphic)이나 텍스트(Text)로 표시하기 위한 신호를 생성할 수 있다. 생성되는 OSD 신호는, 영상표시장치(100)의 사용자 인터페이스 화면, 다양한 메뉴 화면, 위젯, 아이콘 등의 다양한 데이터를 포함할 수 있다. The OSD generator 340 generates an OSD signal according to a user input or itself. For example, a signal for displaying various types of information on a screen of the display unit 180 as a graphic or text may be generated based on a user input signal or a control signal. The generated OSD signal may include various data such as a user interface screen of the video display device 100, various menu screens, a widget, and an icon.

예를 들어, OSD 생성부(340)는, 방송 영상의 자막 또는 EPG에 기반한 방송 정보를 표시하기 위한 신호를 생성할 수 있다. For example, the OSD generator 340 may generate a signal for displaying broadcast information based on subtitles or EPGs of a broadcast image.

한편, OSD 생성부(340)는, 오에스디 신호 또는 그래픽 신호를 생성하므로, 이를 그래픽 처리부라 명명할 수도 있다. On the other hand, since the OSD generation unit 340 generates an OSD signal or a graphic signal, it may be referred to as a graphic processing unit.

믹서(350)는, OSD 생성부(340)에서 생성된 OSD 신호와 영상처리부(220)에서 영상 처리된 복호화된 영상 신호를 믹싱할 수 있다. 믹싱된 신호는 포맷터(360)에 제공된다. 복호화된 방송 영상 신호 또는 외부 입력 신호와 OSD 신호가 믹싱됨으로 인하여, 방송 영상 또는 외부 입력 영상 상에 OSD가 오버레이 되어 표시될 수 있게 된다.The mixer 350 may mix the OSD signal generated by the OSD generator 340 and the decoded image signal processed by the image processor 220. The mixed signal is provided to the formatter 360. Since the decoded broadcast video signal or the external input signal and the OSD signal are mixed, the OSD may be overlaid and displayed on the broadcast video or the external input video.

프레임 레이트 변환부(Frame Rate Conveter;FRC)(355)는, 입력되는 영상의 프레임 레이트를 변환할 수 있다. 한편, 프레임 레이트 변환부(350)는, 별도의 프레임 레이트 변환 없이, 그대로 출력하는 것도 가능하다. The frame rate converter (FRC) 355 may convert the frame rate of the input video. On the other hand, the frame rate converter 350 can output the frame rate without conversion.

포맷터(360)는, 프레임 레이트 변환부(355)의 출력 신호를 입력받아, 디스플레이부(180)에 적합하도록 신호의 포맷을 변경하여 출력한다. 예를 들어, R,G,B 데이터 신호를 출력할 수 있으며, 이러한 R,G,B 데이터 신호는, 낮은 전압 차분 신호(Low voltage differential signaling, LVDS) 또는 mini-LVDS로 출력될 수 있다.The formatter 360 receives the output signal of the frame rate converter 355 and changes the format of the signal to be suitable for the display unit 180 and outputs the signal. For example, the R, G, and B data signals may be output as low voltage differential signaling (LVDS) signals or mini-LVDS signals.

한편, 포맷터(360)는, 3D 영상 신호의 포맷을 변경하거나, 2D 영상을 3D 영상으로 전환할 수 있다. The formatter 360 may change the format of the 3D video signal or convert the 2D video into a 3D video.

한편, 제어부(170) 내의 음성 처리부(미도시)는, 역다중화된 음성 신호의 음성 처리를 수행할 수 있다. 이를 위해 음성 처리부(미도시)는 다양한 디코더를 구비할 수 있다.On the other hand, the audio processing unit (not shown) in the control unit 170 can perform the audio processing of the demultiplexed audio signal. To this end, the voice processing unit (not shown) may include various decoders.

또한, 제어부(170) 내의 음성 처리부(미도시)는, 베이스(Base), 트레블(Treble), 음량 조절 등을 처리할 수 있다. In addition, the audio processing unit (not shown) in the control unit 170 can process a base, a treble, a volume control, and the like.

제어부(170) 내의 데이터 처리부(미도시)는, 역다중화된 데이터 신호의 데이터 처리를 수행할 수 있다. 예를 들어, 역다중화된 데이터 신호가 부호화된 데이터 신호인 경우, 이를 복호화할 수 있다. 부호화된 데이터 신호는, 각 채널에서 방영되는 방송프로그램의 시작시간, 종료시간 등의 방송정보를 포함하는 EPG(Electronic Program Guide) 정보일 수 있다. The data processing unit (not shown) in the control unit 170 can perform data processing of the demultiplexed data signal. For example, if the demultiplexed data signal is a coded data signal, it can be decoded. The encoded data signal may be EPG (Electronic Program Guide) information including broadcast information such as a start time and an end time of a broadcast program broadcasted in each channel.

한편, 도 3에 도시된 제어부(170)의 블록도는 본 발명의 일실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 제어부(170)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.Meanwhile, the block diagram of the controller 170 shown in FIG. 3 is a block diagram for an embodiment of the present invention. Each component of the block diagram can be integrated, added, or omitted according to the specifications of the control unit 170 actually implemented.

특히, 프레임 레이트 변환부(350), 및 포맷터(360)는 제어부(170) 내에 마련되지 않고, 각각 별도로 구비될 수도 있다.In particular, the frame rate converter 350 and the formatter 360 are not provided in the controller 170, but may be separately provided.

도 4는 본 발명의 일실시예에 따른 영상표시장치, 더욱 자세히는 휴대 단말기의 전면을 예시한 도면이고, 도 5는 본 발명의 일실시예에 따른 휴대 단말기의 내부 블록도이다.4 is a diagram illustrating an image display apparatus according to an embodiment of the present invention, more specifically, a front surface of the portable terminal, and FIG. 5 is an internal block diagram of the portable terminal according to an embodiment of the present invention.

도 1 내지 도 3을 참조하여 상술한 바와 같이, 본 발명의 실시예에 따른 영상표시장치는 디스플레이부를 구비한 다양한 전자기기들이 포함될 수 있다. 이하에서는 도 1 내지 도 3을 참조하여 설명한 부분과 동일하거나 유사한 내용은 생략하거나 간략히 설명한다.As described above with reference to FIGS. 1 to 3, an image display apparatus according to an exemplary embodiment of the present invention may include various electronic devices including a display unit. Hereinafter, the same or similar contents as those described with reference to FIGS. 1 to 3 will be omitted or briefly described.

본 명세서에서 기술되는 휴대 단말기는 태블릿 컴퓨터(tablet computer), 휴대폰, 스마트폰(smart phone), 노트북 컴퓨터(notebook computer), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 디지털방송용 단말기, 네비게이션 등이 포함할 수 있다. 예를 들어, 도 4의 (a)와 같이 스마트폰, 도 4의 (b)와 같이 태블릿(tablet) PC 등이 해당될 수 있다.The portable terminal described in the present specification may be a tablet computer, a mobile phone, a smart phone, a notebook computer, a personal digital assistant (PDA), a portable multimedia player (PMP), a digital broadcasting terminal, and a navigation device. And the like. For example, a smart phone as shown in FIG. 4A, a tablet PC as shown in FIG. 4B may correspond.

한편, 본 명세서에서 기술되는 휴대 단말기는, 유선 또는 무선 인터넷 기능의 지원으로 인터넷 및 컴퓨터에 접속되어, 이메일, 웹브라우징, 뱅킹 또는 게임 등의 기능도 수행가능하다. 또한, 음성 및 영상 통화 기능도 수행가능하며, 통화모드는 VoIP(Voice over Internet Protocol)에 따른 인터넷망, 이동통신망 등을 이용하여 수행될 수 있다. On the other hand, the portable terminal described herein is connected to the Internet and a computer with the support of a wired or wireless Internet function, it is also possible to perform functions such as email, web browsing, banking or gaming. In addition, voice and video call functions can be performed, and the call mode can be performed by using an Internet network, a mobile communication network, etc. according to Voice over Internet Protocol (VoIP).

도 5를 참조하면, 본 발명의 실시예에 따른 휴대 단말기는, 사용자 인터페이스부(510), AV(Audio/Video) 입력부(520), 네트워크 인터페이스부(530), 외부장치 인터페이스부(535), 센서부(540), 저장부(550), 제어부(560), 디스플레이부(570), 오디오 출력부(580), 및 전원 공급부(590)를 포함할 수 있다. 이와 같은 구성요소들은 실제 응용에서 구현될 때 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다.Referring to FIG. 5, a portable terminal according to an exemplary embodiment of the present invention may include a user interface unit 510, an audio / video input unit 520, a network interface unit 530, an external device interface unit 535, The sensor unit 540 may include a storage unit 550, a control unit 560, a display unit 570, an audio output unit 580, and a power supply unit 590. Such components may be configured by combining two or more components into one component, or by dividing one or more components into two or more components as necessary when implemented in an actual application.

사용자 입력부(510)는 사용자가 휴대 단말기의 동작 제어를 위하여 입력하는 키 입력 데이터를 발생시킨다. 사용자 입력부(510)는 사용자의 푸시 또는 터치 조작에 의해 명령 또는 정보를 입력받을 수 있는 키 패드(key pad), 스위치(switch), 터치 스크린(정압/정전) 등으로 구성될 수 있다. 또한, 사용자 입력부(510)는 키를 회전시키는 조그 휠 또는 조그 방식이나 조이스틱과 같이 조작하는 방식이나, 핑거 마우스 등으로 구성될 수 있다.The user input unit 510 generates key input data input by the user for controlling the operation of the portable terminal. The user input unit 510 may be configured of a key pad, a switch, a touch screen (static pressure / capacitance), etc., which may receive a command or information by a user's push or touch operation. In addition, the user input unit 510 may be configured as a jog wheel for rotating a key, a jog method or a manipulation method such as a joystick, or a finger mouse.

AV(Audio/Video) 입력부(520)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라와 마이크 등이 포함될 수 있다. 카메라는 영상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 그리고, 처리된 화상 프레임은 디스플레이부(570)에 표시될 수 있다.The AV / Audio input unit 520 is for inputting an audio signal or a video signal, and may include a camera and a microphone. The camera processes image frames such as still images or moving images obtained by an image sensor in a video call mode or a photographing mode. The processed image frame may be displayed on the display unit 570.

카메라에서 처리된 화상 프레임은 저장부(550)에 저장되거나, 네트워크 인터페이스부(530) 또는 외부장치 인터페이스부(535)를 통하여 외부로 전송될 수 있다. 카메라는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.The image frame processed by the camera may be stored in the storage unit 550 or transmitted to the outside through the network interface unit 530 or the external device interface unit 535. Two or more cameras may be provided according to the configuration of the terminal.

마이크는 통화모드 또는 녹음모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 입력받아 전기적인 음성 데이터로 처리한다. The microphone receives an external sound signal by a microphone in a call mode, a recording mode, a voice recognition mode, etc., and processes it into electrical voice data.

네트워크 인터페이스부(530)는, 휴대 단말기를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. The network interface unit 530 provides an interface for connecting the portable terminal to a wired / wireless network including an internet network.

네트워크 인터페이스부(530)는, 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다. 특히, 휴대 단말기에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 휴대 단말기에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.The network interface unit 530 may transmit or receive data with another user or another electronic device through the connected network or another network linked to the connected network. In particular, some content data stored in the portable terminal may be transmitted to another user or another electronic device selected in advance in the portable terminal or a selected electronic device.

한편, 네트워크 인터페이스부(530)는, 도 1 내지 도 3을 참조하여 설명한 것과 같이, 소정 웹 페이지에 접속할 수 있고, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다. Meanwhile, as described with reference to FIGS. 1 to 3, the network interface unit 530 may access a predetermined web page and transmit data to the Internet or a content provider or a network operator.

한편, 네트워크 인터페이스부(530)는, 이동통신 네트워크에 접속하고, 음성 및 영상 통화를 위한 이동통신부를 구비할 수 있다. 이동통신부는 이동통신 네트워크 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 무선 신호는, 음성 호 신호, 영상 통화 호 신호, 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. Meanwhile, the network interface unit 530 may be connected to a mobile communication network and include a mobile communication unit for voice and video call. The mobile communication unit transmits and receives a wireless signal with at least one of a base station, an external terminal, and a server on a mobile communication network. Here, the wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call signal, or a text / multimedia message.

또한, 휴대 단말기는 유무선 인터넷 네트워크를 통하여 방송과 관련된 신호를 수신할 수 있으며, 방송 수신을 위한 별도의 방송수신부(미도시)를 더 구비할 수 있다.In addition, the portable terminal may receive a signal related to a broadcast through a wired or wireless Internet network, and may further include a separate broadcast receiver (not shown) for broadcast reception.

방송수신부(미도시)는 외부로부터 방송 신호 및 방송관련 정보 중 적어도 하나를 수신할 수 있으며 신호의 수신 및 신호 처리를 위한 튜너, 복조부, 역다중화부, 디코더 등을 포함할 수 있다. 튜너, 복조부, 역다중화부, 디코더 등에 대해서는 도 1 내지 도 3을 참조하여 설명하였다. The broadcast receiver (not shown) may receive at least one of a broadcast signal and broadcast related information from the outside, and may include a tuner, a demodulator, a demultiplexer, a decoder, and the like, for receiving and processing a signal. A tuner, a demodulator, a demultiplexer, a decoder, and the like have been described with reference to FIGS. 1 to 3.

외부장치 인터페이스부(535)는 외부 장치와 휴대 단말기를 접속할 수 있다. 이를 위해, 외부장치 인터페이스부(135)는, A/V 입출력부(미도시) 또는 무선 통신부(미도시)를 포함할 수 있다. The external device interface unit 535 may connect the external device to the portable terminal. To this end, the external device interface unit 135 may include an A / V input / output unit (not shown) or a wireless communication unit (not shown).

또한, 외부장치 인터페이스부(535)는 도 1 내지 도 3을 참조하여 상술한 외부 장치 이외에도 휴대 단말기에 연결되는 모든 외부기기와의 인터페이스 역할을 수행한다. 휴대 단말기에 연결되는 외부기기의 예로는, 유/무선 헤드셋, 외부 충전기, 유/무선 데이터 포트, 메모리 카드(Memory card), SIM(Subscriber Identification Module) 카드, UIM(User Identity Module) 카드 등과 같은 카드 소켓, 오디오 I/O(Input/Output) 단자, 비디오 I/O(Input/Output) 단자, 이어폰 등이 있다. 외부장치 인터페이스부(535)는 이러한 외부 기기로부터 데이터를 전송받거나 전원을 공급받아 휴대 단말기 내부의 각 구성 요소에 전달할 수 있고, 휴대 단말기 내부의 데이터가 외부 기기로 전송되도록 할 수 있다.In addition, the external device interface unit 535 serves as an interface with all external devices connected to the portable terminal in addition to the external device described above with reference to FIGS. 1 to 3. Examples of external devices connected to a mobile terminal include a wired / wireless headset, an external charger, a wired / wireless data port, a memory card, a subscriber identification module (SIM) card, a user identity module (UIM) card, and the like. Sockets, audio I / O (Input / Output) terminals, video I / O (Input / Output) terminals, and earphones. The external device interface unit 535 may receive data or power from the external device and transmit the data to each component inside the mobile terminal, and may transmit the data inside the mobile terminal to the external device.

한편, 제어부(560)는 네트워크 인터페이스부(530) 또는 외부장치 인터페이스부(535)를 통하여 연결된 다른 전자기기로 사용자의 명령 또는 프로그램에 의한 제어 신호를 송신하거나 허락된 전자기기로부터 수신되는 제어 신호에 기초한 명령을 수행할 수 있다. 예를 들어, 영상표시장치를 제어하거나, 홈 네트워크로 연결된 PC를 이용한 예약 작업을 수행하거나, 스마트 냉장고의 내용물을 확인할 수 있으며, 가족 구성원의 스마트 폰으로부터 메시지 또는 명령 등 각종 신호를 수신할 수 있다. Meanwhile, the controller 560 transmits a control signal by a user's command or program to another electronic device connected through the network interface unit 530 or the external device interface unit 535 or receives a control signal received from an allowed electronic device. You can perform a command based on that. For example, it is possible to control an image display device, perform a reservation operation using a PC connected to a home network, check the contents of a smart refrigerator, and receive various signals such as a message or a command from a smart phone of a family member. .

센서부(540)는 휴대 단말기의 위치, 사용자 접촉 유무 등과 같이 휴대 단말기의 현 상태를 감지하여 휴대 단말기의 동작을 제어하기 위한 센싱 신호를 발생시킨다.The sensor unit 540 generates a sensing signal for controlling the operation of the portable terminal by detecting the current state of the portable terminal such as the position of the portable terminal, the presence or absence of user contact.

센서부(540)는 감지센서, 압력센서, 및 모션 센서 등을 포함할 수 있다. 감지센서는 휴대 단말기로 접근하는 물체나, 휴대 단말기의 근방에 존재하는 물체의 유무 등을 기계적 접촉이 없이 검출할 수 있도록 한다. 감지센서는, 교류자계의 변화나 정자계의 변화를 이용하거나, 혹은 정전용량의 변화율 등을 이용하여 근접물체를 검출할 수 있다. 감지센서는 구성 태양에 따라 2개 이상이 구비될 수 있다.The sensor unit 540 may include a detection sensor, a pressure sensor, and a motion sensor. The sensor may detect the presence or absence of an object approaching the portable terminal or an object present in the vicinity of the portable terminal without mechanical contact. The detection sensor can detect the proximity object by using a change in an alternating magnetic field or a change in a static magnetic field, or by using a change rate of capacitance. Two or more detection sensors may be provided according to the configuration aspect.

압력센서는 휴대 단말기에 압력이 가해지는지 여부와, 그 압력의 크기 등을 검출할 수 있다. 압력센서는 사용환경에 따라 휴대 단말기에서 압력의 검출이 필요한 부위에 설치될 수 있다. 만일, 압력센서가 디스플레이부(570)에 설치되는 경우, 압력센서에서 출력되는 신호에 따라, 디스플레이부(570)를 통한 터치 입력과, 터치 입력보다 더 큰 압력이 가해지는 압력터치 입력을 식별할 수 있다. 또한, 압력센서에서 출력되는 신호에 따라, 압력터치 입력시 디스플레이부(570)에 가해지는 압력의 크기도 알 수 있다. The pressure sensor can detect whether pressure is applied to the portable terminal, the magnitude of the pressure, and the like. The pressure sensor may be installed at a portion requiring a pressure detection in the portable terminal according to the use environment. If the pressure sensor is installed in the display unit 570, a touch input through the display unit 570 and a pressure touch input to which a greater pressure is applied than the touch input may be identified according to a signal output from the pressure sensor. Can be. In addition, according to the signal output from the pressure sensor, it can also know the magnitude of the pressure applied to the display unit 570 when the pressure touch input.

모션 센서는 가속도 센서, 자이로 센서 등을 이용하여 휴대 단말기의 위치나 움직임 등을 감지한다. 모션 센서에 사용될 수 있는 가속도 센서는 어느 한 방향의 가속도 변화에 대해서 이를 전기 신호로 바꾸어 주는 소자로서, 자이로 센서는 각속도 및 기준 방향에 대해 돌아간 방향을 감지할 수 있으며, 휴대 단말기의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있다. 가속도 센서에는, 휴대 단말기의 이동속도 등에 관한 정보를 센싱할 수 있다. 가속도 센서는 보통 2축이나 3축을 하나의 패키지에 실장하여 구성되며, 사용 환경에 따라서는 Z축 한 축만 필요한 경우도 있다. 따라서, 어떤 이유로 Z축 방향 대신 X축 또는 Y축 방향의 가속도 센서를 써야 할 경우에는 별도의 조각 기판을 사용하여 가속도 센서를 주 기판에 세워서 실장할 수도 있다.The motion sensor detects the position or movement of the portable terminal using an acceleration sensor and a gyro sensor. An acceleration sensor that can be used in a motion sensor is an element that converts an acceleration change in one direction into an electrical signal. The gyro sensor can detect the direction returned to the angular velocity and the reference direction, and information on the operation of the mobile terminal. Can be sensed based on the x, y, and z axes. The acceleration sensor can sense information regarding a moving speed of the portable terminal. Acceleration sensors are usually constructed by mounting two or three axes in one package. Depending on the usage environment, only one axis of Z axis is required. Therefore, when the acceleration sensor in the X-axis direction or the Y-axis direction is used instead of the Z-axis direction for some reason, the acceleration sensor may be mounted on the main substrate by using a separate piece substrate.

저장부(550)는 제어부(560) 내의 각 신호 처리 및 제어를 위한 프로그램, 플랫폼, 애플리케이션이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수도 있다.The storage unit 550 may store a program, a platform, and an application for each signal processing and control in the controller 560, or may store a signal processed image, audio, or data signal.

한편, 휴대 단말기는 저장부(550) 내에 저장되어 있는 컨텐츠 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.On the other hand, the portable terminal can provide a user with a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage unit 550.

또한, 저장부(550)는 외부장치 인터페이스부(535) 또는 네트워크 인터페이스부(530)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다.In addition, the storage unit 550 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface unit 535 or the network interface unit 530.

저장부(550)는 예를 들어 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. The storage unit 550 may be, for example, a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, an SD or XD memory). Etc.), RAM, and ROM (EEPROM, etc.) may include at least one type of storage medium.

한편, 도 5는 저장부(550)가 제어부(560)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(550)는 제어부(560) 내에 포함될 수도 있다. 5 illustrates an embodiment in which the storage unit 550 is provided separately from the control unit 560, the scope of the present invention is not limited thereto. The storage unit 550 may be included in the controller 560.

제어부(560)는, 휴대 단말기 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(560)는 사용자 인터페이스부(510)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 휴대 단말기를 제어할 수 있다. The controller 560 may control overall operations in the portable terminal. For example, the controller 560 may control the portable terminal by a user command or an internal program input through the user interface 510.

제어부(560)는, 수신되는 신호에 기초하여 영상 또는 음성이 디스플레이부(570) 또는 오디오 출력부(580)를 통하여 출력될 수 있도록 한다. The controller 560 allows an image or an audio to be output through the display unit 570 or the audio output unit 580 based on the received signal.

다른 예로, 제어부(560)는, 사용자 인터페이스부(510)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(535)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(570) 또는 오디오출력부(580)를 통해 출력될 수 있도록 한다. As another example, the controller 560 may be provided from an external device, for example, a camera or a camcorder, input through the external device interface unit 535 according to an external device image playback command received through the user interface unit 510. The video signal or the audio signal may be output through the display unit 570 or the audio output unit 580.

한편, 제어부(560)는, 영상 통화 모드시 통화 상대방의 영상, 사용자의 영상을 사용자의 설정에 따라 표시하도록 디스플레이부(570)를 제어할 수 있으며, 수신되는 통화 상대방의 음성 신호에 기초한 음성을 오디오출력부(580)가 출력하도록 제어할 수 있다. Meanwhile, the controller 560 may control the display unit 570 to display the video of the call counterpart and the video of the user according to the user's setting in the video call mode, and to output a voice based on the received voice signal of the call counterpart. The audio output unit 580 may be controlled to output.

또한, 제어부(560)는, 컨텐츠를 재생하도록 제어할 수 있다. 이때의 컨텐츠는, 휴대 단말기 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로부터 입력되는 외부 입력 컨텐츠일 수 있다. 컨텐츠는, 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 중 적어도 하나일 수 있다.In addition, the controller 560 may control to reproduce the content. The content at this time may be content stored in the mobile terminal, received broadcast content, or external input content input from the outside. The content may be at least one of a broadcast image, an external input image, an audio file, a still image, a connected web screen, and a document file.

또한, 제어부(560)는 터치 입력 신호의 패턴에 기초하여 터치 입력이 알파벳, 숫자, 기호 등 문자 입력에 해당하는지 판단할 수 있다. 제어부(560)는 데이터 베이스에 기초하여 터치 입력의 궤적과 대응하는 문자를 확인할 수 있다. 데이터 베이스는 한글, 영어, 중국어, 일본어, 숫자, 기호 등을 포함하며, 제어부(560) 또는 저장부(550)에 저장될 수 있다.In addition, the controller 560 may determine whether the touch input corresponds to a character input such as alphabet, number, or symbol based on the pattern of the touch input signal. The controller 560 may check a character corresponding to the trajectory of the touch input based on the database. The database includes Korean, English, Chinese, Japanese, numbers, symbols, and the like, and may be stored in the controller 560 or the storage 550.

제어부(560)는, 다양한 유저 인터페이스와 더불어, 외부 네트워크로부터 다운로드되는 애플리케이션을 설치 및 구동하도록 제어할 수 있다. 또한, 사용자의 선택에 의해, 실행되는 애플리케이션에 관련된 영상이 디스플레이부(570)에 표시되도록 제어할 수 있다. The controller 560 may control to install and run an application downloaded from an external network along with various user interfaces. In addition, by selecting a user, an image related to an application to be executed may be controlled to be displayed on the display unit 570.

한편, 제어부(560)는 실시예에 따라서는, 도 3에서 예시된 제어부에 포함되는 구성 요소 중 적어도 일부를 포함하여 구성될 수 있다.The controller 560 may be configured to include at least some of the components included in the controller illustrated in FIG. 3 according to an embodiment.

본 발명의 실시예들에 따른 휴대 단말기 중 임의의 어느 하나의 플랫폼은, 상술한 다양한 동작을 수행하기 위해, OS 기반의 소프트웨어를 구비할 수 있다. 한편, 플랫폼은 제어부 또는 별도의 프로세서에 프로그램 형태로 구비되거나, 저장부에 저장될 수 있다.The platform of any one of the portable terminals according to the embodiments of the present invention may include OS-based software in order to perform the various operations described above. The platform may be provided in the form of a program in the control unit or a separate processor, or may be stored in the storage unit.

본 발명의 실시예들에 따른 휴대 단말기 중 임의의 어느 하나의 플랫폼은, OS 커널(OS Kernel), OS 커널 상의 드라이버(Driver), 미들웨어(Middleware), 프레임워크(Framework), 애플리케이션층(Application)을 포함할 수 있다.The platform of any one of the portable terminals according to the embodiments of the present invention may include an OS kernel, a driver on the OS kernel, middleware, a framework, and an application layer. It may include.

OS 커널은, 유닉스 기반(리눅스), 윈도우 기반 등 다양한 운영체제(OS) 기반의 커널로 구현될 수 있다. 또한, OS 커널은, 공개(open)된 OS 커널로서, 다른 전자기기 등에서 사용가능한 범용일 수 있다. The OS kernel may be implemented as a kernel based on various operating systems (OS), such as Unix-based (Linux) and Windows-based. Also, the OS kernel is an open OS kernel and may be general purpose that can be used in other electronic devices.

디스플레이부(570)는, 제어부(560)에서 처리된 영상 신호, 데이터 신호, 또는 네트워크 인터페이스부(530), 외부장치 인터페이스부(535)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성한다.The display unit 570 may display an image signal, a data signal processed by the controller 560, or an image signal, data signal, etc. received by the network interface unit 530 or the external device interface unit 535, respectively. The drive signal is generated by converting into a B signal.

디스플레이부(570)는 LCD(liquid crystal display), OLED(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 등이 가능할 수 있다. The display unit 570 may be a liquid crystal display (LCD), an organic light-emitting diode (OLED), a flexible display, a 3D display, or the like.

한편, 디스플레이부(570)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.The display unit 570 may be configured as a touch screen and used as an input device in addition to the output device.

오디오출력부(580)는 호신호 수신, 통화 모드 또는 녹음 모드, 음성인식 모드, 방송수신 모드 등에서 수신되거나 저장된 오디오 데이터를 출력한다. 또한, 오디오출력부(580)는 휴대 단말기에서 수행되는 기능, 예를 들어, 호신호 수신음, 효과음 등과 관련된 음향 신호를 출력한다. 이러한 오디오출력부(180)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The audio output unit 580 outputs audio data received or stored in a call signal reception, a call mode or a recording mode, a voice recognition mode, a broadcast reception mode, and the like. In addition, the audio output unit 580 outputs a sound signal related to a function performed in the portable terminal, for example, a call signal reception sound and an effect sound. The audio output unit 180 may include a speaker, a buzzer, and the like.

한편, 전원 공급부(590)는 휴대 단말기 전반에 걸쳐 해당 전원을 공급한다.On the other hand, the power supply unit 590 supplies the corresponding power throughout the portable terminal.

한편, 도 5를 참조하여 설명한 이와 같은 구성의 휴대 단말기는 유무선 통신 시스템, 위성 기반 통신 시스템을 포함할 수 있고, 프레임(frame) 또는 패킷(packet)을 통하여 데이터(data)를 전송할 수 있는 통신 시스템에서 동작 가능하도록 구성될 수 있다.On the other hand, the mobile terminal having such a configuration described with reference to FIG. 5 may include a wired / wireless communication system and a satellite-based communication system, and may transmit data through a frame or a packet. It can be configured to be operable in.

도 6은 본 발명의 일실시예에 따른 영상표시장치 시스템을 개략적으로 나타낸 도면이다. 더욱, 자세히는, 본 발명의 실시예에 따른 휴대 단말기 중 임의의 어느 하나가 제3의 디바이스들과 통신하는 과정을 설명하기 위한 도면이다. 도 6에 도시된 휴대 단말기는, 전술하여 설명한 본 발명의 실시예들에 의한 휴대 단말기 중 어느 하나에 대응할 수가 있다.6 is a schematic view of an image display device system according to an embodiment of the present invention. Further, in detail, any one of the portable terminal according to an embodiment of the present invention for explaining the process of communicating with the third device. The portable terminal illustrated in FIG. 6 may correspond to any one of the portable terminals according to the embodiments of the present invention described above.

도 6에 도시된 바와 같이, 본 발명의 일실시예에 의한 휴대 단말기는 네트워크 서버(610) 또는 외부장치(620)와 통신할 수 있다.As illustrated in FIG. 6, the mobile terminal according to an embodiment of the present invention may communicate with the network server 610 or the external device 620.

한편, 휴대 단말기는 네트워크 서버(610)와 통신할 수 있다. 네트워크 서버(610)는 임의의 네트워크를 통하여 휴대 단말기와 신호를 송수신할 수 있는 장치이다. 또한, 네트워크 서버(610)는 인터넷 네트워크를 통하여 휴대 단말기로 컨텐츠 또는 서비스를 제공할 수 있는 장치일 수 있다. 컨텐츠 제공자(CP) 또는 서비스 제공자(SP)는 네트워크 서버를 이용하여 휴대 단말기로 컨텐츠 및 서비스를 제공할 수 있다.Meanwhile, the mobile terminal may communicate with the network server 610. The network server 610 is a device capable of transmitting and receiving signals with a mobile terminal through any network. In addition, the network server 610 may be a device that can provide content or services to the mobile terminal through the Internet network. The content provider CP or the service provider SP may provide content and services to the mobile terminal using a network server.

한편, 휴대 단말기는 외부장치(620)와 통신할 수 있다. 외부장치(620)는 유선 또는 무선으로 휴대 단말기와 직접 신호를 송수신할 수 있는 장치이다. 일예로, 외부장치(620)는 사용자가 사용하는 미디어 저장장치 또는 재생장치일 수 있다. 즉, 외부장치(620)는 예를 들어 휴대 전화기, 디지털 카메라, DVD 또는 블루레이 플레이어, 퍼스널 컴퓨터, TV, 냉장고, 에어컨, 세탁기, 조리기기 등에 해당할 수 있다.Meanwhile, the portable terminal can communicate with the external device 620. The external device 620 is a device capable of directly transmitting and receiving a signal with a mobile terminal by wire or wirelessly. For example, the external device 620 may be a media storage device or a playback device used by a user. That is, the external device 620 may correspond to, for example, a mobile phone, a digital camera, a DVD or a Blu-ray player, a personal computer, a TV, a refrigerator, an air conditioner, a washing machine, a cooking appliance, and the like.

네트워크 서버(610) 또는 외부장치(620)는, 휴대 단말기로 영상신호를 포함하는 신호를 전송할 수 있다. 휴대 단말기는 입력되는 신호에 포함되는 영상신호에 기초하는 영상, 및 음성 신호에 기초하는 음성을 출력할 수 있다. 또한, 휴대 단말기는 네트워크 서버(610)에서 휴대 단말기로 전송하는 신호를 외부장치(620)로 전송할 수 있다.The network server 610 or the external device 620 may transmit a signal including an image signal to the portable terminal. The portable terminal may output an image based on an image signal included in an input signal and an audio based on an audio signal. In addition, the portable terminal may transmit a signal transmitted from the network server 610 to the portable terminal to the external device 620.

또한, 본 발명에 따른 휴대 단말기는 네트워크로 연결된 외부장치(620)와 데이터를 공유할 수 있다. 예를 들어, 가족 구성원들의 스마트폰과 같은 전자기기를 이용하여 휴대 단말기의 캘린더 및 스케쥴을 공유할 수 있고, 외부에서도 캘린더에 일정 및 메모를 작성하거나 수정할 수 있다. In addition, the portable terminal according to the present invention may share data with an external device 620 connected through a network. For example, an electronic device such as a smartphone of family members can be used to share calendars and schedules of a mobile terminal, and can also create or modify calendars and notes on a calendar from outside.

또한, 휴대 단말기는 외부장치(620)에서 수신한 신호를 네트워크 서버(610)로 전송할 수 있다. In addition, the portable terminal may transmit a signal received from the external device 620 to the network server 610.

한편, 휴대 단말기는 등록된 사용자 예를 들어 가족 구성원 및 전자기기의 인증 정보를 가지고 있을 수 있으며, 인증된 사용자 또는 전자기기가 휴대 단말기를 일정 부분 제어할 수 있도록 권한을 부여할 수 있다.Meanwhile, the portable terminal may have authentication information of a registered user, for example, a family member and an electronic device, and may authorize the authenticated user or electronic device to control a portion of the portable terminal.

한편, 실시예에 따라서는, 휴대 단말기는 외부장치(620)와 직접 신호를 송수신하거나, 휴대 단말기 또는 외부장치(620)가 연결되는 홈 네트워크의 홈 서버와 신호를 송수신할 수 있다. 홈 네트워크는 복수의 휴대 단말기 또는 외부장치(620)가 소정 네트워크 통신 규격에 따라 신호를 송수신할 수 있는 네트워크이다. According to an exemplary embodiment, the portable terminal may directly transmit or receive a signal to or from the external device 620, or may transmit or receive a signal to or from a home server of a home network to which the portable terminal or the external device 620 is connected. The home network is a network in which a plurality of portable terminals or external devices 620 can transmit and receive signals according to a predetermined network communication standard.

홈 서버는 홈 네트워크에 연결되는 휴대 단말기와 외부장치(620)에 관한 정보를 저장할 수 있다. 일예로, 홈 서버는 홈 네트워크에 연결된 휴대 단말기 또는 외부장치(620)의 제품명, 모델명, 사용방법, 제공 컨텐츠 등에 관한 정보를 저장할 수 있다. 또한 홈 서버는 홈 네트워크의 신호 송수신을 제어할 수 있다.The home server may store information about the mobile terminal and the external device 620 connected to the home network. For example, the home server may store information about a product name, a model name, a usage method, content provided, and the like of the mobile terminal or the external device 620 connected to the home network. The home server may also control signal transmission and reception of the home network.

한편, 홈서버는 등록된 사용자 예를 들어 가족 구성원 및 전자기기의 인증 정보를 가지고 있을 수 있으며, 인증된 사용자 또는 전자기기가 홈서버 또는 휴대 단말기를 일정 부분 제어할 수 있도록 권한을 부여할 수 있다.Meanwhile, the home server may have authentication information of a registered user, for example, a family member and an electronic device, and may authorize the authenticated user or electronic device to control a part of the home server or the mobile terminal. .

한편, 홈 서버는 홈 네트워크를 구성하는 전자기기와는 별도의 독립된 서버 형태 또는 휴대 단말기, PC, TV와 같은 홈 네트워크의 개별 전자기기가 홈 서버의 역할을 수행하는 형태로 구현될 수 있다.On the other hand, the home server may be implemented in a form of a server separate from the electronic device constituting the home network or a separate electronic device of the home network such as a portable terminal, a PC, a TV to play the role of a home server.

한편, 이하에서는 도 2와 도 3을 참조하여 설명한 영상표시장치의 예를 중심으로 기술하지만 본 발명은 이에 한정되지 아니한다. 예를 들어, 본 발명의 실시예들은 도 4 내지 도 6을 참조하여 설명한 영상표시장치, 더욱 자세하게는 휴대 단말기 등에도 적용될 수 있음은 자명할 것이다.Meanwhile, the following description focuses on the example of the image display apparatus described with reference to FIGS. 2 and 3, but the present invention is not limited thereto. For example, it will be apparent that the embodiments of the present invention can also be applied to the image display apparatus described with reference to FIGS. 4 to 6, more specifically, a portable terminal.

도 7은 본 발명의 실시예에 따른 영상표시장치의 동작 방법을 보여주는 순서도이고, 도 8은 본 발명의 실시예에 따른 영상표시장치의 동작 방법을 보여주는 순서도이다. 더욱 자세하게는, 도 7은 본 발명의 실시예에 따른 송신 영상표시장치의 동작 방법을 보여주는 순서도이고, 도 8은 본 발명의 실시예에 따른 수신 영상표시장치의 동작 방법을 보여주는 순서도이다.7 is a flowchart illustrating a method of operating an image display apparatus according to an exemplary embodiment of the present invention, and FIG. 8 is a flowchart illustrating a method of operating an image display apparatus according to an exemplary embodiment of the present invention. More specifically, FIG. 7 is a flowchart illustrating a method of operating a transmission image display apparatus according to an embodiment of the present invention, and FIG. 8 is a flowchart illustrating a method of operating a reception image display apparatus according to an embodiment of the present invention.

도 9 내지 도 19는 본 발명의 실시예에 따른 영상표시장치의 동작 방법의 다양한 예를 설명하기 위해 참조되는 도면이다.9 to 19 are views referred to for describing various examples of a method of operating an image display device according to an exemplary embodiment of the present invention.

이하에서는 도면들을 참조하여 본 발명을 더욱 상세하게 설명한다. Hereinafter, the present invention will be described in more detail with reference to the drawings.

본 발명의 실시예에 따른 송신 영상표시장치(100b)는 도 10a와 같이 소정 영상의 제어를 위한 메뉴 오브젝트(1010)를 표시하고,(S710) 상기 소정 영상(1020)을 재생할 수 있다.(S720)The transmission image display apparatus 100b according to an embodiment of the present invention may display a menu object 1010 for controlling a predetermined image as shown in FIG. 10A (S710), and play the predetermined image 1020 (S720). )

상기 소정 영상의 제어를 위한 메뉴 오브젝트(1010)는 빨리감기, 되감기, 정지, 재생 등의 명령에 대응하는 오브젝트들로 구성될 수 있다.The menu object 1010 for controlling the predetermined image may be composed of objects corresponding to commands such as fast forward, rewind, stop, and play.

이후, 상기 소정 영상 중 적어도 일부에 대한 전송 명령을 수신한다.(S730)Thereafter, a transmission command for at least a portion of the predetermined image is received (S730).

예를 들어, 상기 전송 명령은 메뉴 오브젝트(1010)에 포함되거나 별도로 구비되는 전송 메뉴에 대한 선택 입력일 수 있다.For example, the transmission command may be a selection input for a transmission menu included in the menu object 1010 or separately provided.

또는, 상기 전송 명령은 사용자가 재생 영상을 터치하여 드래그하는 입력이거나 마우스 등 기타 입력 장치를 이용하여 상기 영상을 이동시키는 입력일 수 있다. Alternatively, the transmission command may be an input in which a user touches and drags a playback image or an input for moving the image by using another input device such as a mouse.

한편, 상기 전송 명령은 상기 소정 영상 중 다른 영상표시장치에서 표시할 영역을 가상 영역으로 이동시키는 명령일 수 있다. 상기 가상 영역은 영상표시장치(100b)의 상,하,좌,우에 설정될 수 있다.The transmission command may be a command for moving an area to be displayed on another image display apparatus among the predetermined images to a virtual area. The virtual area may be set up, down, left, and right of the image display apparatus 100b.

영상표시장치(100b)의 디스플레이부(180) 외곽부에 도달해서도 계속해서 소정 영상을 이동시킨다면, 표시 영상의 크기를 유지한 상태로는 전체 영상을 표시할 수 없다. 따라서, 소정 영상(1020) 중 일부는 영상표시장치(100b)의 디스플레이부(180)에 표시되고, 소정 영상(1020) 중 나머지 일부는 영상표시장치(100b)의 디스플레이부(180)에 표시되지 않을 것이다.If the predetermined image is continuously moved even after reaching the outer portion of the display unit 180 of the image display apparatus 100b, the entire image cannot be displayed while maintaining the size of the display image. Therefore, some of the predetermined image 1020 is displayed on the display unit 180 of the image display apparatus 100b, and some of the predetermined image 1020 is not displayed on the display unit 180 of the image display apparatus 100b. Will not.

이 경우에, 영상표시장치(100b)의 디스플레이부(180)에 표시되지 않는 소정 영상(1020) 중 나머지 일부는 가상 영역으로 이동한 것으로 판별하고 처리할 수 있다. 이에 대해서는 도 12, 도 13등을 참조하여 상세히 후술한다.In this case, the remaining part of the predetermined image 1020 that is not displayed on the display unit 180 of the image display apparatus 100b may be determined to be moved to the virtual area and processed. This will be described later in detail with reference to FIGS. 12 and 13.

한편, 상기 소정 영상 중 적어도 일부와 관련된 데이터를 수신할 장치를 선택하는 단계를 더 포함할 수 있다.The method may further include selecting a device to receive data related to at least some of the predetermined images.

예를 들어, 상기 소정 영상과 관련된 데이터를 수신하여 영상을 표시할 수 있는 목표 기기가 복수로 존재하는 경우 또는 기타 설정이 존재하는 경우에, 도 10b와 같이 영상을 표시할 목표 기기를 선택할 수 있는 메뉴(1030)를 표시하고 목표 기기, 즉 수신 영상표시장치를 결정할 수도 있다. For example, when there are a plurality of target devices that can receive data related to the predetermined image and display the image, or when other settings exist, the target device to display the image can be selected as shown in FIG. 10B. The menu 1030 may be displayed and a target device, that is, a reception image display device may be determined.

이후, 영상표시장치(100b)는 상기 소정 영상 중 적어도 일부와 관련된 데이터를 제1 영상표시장치(100a)로 전송하고,(S740) 상기 소정 영상(1020)의 표시를 종료할 수 있다.(S750)Thereafter, the image display apparatus 100b may transmit data related to at least a portion of the predetermined image to the first image display apparatus 100a (S740) and finish displaying the predetermined image 1020 (S750). )

한편, 영상표시장치(100b)는 상기 소정 영상(1020)에 대응하는 오디오(audio) 데이터도 제1 영상표시장치(100a)로 전송할 수 있다. 또한, 영상표시장치(100b)는 상기 소정 영상(1020)에 대응하는 오디오(audio) 데이터의 전송 후 오디오 출력을 정지할 수도 있다.The image display apparatus 100b may also transmit audio data corresponding to the predetermined image 1020 to the first image display apparatus 100a. In addition, the image display apparatus 100b may stop the audio output after transmitting the audio data corresponding to the predetermined image 1020.

도 10c를 참조하면, 송신 영상표시장치(100b)의 화면에 상기 소정 영상(1020)의 표시는 종료되지만, 메뉴 오브젝트(1010)의 표시는 종료되지 않는다. 즉, 사용자는 송신 영상표시장치(100b)의 메뉴 오브젝트(1010)를 조작하여 원거리에서 수신 영상표시장치에 표시되는 컨텐츠, 영상을 제어할 수 있다.Referring to FIG. 10C, the display of the predetermined image 1020 is terminated on the screen of the transmission image display apparatus 100b, but the display of the menu object 1010 is not terminated. That is, the user may manipulate the menu object 1010 of the transmission image display apparatus 100b to control the content and the image displayed on the reception image display apparatus at a long distance.

도 10a 내지 도 10c는 제어기기(송신 영상표시장치)에서 직접 동영상을 선택 재생을 하고, 그 영상을 누르고 옆으로 밀면서 보내면 동영상이 표시될 목표 영상표시장치가 보이게 된다. 그 목표 영상표시장치를 선택하고 나면, 그 영상을 원격에 있는 목표 영상 표시장치에 표시되게 된다. 즉 비디오 재생 지점과 영상 표시 지점이 달라지게 된다. 실제 영상 재생 위치는 고정되어 있기 때문에 다시 목표 기기를 바꾸면 다른 곳으로 재생 영상이 바뀔 수 있다.10A to 10C show a target video display device on which a video is displayed when a video is directly selected and played by a controller (transmitted video display device), and the video is pushed and pushed to the side. After selecting the target video display device, the video is displayed on the remote target video display device. That is, the video playback point and the video display point are different. Since the actual video playback position is fixed, changing the target device again may change the playback video to another location.

한편, 도 10a 내지 도 10c는 재생중인 전체 영상 및 관련 데이터를 제1 영상표시장치(100a)로 전송하는 것을 예시하였으나, 본 발명의 실시예는 영상 중 일부를 전송할 수 있다. 이에 대해서는 도 12, 도 13등을 참조하여 후술한다.Meanwhile, although FIGS. 10A to 10C illustrate transmitting the entire image and related data being reproduced to the first image display apparatus 100a, embodiments of the present invention may transmit some of the image. This will be described later with reference to FIGS. 12 and 13.

한편, 사용자는 시청하고 있는 영상을 제1 영상표시장치(100a)가 아닌 제3 영상표시장치(100c)에서 이어서 보길 원하는 경우, 메뉴 오브젝트(1010)를 조작하여 수신 영상표시장치를 변경하고, 관련 데이터를 제3 영상표시장치(100c)로 전송할 수 있다.On the other hand, if the user wants to view the image being viewed on the third image display apparatus 100c instead of the first image display apparatus 100a, the user manipulates the menu object 1010 to change the received image display apparatus, and Data may be transmitted to the third image display apparatus 100c.

또는, 제2 영상표시장치(100b)를 통하여 수신 영상표시장치로 제1 영상표시장치(100a)를 결정한 도 10a 내지 도 10c의 예와 동일한 방식으로, 상기 제1 영상표시장치(100a)를 통하여 전송 명령을 입력할 수 있다.Alternatively, the first image display apparatus 100a may be configured to determine the first image display apparatus 100a as the reception image display apparatus through the second image display apparatus 100b. You can enter a transfer command.

즉, 본 발명의 일실시예에 따른 영상표시장치의 동작 방법은 상기 제1 영상표시장치로부터 상기 소정 영상을 제2 영상표시장치로 전송하라는 명령을 수신하는 단계와 상기 소정 영상과 관련된 데이터를 제2 영상표시장치로 전송하는 단계를 더 포함할 수 있다. That is, a method of operating an image display apparatus according to an embodiment of the present invention includes receiving a command to transmit the predetermined image from the first image display apparatus to a second image display apparatus and removing data related to the predetermined image. The method may further include transmitting to the image display apparatus.

도 11a 내지 도 11c를 참조하면, 터치 또는 다른 입력 장치를 이용하여 상기 제1 영상표시장치(100a)에 표시된 영상(1030)을 소정 방향 또는 소정 영역으로 이동시키는 동작이 수행되면 전송 명령으로 판단하고, 상기 제1 영상표시장치(100a)는 상기 소정 영상을 제2 영상표시장치(100c)로 전송하라는 명령을 송신 영상표시장치(100b)로 전송할 수 있다.11A to 11C, when an operation of moving an image 1030 displayed on the first image display apparatus 100a to a predetermined direction or a predetermined region by using a touch or another input device is determined, it is determined as a transmission command. The first image display apparatus 100a may transmit a command to the transmission image display apparatus 100b to transmit the predetermined image to the second image display apparatus 100c.

상기 제1 영상표시장치로부터 상기 소정 영상을 제2 영상표시장치로 전송하라는 명령을 수신한 영상표시장치(100b)는 상기 소정 영상과 관련된 데이터를 제2 영상표시장치(100c)로 전송하고, 제2 영상표시장치(100c)는 수신한 데이터에 기초하여 영상(1080)을 표시할 수 있다.The image display apparatus 100b receiving a command to transmit the predetermined image from the first image display apparatus to the second image display apparatus transmits data related to the predetermined image to the second image display apparatus 100c, and 2 The image display apparatus 100c may display an image 1080 based on the received data.

한편, 이 경우에도 이용 가능한 전자 기기가 복수인 경우에 복수의 전자 기기 중 목표 기기를 선택할 수 있는 메뉴(1060)를 제1 영상표시장치(100a)에 표시할 수도 있다.In this case, when there are a plurality of available electronic devices, the menu 1060 for selecting a target device from among the plurality of electronic devices may be displayed on the first image display apparatus 100a.

본 발명의 실시예에 따른 수신 영상표시장치는, 송신 영상표시장치가 전송한 영상을 종속적으로 그대로 표시할 수 있을 뿐만 아니라, 자체적인 로컬 영상과 송신 영상표시장치가 전송한 영상을 합성하여 표시할 수 있다.According to an exemplary embodiment of the present invention, the reception image display apparatus may not only display the image transmitted by the transmission image display apparatus as it is, but also synthesize and display its own local image and the image transmitted by the transmission image display apparatus. Can be.

본 발명의 실시예에 따른 수신 영상표시장치의 동작 방법은 수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성할 수 있다.(S810)An operation method of a reception image display apparatus according to an exemplary embodiment of the present invention may generate a first image based on a received broadcast image signal or an external input image signal (S810).

여기서, 영상의 생성이란 영상 출력을 위한 신호 처리를 포함한다. 예를 들어, 입력 신호를 필요에 따라 역다중화하거나 복호화하고, 복호화된 영상신호의 해상도를 출력 가능하도록 스케일링(scaling) 등의 신호 처리 과정을 포함할 수 있다.Here, generation of an image includes signal processing for outputting an image. For example, a signal processing process such as scaling may be included to demultiplex or decode the input signal as necessary and output the resolution of the decoded video signal.

도 9의 튜너부(110)는 방송 영상 신호를 수신할 수 있고, 수신한 방송 신호는 복조부(120), 영상처리부(320)는 상기 수신된 방송 영상 신호에 기초하여 디코딩 및 스케일링 등의 신호 처리로 제1 영상을 생성할 수 있다.The tuner 110 of FIG. 9 may receive a broadcast video signal, and the received broadcast signal is a demodulator 120 and the image processor 320 is a signal such as decoding and scaling based on the received broadcast video signal. The process may generate a first image.

한편, 외부장치 인터페이스부(135)는 외부장치로부터 외부 입력 영상 신호를 수신할 수 있다. 외부장치는, 블루레이 플레이어 등의 광디스크 플레이어, 셋탑 박스, 카메라, 게임 기기 등 다양한 예가 가능하다. 블루레이 플레이어에서 컨텐츠가 재생되는 경우, 외부장치 인터페이스부(135)의 HDMI 단자에, 재생되는 컨텐츠가 입력될 수 있다.Meanwhile, the external device interface unit 135 may receive an external input video signal from an external device. The external device may be various examples such as an optical disc player such as a Blu-ray player, a set top box, a camera, a game device, and the like. When the content is played in the Blu-ray player, the played content may be input to the HDMI terminal of the external device interface unit 135.

외부장치 인터페이스부(135)는 외부장치로부터 수신한 외부 입력 영상 신호를 영상처리부(320)로 전달할 수 있고, 영상처리부(320)는 상기 수신된 외부 입력 영상 신호에 기초하여 디코딩 및 스케일링 등의 신호 처리로 제1 영상을 생성할 수 있다. 한편, 필요에 따라 외부 입력 영상 신호도 복조부(120) 등을 통과할 수도 있다.The external device interface unit 135 may transmit an external input image signal received from an external device to the image processing unit 320, and the image processing unit 320 may decode and scale signals based on the received external input image signal. The process may generate a first image. If necessary, the external input image signal may pass through the demodulator 120 or the like.

한편, 수신 영상표시장치가 송신 영상표시장치를 거치지 않고 다른 소스로부터 수신한 영상 신호를 처리하여 출력하는 영상을 로컬 영상이라고 명명할 수 있다.On the other hand, an image that the receiving image display apparatus processes and outputs an image signal received from another source without passing through the transmitting image display apparatus may be referred to as a local image.

한편, 본 발명에 따른 수신 영상표시장치의 동작 방법은 상기 제1 영상을 디스플레이부(180)에 표시하는 단계를 더 포함할 수 있다. 즉, 제1 영상을 표시하다가 이후에 제2 영상을 수신하는 경우 제1,2 영상을 합성한 영상을 디스플레이부(180)에 표시할 수 있다.Meanwhile, the operation method of the reception image display apparatus according to the present invention may further include displaying the first image on the display unit 180. That is, when the first image is displayed and the second image is subsequently received, the image synthesized with the first and second images may be displayed on the display unit 180.

한편, 수신 영상표시장치는 제1 장치, 예를 들어 상술한 송신 영상표시장치로부터 제2 영상 및 제어 정보를 수신한다.(S820) 도 9의 네트워크 인터페이스부(130)는 네트워크를 통해 송신 영상표시장치로부터 상기 제2 영상 및 제어 정보를 수신할 수 있다. Meanwhile, the reception image display apparatus receives the second image and the control information from the first apparatus, for example, the above-described transmission image display apparatus (S820). The network interface unit 130 of FIG. 9 displays the transmission image through the network. The second image and the control information may be received from the device.

이후, 수신 영상표시장치는 상기 제어 정보에 기초하여 상기 제1 영상과 상기 제2 영상을 합성한다.(S830) 제1 영상, 즉 로컬 영상과 수신된 제2 영상은 영상 합성부(910)로 전달된다. 그리고, 영상 합성부(910)는 상기 제1 영상과 상기 제2 영상을 합성할 수 있다.Thereafter, the reception image display apparatus synthesizes the first image and the second image based on the control information (S830). The first image, that is, the local image and the received second image, is transferred to the image synthesizer 910. Delivered. The image synthesizer 910 may synthesize the first image and the second image.

영상 합성부(910)는 상기 제1 영상과 상기 제2 영상을 기설정된 규칙에 따라 배치하여 합성할 수 있다.The image synthesizing unit 910 may arrange and synthesize the first image and the second image according to a predetermined rule.

예를 들어, 상기 제1,2 영상을 동일한 크기로 상하로 배치하거나 좌우로 배치할 수 있다. For example, the first and second images may be arranged in the same size up and down or left and right.

또는 상기 합성된 영상에서의 상기 제2 영상의 표시 위치와 크기는 상기 제어 정보에 기초하여 결정될 수 있다. 상기 제1 영상의 표시 위치, 크기 등 표시 상태는 변경하지 않고, 상기 제1,2 영상을 표시할 수 있다.Alternatively, the display position and size of the second image in the synthesized image may be determined based on the control information. The first and second images may be displayed without changing a display state such as a display position and size of the first image.

한편, 상기 제어 정보는 상기 제2 영상의 표시 위치 정보와 표시 크기 정보를 포함할 수 있다. 수신 영상표시장치는 상기 제2 영상과 함께 수신한 제어 신호에 따라 상기 제2 영상의 표시 위치와 크기로 상기 제2 영상을 디스플레이부(180)에 표시할 수 있다. The control information may include display position information and display size information of the second image. The reception image display apparatus may display the second image on the display unit 180 at the display position and size of the second image according to a control signal received together with the second image.

사용자는 수신 영상표시장치에 표시된 제1 영상만을 이용하다가, 송신 영상표시장치로부터 제2 영상을 수신하여 수신 영상표시장치에서 이용하려는 경우, 상기 제1 영상에 비하여 상기 제2 영상에 대한 관심이 더 큰 경우가 많다.When the user uses only the first image displayed on the reception image display apparatus and receives the second image from the transmission image display apparatus and intends to use it in the reception image display apparatus, the user is more interested in the second image than the first image. There are many big cases.

따라서, 더욱 바람직하게는 상기 합성된 영상은 상기 제1 영상 상에 상기 제2 영상을 중첩하여 합성될 수 있다. 즉, 상기 제2 영상의 표시를 더 우선시하여, 상기 제2 영상에 의해 상기 제1 영상의 일부가 가려지더라도 상기 제1 영상 위에 상기 제2 영상을 표시할 수 있다.Therefore, more preferably, the synthesized image may be synthesized by superimposing the second image on the first image. That is, the display of the second image may be prioritized, and the second image may be displayed on the first image even if a part of the first image is obscured by the second image.

이 경우에도 상기 제2 영상과 함께 수신한 제어 신호에 따라 상기 제2 영상의 표시 위치와 크기로 상기 제2 영상을 표시할 수 있다. In this case, the second image may be displayed at the display position and size of the second image according to the control signal received together with the second image.

한편, 상기 제어 정보는 상기 제2 영상의 해상도 정보를 더 포함할 수 있고, 재생 영상의 타이밍(timing) 정보 등 부가 정보를 더 포함할 수 있다.The control information may further include resolution information of the second image, and may further include additional information such as timing information of the playback image.

한편, 도 9의 구성은 예시적인 것으로, 구성요소 중 일부는 제어부(170)의 구성 요소로서 포함될 수 있다. 예를 들어, 도 3을 참조하여 설명한 제어부(170)와 같이 영상처리부(320)와 프로세서(330)는 제어부(170)에 포함될 수 있다.Meanwhile, the configuration of FIG. 9 is exemplary, and some of the components may be included as components of the controller 170. For example, like the controller 170 described with reference to FIG. 3, the image processor 320 and the processor 330 may be included in the controller 170.

또한, 제어부(170)는 합성부(910)를 더 포함할 수 있다. 또는 합성부(910)는 도 3에서 예시된 제어부(170) 내의 믹서(350)일 수 있다.In addition, the controller 170 may further include a synthesizer 910. Alternatively, the synthesis unit 910 may be a mixer 350 in the control unit 170 illustrated in FIG. 3.

한편, 프로세서(330)는 영상표시장치(100) 내 또는 제어부(170) 내의 전반적인 동작을 제어할 수 있다. The processor 330 may control the overall operation of the image display apparatus 100 or the controller 170.

본 발명의 실시예에 따른 수신 영상표시장치는 복수의 송신 영상표시장치로부터 각각 영상을 수신하고, 수신한 복수의 영상을 합성하여 표시할 수 있다.A reception image display apparatus according to an embodiment of the present invention may receive images from a plurality of transmission image display apparatuses, and synthesize and display the received images.

본 발명의 실시예에 따른 수신 영상표시장치의 동작 방법은 제2 장치로부터 제3 영상을 수신하는 단계를 더 포함하고, 상기 합성 단계(S830)는 상기 제1 내지 제3 영상을 합성할 수 있다.An operation method of a reception image display apparatus according to an exemplary embodiment of the present invention may further include receiving a third image from a second device, and the synthesizing step S830 may synthesize the first to third images. .

또한, 상기 합성 단계(S830)는 상기 제1 영상 상에 상기 제2 영상 및 상기 제3 영상을 설정에 따라 배치하여 영상을 합성할 수 있다.In addition, in the synthesizing step S830, the second image and the third image may be arranged on the first image according to a setting to synthesize the image.

즉, 상기 제1 영상보다 상기 제2,3 영상을 우선시하여 상기 제1 영상 위에 상기 제2 영상 및 상기 제3 영상을 합성할 수 있다. 또한, 상기 제1,2 장치 간의 우선 순위가 결정되어 있거나, 표시 순서에 따른 우선 순위가 결정되어 있는 경우에는 우선 순위에 기초하여 상기 제2,3 영상도 중첩하여 표시할 수 있다.That is, the second image and the third image may be synthesized on the first image by prioritizing the second and third images over the first image. In addition, when the priority between the first and second devices is determined or the priority according to the display order is determined, the second and third images may also be superimposed based on the priority.

한편, 수신 영상표시장치는 수신하는 영상에 대응하는 오디오 데이터를 함께 수신하는 경우, 로컬 영상에 대응하는 오디오, 수신하는 오디오들 중 하나를 선택적으로 출력하거나 전부를 출력할 수 있다.Meanwhile, when the reception image display apparatus simultaneously receives audio data corresponding to the received image, the reception image display apparatus may selectively output one or all of the audio corresponding to the local image and the received audio.

이하에서는 도 12 내지 도 19를 참조하여 본 발명의 실시예에 따른 영상표시장치의 동작 방법의 다양한 예를 설명한다. Hereinafter, various examples of an operating method of an image display apparatus according to an exemplary embodiment will be described with reference to FIGS. 12 to 19.

도 12 및 도 13은 송/수신 영상표시장치에 표시되는 화면의 예들을 도시한 것이로, 송신 영상표시장치의 화면 우측면에 가상 화면(영역)을 설정한 예들이다.12 and 13 illustrate examples of screens displayed on the transmission / reception image display apparatus, and examples of setting a virtual screen (area) on the right side of the screen of the transmission image display apparatus.

송신 영상표시장치는 제어 기기로써 원격 제어하는 수신 영상표시장치의 실제 화면을 자신의 부가적인 화면(가상 화면)으로 연결하여 설정할 수 있다. 따라서, 수신 영상표시장치의 실제 화면은 제어기의 가상 화면과 동일시된다.The transmission image display device may be configured by connecting an actual screen of the reception image display device remotely controlled as a control device to its additional screen (virtual screen). Therefore, the actual screen of the reception image display apparatus is identified with the virtual screen of the controller.

수신 영상표시장치는 자신의 실제 영상 화면과 송신 영상표시장치에서 보내준 영상을 합성하여 보여줄 수 있다.The reception image display apparatus may display a composite image of its own image and the image sent from the transmission image display apparatus.

송신 영상표시장치 측에서 생성한 화면을 가상 화면(영역)으로 옮기면, 수신 영상표시장치에서 가상 화면(영역)에 포함되는 영상을 볼 수 있다.When the screen generated by the transmitting image display apparatus is moved to the virtual screen (region), the image included in the virtual screen (region) may be viewed on the receiving image display apparatus.

도 12를 참조하면, 사용자가 송신 영상표시장치의 디스플레이부(180) 실제 화면(1210)에 표시되던 소정 오브젝트 또는 영상(1230)을 터치 또는 마우스 등 기타 입력 장치를 이용하여 가상 화면(1220)으로 이동시키면, 송신 영상표시장치는 네트워크를 통하여 수신 영상표시장치로 가상 화면(1220)으로 이동한 영상(1230)의 표시를 위한 데이터를 전송할 수 있다.Referring to FIG. 12, a user moves a predetermined object or image 1230 displayed on the actual screen 1210 of the display unit 180 of the transmission image display apparatus to the virtual screen 1220 using a touch or other input device such as a mouse. When moved, the transmission image display apparatus may transmit data for displaying the image 1230 moved to the virtual screen 1220 to the reception image display apparatus through a network.

수신 영상표시장치의 화면(1240)은 가상 화면(1220)과 동일한 화면이 표시될 수 있다.The screen 1240 of the reception image display apparatus may display the same screen as the virtual screen 1220.

또는, 수신 영상표시장치의 화면(1240)에는 원래 표시되고 있는 영상은 그대로 표시하고 있는 상태에서 가상 화면(1220)에 포함되는 영상(1230)과 동일한 영상(1250)이 표시될 수 있다.Alternatively, the same image 1250 as that of the image 1230 included in the virtual screen 1220 may be displayed on the screen 1240 of the reception image display apparatus.

한편, 수신 영상표시장치의 화면(1240)에 표시되는 영상(1250)은 장치 특성, 기타 설정에 따라 가상 화면(1220)에 포함되는 영상(1230)과 위치, 크기, 해상도가 상이할 수 있다.Meanwhile, the image 1250 displayed on the screen 1240 of the reception image display apparatus may have a different position, size, and resolution than the image 1230 included in the virtual screen 1220 according to device characteristics and other settings.

도 12에서는 소정 영상(1230) 전체가 가상 화면으로 이동하였으나, 일부만을 이동시킬 수도 있다. 도 13은 소정 영상(1330)의 일부를 가상 화면으로 이동시킨 것을 예시한다.In FIG. 12, the entire predetermined image 1230 is moved to the virtual screen, but only a part of the predetermined image 1230 may be moved. 13 illustrates that a portion of the predetermined image 1330 is moved to the virtual screen.

도 13을 참조하면, 수신 영상표시장치의 화면(1320)에 가상화면에 포함되는 영상(1332)에 표시되고, 이 영상(1332)은 소정 영상(1330) 중 가상화면으로 이동한 일부 영역에 대응한다.Referring to FIG. 13, an image 1332 included in a virtual screen is displayed on a screen 1320 of the reception image display apparatus, and the image 1332 corresponds to a partial region of the predetermined image 1330 that is moved to the virtual screen. do.

한편, 송신 영상표시장치의 화면(1310)에는 소정 영상(1330)의 나머지 일부(1331)가 계속해서 표시된다.Meanwhile, the remaining portion 1331 of the predetermined image 1330 is continuously displayed on the screen 1310 of the transmission image display apparatus.

수신 영상표시장치에서 송신 영상표시장치의 비디오 데이터를 원격으로 가져와서 재생할 수 있나, 송신 영상표시장치에서 발생시킨 비디오 화면을 수신 영상표시장치의 가상화면에 전송할 경우, 수신 영상표시장치는 현재 재생 중이 화면을 보여줄 수 있다. 이 경우에는 송신 영상표시장치에서 비디오를 재생할 경우 수신 영상표시장치는 실제 송신 영상표시장치의 비디오 데이터를 알 필요가 없다. The receiving video display device can remotely retrieve and play the video data of the transmitting video display device, but when the video screen generated by the transmitting video display device is transmitted to the virtual screen of the receiving video display device, the receiving video display device is not currently being played. Can show screen In this case, when the video is played back on the transmission video display device, the reception video display device does not need to know the video data of the actual transmission video display device.

한편, 송신 영상표시장치에서 동영상을 재생하기 전 혹은 후에 수신 영상표시장치에 연결 요청하고, 수신 영상표시장치가 연결을 승인하면, 가상화면을 연결하는 단계를 더 포함할 수 있고, 그 가상 화면에 재생 화면을 전송할 수 있다. Meanwhile, the method may further include a step of requesting a connection to the reception video display device before or after playing the video on the transmission video display device, and connecting the virtual screen if the reception video display device approves the connection. You can send the playback screen.

한편, 실시예에 따라서, 송신 영상표시장치는 영상 신호가 디코더를 이미 통과한 경우, 영상을 송수신 할 때, 다시 영상 신호를 압축하고 전송함으로써 네트워크 부하를 줄이고 비디오 영상을 송수신할 수 있다.Meanwhile, according to an exemplary embodiment, when the video signal has already passed through the decoder, when transmitting and receiving the video, the transmitting video display device may reduce the network load and transmit and receive the video image by compressing and transmitting the video signal again.

또한, 영상을 디코딩하기 전에 송신할 경우 영상 송신기에 인코더를 거치지 않고 바로 보낼 수 있다. 이 경우에 가상 화면에서 영상으로 변환지 않은 raw 데이터 상태를 바로 전송할 수 있다.In addition, if the video is to be transmitted before decoding, it can be sent directly to the video transmitter without going through an encoder. In this case, the raw data state that has not been converted into an image on the virtual screen can be directly transmitted.

도 14는 송신 영상표시장치로 하나의 노트북(1410)이 이용되고, 수신 영상표시장치로 프로젝터(1500)를 이용하는 경우를 예시한다.14 illustrates a case where one notebook 1410 is used as the transmission image display device and the projector 1500 is used as the reception image display device.

노트북(1410)의 화면(1420)에는 가상 화면(1430)으로 이동하지 않은 소정 영상(1421)이 표시되고, 프로젝터(1500)의 스크린(1510)에는 가상 화면(1431)에 포함되는 소정 영상(1431)에 대응하는 영상(1520)이 표시될 수 있다.The screen 1420 of the notebook 1410 displays a predetermined image 1421 without moving to the virtual screen 1430, and the predetermined image 1431 included in the virtual screen 1431 on the screen 1510 of the projector 1500. The image 1520 corresponding to) may be displayed.

한편, 도 12 및 도 13과 같이 소정 영상이 일부(1421)는 송신 영상표시장치(1410)의 화면(1420)에 표시되고, 다른 일부(1520)는 스크린(1510)에 표시될 수 있다.12 and 13, a portion of the predetermined image 1421 may be displayed on the screen 1420 of the transmission image display device 1410, and another portion 1520 may be displayed on the screen 1510.

도 15는 도 14에서 다른 제2 송신 영상표시장치(1450)가 더 프로젝터(1500)와 네트워크를 통하여 연결되는 경우를 예시한다.FIG. 15 illustrates a case in which another second transmission image display apparatus 1450 of FIG. 14 is further connected to the projector 1500 through a network.

제2 송신 영상표시장치(1450)의 화면(1460)에는 소정 영상(1460)이 표시되고, 제2 송신 영상표시장치(1450)에 의해 가상 화면으로 이동한 영상(1530)은 제1 송신 영상표시장치(1410)에 의해 가상 화면으로 이동한 영상(1520)과 합성되어 스크린(1510)에 표시될 수 있다.A predetermined image 1460 is displayed on the screen 1460 of the second transmission image display apparatus 1450, and the image 1530 moved to the virtual screen by the second transmission image display apparatus 1450 displays the first transmission image. The screen may be synthesized with the image 1520 moved to the virtual screen by the device 1410 and displayed on the screen 1510.

한편, 제1 송신 영상표시장치(1410)에 의해 가상 화면으로 이동한 영상(1520)과 제2 송신 영상표시장치(1450)에 의해 가상 화면으로 이동한 영상(1530)의 표시 위치가 중첩되는 경우 두 영상(1520, 1530) 중 적어도 하나의 표시 위치 및/또는 크기를 변경할 수 있다.On the other hand, when the display positions of the image 1520 moved to the virtual screen by the first transmission image display apparatus 1410 and the image 1530 moved to the virtual screen by the second transmission image display apparatus 1450 overlap. The display position and / or size of at least one of the two images 1520 and 1530 may be changed.

프로젝터에 여러 사용자가 접속을 하여 사용자에 따라 다른 영상을 입력할 수 있다. 사용자의 권한에 따라 프로젝터에 보여주는 화면의 크기, 위치, 높이 등을 다르게 설정하여, 복수의 사용자가 동시에 하나의 프로젝터를 이용하여 여러 화면을 보면서 시연과 설명을 할 수 있다.Multiple users can connect to the projector and input different images according to the users. By setting the size, position, height, etc. of the screen displayed on the projector differently according to the user's authority, a plurality of users can demonstrate and explain while watching several screens simultaneously using a single projector.

도 16과 도 17은 송신 영상표시장치로 디스플레이부(1610)를 포함하는 휴대 단말기(1600) 또는 리모콘이 사용되고, 수신 영상표시장치로 TV(1700)가 사용되는 경우를 예시한다.16 and 17 illustrate a case in which a portable terminal 1600 including a display unit 1610 or a remote controller is used as a transmission image display device, and a TV 1700 is used as a reception image display device.

도 16은 송신 영상표시장치에 표시되는 영상(1620)과 수신 영상표시장치에 표시되는 영상(1710)이 같은 경우, 즉 동일한 화면을 복수의 영상표시장치가 공유하는 예다.FIG. 16 illustrates an example in which a plurality of image display apparatuses share the same screen when the image 1620 displayed on the transmission image display apparatus and the image 1710 displayed on the reception image display apparatus are the same.

도 17은 수신 영상표시장치(1700)는 로컬 영상(1730), 예를 들어 방송국으로부터 수신한 방송 영상과 송신 영상표시장치(1600)로부터 수신한 데이터에 기초한 영상(1720)을 합성하여 표시할 수 있다. FIG. 17 illustrates that the reception image display apparatus 1700 synthesizes and displays a local image 1730, for example, a broadcast image received from a broadcasting station and an image 1720 based on data received from the transmission image display apparatus 1600. have.

또한, 가상 화면으로 이동하지 않은 영상(1650)이 있다면 송신 영상표시장치에 여전히 표시될 수 있다.In addition, if there is an image 1650 that does not move to the virtual screen, it may still be displayed on the transmission image display apparatus.

수신 영상표시장치(1700)를 화면을 직접 보면서 제어할 수 있고, 수신 영상표시장치(1700)를 보는 도중에 리모콘 혹은 스마트폰(1600) 등을 사용하여 동영상 검색을 하고 시청하려 하는 경우 바로 재생되는 영상을 TV에 넘겨서 끊김 없이 볼 수 있다. The reception image display device 1700 can be controlled by looking directly at the screen, and the video that is played immediately when a user searches for and watches a video using a remote controller or a smartphone 1600 while viewing the reception image display device 1700. Can be passed to the TV for seamless viewing.

한편, 영상 및 데이터의 전송 명령은 화면에 표시된 영상 또는 메뉴를 터치하여 입력할 수도 있지만, 물리적으로 배치된 키(1630) 조작에 의해서도 제어할 수 있다.Meanwhile, the image and data transfer command may be input by touching an image or a menu displayed on the screen, but may also be controlled by manipulation of a key 1630 physically arranged.

도 18과 도 19는 도 1의 예에 따른 영상표시장치 시스템에서 영상 중 적어도 일부를 공유하는 예를 도시한 것이다.18 and 19 illustrate an example in which at least a part of an image is shared in the image display device system according to the example of FIG. 1.

도면들을 참조하면, 사용자는 송신 영상표시장치(100b)에 표시되는 로컬 영상 중 적어도 일부를 다른 영상표시장치에서 이용하고자 하는 경우에 원하는 부분을 가상 화면(1920)으로 이동시킨다. Referring to the drawings, when a user wants to use at least a portion of a local image displayed on the transmission image display apparatus 100b in another image display apparatus, the user moves the desired portion to the virtual screen 1920.

이에 따라, 송신 영상표시장치(100b)는 가상 화면(1920)으로 이동한 영상을 표시하기 위한 데이터를 수신 영상표시장치(100a)로 전송한다.Accordingly, the transmission image display apparatus 100b transmits data for displaying the image moved to the virtual screen 1920 to the reception image display apparatus 100a.

한편, 송신 영상표시장치(100b)의 화면(1810)에는 이동하지 않은 나머지 영상(1910)이 표시된다.On the other hand, the remaining image 1910 which is not moved is displayed on the screen 1810 of the transmission image display apparatus 100b.

수신 영상표시장치(100a)는 송신 영상표시장치(100b)에서 보내준 영상도 표시할 수 있지만 독립적으로 하나 이상의 로컬 영상을 표시할 수 있다. The reception image display apparatus 100a may also display an image sent by the transmission image display apparatus 100b, but may independently display one or more local images.

수신 영상표시장치(100a)는 로컬 영상(1930)과 수신한 데이터에 기초하여 생성된 영상(1940)을 합성하고, 합성된 영상(1820)을 화면에 표시할 수 있다.The reception image display apparatus 100a may synthesize the generated image 1940 based on the local image 1930 and the received data, and display the synthesized image 1820 on the screen.

또한, 도 19와 같이, 수신 영상표시장치(100a)는 다른 로컬 영상(1950)도 함께 합성하여 표시할 수 있다.In addition, as shown in FIG. 19, the reception image display apparatus 100a may display other local images 1950 together.

본 발명은 독립적인 원격 화면을 가지는 수신장치와 그 화면 제어를 갖는 송신장치를 이용하여 영상을 합성하고, 그 원격화면을 제어하는 방법에 관한 것이다.The present invention relates to a method for synthesizing an image using a receiving device having an independent remote screen and a transmitting device having the screen control and controlling the remote screen.

하나의 수신 영상표시장치에 다수의 영상표시장치기 연결을 가능하게 함으로서 끊김 없는 동영상 시청과 같은 멀티미디어 기기를 구현하는 효과가 있으며, 복수의 이용자가 하나의 영상기기를 통한 다중작업을 용이하게 하는 효과가 있다.By connecting a plurality of video display devices to one receiving video display device, there is an effect of implementing a multimedia device such as seamless video viewing, and an effect of facilitating multiple operations by a plurality of users through a single video device. have.

또한 네트워크에 연결된 장치들이 서로 같은 화면을 보고 공유할 수 있는 N-스크린 서비스를 구현을 더욱 쉽게 할 수 있다. It also makes it easier to implement N-screen services that allow devices connected to the network to view and share the same screen.

본 발명에 따른 영상표시장치 및 그 동작 방법은 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The image display apparatus and the operation method thereof according to the present invention are not limited to the configuration and method of the embodiments described above but the embodiments can be applied to all or some of the embodiments May be selectively combined.

한편, 본 발명의 영상표시장치의 동작 방법은 영상표시장치에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.Meanwhile, the operation method of the image display apparatus of the present invention can be implemented as a code that can be read by a processor on a recording medium readable by a processor included in the image display apparatus. The processor-readable recording medium includes all kinds of recording apparatuses in which data that can be read by the processor is stored. Examples of the recording medium that can be read by the processor include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may also be implemented in the form of a carrier wave such as transmission over the Internet . In addition, the processor-readable recording medium may be distributed over network-connected computer systems so that code readable by the processor in a distributed fashion can be stored and executed.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the present invention.

Claims (13)

수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성하는 단계;
제1 장치로부터 제2 영상 및 제어 정보를 수신하는 단계;
상기 제어 정보에 기초하여 상기 제1 영상과 상기 제2 영상을 합성하는 단계; 및,
상기 합성된 영상을 표시하는 단계;를 포함하는 영상표시장치의 동작 방법.
Generating a first image based on the received broadcast image signal or the external input image signal;
Receiving a second image and control information from a first device;
Synthesizing the first image and the second image based on the control information; And
Displaying the synthesized image; and operating the image display device.
제1항에 있어서,
상기 제1 영상을 표시하는 단계;를 더 포함하는 영상표시장치의 동작 방법.
The method of claim 1,
And displaying the first image.
제1항에 있어서,
상기 합성된 영상은 상기 제1 영상 상에 상기 제2 영상을 중첩하여 합성되는 것을 특징으로 하는 영상표시장치의 동작 방법.
The method of claim 1,
And the synthesized image is synthesized by superimposing the second image on the first image.
제1항에 있어서,
상기 합성된 영상에서의 상기 제2 영상의 표시 위치와 크기는 상기 제어 정보에 기초하여 결정되는 것을 특징으로 하는 영상표시장치의 동작 방법.
The method of claim 1,
The display position and size of the second image in the synthesized image is determined based on the control information.
제1항에 있어서,
상기 제어 정보는 상기 제2 영상의 표시 위치 정보, 표시 크기 정보, 해상도 정보, 타이밍(timing) 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 영상표시장치의 동작 방법.
The method of claim 1,
The control information may include at least one of display position information, display size information, resolution information, and timing information of the second image.
제1항에 있어서,
제2 장치로부터 제3 영상을 수신하는 단계;를 더 포함하고,
상기 합성 단계는 상기 제1 내지 제3 영상을 합성하는 것을 특징으로 하는 영상표시장치의 동작 방법.
The method of claim 1,
Receiving a third image from the second device;
In the synthesizing step, the first to third images are synthesized.
제6항에 있어서,
상기 합성 단계는 상기 제1 영상 상에 상기 제2 영상 및 상기 제3 영상을 설정에 따라 배치하여 영상을 합성하는 것을 특징으로 하는 영상표시장치의 동작 방법.
The method according to claim 6,
In the synthesizing step, the second image and the third image are arranged on the first image according to a setting to synthesize the image.
소정 영상의 제어를 위한 메뉴 오브젝트를 표시하는 단계;
상기 소정 영상을 재생하는 단계;
상기 소정 영상 중 적어도 일부에 대한 전송 명령을 수신하는 단계;
상기 소정 영상 중 적어도 일부와 관련된 데이터를 제1 영상표시장치로 전송하는 단계; 및
상기 소정 영상의 표시를 종료하는 단계;를 포함하는 영상표시장치의 동작 방법.
Displaying a menu object for controlling a predetermined image;
Playing the predetermined image;
Receiving a transmission command for at least a portion of the predetermined image;
Transmitting data related to at least a portion of the predetermined image to a first image display device; And
Terminating display of the predetermined image; and operating the image display device.
제8항에 있어서,
상기 소정 영상 중 적어도 일부와 관련된 데이터를 수신할 장치를 선택하는 단계;를 더 포함하는 영상표시장치의 동작 방법.
9. The method of claim 8,
And selecting a device to receive data related to at least some of the predetermined images.
제8항에 있어서,
상기 전송 명령은 상기 소정 영상 중 다른 영상표시장치에서 표시할 영역을 가상 영역으로 이동시키는 명령인 것을 특징으로 하는 영상표시장치의 동작 방법.
9. The method of claim 8,
And the transmitting command is a command for moving a region to be displayed on another image display apparatus among the predetermined images to a virtual region.
제8항에 있어서,
상기 제1 영상표시장치로부터 상기 소정 영상을 제2 영상표시장치로 전송하라는 명령을 수신하는 단계;와
상기 소정 영상과 관련된 데이터를 제2 영상표시장치로 전송하는 단계;를 더 포함하는 영상표시장치의 동작 방법.
9. The method of claim 8,
Receiving a command to transmit the predetermined image from the first image display apparatus to a second image display apparatus; and
And transmitting data related to the predetermined image to a second image display device.
방송 영상 신호를 수신하는 튜너부;
외부 입력 영상 신호를 수신하는 외부장치 인터페이스부;
상기 수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성하는 영상처리부;
제1 장치로부터 제2 영상 및 제어 정보를 수신하는 네트워크 인터페이스부;
상기 제어 정보에 기초하여 상기 제1 영상과 상기 제2 영상을 합성하는 합성부; 및,
상기 합성된 영상을 표시하는 디스플레이부;를 포함하는 영상표시장치.
A tuner unit for receiving a broadcast video signal;
An external device interface unit configured to receive an external input video signal;
An image processor configured to generate a first image based on the received broadcast image signal or an external input image signal;
A network interface unit configured to receive second image and control information from the first device;
A synthesizer configured to synthesize the first image and the second image based on the control information; And
And a display unit for displaying the synthesized image.
디스플레이부;
방송 영상 신호를 수신하는 튜너부;
외부 입력 영상 신호를 수신하는 외부장치 인터페이스부;
제1 장치로부터 제2 영상 및 제어 정보를 수신하는 네트워크 인터페이스부; 및,
상기 수신된 방송 영상 신호 또는 외부 입력 영상 신호에 기초하여 제1 영상을 생성하는 제어부;를 포함하고,
상기 제어부는 상기 제어 정보에 기초하여 상기 제1 영상과 상기 제2 영상을 합성하고, 상기 합성된 영상을 상기 디스플레이부에 표시하도록 제어하는 것을 특징으로 하는 영상표시장치.


A display unit;
A tuner unit for receiving a broadcast video signal;
An external device interface unit configured to receive an external input video signal;
A network interface unit configured to receive second image and control information from the first device; And
And a controller configured to generate a first image based on the received broadcast video signal or an external input video signal.
And the controller is configured to synthesize the first image and the second image based on the control information and to display the synthesized image on the display unit.


KR1020120036890A 2012-04-09 2012-04-09 Image display apparatus and method for operating the same Active KR101924062B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120036890A KR101924062B1 (en) 2012-04-09 2012-04-09 Image display apparatus and method for operating the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120036890A KR101924062B1 (en) 2012-04-09 2012-04-09 Image display apparatus and method for operating the same

Publications (2)

Publication Number Publication Date
KR20130114475A true KR20130114475A (en) 2013-10-18
KR101924062B1 KR101924062B1 (en) 2018-11-30

Family

ID=49634505

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120036890A Active KR101924062B1 (en) 2012-04-09 2012-04-09 Image display apparatus and method for operating the same

Country Status (1)

Country Link
KR (1) KR101924062B1 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101664248B1 (en) 2015-12-24 2016-10-10 (주)엠앤스마트 System for electronic commerce based on smart terminal and method thereof
KR20170142424A (en) * 2016-06-17 2017-12-28 건국대학교 산학협력단 Method of playing multimedia contents by integrating multi-devices and apparatus performing the same
KR20190021814A (en) * 2017-08-24 2019-03-06 주식회사 엘지유플러스 Method and apparatus for providing broadcasting video
WO2019231021A1 (en) * 2018-05-31 2019-12-05 라인플러스 주식회사 Method and system for exposing in broadcast-viewing end personalized background using chroma-key, and non-temporary computer-readable recording medium
CN110635993A (en) * 2019-09-24 2019-12-31 上海掌门科技有限公司 Method and device for synthesizing multimedia information
WO2020221039A1 (en) * 2019-04-28 2020-11-05 华为技术有限公司 Screen projection method, electronic device and screen projection system
KR102211988B1 (en) 2020-02-11 2021-02-04 주식회사 가치공간 System for selling product using product sales video

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011055343A (en) * 2009-09-03 2011-03-17 Sharp Corp Content playback apparatus, program, and recording medium

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101664248B1 (en) 2015-12-24 2016-10-10 (주)엠앤스마트 System for electronic commerce based on smart terminal and method thereof
KR20170142424A (en) * 2016-06-17 2017-12-28 건국대학교 산학협력단 Method of playing multimedia contents by integrating multi-devices and apparatus performing the same
KR20190021814A (en) * 2017-08-24 2019-03-06 주식회사 엘지유플러스 Method and apparatus for providing broadcasting video
WO2019231021A1 (en) * 2018-05-31 2019-12-05 라인플러스 주식회사 Method and system for exposing in broadcast-viewing end personalized background using chroma-key, and non-temporary computer-readable recording medium
US11553166B2 (en) 2018-05-31 2023-01-10 LINE Plus Corporation Method, system, and non-transitory computer readable record medium for exposing personalized background using chroma key in broadcast viewing side
WO2020221039A1 (en) * 2019-04-28 2020-11-05 华为技术有限公司 Screen projection method, electronic device and screen projection system
CN110635993A (en) * 2019-09-24 2019-12-31 上海掌门科技有限公司 Method and device for synthesizing multimedia information
CN110635993B (en) * 2019-09-24 2022-06-10 上海掌门科技有限公司 Method and apparatus for synthesizing multimedia information
KR102211988B1 (en) 2020-02-11 2021-02-04 주식회사 가치공간 System for selling product using product sales video
KR102265555B1 (en) 2020-02-11 2021-06-16 주식회사 가치공간 System for selling product using product sales video based organization chart or catch-up video service

Also Published As

Publication number Publication date
KR101924062B1 (en) 2018-11-30

Similar Documents

Publication Publication Date Title
US10474322B2 (en) Image display apparatus
US10031637B2 (en) Image display apparatus and method for operating the same
US10200738B2 (en) Remote controller and image display apparatus having the same
EP2801215B1 (en) Image display apparatus and method for operating the same
US10631039B2 (en) Image display device
US9363570B2 (en) Broadcast receiving apparatus for receiving a shared home screen
KR101924062B1 (en) Image display apparatus and method for operating the same
KR20160029551A (en) Electronic device, and method for operating the same
US11397513B2 (en) Content transmission device and mobile terminal for performing transmission of content
US20130057465A1 (en) Image display apparatus, remote controller, and method for operating the same
KR102058041B1 (en) Image display apparatus, and method for operating the same
US10219045B2 (en) Server, image providing apparatus, and image providing system comprising same
KR20130019260A (en) Method for operating a mobile terminal
KR102104438B1 (en) Image display apparatus, and method for operating the same
US10555028B2 (en) Image providing device
KR102046642B1 (en) Image display apparatus, and method for operating the same
KR102269276B1 (en) Electronic device, and method for operating the same
KR102311249B1 (en) Display device and controlling method thereof
KR102281839B1 (en) Apparatus for providing Image
KR102039486B1 (en) Image display apparatus, and method for operating the same
KR20160021539A (en) Apparatus for providing image, server, and system including the same
KR20130010686A (en) Method for operating a mobile terminal and an image display device
KR20160082059A (en) Apparatus for providing image
KR20140134871A (en) Apparatus for receiving broadcasting and method for operating the same

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

P22-X000 Classification modified

St.27 status event code: A-2-2-P10-P22-nap-X000

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

P22-X000 Classification modified

St.27 status event code: A-2-2-P10-P22-nap-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

GRNT Written decision to grant
PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

PN2301 Change of applicant

St.27 status event code: A-5-5-R10-R13-asn-PN2301

St.27 status event code: A-5-5-R10-R11-asn-PN2301

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 5

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 6

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 7

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 8

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-4-4-U10-U11-OTH-PR1001 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 8