KR101121603B1 - Set-top box, stereographic broadcasting receiving system and shutter glass for displaying stereographic images in conventional two-dimensional display device - Google Patents
Set-top box, stereographic broadcasting receiving system and shutter glass for displaying stereographic images in conventional two-dimensional display device Download PDFInfo
- Publication number
- KR101121603B1 KR101121603B1 KR1020100029455A KR20100029455A KR101121603B1 KR 101121603 B1 KR101121603 B1 KR 101121603B1 KR 1020100029455 A KR1020100029455 A KR 1020100029455A KR 20100029455 A KR20100029455 A KR 20100029455A KR 101121603 B1 KR101121603 B1 KR 101121603B1
- Authority
- KR
- South Korea
- Prior art keywords
- signal
- top box
- synchronization
- image
- delay time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/22—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
- G02B30/24—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type involving temporal multiplexing, e.g. using sequentially activated left and right shutters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/167—Synchronising or controlling image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
- H04N13/264—Image signal generators with monoscopic-to-stereoscopic image conversion using the relative movement of objects in two video frames or fields
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Human Computer Interaction (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Abstract
기존의 텔레비전, 모니터 등의 2차원 디스플레이 장치에서 3차원 입체 영상을 디스플레이할 수 있도록 하는 셋톱박스 및 이를 이용한 입체TV 방송 시스템 및 방법이 제공된다. 방송국에서는 좌측 영상과 우측 영상을 각각 통상의 프레임 속도의 반의 속도로 번갈아 전송한다. 결국 좌측 영상과 우측 영상을 합하면 통상의 프레임 속도가 된다. 이 신호를 수신한 셋톱박스는 연결된 2D 방송용 디스플레이 장치에 맞는 신호로 변환하여 출력하면서 셔터안경을 위한 동기신호를 발생시킨다. 사용자는 셋톱박스용 리모콘에 마련된 입력수단이나 셔터안경에 마련된 입력수단을 이용하여 동기신호의 지연시간을 조절함으로써 디스플레이 장치에 좌우 영상이 표시되는 타이밍과 셔터안경의 온오프 타이밍을 동기화시킨다.Provided are a set-top box for displaying a three-dimensional stereoscopic image on a two-dimensional display apparatus such as a television and a monitor, and a stereoscopic television broadcasting system and method using the same. The broadcasting station alternately transmits the left image and the right image at half the normal frame rate. As a result, the sum of the left image and the right image results in a normal frame rate. The set-top box receiving the signal converts the signal into a signal suitable for the connected 2D broadcasting display device and generates a synchronization signal for the shutter glasses. The user synchronizes the timing of displaying the left and right images on the display device with the on / off timing of the shutter glasses by adjusting the delay time of the synchronization signal using the input means provided on the set-top box remote controller or the input means provided on the shutter glasses.
Description
본 발명은 2차원 디스플레이 장치에서의 입체영상 표시를 위한 셋톱박스, 입체영상 방송 수신시스템 및 셔터안경에 관한 것으로서, 더욱 상세하게는 2차원 영상을 디스플레이하기 위한 기존의 텔레비전, 모니터 등의 2차원 디스플레이 장치에서 3차원 입체 영상을 디스플레이할 수 있도록 하는 2차원 디스플레이 장치에서의 입체영상 표시를 위한 셋톱박스, 입체영상 방송 수신시스템 및 셔터안경에 관한 것이다.The present invention relates to a set-top box, a stereoscopic image broadcasting receiving system, and shutter glasses for displaying a stereoscopic image in a two-dimensional display device, and more particularly, to a two-dimensional display such as a conventional television or monitor for displaying a two-dimensional image. The present invention relates to a set-top box, a stereoscopic image broadcasting reception system, and shutter glasses for stereoscopic image display in a two-dimensional display apparatus for displaying a three-dimensional stereoscopic image.
3차원 입체영상은 왼쪽 눈과 오른쪽 눈의 양안 시차를 이용하여 좌측 영상과 우측 영상을 만들어서 각각의 영상이 각각 대응되는 눈에서만 보이도록 함으로써 구현될 수 있다. The 3D stereoscopic image may be implemented by making a left image and a right image by using binocular disparity between the left eye and the right eye, so that each image is only visible to the corresponding eye.
이를 위한 방법으로서 편광 안경을 사용하는 방법이 있다. 이는 좌우 카메라로 찍은 영상을 좌우 프로젝터에 각각 입력하고, 좌우 프로젝터의 앞에 서로 다른 편광 필터를 부착하여 이를 통과한 영상을 스크린에 투사하면, 필터와 동일한 편광 방식의 안경으로 왼쪽 눈은 왼쪽 영상만, 오른쪽 눈은 오른쪽 영상만 보게 하는 것으로서, 보통 3D영화관에서 사용되는 방식이다.As a method for this, there is a method of using polarizing glasses. This inputs the images taken by the left and right cameras to the left and right projectors respectively, and attaches different polarization filters in front of the left and right projectors to project the image passing through them. The right eye only sees the right image, which is commonly used in 3D cinemas.
한편, 최근 상용화되는 입체 TV에서 사용되는 `셔터 안경식'도 있다. 이는, 좌측 영상과 우측 영상을 번갈아 디스플레이하고, 그에 맞추어서 동기신호를 발생시키면 셔터 안경(shutter glass)이 동기신호에 맞추어서 좌측 안경과 우측 안경을 번갈아가면서 열리도록 함으로써 구현된다. 즉, 좌측 영상이 나올 때는 좌측 안경을 열어주고, 우측 영상이 나올 때는 우측 안경을 열어주는 방식이다. 셔터식 방식은 PC(Personal Computer)나 TV에 주로 이용된다.On the other hand, there is also a 'shutter glasses type' used in the recently commercialized stereoscopic TV. This is implemented by alternately displaying the left image and the right image, and generating a synchronization signal accordingly, such that the shutter glasses are alternately opened in accordance with the synchronization signal. That is, when the left image comes out, the left glasses are opened, and when the right image comes out, the right glasses are opened. The shutter type is mainly used for a personal computer (PC) or a TV.
이 외에도, 안경을 사용하지 않는 입체 TV가 개발되고 있다. 이는 렌티큘라(lenticular) 디스플레이, 인테그랄(Integral) 이미징, 홀로그래피(holography) 등의 특수한 디스플레이 장치를 사용하여야 한다. In addition, stereoscopic TVs without glasses are being developed. This requires the use of special display devices such as lenticular displays, integral imaging, holography, and the like.
그런데, 현재 도입되고 있는 셔터 안경식의 입체 TV를 위해서는 좌측 영상과 우측 영상을 기존의 방송채널을 통해서 전송하여야 한다. 이를 위하여 방송국에서는 가로방향의 해상도를 반으로 줄인 좌측영상(L1)과 우측영상(R1)을 도 1a와 같이 하나의 영상으로 붙여서 통상적인 프레임 속도로 전송한다. 이를 수신한 입체 TV에서는 이를 분리하여 도 1b와 같이 가로 해상도를 2배로 늘린 영상(L1', R1', L2', R2')을 만든 다음에, 방송국에서 전송한 프레임의 두배의 속도로 좌측 영상(L1', L2', ..)과 우측 영상(R1', R2', ...)을 번갈아 가면서 디스플레이한다.However, for the currently introduced shutter glasses type stereoscopic TV, the left image and the right image should be transmitted through the existing broadcasting channel. To this end, the broadcasting station attaches the left image L1 and the right image R1, which have the horizontal resolution reduced in half, into one image as shown in FIG. 1A and transmits them at a normal frame rate. On receiving the stereoscopic TV, the stereoscopic TV is separated and the image (L1 ', R1', L2 ', R2') is doubled as the horizontal resolution as shown in FIG. 1B, and then the left image is doubled at the speed of the frame transmitted from the broadcasting station. (L1 ', L2', ..) and the right image (R1 ', R2', ...) are displayed alternately.
예를 들어, 방송국에서 좌측 및 우측 영상의 가로 해상도를 각각 540 픽셀, 총 가로 해상도 1080 픽셀로 초당 60 프레임의 속도로 영상을 전송한다면, 입체 TV에서는 좌측 및 우측 영상의 가로 해상도를 각각 1080 픽셀로 늘린 다음에 초당 120 프레임의 속도로 좌측영상과 우측영상을 번갈아 디스플레이한다. For example, if a broadcasting station transmits images with 540 pixels of horizontal resolution of the left and right images, and 1080 pixels per second at a total horizontal resolution of 1080 pixels, on a stereoscopic TV, the horizontal resolution of left and right images is 1080 pixels, respectively. After increasing, the left image and the right image are displayed alternately at a speed of 120 frames per second.
또한, 입체 TV는 좌측영상과 우측영상을 번갈아 디스플레이하면서 이에 동기를 맞추어서 동기신호를 출력하고, 셔터 안경에서는 이 동기신호에 맞추어서 셔터를 번갈아 오픈함으로써 입체 영상을 구현하게 된다.
In addition, the stereoscopic TV alternately displays the left image and the right image and outputs a synchronization signal in synchronization with this, and the shutter glasses realize a stereoscopic image by alternately opening the shutter in accordance with the synchronization signal.
이러한 종래의 입체 TV 방식에서는, 방송국에서 받은 영상신호의 초당 프레임 속도의 두배의 속도로 화면에 표시하여야 하므로, 기존의 2차원 평면 방식의 TV에서는 구현이 불가능하다. 따라서, 소비자들은 입체 TV 영상을 즐기기 위해서 별도의 입체 TV를 구입하여야 하므로, 입체 TV 방송의 저변 확대에 걸림돌이 되고 있다. 본 발명은 이러한 점을 감안하여 이루어진 것으로서, 기존의 TV나 PC 모니터 등의 2차원 디스플레이 장치에서도 입체 방송을 즐길 수 있도록 하는 셋톱박스, 입체영상 방송 수신시스템 및 셔터안경를 제공하는 것을 목적으로 한다.In the conventional stereoscopic TV system, since the image signal received from a broadcasting station should be displayed on the screen at twice the frame rate per second, it is impossible to implement the conventional 2D flat TV. Therefore, consumers have to purchase a separate stereoscopic TV in order to enjoy stereoscopic TV images, which is an obstacle to expanding the base of stereoscopic TV broadcasting. SUMMARY OF THE INVENTION The present invention has been made in view of this point, and an object of the present invention is to provide a set-top box, a stereoscopic image broadcasting reception system, and shutter glasses, which enable stereoscopic broadcasting to be enjoyed even in a conventional two-dimensional display apparatus such as a TV or a PC monitor.
방송국에서는 좌측 영상과 우측 영상을 각각 통상의 프레임 속도의 반의 속도로 번갈아 전송한다. 결국 좌측 영상과 우측 영상을 합하면 통상의 프레임 속도가 된다. 이 신호를 수신한 셋톱박스는 연결된 2D 방송용 디스플레이 장치에 맞는 신호로 변환하여 출력하면서 셔터안경을 위한 동기신호를 발생시킨다. 사용자는 셋톱박스용 리모콘에 마련된 입력수단이나 셔터안경에 마련된 입력수단을 이용하여 동기신호의 지연시간을 조절함으로써 디스플레이 장치에 좌우 영상이 표시되는 타이밍과 셔터안경의 온오프 타이밍을 동기화시킨다.The broadcasting station alternately transmits the left image and the right image at half the normal frame rate. As a result, the sum of the left image and the right image results in a normal frame rate. The set-top box receiving the signal converts the signal into a signal suitable for the connected 2D broadcasting display device and generates a synchronization signal for the shutter glasses. The user synchronizes the timing of displaying the left and right images on the display device with the on / off timing of the shutter glasses by adjusting the delay time of the synchronization signal using the input means provided on the set-top box remote controller or the input means provided on the shutter glasses.
본 발명의 일실시예에 따른 셋톱박스는, 좌측 영상과 우측 영상이 번갈아 나타나는 입체영상 방송신호를 수신하여 복조하는 방송수신부와, 송수신부로부터의 복조된 신호를 설정된 디스플레이 장치에 맞는 신호로 변환하여 출력하는 TV신호 출력부와, TV신호 출력부로부터의 신호에 맞추어 셔터안경의 온오프를 제어하기 위한 동기신호를 생성하는 동기신호 생성부를 구비한다. 또한, 입력수단과 무선신호 출력수단을 구비한 리모콘과, 리모콘으로부터 셋톱박스 제어신호를 수신하는 리모콘신호 수신부와, 리모콘신호 수신부로부터의 신호에 따라 셋톱박스의 기능을 제어하는 제어부를 더 구비할 수 있다.The set-top box according to an embodiment of the present invention includes a broadcast receiver that receives and demodulates a stereoscopic video broadcast signal in which a left image and a right image are alternately converted, and converts a demodulated signal from a transceiver to a signal suitable for a set display device. And a synchronizing signal generating unit for generating a synchronizing signal for controlling the on / off of the shutter glasses in accordance with the signal from the TV signal output unit. The apparatus may further include a remote controller having an input unit and a wireless signal output unit, a remote controller signal receiving unit for receiving the set top box control signal from the remote controller, and a controller for controlling the function of the set top box according to the signal from the remote controller signal receiving unit. have.
실시예에 따라서는, 리모콘에는 동기신호의 지연시간을 조절하기 위한 동기조절수단이 더 구비될 수 있으며, 제어부는 동기조절수단의 조작에 따라 동기신호 생성부에서 생성되는 동기신호의 지연시간을 조절하도록 동기신호 생성부를 제어한다. According to an embodiment, the remote controller may further include a synchronization adjusting means for adjusting the delay time of the synchronization signal, and the controller may adjust the delay time of the synchronization signal generated by the synchronization signal generator according to the operation of the synchronization control means. The synchronization signal generator is controlled.
동기신호 생성부는 셋톱박스 내에 구성할 수도 있지만, USB 동글 형태로 구성되어 기존의 셋톱박스의 USB 단자에 연결되도록 구현될 수도 있고, 별도의 장치로 구성되어 셋톱박스의 콤포넌트 Y신호로부터 동기신호를 생성하도록 구성될 수도 있다. The synchronization signal generator may be configured in the set-top box, but may be configured in the form of a USB dongle to be connected to the USB terminal of the existing set-top box, or may be configured as a separate device to generate the synchronization signal from the component Y signal of the set-top box. It may be configured to.
셋톱박스는 조절된 지연시간을 비휘발성 메모리에 저장하여두고 다음번 동작시에 비휘발성 메모리에 저장된 지연시간을 사용할 수 있다. The set-top box stores the adjusted delay time in nonvolatile memory and uses the delay time stored in the nonvolatile memory for the next operation.
본 발명의 다른 실시예에서는, 무선으로 동기신호를 수신하기 위한 동기신호수신부와, 동기신호수신부에서 수신된 동기신호를 지연시키기 위한 동기조절수단과, 동기조절수단으로부터의 출력에 맞추어서, 번갈아 나타나는 좌측 영상 및 우측 영상으로 이루어지는 입체영상의 좌측 영상만이 가시되도록 개폐되는 좌안 셔터와, 동기조절수단으로부터의 출력에 맞추어서 입체영상의 우측 영상만이 가시되도록 개폐되는 우안 셔터를 구비하는 셔터안경이 사용될 수 있다.In another embodiment of the present invention, the left side alternately appears in accordance with a synchronization signal receiver for wirelessly receiving a synchronization signal, synchronization control means for delaying the synchronization signal received at the synchronization signal receiver, and an output from the synchronization control means. A shutter eyeglass having a left eye shutter that opens and closes so that only the left image of the stereoscopic image composed of the image and the right image is visible, and a right eye shutter that opens and closes so that only the right image of the stereoscopic image is visible in accordance with the output from the synchronization adjusting means. have.
동기조절수단은 하나의 버튼으로 구성될 수 있으며, 이 버튼을 누를 때마다 지연시간을 일정 단위만큼 계속 증가시키다가 최대 지연시간까지 다다르면 다시 0 msec부터 다시 시작하도록 구성할 수 있다. 또는, 동기조절수단을 볼륨으로 구성하여, 볼륨값에 따라 정해지는 지연시간만큼 동기신호를 지연시키도록 구성하는 것도 가능하다.
Synchronization control means may be composed of a single button, and each time the button is pressed, the delay time is continuously increased by a predetermined unit and can be configured to start again from 0 msec when the maximum delay time is reached. Alternatively, the synchronization adjusting means may be configured in a volume so as to delay the synchronization signal by a delay time determined according to the volume value.
기존의 TV나 PC 모니터 등의 2차원 디스플레이 장치에서도 입체 방송을 즐길 수 있다.Stereoscopic broadcasting can also be enjoyed in conventional two-dimensional display devices such as TVs and PC monitors.
도 1a는 종래의 입체TV방송시스테멩서 방송국에서 송출되는 입체영상신호의 형식을 보여주는 개념도이고, 도 1b는 도 1a의 입체영상신호를 수신한 입체TV에서 화면에 좌우영상을 디스플레이하는 형식을 보여주는 개념도이다.
도 2는 본 발명의 일실시예에 따른 입체TV 방송 시스템의 전체 구성을 보여주는 개략 블록도이다.
도 3은 본 발명에 따른 입체영상신호의 형식을 보여주는 개념도이다.
도 4는 본 발명의 일실시예에 따른 셋톱박스의 내부 구성을 보여주는 개략 블록도이다.
도 5는 Vsync 신호와 동기신호와의 관계를 보여주는 도면이다.FIG. 1A is a conceptual diagram illustrating a format of a stereoscopic video signal transmitted from a conventional stereoscopic TV broadcasting system, and FIG. 1B illustrates a format of displaying left and right images on a screen in a stereoscopic TV receiving the stereoscopic video signal of FIG. 1A. Conceptual diagram.
Figure 2 is a schematic block diagram showing the overall configuration of a stereoscopic TV broadcasting system according to an embodiment of the present invention.
3 is a conceptual diagram illustrating a format of a stereoscopic image signal according to the present invention.
Figure 4 is a schematic block diagram showing the internal configuration of a set top box according to an embodiment of the present invention.
5 illustrates a relationship between a Vsync signal and a synchronization signal.
이하, 도면을 참조하여 본 발명의 바람직한 실시예에 대해서 상세히 설명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 2는 2차원 디스플레이 장치에서의 입체영상 표시를 위한 본 발명의 시스템의 구성예이다.2 is a configuration example of a system of the present invention for displaying a stereoscopic image in a two-dimensional display device.
방송국(100)에서는 좌측 영상(L1", L2",...)과 우측 영상(R1", R2",...)이 통상의 프레임 속도로 번갈아 나타나는 입체영상신호(S1)를 방송한다. 즉, 초당 60 프레임(f=1/60초)으로 2차원 영상을 송출하는 방송 시스템의 경우에는 초당 30 프레임의 좌측 영상과 초당 30 프레임의 우측 영상이 번갈아 가면서 나타나서 총 초당 60 프레임의 영상을 구성하게 된다. 방송국(100)으로는 지상파 방송, 위성방송, 위성 또는 지상파 DMB 방송, 케이블 방송, IP TV 방송 등의 다양한 방송을 위한 방송국이 모두 해당될 수 있으며, 본 발명은 특정 방송 형태에 한정되지 않는다.The
한편, 디지털 방송의 경우에는 송출되는 영상압축신호의 특정 영역에 좌우 영상정보를 삽입하여 송출하도록 할 수 있다. 예를 들면, MPEG 방식의 영상압축방식이 사용되는 경우에는 MPEG의 사용자 영역에 현재 프레임이 좌측 영상인지 우측 영상인지의 정보를 삽입할 수 있다. On the other hand, in the case of digital broadcasting, the left and right image information may be inserted into a specific region of the image compressed signal to be transmitted. For example, when the MPEG video compression method is used, information on whether the current frame is the left video or the right video may be inserted in the user area of the MPEG.
셋톱박스(200)는 방송국(100)으로부터의 입체영상신호(S1)를 수신하여 이를 디스플레이 장치(300)에 맞는 영상신호(S2)로 변환하여 디스플레이 장치(300)로 출력한다. 즉, 셋톱박스(200)는 위성방송, 케이블방송, IP-TV 방송 등을 수신하여 텔레비전 수상기, PC 모니터 등의 디스플레이 장치(300)에서 볼 수 있는 신호로 변환하는 것으로서, 본 발명에서는 입체영상신호(S1)를 수신하여 영상신호(S2)로 출력한다. 이 영상신호(S2)는 컴포지트(composite) 신호일 수도 있고, S-Video 신호, RGB 등의 컴포넌트 신호 등 다양한 신호형태가 가능하며, 본 발명은 특정 신호형태에 한정되지 않는다. The
셋톱박스(200)에서 디스플레이 장치(300)로 출력되는 영상신호(S2) 또한 도 3에 보인 것처럼 좌측 영상과 우측 영상이 통상의 프레임 속도로 번갈아가면서 나타나는 형태를 가진다. 방송국(100)으로부터의 입체영상신호(S1)에 좌우화면정보에 포함되어 있는 경우에는 컴포넌트 출력 Y 신호의 V-blanking에 좌우영상정보를 삽입하여 전송할 수 있다. 좌우영상정보는 반드시 필요한 것은 아니나, 이를 이용하면 동기를 위한 지연시간을 줄일 수 있다.The image signal S2 output from the set
디스플레이 장치(300)는 기존의 2차원 영상을 위한 아날로그 및 디지털 TV, 모니터 등이 될 수 있다. 물론, 기존의 2차원 방송영상을 디스플레이할 수 있는 입체 TV도 적용될 수 있다.The
디스플레이 장치(300)는 셋톱박스(200)로부터의 영상신호(S2)를 수신하여 그대로 화면에 디스플레이한다. 즉, 좌측 영상과 우측 영상이 통상의 프레임 속도로 번갈아가면서 디스플레이되게 된다.The
사용자는 이렇게 디스플레이되는 영상을 셔터 안경(400)을 쓰고 시청하게 된다. 셔터 안경(400)이 정상적으로 동작하기 위해서는 왼쪽 안경과 오른쪽 안경을 열고 닫기 위한 동기신호(Sync)가 필요한데, 본 발명에서는 셋톱박스(200)에서 이러한 동기신호(Sync)를 제공한다.The user wears the
시청자는 셋톱박스(200)와 함께 제공되는 리모콘(260)을 사용하여 셋톱박스(200)의 기능을 제어한다. 본 발명의 일실시예에서는 통상적인 셋톱박스(200)의 기능 이외에도 3D 모드의 선택이나 동기신호(Sync)의 발생과 관련된 기능을 리모콘(260)으로 제어하도록 구성할 수 있다.
The viewer controls the function of the set-
이하에서는 셋톱박스에 셔터 안경용 동기신호 발생 기능을 추가하기 위한 실시예에 대해서 설명한다.Hereinafter, an embodiment for adding a synchronization signal generation function for shutter glasses to the set top box will be described.
도 4는 본 발명의 일실시예에 따른 셋톱박스(200)의 내부 구성을 보여주는 도면이다. 4 is a view showing the internal configuration of the set-
셋톱박스(200)는 방송을 수신하기 위한 방송수신부(220)를 구비한다. 방송으로는 위성방송, 케이블방송, IP-TV 방송 등 다양한 방송이 해당될 수 있으며, 본 발명은 특정 방송형식에 한정되지 않는다. 제어부(210)는 리모콘신호 수신부(250)를 통해 수신되는 사용자의 제어정보에 따라 셋톱박스(200) 전체의 동작을 제어한다. 리모콘(260)으로 제어할 수 있는 기능으로는 기기의 온/오프, 채널 선택 등의 통상적인 기능 이외에도 동기신호(Sync)의 생성과 관련된 기능을 제어할 수도 있다. The set
셋톱박스(200)는 2D 모드와 3D 모드에서 동작할 수 있다. 2D 모드에서는 종래의 셋톱박스와 동일하게 동작을 하며, 3D 모드에서는 본 발명의 실시예와 같은 동작을 수행한다.The set
TV신호출력부(230)는 제어부(210)의 제어에 따라 방송수신부(220)를 통해 수신된 선택된 채널의 방송신호를 디스플레이 장치(300)에 맞는 영상 및 오디오 신호로 변환하여 출력한다. 본 발명의 실시예에서 방송수신부(220)로 수신되는 입체영상신호와 TV신호출력부(230)에서 출력되는 영상신호는 도 3과 같은 형태를 취한다.The TV
동기신호생성부(240)는 TV신호출력부(230)로부터의 신호에 맞추어 셔터 안경(400)을 위한 동기신호(Sync)를 생성한다. 동기신호(Sync) 생성은 TV신호출력부(230)로부터의 신호중에서 Vsync를 이용할 수도 있다. 동기신호(Sync)는 적외선 또는 블루투스 신호로 출력된다. 동기신호는 좌측 및 우측 안경을 위해 각각 발생할 수도 있고, 좌우측 안경중의 어느 하나만을 위해 발생할 수도 있다. 또한, 매 프레임마다 동기신호를 발생할 수도 있고, 예를 들면 1, 2 프레임에 동기신호를 발생하고, 3, 4 프레임은 쉰 다음에 5, 6 프레임에 동기신호를 발생하고 하는 것처럼 다양한 패턴으로 동기신호를 발생할 수도 있다. The
동기신호생성부(240)는 셋톱박스(200) 내에 구성될 수도 있지만, USB 동글(dongle) 형태로 제작되어 기존의 셋톱박스에 연결되도록 구성될 수도 있고, 별도의 장치로 제작되어 기존 셋톱박스의 콤포넌트 Y 신호단자에 연결되도록 구현하는 것도 가능하다. USB 동글(dongle) 형태로 제작하는 경우에는 USB 단자로 출력되는 Vsync 신호를 감지하여 동기신호를 적외선이나 블루투스 방식으로 출력하도록 할 수 있다. 동기신호생성부(240)가 별도의 장치로 제작되어 기존 셋톱박스의 콤포넌트 Y 신호단자에 연결되도록 구현하는 경우에 동기신호생성부(240)는 기존 셋톱박스의 콤포넌트 Y 신호에 따라 동기신호를 생성하여 적외선이나 블루투스 방식으로 출력하며, 셋톱박스로부터 전력을 공급받을 수 없으므로 별도의 전원이 필요하다.Synchronization
그런데, 셋톱박스(200)에서 디스플레이 장치(300)로 영상신호(S2)를 출력하는 시점과 디스플레이 장치(300)에서 실제로 영상이 디스플레이되는 시점과는 차이가 발생한다. 디스플레이 장치(300)에서 영상신호(S2)를 처리하고 화면에 표시하는데까지는 시간이 걸리기 때문이다, 또한, 이러한 지연 시간은 디스플레이 장치의 종류마다 다를 수 있기 때문에 셋톱박스(200)에서 출력하는 동기신호(Sync)를 실제로 디스플레이 장치(300)에서 화면이 출력되는 타이밍에 맞추는 것이 어려울 수 있다. However, a difference occurs between the time point at which the image signal S2 is output from the set
이하에서는 동기신호(Sync)를 실제로 디스플레이 장치(300)에서 화면이 출력되는 타이밍에 맞추기 위한 실시예에 대해서 설명한다.
Hereinafter, an embodiment for matching the synchronization signal Sync to the timing at which the screen is actually output from the
1) 리모콘을 이용하여 셋톱박스의 동기신호를 조절하는 방법1) How to adjust the sync signal of the set-top box using the remote control
3D 모드에서는 셋톱박스(200)가 출력을 자동으로 넌인터레이스드(non-interlaced) 방식(예를 들면, 720p나 1080p)으로 전환한다. 초당 60 프레임의 1280*720p의 경우에 H (Horizontal), V (Vertical) 블랭킹(blanking)을 포함하며 총 주파수는 1650*750*60 = 74.25 MHz가 된다. 따라서, 한 프레임 시간 16.66 msec (= 1/60 sec) 중에서 Vsync 구간은 30*1650*(1/74.25M) = 0.66 msec가 된다. 한 프레임은 16.66 msec이고 좌측 영상과 우측 영상이 반복되므로, 한쪽 영상의 동기를 맞추기 위해서는 최대 두 프레임을 지연하여야 하므로, 2 x 16.66 msec = 33.33 msec의 시간 조절이 필요하다. In the 3D mode, the set
즉, 도 5에서 볼 수 있는 것처럼, 셋톱박스의 Vsync 신호는 1/60초마다 나타나며, 좌측 영상(또는 우측 영상)을 위한 동기신호는 1/30초마다 나타나야 한다. 그런데, 디스플레이 장치(300)에 제공되는 Vsync 신호가 나타나는 시점과 실제로 디스플레이 장치의 화면에 영상이 나타나기까지의 시점까지는 지연시간(N msec)이 있을 수 있으므로, 셔터안경(400)에 제공되는 동기신호(Sync)는 Vsync 신호가 나타나는 시점으로부터 N msec만큼 지연되어 나타나야 한다. 그리고, 이 지연시간은 최대 1/30 sec 즉, 33.33 msec이다. That is, as shown in Figure 5, the Vsync signal of the set-top box appears every 1/60 seconds, the synchronization signal for the left image (or the right image) should appear every 1/30 seconds. However, since there may be a delay time (N msec) between the time when the Vsync signal provided to the
동기 조절은, 사용자가 3D 모드로 전환한 후에 셔터 안경(400)을 착용한 상태에서 리모콘(260)의 동기조절버튼을 눌러서 3D가 가장 잘보이는 상태로 조절하도록 할 수 있다. 동기조절버튼은 두 개의 버튼으로 구성하여 지연시간을 줄이거나 늘이도록 할 수도 있고, 또는 하나의 버튼으로 구성하여 이 버튼을 누를 때마다 지연시간을 0 msec부터 33.33 msec까지 일정 단위(예를 들면 1 msce)만큼 계속 증가(또는 감소)시키다가 최대 지연시간(또는 0 msec)까지 다다르면 다시 0 msec(또는 최대 지연시간)부터 다시 시작하도록 구성하는 것도 가능하다. 이 경우에도 초기지연시간(default delay time)을 0 msec로 하거나, 최대지연시간으로 하거나 또는 통계적으로 구한 최적의 값으로 하는 것도 가능하다. 또한, 버튼 대신에 볼륨이나 조그 다이얼 등의 형태로 구성하는 것도 가능하다. 또한, 하나의 동기조절수단을 이용하여 개략적으로 동기를 맞춘 후에 다른 동기조절수단을 이용하여 좀더 세밀하게 동기를 맞추도록 구현하는 것도 가능하다.Synchronization control may be adjusted to the state that the 3D is best seen by pressing the synchronization control button of the
사용자가 동기조절버튼을 누르면 리모콘신호 수신부(250)를 통해 수신한 제어부(210)는 이에 따라 도면에 점선으로 표시된 동기신호(Sync)와 Vsync와의 지연시간(N)을 조절한다. 사용자가 가장 적절하다고 판단한 시점에서 조절을 멈추면 그 시점에서의 지연시간이 결정된다. 이와 같이 설정된 지연시간은 셋톱박스(200)의 불활성 메모리에 저장해두고 다음번부터는 Vsync 신호에 맞추어 설정된 지연시간에 따라 동기신호(Sync)를 출력하도록 한다.
When the user presses the synchronization control button, the
2) 셔터 안경에 동기신호 지연 조절수단을 두는 방법2) How to put the synchronization signal delay adjusting means in the shutter glasses
셔터안경(400)은 일반적으로, 무선으로 동기신호를 수신하기 위한 동기신호수신부와, 동기신호수신부로부터의 출력에 맞추어서, 번갈아 나타나는 좌측 영상 및 우측 영상으로 이루어지는 입체영상의 좌측 영상만이 가시되도록 개폐되는 좌안 셔터와, 동기신호수신부로부터의 출력에 맞추어서 입체영상의 우측 영상만이 가시되도록 개폐되는 우안 셔터를 구비한다. 본 실시예는 셔터 안경(400)에 동기신호의 지연시간을 조절할 수 있는 수단을 두고, 사용자가 이를 이용하여 입체영상이 가장 최적의 상태로 보이는 상태를 설정하도록 하는 방법이다. In general, the
즉, 셔터 안경(400)의 한쪽에 동기조절수단을 마련하고, 사용자가 이 동기조절수단을 조작하면 그에 따라 입력되는 동기신호(Sync)로부터 셔터 안경(400)의 좌안셔터와 우안셔터의 개폐를 제어하기까지의 지연시간을 조절하는 것이다.That is, a synchronization adjusting means is provided on one side of the
예를 들어, 초당 60 프레임의 속도로 좌측 영상과 우측 영상이 번갈아가면서 나타나는 경우(좌측 영상 30 프레임, 우측 영상 30 프레임)에, 셋톱박스는 좌측 또는 우측 동기신호를 도 5에 도시한 것처럼 Vsync 신호가 두번 나타날 때마다 한번씩 출력하게 되며, 이 동기신호를 수신한 셔터 안경(400)은 사용자의 동기조절수단의 조작에 따른 지연시간(N msec)만큼 동기신호를 지연시켜서, 점선으로 표시된 지연된 동기신호에 따라 안경의 온오프 동작을 수행하는 것이다.For example, when the left image and the right image appear alternately at a rate of 60 frames per second (left image 30 frames, right image 30 frames), the set-top box displays a left or right synchronization signal as shown in FIG. Is outputted once every two times, and the
셔터 안경에 마련되는 동기조절수단은 두 개의 버튼으로 구성하여 지연시간을 줄이거나 늘이도록 할 수도 있고, 또는 하나의 버튼으로 구성하여 이 버튼을 누를 때마다 지연시간을 0 msec부터 33.33 msec까지 일정 단위(예를 들면 1 msce)만큼 계속 증가(또는 감소)시키다가 최대 지연시간(또는 0 msec)까지 다다르면 다시 0 msec(또는 최대 지연시간)부터 다시 시작하도록 구성하는 것도 가능하다. 이 경우에도 초기지연시간(default delay time)을 0 msec로 하거나, 최대지연시간으로 하거나 또는 통계적으로 구한 최적의 값으로 하는 것도 가능하다. 또한, 버튼 대신에 볼륨이나 슬라이드 볼륨 등의 형태로 구성하는 것도 가능하다. 이 경우에는 사용자가 조작한 볼륨값에 따라 정해지는 지연시간만큼 동기신호를 지연하도록 할 수 있다. 또한, 하나의 동기조절수단을 이용하여 개략적으로 동기를 맞춘 후에 다른 동기조절수단을 이용하여 좀더 세밀하게 동기를 맞추도록 구현하는 것도 가능하다.Synchronization control means provided in the shutter glasses may be configured to reduce or increase the delay time by configuring two buttons, or by configuring one button each time the delay time from 0 msec to 33.33 msec It can also be configured to continuously increase (or decrease) by (e.g., 1 msce) and start again at 0 msec (or maximum delay) once the maximum delay (or 0 msec) is reached. In this case, it is also possible to set the default delay time to 0 msec, the maximum delay time, or the optimal value statistically obtained. It is also possible to configure in the form of a volume or a slide volume instead of a button. In this case, the synchronization signal can be delayed by a delay time determined according to the volume value operated by the user. In addition, it is also possible to implement to synchronize more precisely by using the other synchronization control means after synchronizing roughly using one synchronization control means.
이상, 본 발명을 몇가지 실시예를 사용하여 설명하였으나, 본 발명은 특정 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 다양하게 수정 및 변형하여 적용할 수 있음은 물론이다.
The present invention has been described above using several embodiments, but the present invention is not limited to the specific embodiments, and those skilled in the art to which the present invention pertains may be variously modified and modified. Of course.
100 방송국
200 셋톱박스
210 제어부
220 방송수신부
230 TV신호 출력부
240 동기신호 생성부
250 리모콘신호 수신부
260 리모콘
300 디스플레이
400 셔터안경100 stations
200 set top boxes
210 control unit
220 broadcasting receiver
230 TV signal output
240 synchronization signal generator
250 Remote control signal receiver
260 remote control
300 display
400 Shutter Glasses
Claims (22)
방송수신부로부터의 복조된 신호를 설정된 디스플레이 장치에 맞는 신호로 변환하여 출력하는 TV신호 출력부와,
TV신호 출력부로부터의 신호에 맞추어 셔터안경의 온오프를 제어하기 위한 동기신호를 생성하는 동기신호 생성부와,
입력수단과 무선신호 출력수단을 구비한 리모콘과,
상기 리모콘으로부터 셋톱박스 제어신호를 수신하는 리모콘신호 수신부와,
리모콘신호 수신부로부터의 신호에 따라 셋톱박스의 기능을 제어하는 제어부를 구비하며,
상기 리모콘에는 동기신호의 지연시간을 조절하기 위한 동기조절수단이 더 구비되며,
상기 제어부는 상기 동기조절수단의 조작에 따라 동기신호 생성부에서 생성되는 동기신호의 지연시간을 조절하도록 동기신호 생성부를 제어하는 것을 특징으로 하는 셋톱박스.A broadcast receiver which receives and demodulates a stereoscopic video broadcast signal in which left and right images are alternately displayed;
A TV signal output unit for converting the demodulated signal from the broadcast receiver into a signal suitable for the set display device and outputting the signal;
A synchronization signal generation unit for generating a synchronization signal for controlling on / off of the shutter glasses in accordance with a signal from the TV signal output unit;
A remote control having an input means and a wireless signal output means,
A remote control signal receiver for receiving a set top box control signal from the remote controller;
The control unit for controlling the function of the set-top box according to the signal from the remote control signal receiving unit,
The remote control is further provided with a synchronization control means for adjusting the delay time of the synchronization signal,
The control unit controls the synchronization signal generator to adjust the delay time of the synchronization signal generated by the synchronization signal generator in accordance with the operation of the synchronization control means.
상기 동기신호에 따라 좌측 및 우측 안경을 각각 온오프하는 셔터안경를 구비하며,
상기 셔터안경에는 상기 동기신호로부터 좌측 및 우측 안경을 온오프 시키기까지의 지연시간을 조절하기 위한 동기조절수단이 구비되는 입체영상 방송수신 시스템.A set-top box which receives a stereoscopic image broadcasting signal in which the left image and the right image are alternately received, converts the signal into a signal suitable for a display device, and generates a synchronization signal for controlling on / off of the shutter glasses according to the signal;
Shutter glasses for turning on and off the left and right glasses respectively according to the synchronization signal;
And the shutter glasses are provided with synchronization adjusting means for adjusting a delay time from turning the left and right glasses on and off from the synchronization signal.
상기 동기조절수단은 하나의 버튼으로 구성되며, 이 버튼을 누를 때마다 지연시간을 일정 단위만큼 계속 증가시키다가 최대 지연시간까지 다다르면 다시 0 msec부터 다시 시작하도록 구성되는 것인 입체영상 방송수신 시스템.The method of claim 11,
The synchronization control means is composed of a single button, each time the button is pressed continuously increases the delay time by a predetermined unit and reaches a maximum delay time is configured to start again from 0 msec again.
상기 동기조절수단은 볼륨으로 구성되며, 볼륨값에 따라 정해지는 지연시간만큼 동기신호를 지연시키는 것인 입체영상 방송수신 시스템.The method of claim 11,
And the synchronization adjusting means comprises a volume, and delays the synchronization signal by a delay time determined according to the volume value.
상기 동기신호수신부에서 수신된 동기신호를 지연시키기 위한 동기조절수단과,
상기 동기조절수단으로부터의 출력에 맞추어서, 번갈아 나타나는 좌측 영상 및 우측 영상으로 이루어지는 입체영상의 좌측 영상만이 가시되도록 개폐되는 좌안 셔터와,
상기 동기조절수단으로부터의 출력에 맞추어서, 번갈아 나타나는 좌측 영상 및 우측 영상으로 이루어지는 입체영상의 우측 영상만이 가시되도록 개폐되는 우안 셔터
를 구비하는 셔터안경.A synchronization signal receiver for wirelessly receiving a synchronization signal;
Synchronization control means for delaying the synchronization signal received by the synchronization signal receiver;
A left eye shutter which is opened and closed so that only the left image of the stereoscopic image, which is composed of alternating left and right images, is visible in accordance with the output from the synchronization adjusting means;
In accordance with the output from the synchronization adjusting means, the right eye shutter opens and closes so that only the right image of the stereoscopic image, which consists of alternating left and right images, is visible.
Shutter glasses having a.
상기 동기조절수단은 하나의 버튼으로 구성되며, 이 버튼을 누를 때마다 지연시간을 일정 단위만큼 계속 증가시키다가 최대 지연시간까지 다다르면 다시 0 msec부터 다시 시작하도록 구성되는 것인 셔터안경.The method of claim 20,
The synchronization control means is composed of one button, the shutter glasses are configured to continue to increase the delay time by a predetermined unit every time the button is pressed and to start again from 0 msec when reaching the maximum delay time.
상기 동기조절수단은 볼륨으로 구성되며, 볼륨값에 따라 정해지는 지연시간만큼 동기신호를 지연시키는 것인 셔터안경.
The method of claim 20,
The synchronization control means is configured to the volume, the shutter glasses to delay the synchronization signal by a delay time determined according to the volume value.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020100029455A KR101121603B1 (en) | 2010-03-31 | 2010-03-31 | Set-top box, stereographic broadcasting receiving system and shutter glass for displaying stereographic images in conventional two-dimensional display device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020100029455A KR101121603B1 (en) | 2010-03-31 | 2010-03-31 | Set-top box, stereographic broadcasting receiving system and shutter glass for displaying stereographic images in conventional two-dimensional display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20110109647A KR20110109647A (en) | 2011-10-06 |
| KR101121603B1 true KR101121603B1 (en) | 2012-03-09 |
Family
ID=45391669
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020100029455A Expired - Fee Related KR101121603B1 (en) | 2010-03-31 | 2010-03-31 | Set-top box, stereographic broadcasting receiving system and shutter glass for displaying stereographic images in conventional two-dimensional display device |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101121603B1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150062315A1 (en) * | 2012-04-18 | 2015-03-05 | The Regents Of The University Of California | Simultaneous 2d and 3d images on a display |
| WO2014210033A2 (en) | 2013-06-24 | 2014-12-31 | The Regents Of The University Of California | Practical two-frame 3d+2d tv |
| KR101722213B1 (en) * | 2014-10-30 | 2017-03-31 | 주식회사 에이치앤디 | 3D video converting system |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6456432B1 (en) | 1990-06-11 | 2002-09-24 | Reveo, Inc. | Stereoscopic 3-d viewing system with portable electro-optical viewing glasses and shutter-state control signal transmitter having multiple modes of operation for stereoscopic viewing of 3-d images displayed in different stereoscopic image formats |
-
2010
- 2010-03-31 KR KR1020100029455A patent/KR101121603B1/en not_active Expired - Fee Related
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6456432B1 (en) | 1990-06-11 | 2002-09-24 | Reveo, Inc. | Stereoscopic 3-d viewing system with portable electro-optical viewing glasses and shutter-state control signal transmitter having multiple modes of operation for stereoscopic viewing of 3-d images displayed in different stereoscopic image formats |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20110109647A (en) | 2011-10-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101370927B1 (en) | Method and apparatus for displaying images | |
| US20100182404A1 (en) | Three dimensional video reproduction apparatus, three dimensional video reproduction system, three dimensional video reproduction method, and semiconductor device for three dimensional video reproduction | |
| US20110122127A1 (en) | Method for changing play mode, method for changing display mode, and display apparatus and 3d image providing system using the same | |
| US9869875B2 (en) | 3D display device and selective image display method thereof | |
| KR20110115806A (en) | Display device and 3D glasses, and display system comprising same | |
| CN103188454A (en) | Apparatus and method for displaying | |
| JP2010081001A (en) | 2d compatible 3d display device and 3d viewing device | |
| JP5412404B2 (en) | Information integration device, information display device, information recording device | |
| KR101121603B1 (en) | Set-top box, stereographic broadcasting receiving system and shutter glass for displaying stereographic images in conventional two-dimensional display device | |
| KR20120023268A (en) | Display apparatus and image generating method thereof | |
| JPH0984057A (en) | Stereoscopic video equipment | |
| KR101885215B1 (en) | Display apparatus and display method using the same | |
| KR20110135053A (en) | 3D image quality improvement method and digital broadcast receiver accordingly | |
| US9294752B2 (en) | Dual mode user interface system and method for 3D video | |
| KR101638959B1 (en) | Display mode changing method, and display apparatus and 3D image providing system using the same | |
| JPH099296A (en) | Stereoscopic picture device | |
| KR101733488B1 (en) | Method for displaying 3 dimensional image and 3 dimensional image display device thereof | |
| EP2312860A2 (en) | Stereoscopic image providing method, apparatus and system | |
| KR20110037068A (en) | Stereoscopic Equipment and Picture Quality Control | |
| KR101078768B1 (en) | Display method and system for simultaneous viewing of multiple images | |
| KR20020028167A (en) | Real time 3D screen conversion and watching apparatus | |
| KR20130077746A (en) | Display apparatus and method for controlling thereof | |
| KR101664403B1 (en) | Synchronization Apparatus, Synchronization Method And Synchronization System, and 3D Display Apparatus Using The Same | |
| KR20120011520A (en) | 3D image display method and 3D image display device accordingly | |
| KR101563944B1 (en) | Liquid crystal shutter glasses for watching multi picture having darkness control function |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| PA0109 | Patent application |
St.27 status event code: A-0-1-A10-A12-nap-PA0109 |
|
| PA0201 | Request for examination |
St.27 status event code: A-1-2-D10-D11-exm-PA0201 |
|
| D13-X000 | Search requested |
St.27 status event code: A-1-2-D10-D13-srh-X000 |
|
| D14-X000 | Search report completed |
St.27 status event code: A-1-2-D10-D14-srh-X000 |
|
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
St.27 status event code: A-1-2-D10-D21-exm-PE0902 |
|
| E13-X000 | Pre-grant limitation requested |
St.27 status event code: A-2-3-E10-E13-lim-X000 |
|
| P11-X000 | Amendment of application requested |
St.27 status event code: A-2-2-P10-P11-nap-X000 |
|
| P13-X000 | Application amended |
St.27 status event code: A-2-2-P10-P13-nap-X000 |
|
| PG1501 | Laying open of application |
St.27 status event code: A-1-1-Q10-Q12-nap-PG1501 |
|
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
St.27 status event code: A-1-2-D10-D22-exm-PE0701 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
St.27 status event code: A-2-4-F10-F11-exm-PR0701 |
|
| PR1002 | Payment of registration fee |
Fee payment year number: 1 St.27 status event code: A-2-2-U10-U11-oth-PR1002 |
|
| PG1601 | Publication of registration |
St.27 status event code: A-4-4-Q10-Q13-nap-PG1601 |
|
| PN2301 | Change of applicant |
St.27 status event code: A-5-5-R10-R11-asn-PN2301 St.27 status event code: A-5-5-R10-R13-asn-PN2301 |
|
| FPAY | Annual fee payment |
Payment date: 20141224 Year of fee payment: 4 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 4 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| FPAY | Annual fee payment |
Payment date: 20160122 Year of fee payment: 5 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 5 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 6 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| P22-X000 | Classification modified |
St.27 status event code: A-4-4-P10-P22-nap-X000 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-5-5-R10-R18-oth-X000 |
|
| FPAY | Annual fee payment |
Payment date: 20180219 Year of fee payment: 7 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 7 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| FPAY | Annual fee payment |
Payment date: 20190221 Year of fee payment: 8 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 8 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| FPAY | Annual fee payment |
Payment date: 20200220 Year of fee payment: 9 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 9 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| PR1001 | Payment of annual fee |
Fee payment year number: 10 St.27 status event code: A-4-4-U10-U11-oth-PR1001 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-5-5-R10-R18-oth-X000 |
|
| PN2301 | Change of applicant |
St.27 status event code: A-5-5-R10-R11-asn-PN2301 St.27 status event code: A-5-5-R10-R13-asn-PN2301 |
|
| PC1903 | Unpaid annual fee |
Not in force date: 20220223 Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE St.27 status event code: A-4-4-U10-U13-oth-PC1903 |
|
| PC1903 | Unpaid annual fee |
Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE Not in force date: 20220223 St.27 status event code: N-4-6-H10-H13-oth-PC1903 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-5-5-R10-R18-oth-X000 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-5-5-R10-R18-oth-X000 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-5-5-R10-R18-oth-X000 |