[go: up one dir, main page]

KR101940289B1 - Video search system based on information - Google Patents

Video search system based on information Download PDF

Info

Publication number
KR101940289B1
KR101940289B1 KR1020170046902A KR20170046902A KR101940289B1 KR 101940289 B1 KR101940289 B1 KR 101940289B1 KR 1020170046902 A KR1020170046902 A KR 1020170046902A KR 20170046902 A KR20170046902 A KR 20170046902A KR 101940289 B1 KR101940289 B1 KR 101940289B1
Authority
KR
South Korea
Prior art keywords
search
video
moving picture
search keyword
contents
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020170046902A
Other languages
Korean (ko)
Other versions
KR20180114769A (en
Inventor
손영석
Original Assignee
손영석
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 손영석 filed Critical 손영석
Priority to KR1020170046902A priority Critical patent/KR101940289B1/en
Publication of KR20180114769A publication Critical patent/KR20180114769A/en
Application granted granted Critical
Publication of KR101940289B1 publication Critical patent/KR101940289B1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/7867Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, title and artist information, manually generated time, location and usage information, user ratings
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/74Browsing; Visualisation therefor
    • G06F16/745Browsing; Visualisation therefor the internal structure of a single video sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 사용자가 검색하고자 하는 내용이 동영상 파일 내의 특정한 내용에 해당하는 경우, 그 특정한 내용이 반영된 구간의 장면만이 재생되도록 제어할 뿐만 아니라 수집된 동영상 컨텐츠에서 검색키워드를 포함하는 문장의 대화내용에 따른 동영상 컨텐츠 재생시간의 증감을 임의적으로 조절하여 사용가능하고, 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드에 속하는 동영상 컨텐츠의 출처 및 장르도 선별하여 검색가능하며, 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자를 선별하여 검색가능하고, 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 발성하는 대화자가 표현하는 비언어적 표현정보가 속하는 동영상 컨텐츠만 선별하여 안내하여 줌으로써, 동영상 검색효율을 가일층 향상시켜주는 내용을 기반으로 하는 동영상 검색시스템에 관한 것으로, 검색키워드를 이용하여 동영상 검색을 요청하는 동영상 검색자 단말기(100)와; 인터넷 상에서 서비스되는 동영상 컨텐츠를 저장관리하는 동영상 저장서버(200)들과; 상기 동영상 검색자 단말기(100)로부터 동영상 검색 요청에 의해 전송된 검색키워드를 토대로 상기 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정하여 상기 동영상 검색자 단말기(100)에 제공함으로써, 상기 동영상 검색자 단말기(100)에서 그 제공되는 동영상 컨텐츠를 시청 시 검색키워드 재생구간 부문만 재생되도록 제어하는 동영상 검색서버(300);로 이루어진다.The present invention controls not only the scene of the section in which the specific content is reflected but also the content of the sentence including the search keyword in the collected video contents when the content to be searched by the user corresponds to a specific content in the video file The source and the genre of the video content belonging to the search keyword designated by the user can be selected and searched when searching for the video content, And a search engine for searching for a searcher who speaks a search keyword designated by a user among the collected video contents including search keywords and searching for a search keyword of a video content to which non- By selection By giving to my relates to a video search system of the video search efficiency based on the information that can enhance gailcheung, video requesting the video search using a search keyword, the searcher terminal 100 and; Video storage servers 200 for storing and managing moving picture contents served on the Internet; The mobile terminal 100 collects the moving image content in which the search keyword is ignited among the moving image contents stored and managed in the moving image storage servers 200 based on the search keyword transmitted by the moving image search request from the moving image search terminal 100, The video searcher terminal 100 sets the search keyword playback period, which is a playback period in which the search keyword is ignited, to the video searcher terminal 100, And a moving image search server 300 that controls only the playback section to be played back.

Description

내용을 기반으로 하는 동영상 검색시스템{Video search system based on information}Video search system based on information "

본 발명은 사용자가 검색하고자 하는 내용이 동영상 파일 내의 특정한 내용에 해당하는 경우, 그 특정한 내용이 반영된 구간의 장면만이 재생되도록 제어할 뿐만 아니라 수집된 동영상 컨텐츠에서 검색키워드를 포함하는 문장의 대화내용에 따른 동영상 컨텐츠 재생시간의 증감을 임의적으로 조절하여 사용가능하고, 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드에 속하는 동영상 컨텐츠의 출처 및 장르도 선별하여 검색가능하며, 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자를 선별하여 검색가능하고, 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 발성하는 대화자가 표현하는 비언어적 표현정보가 속하는 동영상 컨텐츠만 선별하여 안내하여 줌으로써, 동영상 검색효율을 가일층 향상시켜주는 내용을 기반으로 하는 동영상 검색시스템에 관한 것이다. The present invention controls not only the scene of the section in which the specific content is reflected but also the content of the sentence including the search keyword in the collected video contents when the content to be searched by the user corresponds to a specific content in the video file The source and the genre of the video content belonging to the search keyword designated by the user can be selected and searched when searching for the video content, And a search engine for searching for a searcher who speaks a search keyword designated by a user among the collected video contents including search keywords and searching for a search keyword of a video content to which non- By selection By giving to my relates to a video search system for video search efficiency based on the information that improves gailcheung.

최근 동영상 관련 기술의 비약적인 발달에 따라, 네트워크 상에서 관심 있는 동영상 파일을 검색하고자 하는 사용자의 요구가 커져가고 있다.Recently, with the rapid development of video related technology, there is a growing demand from users who want to search for a video file of interest on a network.

이러한 요구를 충족시키지 위해 여러 형태의 동영상 검색 방법이 개발되고 있는데, 현재 통상적으로 사용되고 있는 동영상 검색 방법으로 입력되는 텍스트 키워드를 이용하여 전체 동영상 파일에 대한 텍스트 주석을 검색하는 주석 기반 검색 엔진에 의한 검색 방법이 있다. In order to meet such a demand, various types of moving image search methods have been developed. In general, a moving image search method using a text search keyword is used to search for text annotations on an entire moving image file. There is a way.

이러한 방식에서는, 특정한 동영상 파일을 대표할 수 있는 영화 타이틀이나 관련 신문 기사 제목 등이 주석으로 붙여진 동영상을 키워드 입력에 따라 텍스트 주석과 텍스트 키워드를 비교하여 검색하게 된다.In this method, a movie having a movie title or a related newspaper article title, which can represent a specific video file, is annotated, and the text comment and the text keyword are compared with each other according to keyword input.

또 다른 방식으로, 동영상에서 특정인물이 등장하는 구간정보를 바탕으로 동영상에서 특정인물이 등장하는 구간을 자동적으로 검색하는 시스템이 제안되고 있다. In another method, a system has been proposed in which a section in which a specific character appears in a moving image is automatically searched based on section information in which a specific character appears in the moving image.

그러나 이러한 종래의 동영상 검색 방법은 사용자가 검색하고자 하는 내용이 동영상 파일 내의 특정한 내용에 해당하는 경우, 그 특정한 내용이 반영된 구간의 장면은 검색하여 주지 못하는 문제점이 있다. However, in the conventional moving picture search method, when a content to be searched by a user corresponds to a specific content in a moving picture file, there is a problem that a scene of a section in which the specific content is reflected can not be searched.

특허문헌 1 : 대한민국특허청 특허등록공보 10-0636910호(등록일자:2006년10월13일)Patent Document 1: Korean Patent Office Patent Registration No. 10-0636910 (Registered Date: October 13, 2006)

본 발명은 상기 종래기술의 문제점을 해결하기 위한 것으로, 본 발명의 목적은 사용자가 검색하고자 하는 내용이 동영상 파일 내의 특정한 내용에 해당하는 경우, 그 특정한 내용이 반영된 구간의 장면만이 재생되도록 제어하는 내용을 기반으로 하는 동영상 검색시스템을 제공하는데 있다. SUMMARY OF THE INVENTION The present invention has been made to solve the above problems of the prior art, and it is an object of the present invention to provide an apparatus and a method for controlling only a scene of a section in which a specific content is reflected, And to provide a video retrieval system based on content.

본 발명을 달성하기 위한 기술적 사상으로 본 발명의 내용을 기반으로 하는 동영상 검색시스템은, 검색키워드를 이용하여 동영상 검색을 요청하는 동영상 검색자 단말기와; 인터넷 상에서 서비스되는 동영상 컨텐츠를 저장관리하는 동영상 저장서버들과; 상기 동영상 검색자 단말기로부터 동영상 검색 요청에 의해 전송된 검색키워드를 토대로 상기 동영상 저장서버들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정하여 상기 동영상 검색자 단말기에 제공함으로써, 상기 동영상 검색자 단말기에서 그 제공되는 동영상 컨텐츠를 시청 시 검색키워드 재생구간 부문만 재생되도록 제어하는 동영상 검색서버;로 이루어진 것을 특징으로 한다. According to an aspect of the present invention, a moving picture search system based on the contents of the present invention includes a moving picture searcher terminal for requesting a moving picture search using a search keyword; Video storage servers for storing and managing moving picture contents served on the Internet; The method includes the steps of: collecting moving picture contents in which the search keyword is ignited among moving picture contents stored and managed in the moving picture storage servers based on the search keyword transmitted by the moving picture search request from the moving picture search terminal, A moving picture search server for controlling the moving picture searcher terminal to play only the search keyword playback section at the time of viewing the moving picture content provided by the moving picture searcher terminal; .

상기 동영상 검색서버에는 DB부; 및 동영상 검색엔진;이 탑재되고, 상기 DB부에는, 상기 동영상 저장서버들에서 저장관리되는 동영상 컨텐츠를 식별하는 식별자인 저장위치별 동영상 컨텐츠 식별정보, 상기 동영상 저장서버들에서 저장관리되는 동영상 컨텐츠에서 출력되는 대화가 문장단위로 기록되되, 그 동영상 컨텐츠에서 대화가 발화되는 시점에 따라 기록 저장되는 동영상 컨텐츠 대화내용 텍스트정보가 각 동영상 컨텐츠별로 구분되어 저장된 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB를 포함하며, 상기 동영상 검색엔진은 상기 동영상 검색자 단말기로부터 전송된 검색키워드를 상기 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB의 동영상 컨텐츠 대화내용 텍스트정보와 매칭하고, 그 매칭되는 동영상 컨텐츠 대화내용 텍스트정보와 연계되는 저장위치별 동영상 컨텐츠 식별정보를 인지하며, 그 인지된 저장위치별 동영상 컨텐츠 식별정보와 매칭되는 해당 검색키워드가 포함된 동영상 컨텐츠를 수집하며, 상기 동영상 컨텐츠 대화내용 텍스트정보를 참조하여 그 수집된 동영상 컨텐츠의 영상 중 상기 검색키워드를 중심으로 전 문맥과 후 문맥을 포함하는 문장단위에 해당하는 시간영역 만큼 재생되도록 링크시키는 것을 특징으로 한다.The video search server includes a DB unit; And a moving picture search engine, wherein the DB unit stores moving picture content identification information for each storage location, which is an identifier for identifying moving picture content stored and managed by the moving picture storage servers, A dialogue content text information DB for each of the storage location video contents in which the video content is recorded and stored in units of sentences, Wherein the moving picture search engine matches the search keyword transmitted from the moving picture search terminal with the moving picture conversation contents text information of the conversation contents text information DB for each storage location moving picture content, Video by associated storage location Acquires the video content including the corresponding search keyword matching the recognized video content identification information by the storage location, and refers to the video content of the dialog content text information, The link is reproduced by a time zone corresponding to a sentence unit including a whole context and a back context around the search keyword.

상기 동영상 검색서버의 DB부에는, 사용자가 검색키워드를 이용하여 동영상 검색 요청 시 그 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정함으로써, 사용자에게 제공되는 동영상 컨텐츠 중 검색키워드 재생구간 부문만 재생되도록 안내하는데 필요한 각종 웹 서식이 저장되고, 동영상 검색안내화면을 갖는 서식정보 DB;를 포함하고, 상기 동영상 검색안내화면에는, 상기 검색키워드를 입력하는 검색키워드 입력부 및 검색키워드와 더불어 동영상 검색 시 보다 한정하여 동영상을 검색할 수 있게 안내하는 동영상 검색 부가옵션부를 포함하며, 상기 동영상 검색 부가옵션부에는 상기 검색키워드를 중심으로 전 문맥의 문장 중 출력되기를 희망하는 글자수를 입력하는 전문맥 글자수 입력란과 상기 검색키워드를 중심으로 후 문맥의 문장 중 출력되기를 희망하는 글자수를 입력하는 후문맥 글자수 입력란을 갖는 시청구간 지정용 글자수 선택메뉴가 구비되고, 상기 동영상 검색서버의 동영상 검색엔진은 상기 동영상 컨텐츠 대화내용 텍스트정보를 참조하여 그 수집된 동영상 컨텐츠의 영상 중 상기 검색키워드를 중심으로 사용자가 지정한 전 문맥의 글자수 및 후 문맥의 글자수를 포함하는 문장단위에 해당하는 시간영역 만큼 재생되도록 링크시키는 것을 특징으로 한다. In the DB portion of the moving picture search server, a user collects moving picture contents in which a search keyword is ignited when a user searches for a moving picture using a search keyword, and searches for a search keyword And a format information DB storing a variety of web forms necessary for guiding the user to reproduce only the search keyword playback section of the video contents provided to the user and having a video search guide screen, A search keyword input unit for inputting the search keyword, and a video search option unit for guiding the search for a video more finely in a video search, in addition to the search keyword, and the video search option unit includes an option unit I want to be printed out of the sentences of the former context. There is provided a menu for designating a viewing section having a professional macro character number input field for inputting an embroidery number and a context character input field for inputting the number of characters desired to be output among the sentences of the rear context around the search keyword, The moving picture search engine of the moving picture search server refers to the moving picture contents conversation contents text information and displays a sentence including the number of characters in the context designated by the user and the number of characters in the back context, Unit is reproduced by the time zone corresponding to the unit.

본 발명은 사용자가 검색하고자 하는 내용이 동영상 파일 내의 특정한 내용에 해당하는 경우, 그 특정한 내용이 반영된 구간의 장면만을 재생되도록 제어하는 효과를 발휘한다. The present invention exerts the effect of controlling only the scene of the section in which the specific content is reflected to be reproduced when the content to be searched by the user corresponds to a specific content in the video file.

또한, 본 발명은 수집된 동영상 컨텐츠에서 검색키워드를 포함하는 문장의 대화내용에 따른 동영상 컨텐츠 재생시간의 증감을 임의적으로 조절하여 사용가능한 효과도 있다. In addition, the present invention can also be used by arbitrarily adjusting the increase / decrease of the moving picture content playback time according to the conversation contents of the sentence including the search keyword in the collected moving picture contents.

또한, 본 발명은 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드에 속하는 동영상 컨텐츠의 출처 및 장르도 선별하여 검색가능함으로써, 동영상 검색효율을 향상시켜주는 효과도 있다. In addition, the present invention can also search for the source and genre of moving picture contents belonging to a search keyword specified by the user when searching for moving picture contents, thereby improving the moving picture searching efficiency.

또한, 본 발명은 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자를 선별하여 검색가능하게 하여 줌으로써, 동영상 검색효율을 더 향상시켜주는 효과도 있다. In addition, the present invention provides a method and apparatus for searching a video content by selecting a talker who speaks a search keyword designated by a user among the collected video contents including a search keyword designated by the user, There is also.

또한, 본 발명은 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 발성하는 대화자가 표현하는 비언어적 표현정보가 속하는 동영상 컨텐츠만 선별하여 안내하여 줌으로써, 동영상 검색효율을 기일층 향상시켜주는 효과도 있다. In addition, the present invention also provides an advantage of improving the moving picture search efficiency by selectively displaying only the moving picture contents to which the non-verbal expression information expressed by the speaker who speaks the search keyword designated by the user when searching the moving picture contents.

도 1은 본 발명의 내용을 기반으로 하는 동영상 검색시스템을 나타낸 전체구성도,
도 2는 본 발명의 내용을 기반으로 하는 동영상 검색시스템을 이루는 구성 중 동영상 검색자 단말기를 나타낸 상세블록도,
도 3은 본 발명의 내용을 기반으로 하는 동영상 검색시스템을 이루는 구성 중 동영상 검색서버를 나타낸 상세블록도,
도 4 내지 도 7은 본 발명의 내용을 기반으로 하는 동영상 검색시스템에서 제공하는 동영상 검색화면의 다양한 사용예를 나타낸 도면,
도 8은 본 발명의 내용을 기반으로 하는 동영상 검색시스템에서 제공하는 검색동영상별 출력화면을 나타낸 도면이다.
BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a block diagram illustrating a video search system based on the contents of the present invention;
FIG. 2 is a detailed block diagram illustrating a video searcher terminal of a video search system based on the content of the present invention.
FIG. 3 is a detailed block diagram illustrating a moving picture search server among moving picture search systems based on the content of the present invention. FIG.
4 to 7 are views illustrating various examples of use of a moving picture search screen provided by a moving picture search system based on the contents of the present invention,
8 is a view illustrating an output screen for each search video provided by the moving image search system based on the content of the present invention.

이하에서는 본 발명의 실시예의 구성 및 작용에 대하여 첨부한 도면을 참조하면서 상세히 설명하기로 한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a configuration and an operation of an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도시된 바와 같이, 본 발명의 내용을 기반으로 하는 동영상 검색시스템은 크게, 동영상 검색자 단말기(100), 동영상 저장서버(200) 및 동영상 검색서버(300)로 이루어진다. As shown in the figure, the video search system based on the content of the present invention comprises a video searcher terminal 100, a video storage server 200, and a video search server 300.

먼저, 동영상 검색자 단말기(100)는 검색키워드를 이용하여 동영상 검색을 요청하는 단말부재이다. First, the video searcher terminal 100 is a terminal member requesting a video search using a search keyword.

이와 같은, 기능을 수행하는 동영상 검색자 단말기(100)의 세부구성은 통상적으로, 정보입력부(110), 메모리부(120), 정보출력부(130), 정보통신부(140) 및 제어부(150)로 이루어진다.The details of the video searcher terminal 100 that performs the functions are typically an information input unit 110, a memory unit 120, an information output unit 130, an information communication unit 140, a control unit 150, .

먼저, 정보입력부(110)는 사용자의 조작에 따라서 동영상 검색자 단말기(100)를 제어하거나 동작하기 위한 사용자 입력 신호를 발생하는 부재로서, 키입력부재, 터치입력부재, 제스처 입력부재 또는 음성 입력부재를 포함하는 다양한 입력부재를 이용할 수 있다.First, the information input unit 110 is a member for generating a user input signal for controlling or operating the motion picture search terminal 100 according to a user's operation. The information input unit 110 includes a key input member, a touch input member, a gesture input member, May be used.

상기 메모리부(120)는 동영상 컨텐츠 등과 같은 데이터, 응용프로그램이나 OS 등이 저장되는 매체이다.The memory unit 120 is a medium in which data such as moving picture contents, an application program, an OS, and the like are stored.

상기 정보통신부(140)는 후술되는 동영상 저장서버(200) 및 동영상 검색서버(300) 등과 네트워크를 통해 정보를 송수신하는데, 이러한 네트워크로 근거리 통신망(Local Area Network; LAN), 광역 통신망(Wide Area Network; WAN) 또는 부가가치 통신망(Value Added Network; VAN) 등과 같은 유선 네트워크 및 WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband, Wibro), 와이맥스(World Interoperability for Microwave Access, Wimax), HSDPA(High Speed Downlink Packet Access), LTE(3GPP Long Term Evolution), 와이브로 에볼루션(Wireless Broadband Evolution, WiBro Evolution), 근거리 무선통신블루투스(Bluetooth), Zigbee, RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband) 및 이동 통신망(Mobile Radio Communication Network) 등의 무선 네트워크로 연결되거나 또는 이들의 혼용망으로 연결될 수 있다.The information communication unit 140 transmits and receives information to and from a moving image storage server 200 and a moving image search server 300 through a network. The information communication unit 140 may be a local area network (LAN), a wide area network (WLAN), Wi-Fi, Wireless Broadband, Wibro, World Interoperability for Microwave Access (WIMAX), and the like, such as a WAN, a Value Added Network , HSDPA (High Speed Downlink Packet Access), 3GPP Long Term Evolution (LTE), Wireless Broadband Evolution (WiBro Evolution), Near Field Communication (Bluetooth), Zigbee, Radio Frequency Identification (RFID) , an infrared data association (UWB), an ultra wideband (UWB), a mobile radio communication network, or the like.

상기 제어부(150)는 검색키워드를 이용한 동영상 검색 요청 및 그 요청에 의해 제공되는 동영상 컨텐츠를 재생하기 위해 동영상 플레이어의 동작제어 등 전반적인 동영상 검색자 단말기(100)의 제어을 수행하는 부재이다. The control unit 150 is a member that performs overall control of the video searcher terminal 100 such as a video search request using a search keyword and an operation control of a video player to reproduce the video content provided by the request.

그리고 기능을 수행하는 동영상 검색자 단말기(100)의 종류는 PC(Personal Computer), 노트북 컴퓨터, 휴대폰(mobile phone), 태블릿 PC, 내비게이션(navigation), 스마트폰(smart phone), 스마트워치(smart watch), 스마트TV(smart TV), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 또는 DVB(Digital Video Broadcasting)와 같은 디지털방송 수신기 등 정보의 입력 및 출력과 더불어 정보의 가공 등을 수행할 수 있는 다양한 기기에 적용할 수 있다.The type of the video searcher terminal 100 that performs the functions may be a personal computer (PC), a notebook computer, a mobile phone, a tablet PC, a navigation device, a smart phone, a smart watch ), A smart TV, a PDA (Personal Digital Assistants), a PMP (Portable Multimedia Player), or a digital broadcasting receiver such as DVB (Digital Video Broadcasting) It can be applied to various devices.

상기 동영상 저장서버(200)들은 인터넷 상에서 서비스되는 동영상 컨텐츠를 저장관리하는 서버부재이다. The moving picture storage servers 200 are server members for storing and managing moving picture contents served on the Internet.

상기 동영상 검색서버(300)는 동영상 검색자 단말기(100)로부터 동영상 검색 요청에 의해 전송된 검색키워드를 토대로 상기 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정하여 상기 동영상 검색자 단말기(100)에 제공함으로써, 상기 동영상 검색자 단말기(100)에서 그 제공되는 동영상 컨텐츠를 시청 시 검색키워드 재생구간 부문만 재생되도록 제어하는 서버부재이다. The moving image search server 300 searches the moving image search server 300 for a moving image content to which the search keyword is to be ignored among the moving image contents stored and managed in the moving image storage servers 200 based on the search keyword transmitted by the moving image search request, And provides the search keyword playback section, which is a playback section in which the search keyword is ignited, to the video searcher terminal 100 for each collected video content, And controls only the search keyword section to be reproduced when the moving picture content is viewed.

이와 같은, 기능을 수행하는 동영상 검색서버(300)에는 DB부(310) 및 동영상 검색엔진(320)이 탑재된다. In the moving picture search server 300, which functions as described above, the DB unit 310 and the moving picture search engine 320 are installed.

여기서, DB부(310)는 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)를 포함하는데, 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)에는 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠를 식별하는 식별자인 저장위치별 동영상 컨텐츠 식별정보, 상기 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠에서 출력되는 대화가 문장단위로 기록되되, 그 동영상 컨텐츠에서 대화가 발화되는 시점에 따라 기록 저장되는 동영상 컨텐츠 대화내용 텍스트정보가 각 동영상 컨텐츠별로 구분되어 저장된 데이터베이스다. Here, the DB unit 310 includes a dialogue content text information DB 312 for each storage location moving picture content, and the dialogue content text information DB 312 for each storage location moving picture content stores and manages them in the moving picture storage servers 200 A video content identification information for each storage location, which is an identifier for identifying the video content, and a dialogue output from the video content stored and managed in the video storage servers 200 are recorded in units of sentences, And the text information of the moving picture contents to be recorded and stored is divided and stored for each moving picture content.

이때, 동영상 컨텐츠 대화내용 텍스트정보를 구성하는 문장 단위의 각 텍스트에는 해당 텍스트인 문장이 동영상 컨텐츠에서 발화 개시되는 재생시간정보인 발화 개시 시간정보 및 발화 종료되는 재생시간정보인 발화 종료 시간정보가 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)에 포함하여 저장된다. 이를 통해, 기록된 문장단위의 텍스트가 동영상 컨텐츠에서 그 텍스트에 대응되는 대화 발화 시점과 동기화된다At this time, in each text of the sentence unit constituting the moving picture contents dialogue content text information, the speech start time information, which is the reproduction time information in which the sentence as the text starts to be uttered and started, and the utterance end time information, And is stored in the conversation contents text information DB 312 for each location video content. Thereby, the text of the written sentence is synchronized with the dialogue utterance time corresponding to the text in the video content

이를 통해, 동영상 검색엔진(320)은 동영상 검색자 단말기(100)로부터 전송된 검색키워드를 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)의 동영상 컨텐츠 대화내용 텍스트정보와 매칭하고, 그 매칭되는 동영상 컨텐츠 대화내용 텍스트정보와 연계되는 저장위치별 동영상 컨텐츠 식별정보를 인지하며, 그 인지된 저장위치별 동영상 컨텐츠 식별정보를 동영상 저장서버(200)들과 매칭하여 해당 검색키워드가 포함된 동영상 컨텐츠를 수집하며, 동영상 컨텐츠 대화내용 텍스트정보를 참조하여 그 수집된 동영상 컨텐츠의 영상 중 상기 검색키워드를 중심으로 전 문맥과 후 문맥을 포함하는 문장단위에 해당하는 시간영역 만큼 재생되도록 링크되도록 구현함으로써, 사용자에게 자신이 검색요청한 검색키워드의 글자가 포함된 대화내용만 시청할 수 있게 제공한다. Accordingly, the video search engine 320 matches the search keyword transmitted from the video searcher terminal 100 with the video content dialogue content text information in the dialogue content text information DB 312 for each storage location video content, Recognizes the moving picture content identification information for each storage location associated with the moving picture conversation contents text information, matches the recognized moving picture content identification information for each storage location with the moving picture storage servers 200, By referring to the video content dialogue content text information and linking the video of the collected video content to be reproduced by a time region corresponding to a sentence unit including a context and a back context around the search keyword, Can only view the conversation containing the letters of the search keyword requested by the user .

한편, 본 발명의 내용을 기반으로 하는 동영상 검색시스템에서는 동영상 컨텐츠의 검색 시 검색키워드와 더불어 다양한 검색조건을 부가하여 동영상 컨텐츠의 검색을 수행할 수 있게 제공한다. Meanwhile, in the moving picture search system based on the content of the present invention, moving picture contents can be searched by adding various search conditions in addition to the search keyword.

이를 위해, 동영상 검색서버(300)의 DB부(310)에는 사용자가 검색키워드를 이용하여 동영상 검색 요청 시 그 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정함으로써, 사용자에게 제공되는 동영상 컨텐츠 중 검색키워드 재생구간 부문만 재생되도록 안내하는데 필요한 각종 웹 서식이 저장된 부재로서, 동영상 검색안내화면(400)을 갖는 서식정보 DB(311)가 구비되어진다. To this end, the DB unit 310 of the moving image search server 300 collects the moving image content in which the search keyword is generated when the user requests the moving image search using the search keyword, The user can select one of a plurality of types of web content to be reproduced, and a format information DB having a video search guide screen 400, (311).

여기서, 동영상 검색안내화면(400)에는, 검색키워드를 입력하는 검색키워드 입력부(410) 및 검색키워드와 더불어 동영상 검색 시 보다 한정하여 동영상을 검색할 수 있게 안내하는 동영상 검색 부가옵션부(420)를 포함한다. Here, the video search guide screen 400 includes a search keyword input unit 410 for inputting a search keyword, and a video search option unit 420 for guiding a search for a video more restrictively in a video search, .

이러한, 동영상 검색 부가옵션부(420)에는 검색키워드를 중심으로 전 문맥의 문장 중 출력되기를 희망하는 글자수를 입력하는 전문맥 글자수 입력란과 검색키워드를 중심으로 후 문맥의 문장 중 출력되기를 희망하는 글자수를 입력하는 후문맥 글자수 입력란을 갖는 시청구간 지정용 글자수 선택메뉴가 구비된다. In the video retrieval unit option unit 420, a professional Mac character number input field for inputting the number of characters desired to be output among the sentences of the entire context, A character number selection menu for designating a viewing section having a context character input field after inputting the number of characters is provided.

이를 통해, 사용자는 동영상 검색자 단말기(100)의 정보입력부(110)를 조작하여 동영상 검색서버(300)에 접속한 후 동영상 검색을 요청하면, 동영상 검색서버(300)의 동영상 검색엔진(320)은 서식정보 DB(311)에서 동영상 검색안내화면(400)을 추출하여 전송한다.When the user operates the information input unit 110 of the video searcher terminal 100 to access the video search server 300 and requests a video search, the user searches the video search engine 320 of the video search server 300, Extracts the moving image search guide screen 400 from the format information DB 311 and transmits the extracted information.

동영상 검색자 단말기(100)의 제어부(150)는 전송된 동영상 검색안내화면(400)을 정보출력부(130)를 통해 출력한다. The control unit 150 of the video searcher terminal 100 outputs the transmitted video search guide screen 400 through the information output unit 130. [

사용자는 출력된 동영상 검색안내화면(400)을 열람한 후 정보입력부(110)를 조작하여 검색키워드 입력부(410)에 검색키워드를 입력하고, 동영상 검색 부가옵션부(420)에 구비된 전문맥 글자수 입력란과 후문맥 글자수 입력란에 재생시간의 증감을 고려하여 글자수를 지정 입력한 후 동영상 검색을 요청하면, 동영상 검색자 단말기(100)의 제어부(150)는 검색키워드 및 전문맥 글자수정보와 후문맥 글자수정보로 이루어진 동영상 검색요청신호를 동영상 검색서버(300)로 전송한다. The user operates the information input unit 110 to input the search keyword into the search keyword input unit 410 after viewing the output video search guide screen 400 and displays the professional macro character included in the video search option unit 420 The control unit 150 of the video searcher terminal 100 transmits the search keyword and the professional macro character number information (hereinafter, referred to as " search keyword " And the contextual character number information to the moving image search server 300.

동영상 검색서버(300)의 동영상 검색엔진(320)은 전송된 동영상 검색요청신호에 포함된 검색키워드를 이용하여 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집한다. The moving picture search engine 320 of the moving picture search server 300 searches the moving picture contents stored in the moving picture storage server 200 using the search keyword included in the transmitted moving picture search request signal, Lt; / RTI >

이후, 동영상 검색엔진(320)은 전문맥 글자수정보와 후문맥 글자수정보를 토대로 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)의 동영상 컨텐츠 대화내용 텍스트정보에서 그 수집된 동영상 컨텐츠의 영상 중 상기 검색키워드를 중심으로 사용자가 지정한 전 문맥의 글자수 및 후 문맥의 글자수를 포함하는 문장단위에 해당하는 시간영역 만큼 재생되도록 후술되는 검색동영상별 출력화면(500)의 동영상선택란에 링크시킨다. 여기서, 동영상선택란은 검색동영상별 출력화면(500)의 영상클립에 해당된다. Then, the moving picture search engine 320 searches the moving picture contents text information DB 312 of the storing position moving picture contents for the video contents of the moving picture contents Linked to the video selection box of the search video-specific output screen 500 to be described later so as to be reproduced by the time zone corresponding to the sentence unit including the number of characters of the context designated by the user and the number of characters of the back context, . Here, the video selection box corresponds to the video clip of the output video screen 500 for each search video.

이를 통해, 본 발명의 내용을 기반으로 하는 동영상 검색시스템은 수집된 동영상 컨텐츠에서 검색키워드를 포함하는 문장의 대화내용에 따른 동영상 컨텐츠 재생시간의 증감을 임의적으로 조절하여 사용가능한 이점을 제공한다. Accordingly, the moving picture search system based on the contents of the present invention provides an advantage that can be used by arbitrarily adjusting the increase or decrease of the moving picture content reproduction time according to the conversation contents of the sentence including the search keyword in the collected moving picture contents.

또한, 본 발명의 내용을 기반으로 하는 동영상 검색시스템에서는 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드에 속하는 동영상 컨텐츠의 출처 및 장르도 선별하여 검색가능함으로써, 동영상 검색효율을 향상시켜주는 검색서비스도 제공한다. In addition, in the moving picture search system based on the content of the present invention, the source and the genre of the moving picture content belonging to the search keyword designated by the user can be selectively searched when searching the moving picture contents, thereby providing a search service for improving the moving picture searching efficiency do.

이를 위해, DB부(310)의 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)에는 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠가 어느 분야의 출처인지를 나타내는 동영상 출처정보 및 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠가 어느 장르에 속하는지를 나타내는 동영상 장르정보가 각 동영상 컨텐츠별로 구분되어 추가로 저장된다. To this end, the dialog content text information DB 312 for each storage location video content of the DB unit 310 stores video source information indicating which field of the video contents stored and managed by the video storage servers 200 is from, Video genre information indicating which genre of moving picture contents stored and managed in the servers 200 is separately stored for each moving picture content.

그리고 동영상 검색안내화면(400)의 동영상 검색 부가옵션부(420) 중 동영상 범주 선택메뉴를 선택하면 검색키워드가 발화되는 동영상 컨텐츠가 속하는 분야의 출처를 선택하는 동영상 출처 선택란 및 검색키워드가 발화되는 동영상 컨텐츠가 속하는 장르를 선택하는 동영상 장르 선택란이 표시된다. 여기서, 동영상 출처 선택란이나 동영상 장르 선택란은 도면에 도시된 것처럼, 라디오버튼을 이용하거나 도면에 도시하지는 않았지만 콤보박스(드롭다운 리스트)나 체크박스 등 다양한 그래픽 사용자 인터페이스 구성요소(GUI element)를 활용하여 표시할 수 있다When a video category selection menu is selected from the video search option section 420 of the video search guide screen 400, a video source selection box for selecting the source of the field to which the video content to which the search keyword is to be spoken, A video genre selection box for selecting a genre to which the content belongs is displayed. Here, the video source check box or the video genre check box can be selected by using a variety of graphical user interface elements (GUI elements) such as a combo box (drop-down list) or a check box by using radio buttons or not shown in the drawings Can display

이를 통해, 사용자는 동영상 검색자 단말기(100)를 조작하여 검색키워드, 동영상 출처나 동영상 장르를 입력하면, 동영상 검색자 단말기(100)는 입력된 검색키워드, 동영상 출처정보나 동영상 장르정보로 이루어진 동영상 검색요청신호를 동영상 검색서버(300)로 전송한다. Accordingly, when the user operates the video searcher terminal 100 to input a search keyword, a video source, or a video genre, the video searcher terminal 100 generates a video including a search keyword, video source information, And transmits a search request signal to the moving image search server 300.

동영상 검색서버(300)의 동영상 검색엔진(320)은 전송된 동영상 검색요청신호에 포함된 검색키워드를 이용하여 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집한다. The moving picture search engine 320 of the moving picture search server 300 searches the moving picture contents stored in the moving picture storage server 200 using the search keyword included in the transmitted moving picture search request signal, Lt; / RTI >

이후, 동영상 검색엔진(320)은 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 동영상 컨텐츠의 출처나 장르에 속하는 동영상 컨텐츠만 선별하여 안내한다. Then, the video search engine 320 selects and guides only the video content belonging to the source or genre of the video content specified by the user among the collected video contents including the search keyword.

또한, 본 발명의 내용을 기반으로 하는 동영상 검색시스템에서는 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자를 선별하여 검색가능하게 하여 줌으로써, 동영상 검색효율을 향상시켜주는 검색서비스도 제공한다. In addition, in the moving picture search system based on the content of the present invention, when a moving picture content is searched, a talker who speaks a search keyword designated by the user among the collected moving picture contents including the search keyword designated by the user is selected, It also provides a search service that improves video search efficiency.

이를 위해, 동영상 검색서버(300)의 DB부(310)에는 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠에서 출력되는 문장단위의 대화를 하는 대화자의 성별, 연령 및 성함을 포함하는 대화자 신상정보가 각 동영상 컨텐츠별로 구분되어 추가로 저장된다. For this purpose, the DB unit 310 of the moving picture search server 300 stores a conversation person's name including the sex, age, and name of the conversation person, Information is separately stored for each video content.

그리고 동영상 검색안내화면(400)의 동영상 검색 부가옵션부(420) 중 대화자 신상 선택메뉴를 선택하면 검색키워드가 속한 문장을 대화하는 대화자의 성별선택란, 연령대 선택란 및 성함 선택란이 표시된다. Then, when the user selects the talker's personal image selection menu from the video search option part 420 of the video search guide screen 400, the gender check box, age check box and name check box of the talker who speaks the sentence to which the search keyword belongs are displayed.

이를 통해, 사용자는 동영상 검색자 단말기(100)를 조작하여 검색키워드, Accordingly, the user can operate the video searcher terminal 100 to search keywords,

검색키워드를 발성하는 대상인 대화자의 신상을 입력하면, 동영상 검색자 단말기(100)는 입력된 검색키워드, 대화자 신상정보로 이루어진 동영상 검색요청신호를 동영상 검색서버(300)로 전송한다.The video searcher terminal 100 transmits a video search request signal composed of the input search keyword and the conversant profile information to the video search server 300. [

동영상 검색서버(300)의 동영상 검색엔진(320)은 전송된 동영상 검색요청신호에 포함된 검색키워드를 이용하여 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집한다. The moving picture search engine 320 of the moving picture search server 300 searches the moving picture contents stored in the moving picture storage server 200 using the search keyword included in the transmitted moving picture search request signal, Lt; / RTI >

이후, 동영상 검색엔진(320)은 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자의 신상정보가 속하는 동영상 컨텐츠만 선별하여 안내한다. Then, the video search engine 320 selects only the video content to which the personal information of the talker who speaks the search keyword designated by the user belongs among the collected video contents including the search keyword.

마지막으로, 본 발명의 내용을 기반으로 하는 동영상 검색시스템에서는 동영상 컨텐츠의 검색 시 사용자가 지정한 검색키워드를 발성하는 대화자가 표현한 비언어적 표현정보가 속하는 동영상 컨텐츠만 선별하여 안내하여 줌으로써, 동영상 검색효율을 더 향상시켜주는 검색서비스도 제공한다. Finally, in the moving picture search system based on the content of the present invention, only the moving picture contents belonging to the non-speaking expression information expressed by the speaker who speaks the search keyword designated by the user during the search of the moving picture contents are selected and guided, It also provides a search service to improve it.

이를 위해, 동영상 검색서버(300)의 DB부(310)에는 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠에서 대화자들이 표현하는 표정, 제스처 및 춤을 포함하는 비언어적 표현정보가 텍스트 형식으로 각 동영상 컨텐츠별로 구분되어 추가로 저장된다. To this end, the DB unit 310 of the moving image search server 300 displays non-verbal expression information including facial expressions, gestures, and dances expressed by the talkers in the moving image contents stored and managed by the moving image storage servers 200 in a text format Are separately stored for each video content.

그리고 동영상 검색안내화면(400)의 동영상 검색 부가옵션부(420) 중 대화자 비언어 선택메뉴를 선택하면 검색키워드가 속한 문장을 대화하는 대화자가 표현하는 것을 선택할 수 있는 표정입력란, 제스처입력란, 춤입력란이 표시된다. When a non-language selection menu is selected from the video search option section 420 of the video search guide screen 400, the expression input field, the gesture input field, and the dance input field, Is displayed.

이를 통해, 사용자는 동영상 검색자 단말기(100)를 조작하여 검색키워드, 검색키워드를 발성하는 대상인 대화자의 비언어적인 표현을 입력하면, 동영상 검색자 단말기(100)는 입력된 검색키워드, 대화자 비언어적 표현정보로 이루어진 동영상 검색요청신호를 동영상 검색서버(300)로 전송한다.Accordingly, when the user operates the video searcher terminal 100 to input a search keyword and a non-verbal expression of the talker, which is a target of the search keyword, the video searcher terminal 100 transmits the input search keyword, And transmits the video search request signal to the moving image search server 300.

동영상 검색서버(300)의 동영상 검색엔진(320)은 전송된 동영상 검색요청신호에 포함된 검색키워드를 이용하여 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집한다. The moving picture search engine 320 of the moving picture search server 300 searches the moving picture contents stored in the moving picture storage server 200 using the search keyword included in the transmitted moving picture search request signal, Lt; / RTI >

이후, 동영상 검색엔진(320)은 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자가 표현하는 비언어적 표현정보가 속하는 동영상 컨텐츠만 선별하여 안내한다. Thereafter, the moving image search engine 320 selects and guides only the moving image content to which the non-expressive information represented by the conversation representative of the search keyword designated by the user belongs among the collected moving image contents including the search keyword.

그리고 동영상 검색엔진(320)은 앞에서 언급한 각 조건을 통해 검색된 동영상 컨텐츠들을 제공 시 검색동영상별 출력화면(500)을 통해 사용자에게 제공한다. Then, the video search engine 320 provides the video contents retrieved through the above-mentioned conditions to the user through the search video-specific output screen 500 at the time of providing.

이처럼, 제공되는 검색동영상별 출력화면(500)에는 각 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠를 식별하는 동영상 식별자 표시란, 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 시간으로 표시한 동영상 개시시간 표시란 및 동영상 종료시간 표시란, 검색키워드가 발화되는 재생구간인 검색키워드 재생구간에 해당하는 동영상 컨텐츠의 부분만 출력되도록 링크된 동영상선택란, 검색키워드가 표시된 키워드 표시란, 검색키워드를 중심으로 전 문맥의 대화내용이 표시되는 전문맥 표시란 및 검색키워드를 중심으로 후 문맥의 대화내용이 표시되는 후문맥 표시란이 구비된다. As described above, the video ID display for identifying the moving picture contents stored and managed in each moving picture storage server 200 includes a search keyword playback period, which is a playback period in which the search keyword is ignited, A displayed video start time display field and a video end time display field is a video selection field linked so that only the portion of the video content corresponding to the search keyword playback period, which is a playback section in which the search keyword is ignited, An expert vein display field in which conversation contents of all contexts are displayed centered on keywords, and a context display field in which conversation contents of a back context are displayed centered on search keywords.

이를 통해, 사용자는 동영상 검색자 단말기(100)의 정보출력부(130)에 출력된 검색동영상별 출력화면(500)에서 검색키워드의 전 문맥 및 후 문맥을 열람하고, 자신이 시청하고자 하는 영상클립을 찾은 경우 정보입력부(110)를 조작하여 영상클립에 해당하는 동영상선택란을 선택하면, 제어부(150)는 동영상 재생기가 실행되도록 제어함으로써, 사용자가 원하는 동영상을 검색키워드가 발화되는 재생구간인 검색키워드 재생구간 만큼 시청할 수 있게 안내한다. In this way, the user can browse the entire context and the post-context of the search keyword on the search video-specific output screen 500 output to the information output unit 130 of the video searcher terminal 100, The control unit 150 controls the video player to be operated so that the user can select a desired video from a search keyword that is a playback section in which a search keyword is ignited, The user is guided to watch as much as the playback section.

한편, 사용자는 전 문맥이나 후 문맥의 대화내용을 정렬하여 열람할 수도 있다. On the other hand, the user can arrange and view the conversation contents of the context or the back context.

이를 위해, 검색동영상별 출력화면(500)에 표시된 전문맥 표시란 및 후문맥 표시란 상에 표시된 대화내용을 가나다순의 오름차순 정렬 안내메뉴 및 역 가나다순의 내림차순 정렬 안내메뉴가 구비된 글자정렬 팝업화면(600)이 제공된다. For this purpose, the text display window 500 and the text display window displayed on the post-context display box are arranged in ascending order of the alphabetical order guidance menu and a character sorting pop-up screen having the descending order sorting guidance menu of the reverse alphabetical order 600 are provided.

100 : 동영상 검색자 단말기
110 : 정보입력부
120 : 메모리부
130 : 정보출력부
140 : 정보통신부
150 : 제어부
200 : 동영상 저장서버
300 : 동영상 검색서버
310 : DB부
311 : 서식정보 DB
312 : 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB
320 : 동영상 검색엔진
400 : 동영상 검색안내화면
410 : 검색키워드 입력부
420 : 동영상 검색 부가옵션부
500 : 검색동영상별 출력화면
600 : 글자정렬 팝업화면
100: Video searcher terminal
110: Information input unit
120: memory unit
130: Information output section
140: Ministry of Information and Communication
150:
200: video storage server
300: Video search server
310: DB section
311: Form information DB
312: storage location text content information DB
320: Video Search Engine
400: Video search guide screen
410: Search keyword input unit
420: Video search part option part
500: Output screen by search video
600: Font alignment popup screen

Claims (7)

검색키워드를 이용하여 동영상 검색을 요청하는 동영상 검색자 단말기(100)와;
인터넷 상에서 서비스되는 동영상 컨텐츠를 저장관리하는 동영상 저장서버(200)들과;
상기 동영상 검색자 단말기(100)로부터 동영상 검색 요청에 의해 전송된 검색키워드를 토대로 상기 동영상 저장서버(200)들에 저장관리되는 동영상 컨텐츠 중 상기 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정하여 상기 동영상 검색자 단말기(100)에 제공함으로써, 상기 동영상 검색자 단말기(100)에서 그 제공되는 동영상 컨텐츠를 시청 시 검색키워드 재생구간 부문만 재생되도록 제어하는 동영상 검색서버(300);로 이루어진 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
A video searcher terminal (100) for requesting a video search using a search keyword;
Video storage servers 200 for storing and managing moving picture contents served on the Internet;
The mobile terminal 100 collects the moving image content in which the search keyword is ignited among the moving image contents stored and managed in the moving image storage servers 200 based on the search keyword transmitted by the moving image search request from the moving image search terminal 100, The video searcher terminal 100 sets the search keyword playback period, which is a playback period in which the search keyword is ignited, to the video searcher terminal 100, And a moving picture search server (300) for controlling only the reproduction section to be reproduced.
제1항에 있어서,
상기 동영상 검색서버(300)에는 DB부(310); 및 동영상 검색엔진(320);이 탑재되고,
상기 DB부(310)에는, 상기 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠를 식별하는 식별자인 저장위치별 동영상 컨텐츠 식별정보, 상기 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠에서 출력되는 대화가 문장단위로 기록되되, 그 동영상 컨텐츠에서 대화가 발화되는 시점에 따라 기록 저장되는 동영상 컨텐츠 대화내용 텍스트정보가 각 동영상 컨텐츠별로 구분되어 저장된 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)를 포함하며,
상기 동영상 검색엔진(320)은 상기 동영상 검색자 단말기(100)로부터 전송된 검색키워드를 상기 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)의 동영상 컨텐츠 대화내용 텍스트정보와 매칭하고, 그 매칭되는 동영상 컨텐츠 대화내용 텍스트정보와 연계되는 저장위치별 동영상 컨텐츠 식별정보를 인지하며, 그 인지된 저장위치별 동영상 컨텐츠 식별정보와 매칭되는 해당 검색키워드가 포함된 동영상 컨텐츠를 수집하며, 상기 동영상 컨텐츠 대화내용 텍스트정보를 참조하여 그 수집된 동영상 컨텐츠의 영상 중 상기 검색키워드를 중심으로 전 문맥과 후 문맥을 포함하는 문장단위에 해당하는 시간영역 만큼 재생되도록 링크시키는 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
The method according to claim 1,
The moving image search server 300 includes a DB unit 310; And a moving picture search engine 320,
The DB unit 310 stores moving picture contents identification information for each storage location, which is an identifier for identifying moving picture contents stored and managed in the moving picture storage servers 200, A dialogue content text information DB 312 for each of the storage location video contents in which the text content of the dialogue content to be recorded and stored according to the time of the conversation is recorded in the video content, ),
The moving picture search engine 320 matches the search keyword transmitted from the moving picture search terminal 100 with the moving picture content text information of the conversation contents text information DB 312 for each storage location moving picture content, Acquires moving picture content including a corresponding search keyword matching with the recognized moving picture content identification information by the storage location, recognizes moving picture content identification information for each storage location associated with the moving picture conversation contents text information, The linking unit refers to the text information and links the video of the collected video content to be reproduced by the time zone corresponding to the sentence unit including the entire context and the back context around the search keyword. system.
제2항에 있어서,
상기 동영상 검색서버(300)의 DB부(310)에는, 사용자가 검색키워드를 이용하여 동영상 검색 요청 시 그 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정함으로써, 사용자에게 제공되는 동영상 컨텐츠 중 검색키워드 재생구간 부문만 재생되도록 안내하는데 필요한 각종 웹 서식이 저장되고, 동영상 검색안내화면(400)을 갖는 서식정보 DB(311);를 포함하고,
상기 동영상 검색안내화면(400)에는, 상기 검색키워드를 입력하는 검색키워드 입력부(410) 및 검색키워드와 더불어 동영상 검색 시 보다 한정하여 동영상을 검색할 수 있게 안내하는 동영상 검색 부가옵션부(420)를 포함하며,
상기 동영상 검색 부가옵션부(420)에는 상기 검색키워드를 중심으로 전 문맥의 문장 중 출력되기를 희망하는 글자수를 입력하는 전문맥 글자수 입력란과 상기 검색키워드를 중심으로 후 문맥의 문장 중 출력되기를 희망하는 글자수를 입력하는 후문맥 글자수 입력란을 갖는 시청구간 지정용 글자수 선택메뉴가 구비되고,
상기 동영상 검색서버(300)의 동영상 검색엔진(320)은 상기 동영상 컨텐츠 대화내용 텍스트정보를 참조하여 그 수집된 동영상 컨텐츠의 영상 중 상기 검색키워드를 중심으로 사용자가 지정한 전 문맥의 글자수 및 후 문맥의 글자수를 포함하는 문장단위에 해당하는 시간영역만큼 재생되도록 링크시키는 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
3. The method of claim 2,
The DB unit 310 of the moving picture search server 300 collects moving picture contents in which the search keyword is ignited when a user requests a moving picture search using a search keyword and the search keyword is ignited for each collected moving picture content A variety of web forms necessary for guiding the user to reproduce only the search keyword playback section of the video contents provided to the user are stored and the format information DB 311 having the video search guide screen 400 ), ≪ / RTI >
The video search guide screen 400 includes a search keyword input unit 410 for inputting the search keyword and a video search option unit 420 for guiding the user to search for a video more restrictively in searching for a video ≪ / RTI &
The video retrieval unit option unit 420 may include a professional macro character number input field for inputting the number of characters desired to be output among the sentences of the entire context with respect to the retrieval keyword, And a character number selection menu for designating a viewing section having a context character input field,
The moving picture search engine 320 of the moving picture search server 300 refers to the moving picture contents conversation contents text information and displays the number of characters of the context designated by the user centered on the search keyword among the images of the collected moving picture contents, Is linked with a time zone corresponding to a sentence unit including the number of characters of the moving picture.
제2항에 있어서,
상기 동영상 검색서버(300)의 DB부(310)에는, 사용자가 검색키워드를 이용하여 동영상 검색 요청 시 그 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정함으로써, 사용자에게 제공되는 동영상 컨텐츠 중 검색키워드 재생구간 부문만 재생되도록 안내하는데 필요한 각종 웹 서식이 저장되고, 동영상 검색안내화면(400)을 갖는 서식정보 DB(311);를 포함하고,
상기 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)에는, 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠가 어느 분야의 출처인지를 나타내는 동영상 출처정보 및 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠가 어느 장르에 속하는지를 나타내는 동영상 장르정보가 각 동영상 컨텐츠별로 구분되어 추가로 저장되며,
상기 동영상 검색안내화면(400)에는, 상기 검색키워드를 입력하는 검색키워드 입력부(410) 및 검색키워드와 더불어 동영상 검색 시 보다 한정하여 동영상을 검색할 수 있게 안내하는 동영상 검색 부가옵션부(420)를 포함하고,
상기 동영상 검색 부가옵션부(420)에는 상기 검색키워드가 발화되는 동영상 컨텐츠가 속하는 분야의 출처를 선택하는 동영상 출처 선택란 및 상기 검색키워드가 발화되는 동영상 컨텐츠가 속하는 장르를 선택하는 동영상 장르 선택란을 갖는 동영상 범주 선택메뉴가 구비되며,
상기 동영상 검색서버(300)의 동영상 검색엔진(320)은 상기 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 동영상 컨텐츠의 출처 및/또는 장르에 속하는 동영상 컨텐츠만 선별하여 안내하는 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
3. The method of claim 2,
The DB unit 310 of the moving picture search server 300 collects moving picture contents in which the search keyword is ignited when a user requests a moving picture search using a search keyword and the search keyword is ignited for each collected moving picture content A variety of web forms necessary for guiding the user to reproduce only the search keyword playback section of the video contents provided to the user are stored and the format information DB 311 having the video search guide screen 400 ), ≪ / RTI >
The dialog content text information DB 312 for each storage location moving image content includes moving image source information indicating which field of the moving image content stored and managed by the moving image storage servers 200 is stored in the moving image storing server 200 Video genre information indicating which genre the managed video content belongs is separately stored for each video content,
The video search guide screen 400 includes a search keyword input unit 410 for inputting the search keyword and a video search option unit 420 for guiding the user to search for a video more restrictively in searching for a video Including,
The video search option unit 420 includes a video source selection box for selecting a source of a field to which the video content to which the search keyword is to be spoken and a video genre selection box for selecting a genre to which the video content to which the search keyword is to be spoken A category selection menu is provided,
The moving picture search engine 320 of the moving picture search server 300 selectively displays only the moving picture contents belonging to the source and / or genre of the moving picture content specified by the user among the collected moving picture contents including the search keyword Content based video search system.
제2항에 있어서,
상기 동영상 검색서버(300)의 DB부(310)에는, 사용자가 검색키워드를 이용하여 동영상 검색 요청 시 그 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정함으로써, 사용자에게 제공되는 동영상 컨텐츠 중 검색키워드 재생구간 부문만 재생되도록 안내하는데 필요한 각종 웹 서식이 저장되고, 동영상 검색안내화면(400)을 갖는 서식정보 DB(311);를 포함하고,
상기 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)에는, 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠에서 출력되는 문장단위의 대화를 하는 대화자의 성별, 연령 및 성함을 포함하는 대화자 신상정보가 각 동영상 컨텐츠별로 구분되어 추가로 저장되며,
상기 동영상 검색안내화면(400)에는, 상기 검색키워드를 입력하는 검색키워드 입력부(410) 및 검색키워드와 더불어 동영상 검색 시 보다 한정하여 동영상을 검색할 수 있게 안내하는 동영상 검색 부가옵션부(420)를 포함하고,
상기 동영상 검색 부가옵션부(420)에는, 상기 검색키워드가 속한 문장을 대화하는 대화자의 성별선택란, 연령대 선택란 및 성함 선택란을 갖는 대화자 신상 선택메뉴가 구비되며,
상기 동영상 검색서버(300)의 동영상 검색엔진(320)은 상기 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자의 신상정보가 속하는 동영상 컨텐츠만 선별하여 안내하는 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
3. The method of claim 2,
The DB unit 310 of the moving picture search server 300 collects moving picture contents in which the search keyword is ignited when a user requests a moving picture search using a search keyword and the search keyword is ignited for each collected moving picture content A variety of web forms necessary for guiding the user to reproduce only the search keyword playback section of the video contents provided to the user are stored and the format information DB 311 having the video search guide screen 400 ), ≪ / RTI >
The conversation contents text information DB 312 for each storage location moving picture contents includes a conversation contents information DB 312 including sex, age, and name of the conversation person in conversation unit sentence output from the moving picture contents stored and managed by the moving picture storage servers 200, Information is separately stored for each video content,
The video search guide screen 400 includes a search keyword input unit 410 for inputting the search keyword and a video search option unit 420 for guiding the user to search for a video more restrictively in searching for a video Including,
The moving picture searching unit option unit 420 is provided with a conversation person's personal image selection menu having a sex check box, an age check box and a name check box of a talker who talks a sentence to which the search keyword belongs,
The moving picture search engine 320 of the moving picture search server 300 selects only the moving picture contents to which the personal information of the talker who speaks the search keyword designated by the user belongs among the collected moving picture contents including the search keyword, Based video search system.
제2항에 있어서,
상기 동영상 검색서버(300)의 DB부(310)에는, 사용자가 검색키워드를 이용하여 동영상 검색 요청 시 그 검색키워드가 발화되는 동영상 컨텐츠를 수집하고, 그 수집된 동영상 컨텐츠마다 상기 검색키워드가 발화되는 재생구간인 검색키워드 재생구간을 설정함으로써, 사용자에게 제공되는 동영상 컨텐츠 중 검색키워드 재생구간 부문만 재생되도록 안내하는데 필요한 각종 웹 서식이 저장되고, 동영상 검색안내화면(400)을 갖는 서식정보 DB(311);를 포함하고,
상기 저장위치 동영상 컨텐츠별 대화내용 텍스트정보 DB(312)에는, 동영상 저장서버(200)들에서 저장관리되는 동영상 컨텐츠에서 대화자들이 표현하는 표정, 제스처 및 춤을 포함하는 비언어적 표현정보가 각 동영상 컨텐츠별로 구분되어 추가로 저장되며,
상기 동영상 검색안내화면(400)에는, 상기 검색키워드를 입력하는 검색키워드 입력부(410) 및 검색키워드와 더불어 동영상 검색 시 보다 한정하여 동영상을 검색할 수 있게 안내하는 동영상 검색 부가옵션부(420)를 포함하고,
상기 동영상 검색 부가옵션부(420)에는, 상기 검색키워드가 속한 문장을 대화하는 대화자가 표현하는 것을 선택할 수 있는 표정입력란, 제스처입력란, 춤입력란을 갖는 대화자 비언어 선택메뉴가 구비되고,
상기 동영상 검색서버(300)의 동영상 검색엔진(320)은 상기 검색키워드를 포함하는 수집된 동영상 컨텐츠 중 사용자가 지정한 검색키워드를 발성하는 대화자가 표현하는 비언어적 표현정보가 속하는 동영상 컨텐츠만 선별하여 안내하는 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
3. The method of claim 2,
The DB unit 310 of the moving picture search server 300 collects moving picture contents in which the search keyword is ignited when a user requests a moving picture search using a search keyword and the search keyword is ignited for each collected moving picture content A variety of web forms necessary for guiding the user to reproduce only the search keyword playback section of the video contents provided to the user are stored and the format information DB 311 having the video search guide screen 400 ), ≪ / RTI >
The dialog content text information DB 312 for each storage location moving image content includes nonverbal presentation information including facial expressions, gestures, and dances expressed by the talkers in the moving image contents stored and managed by the moving image storage servers 200, And further stored separately,
The video search guide screen 400 includes a search keyword input unit 410 for inputting the search keyword and a video search option unit 420 for guiding the user to search for a video more restrictively in searching for a video Including,
The moving picture retrieving unit option unit 420 is provided with a facial expression input field, a gesture input field, and an interpersonal non-language selection menu having a dance input field, in which a sentence to which the sentence to which the retrieval keyword belongs can be selected,
The moving picture search engine 320 of the moving picture search server 300 selects only the moving picture contents to which the non-speaking expression information expressed by the speaker who speaks the search keyword designated by the user belongs among the collected moving picture contents including the search keyword A video retrieval system based on the contents.
제3항 내지 제6항 중 어느 한항에 있어서,
상기 서식정보 DB(311)에는, 상기 검색키워드가 속한 수집된 동영상 컨텐츠를 선택하면 그 수집된 동영상 컨텐츠가 출력되게 요청하는 동영상선택란, 검색키워드가 표시된 키워드 표시란, 검색키워드를 중심으로 전 문맥의 대화내용이 표시되는 전문맥 표시란 및 검색키워드를 중심으로 후 문맥의 대화내용이 표시되는 후문맥 표시란을 갖는 검색동영상별 출력화면(500); 및
상기 검색동영상별 출력화면(500)에 표시된 전문맥 표시란 및 후문맥 표시란 상에 표시된 대화내용을 가나다순의 오름차순 정렬 안내메뉴 및 역 가나다순의 내림차순 정렬 안내메뉴가 구비된 글자정렬 팝업화면(600);을 더 포함하는 것을 특징으로 하는 내용을 기반으로 하는 동영상 검색시스템.
7. The method according to any one of claims 3 to 6,
The form information DB 311 includes a video selection box for requesting the collected video contents to be output when selecting the collected video contents to which the search keyword belongs, a keyword display field for displaying a search keyword, A video display screen 500 for each search video having a professional Mac display field for displaying the contents of the conversation and a context display field for displaying the contents of the conversation in the rear context around the search keyword; And
A text alignment pop-up screen 600 having an ascending sorting guidance menu in the alphabetical order and a sorting guidance menu in the descending order of the alphabetical order is displayed on the expert menu display field and the rear context display field displayed on the search video- The system according to claim 1, further comprising:
KR1020170046902A 2017-04-11 2017-04-11 Video search system based on information Active KR101940289B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170046902A KR101940289B1 (en) 2017-04-11 2017-04-11 Video search system based on information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170046902A KR101940289B1 (en) 2017-04-11 2017-04-11 Video search system based on information

Publications (2)

Publication Number Publication Date
KR20180114769A KR20180114769A (en) 2018-10-19
KR101940289B1 true KR101940289B1 (en) 2019-01-18

Family

ID=64102193

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170046902A Active KR101940289B1 (en) 2017-04-11 2017-04-11 Video search system based on information

Country Status (1)

Country Link
KR (1) KR101940289B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12153627B1 (en) 2023-05-04 2024-11-26 Action Power Corp. Method for searching video based on video segmentation

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113111219B (en) * 2020-01-10 2025-06-27 Vidaa(荷兰)国际控股有限公司 Display device and method
KR102827337B1 (en) * 2024-08-28 2025-07-02 주식회사 상상이음 Web Service Content Provision Device

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100636910B1 (en) 1998-07-28 2007-01-31 엘지전자 주식회사 Video Search System
KR20150136316A (en) * 2014-05-27 2015-12-07 삼성전자주식회사 Electrical apparatus, method and system for providing information

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12153627B1 (en) 2023-05-04 2024-11-26 Action Power Corp. Method for searching video based on video segmentation

Also Published As

Publication number Publication date
KR20180114769A (en) 2018-10-19

Similar Documents

Publication Publication Date Title
US20190349641A1 (en) Content providing server, content providing terminal and content providing method
CN109189987A (en) Video searching method and device
US20180130496A1 (en) Method and system for auto-generation of sketch notes-based visual summary of multimedia content
US11496806B2 (en) Content providing server, content providing terminal, and content providing method
US9335965B2 (en) System and method for excerpt creation by designating a text segment using speech
CN107241622A (en) video location processing method, terminal device and cloud server
JP2018504727A (en) Reference document recommendation method and apparatus
CN103390016A (en) Method for displaying text associated with audio file and electronic device
US20070297643A1 (en) Information processing system, information processing method, and program product therefor
KR20130129749A (en) Method and electronic device for easily searching for voice record
US9749699B2 (en) Display device, server device, voice input system and methods thereof
CN105335414B (en) Music recommendation method and device and terminal
JP2014500528A (en) Enhancement of meaning using TOP-K processing
KR101940289B1 (en) Video search system based on information
WO2019109663A1 (en) Cross-language search method and apparatus, and apparatus for cross-language search
US20150161204A1 (en) Interactive system, server and control method thereof
KR20160032564A (en) Image Displaying Device, Driving Method of Image Displaying Device, and Computer Readable Recording Medium
US12363387B2 (en) Navigating content by relevance
JP5611155B2 (en) Content tagging program, server and terminal
CN110929122A (en) Data processing method and device and data processing device
US11899716B2 (en) Content providing server, content providing terminal, and content providing method
JP2007199315A (en) Content providing apparatus
WO2019082606A1 (en) Content management device, content management system, and control method
JP6641732B2 (en) Information processing apparatus, information processing method, and program
KR102414993B1 (en) Method and ststem for providing relevant infromation

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20170411

PA0201 Request for examination
PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20181022

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20190108

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20190114

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20190115

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20211102

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20221024

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20231016

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20241116

Start annual number: 7

End annual number: 7