[go: up one dir, main page]

KR102062069B1 - 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법 - Google Patents

음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법 Download PDF

Info

Publication number
KR102062069B1
KR102062069B1 KR1020120127608A KR20120127608A KR102062069B1 KR 102062069 B1 KR102062069 B1 KR 102062069B1 KR 1020120127608 A KR1020120127608 A KR 1020120127608A KR 20120127608 A KR20120127608 A KR 20120127608A KR 102062069 B1 KR102062069 B1 KR 102062069B1
Authority
KR
South Korea
Prior art keywords
mashup
sequence
module
target
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020120127608A
Other languages
English (en)
Other versions
KR20140070689A (ko
Inventor
김재철
이성호
임영재
장윤섭
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020120127608A priority Critical patent/KR102062069B1/ko
Priority to US14/078,426 priority patent/US9236049B2/en
Publication of KR20140070689A publication Critical patent/KR20140070689A/ko
Application granted granted Critical
Publication of KR102062069B1 publication Critical patent/KR102062069B1/ko
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/57—Arrangements for indicating or recording the number of the calling subscriber at the called subscriber's set
    • H04M1/575—Means for retrieving and displaying personal data about calling party
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/284—Lexical analysis, e.g. tokenisation or collocates
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 실시예에서는 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법을 제공한다. 음성명령을 문자열로 변환하는 음성인식부; 상기 문자열을 기반으로 매쉬업 모듈에 대응하는 단어를 추출하고, 상기 단어를 매쉬업 모듈의 메타데이터 및 상기 매쉬업 모듈이 결합된 매쉬업시퀀스의 메타데이터 중 적어도 하나로 변환하는 매쉬업자연어처리기; 및 상기 매쉬업시퀀스의 메타데이터에 대응하는 상기 매쉬업시퀀스를 검색 및 선택하거나, 상기 매쉬업시퀀스를 새로이 생성하는 매쉬업시퀀스처리부를 포함하는 매쉬업 서비스 생성 장치를 제공한다. 이에 따라, 사용자에게 맞춤형인 매쉬업 서비스를 제공할 수 있는 효과가 있다.

Description

음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법{APPARATUS FOR MASH-UP SERVICE GENERATION BASED ON VOICE COMMAND AND METHOD THEREOF}
본 발명은 매쉬업 서비스 생성 장치에 관한 것으로서, 더욱 상세하게는 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법에 관한 것이다.
일반적으로 매쉬업(Mash-Up)은 다양한 형태의 컨텐츠(contents) 또는 서비스들을 결합하고 응용하여 새로운 컨텐츠 또는 서비스들을 생성하는 것을 의미한다. 여기서, 다양한 형태의 컨텐츠 또는 서비스들은 블록(block)이라는 프로그램 모듈(program module)로 구성될 수 있다. 매쉬업은 웹 기반 데이터 통합 어플리케이션(application)을 나타내는 것으로서, 전술한 블록들을 연결하거나 결합하는 매쉬업 저작도구를 이용함으로써 만들어질 수 있다. 매쉬업의 구체적인 예로서, 다음(Daum)의 지도 서비스에 네이버(Naver)의 사진 서비스가 합쳐진 어플리케이션이 있다. 전술한 매쉬업은 사용자가 지도의 특정 위치를 마우스로 클릭하면, 위치와 관련된 사진들이 지도상에 표시되도록 한다.
여기서, 일반적인 매쉬업 작업 과정은 매쉬업 개발자가 어떤 종류의 매쉬업을 제작할 것인가를 설계하고, 설계된 매쉬업을 제작하는데 사용될 공개API(또는, 오픈API: Open Application Interface)들을 검색 및 선정한다. 매쉬업 개발자가 다음 맵 공개API 및 네이버 공개API를 분석하여, 각각의 공개 API 서비스 즉, 블록들의 특성을 파악한다. 여기서, 블록들의 특성은 예를 들면, 통신 프로토콜(코드), 데이터 포맷 및 입출력 데이터의 형식 등이 될 수 있다.
즉, 매쉬업 저작 장치는 공개API 즉, 블록들을 배치하거나 나열하고, 각 블록의 입력 및 출력의 데이터 포맷을 이용하여 각 블록의 입력 및 출력을 서로 연결하는 기능을 제공하고 있다. 또한, 매쉬업 저작 장치는 스크립트(script) 또는 코드들을 명시(明示)하는 기능을 제공한다.
한편, 최근에 수많은 스마트폰(Smart Phone), 태블릿 PC(Tablet PC) 등의 수요와 공급이 증가하고 있으며, 그 수요와 공급만큼 모바일(mobile) 기기들의 조작법 또한 다양해지고 있다. 또한, 최근 스마트(smart) 장치(device)의 확산과 개방형 서비스(공개API)의 일반화로 인해서 사용자는 다양한 부가 서비스를 요구하고 있다.
그러나, 현재의 서비스는 단순 음성인식과 일방적인 응답, 즉 비서형 응답에만 그치고 있으며, 스마트 기기의 특성인 멀티 미디어 서비스 기능을 이용하지 못하여, 사용자에게 맞춤형으로 제공되지 못하고 있는 문제점이 있다. 이러한 문제점은 개방형 서비스 즉, 공개API를 조합하여 자동으로 새로운 매쉬업 서비스를 생성할 수 있는 방법과 구성 장치가 존재하지 않기에 발생한다.
다시 말하면, 일반적인 매쉬업 서비스 생성 장치는 음성인식 등의 최신 기능을 사용하지 않고, 키보드 및 마우스 등의 사용이 요구되는 어려운 프로그래밍을 이용하여 매쉬업 서비스를 생성한다.
이러한 일반적인 매쉬업 서비스 생성 장치는 리소스가 제약된 환경에서 구현되기 어려운 문제점이 있으며, 프로그래밍 지식이 부족한 일반 사용자들은 편리하게 일반 매쉬업 서비스를 생성하는 데 한계가 있는 문제점이 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 음성명령을 이용하여 매쉬업 서비스를 생성함으로써, 일반 사용자가 원하는 맞춤형 매쉬업 서비스를 생성할 수 있는 매쉬업 서비스 생성 장치를 제공하는 데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 스마트 기기의 음성 인식 기능을 이용하여 매쉬업 서비스를 생성함으로써, 일반 사용자가 손쉽게 매쉬업 서비스를 생성할 수 있는 매쉬업 서비스 생성 방법을 제공하는 데 있다.
상기 목적을 달성하기 위한 본 발명의 일 측면은, 음성명령을 문자열로 변환하는 음성인식부; 상기 문자열을 기반으로 매쉬업 모듈에 대응하는 단어를 추출하고, 상기 단어를 매쉬업 모듈의 메타데이터 및 상기 매쉬업 모듈이 결합된 매쉬업시퀀스의 메타데이터 중 적어도 하나로 변환하는 매쉬업자연어처리기; 및 상기 매쉬업시퀀스의 메타데이터에 대응하는 목표 매쉬업시퀀스를 검색 및 선택하거나, 상기 목표 매쉬업시퀀스를 새로이 생성하는 매쉬업시퀀스처리부를 포함하는 매쉬업 서비스 생성 장치를 제공한다.
여기서, 상기 매쉬업시퀀스처리부는, 상기 목표 매쉬업시퀀스가 이미 존재하는 경우, 상기 목표 매쉬업시퀀스를 검색 및 선택하고, 상기 목표 매쉬업시퀀스가 존재하지 않는 경우, 상기 매쉬업 모듈의 메타데이터에 대응하는 목표 매쉬업 모듈을 요청하고, 상기 목표 매쉬업 모듈을 이용하여 상기 목표 매쉬업시퀀스를 생성하는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업 모듈을 검색하여 상기 목표 매쉬업 모듈의 입출력 파라미터를 비교하는 매쉬업 모듈관리부를 더 포함한다.
여기서, 상기 매쉬업 모듈관리부는 상기 매쉬업 모듈의 메타데이터에 대응하는 새로운 목표 매쉬업 모듈을 웹에서 검색하여 등록하는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업시퀀스에 대응하는 런타임 코드를 호출 또는 생성하는 런타임관리부를 더 포함한다.
여기서, 상기 런타임관리부는, 상기 목표 매쉬업시퀀스가 선택 및 검색된 경우, 상기 런타임 코드를 호출하고, 상기 목표 매쉬업시퀀스가 새로이 생성된 경우, 상기 런타임 코드를 자동으로 생성하는 것을 특징으로 한다.
여기서, 상기 런타임관리부는, 상기 런타임 코드를 구동하여 매쉬업 서비스를 생성하는 것을 특징으로 한다.
여기서, 상기 매쉬업 서비스를 웹 브라우저에 표출하는 매쉬업표출부를 더 포함하는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업시퀀스를 저장하는 매쉬업시퀀스DB와, 상기 목표 매쉬업 모듈을 저장하는 블록DB를 더 포함한다.
여기서, 상기 런타임 코드를 저장하는 런타임DB를 더 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 또 다른 일 측면은, 매쉬업 서비스 생성 장치에서 매쉬업 서비스를 생성하는 매쉬업 서비스 생성 방법에 있어서, 음성명령을 문자열로 변환하는 단계; 상기 문자열을 기반으로 매쉬업 모듈에 대응하는 단어를 추출하는 단계; 상기 단어를 매쉬업 모듈의 메타데이터 및 상기 매쉬업 모듈이 결합된 매쉬업시퀀스의 메타데이터 중 적어도 하나로 변환하여 문자지시를 명령하는 단계; 및 상기 문자지시에 응답하여, 상기 매쉬업시퀀스의 메타데이터에 대응하는 목표 매쉬업시퀀스를 요청하는 단계를 포함하는 매쉬업 서비스 생성 방법을 제공한다.
여기서, 상기 목표 매쉬업시퀀스를 요청하는 단계는, 상기 매쉬업시퀀스의 메타데이터에 대응하는 상기 목표 매쉬업시퀀스가 이미 존재하는 경우, 상기 목표 매쉬업시퀀스를 검색 및 선택하고, 상기 목표 매쉬업시퀀스가 존재하지 않는 경우, 상기 매쉬업시퀀스의 메타데이터에 대응하는 상기 목표 매쉬업시퀀스를 새로이 생성하는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업시퀀스를 새로이 생성하는 단계는, 상기 매쉬업 모듈의 메타데이터에 대응하는 목표 매쉬업 모듈을 요청하는 단계; 및 상기 목표 매쉬업 모듈을 검색하여 상기 목표 매쉬업 모듈의 입출력 파라미터를 비교하는 단계를 포함하는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업시퀀스를 새로이 생성하는 단계는, 상기 목표 매쉬업 모듈을 결합시킴으로써 이루어지는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업시퀀스를 새로이 생성하는 단계는, 상기 매쉬업 모듈의 메타데이터에 대응하는 새로운 목표 매쉬업 모듈을 웹에서 검색하여 새로이 등록하는 단계를 더 포함하는 것을 특징으로 한다.
여기서, 상기 목표 매쉬업시퀀스에 대응하는 런타임 코드를 호출 또는 생성함으로써 런타임 코드를 제공하는 단계를 더 포함한다.
여기서, 상기 런타임 코드를 제공하는 단계는, 상기 목표 매쉬업시퀀스가 검색 및 선택된 경우, 상기 런타임 코드를 호출하고, 상기 목표 매쉬업시퀀스가 새로이 생성된 경우, 상기 런타임 코드를 자동으로 생성하는 것을 특징으로 한다.
여기서, 상기 런타임 코드를 제공하는 단계는, 상기 런타임 코드를 구동하여 매쉬업 서비스를 생성하는 단계를 더 포함하는 것을 특징으로 한다.
여기서, 상기 매쉬업 서비스를 웹 브라우저에 표출하는 단계를 더 포함하는 것을 특징으로 한다.
상기와 같은 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치는, 음성명령을 이용하여 매쉬업 서비스를 생성함으로써, 일반 사용자가 원하는 맞춤형 매쉬업 서비스를 생성할 수 있는 효과를 제공한다.
또한, 상기와 같은 본 발명의 실시예에 따른 매쉬업 서비스 생성 방법은, 스마트 기기의 음성인식 기능을 이용하여 매쉬업 서비스를 생성함으로써, 일반 사용자가 손쉽게 매쉬업 서비스를 생성할 수 있는 효과를 제공한다.
도 1은 본 발 명의 실시예에 따른 음성 명령 기반 매쉬업 서비스 생성 장치의 구성을 개략적으로 도시한 개념도이다.
도 2는 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업 서비스를 생성하는 방법을 보여주는 순서도이다.
도 3은 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업시퀀스DB에 존재하는 매쉬업시퀀스를 이용하여 매쉬업 서비스를 생성하는 전반적인 방법을 보여주는 순서도이다.
도 4는 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업 모듈을 이용하여 새로이 매쉬업시퀀스를 생성하여 매쉬업 서비스를 제공하는 방법을 보다 상세하게 보여주는 순서도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 보다 상세하게 설명한다.
도 1은 본 발 명의 실시예에 따른 음성 명령 기반 매쉬업 서비스 생성 장치(100)의 구성을 개략적으로 도시한 개념도이다. 이하, 설명의 편의를 위하여, 음성 명령 기반 매쉬업 서비스 생성 장치를(100)를 매쉬업 서비스 생성 장치(100)로 칭한다.
먼저, 도 1에 도시한 바와 같이, 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치(100)는, 음성인식부(110)와, 매쉬업자연어처리부(120)와, 매쉬업시퀀스처리부(130)와, 매쉬업 모듈관리부(140)와, 런타임관리부(150)와, 매쉬업표출부(160)를 포함할 수 있다.
또한, 매쉬업 서비스 생성 장치(100)는 매쉬업시퀀스DB(170)와, 블록DB(180)와, 런타임DB(190)를 포함할 수 있다.
여기서, 음성인식부(110)는 사용자로부터 음성명령을 입력 받고, 입력 받은 음성명령을 매쉬업 서비스 생성 장치(100)가 인식할 수 있는 디지털(digital) 문자열로 변환한다.
또한, 음성인식부(110)는 디지털 문자열을 매쉬업자연어처리부(120)에 제공한다.
구체적으로 예를 들면, 음성인식부(110)는 사용자로부터 에버랜드 주변의 날씨와 교통정보를 지도에 표시해라.라는 음성명령을 입력 받으면, 이 음성명령을 음성명령에 대응하는 디지털 문자열로 변환하여, 매쉬업자연어처리부(120)에 제공한다.
매쉬업자연어처리부(120)는 음성명령에 대응하는 디지털 문자열을 전달 받고, 디지털 문자열을 형태소로 분석하여, 매쉬업 모듈(Mash-up Module)에 대응하는 단어를 추출한다.
또한, 매쉬업자연어처리부(120)는 추출한 단어를 매쉬업 모듈 및 매쉬업시퀀스(Mash-up Sequence)의 메타데이터(metadata) 중 적어도 하나로 변환한다.
또한, 매쉬업자연어처리부(120)는 추출한 단어에 대응하는 매쉬업 모듈 및 매쉬업시퀀스의 메타데이터를 매쉬업시퀀스처리부(130)에 전달한다.
매쉬업 모듈은 예를 들면, 블록(block)으로도 불려지는데, 웹(web, 200)에서 웹 서비스(web service) 업체가 제공하는 다양한 컨텐츠(contents) 및 서비스들이 프로그램 모듈(program module)로 구성된 것을 의미한다. 예를 들면, 구글(Google)의 지도 서비스, 부동산정보 사이트(site)인 크레이크리스트(Craigslist)의 부동산 정보 서비스 또는 플리커(Flickr)의 사진 서비스, 유투브(YouTobe)의 동영상 서비스, 야후(Yahoo)의 날씨 서비스 각각은 프로그램 모듈로 구성됨으로써 매쉬업 모듈(블록)이 될 수 있다. 즉, 매쉬업 모듈은 공개 API(오픈API 또는 개방형 서비스: Open Application Program Interface)로 제공되는 일반적인 기능 또는 단위 기능을 수행하는 모듈을 의미한다.
메타데이터는 정보를 지적으로 통제하고 구조적으로 접근할 수 있도록 하기 위해서 정보 유형을 정리한 2차적인 정보를 나타낸다. 즉, 매쉬업 모듈을 표현하는 특성의 정보 유형이 메타데이터이며, 데이터의 유형을 정한 데이터라는 의미에서 '데이터에 대한 데이터'라고 정의하기도 한다.
매쉬업시퀀스는 예를 들면, 복수의 매쉬업 모듈이 결합되어 사용자에게 제공되는 서비스를 의미한다. 구체적으로 예를 들면, 매쉬업시퀀스는 구글의 지도 서비스와 야후의 날씨 서비스가 결합됨으로써, 지도의 특정 지역을 클릭할 경우, 해당 지역의 날씨 정보를 알려주는 서비스가 될 수 있다.
이때, 매쉬업 모듈 및 매쉬업시퀀스의 메타데이터는 예를 들면, 매쉬업 모듈 및 매쉬업시퀀스의 다양한 정보 검색에 이용되는 정보로서, 매쉬업 모듈 및 매쉬업시퀀스의 입출력 정보 즉, 데이터 포맷(format)을 포함한다. 데이터 포맷에는 예를 들면, XML, JSON 또는 PHP 등이 있다.
또한, 매쉬업 모듈 및 매쉬업시퀀스의 메타데이터는 예를 들면, 통신 프로토콜(protocol) 또는 웹 페이지에 보여지는 HTML(Hyper Text Markup Language) 등에 대한 정보를 더 포함할 수 있다.
여기서, 통신 프로토콜은 공개API 서비스 제공자와 데이터를 송수신하기 위한 것으로서, 예를 들면, 자바 스크립트(JAVA Script), REST 또는 SOAP 등이 있다. 즉, 통신 프로토콜은 단위 기능을 수행하기 위한 코드를 의미한다.
전술한 바와 같이, 매쉬업자연어처리부(120)는 디지털 문자열을 형태소로 분석하여, 매쉬업 모듈(Mash-up Module)에 대응하는 단어를 추출한다.
구체적으로 예를 들면, 입력된 문자열의 POS Tag 정보 분석을 통해 의사형태소(pseudo-morpheme) 형태로 단어를 분리하고, 각 단어에 대하여 POS Tag를 분석한다.
여기서, 의사형태소는 언어학적 단위인 형태소의 특성을 유지하면서 음성 인식 과정에 적합한 분리 기준의 새로운 디코딩(decoding) 단위를 의미한다.
POS Tag는 문자열의 형태소 분석기의 작동원리를 나타낸다. 형태소 분석기를 통해서, 문장을 이루고 있는 각 단어는 형태소 단위로 분할되고, 분할된 각 형태소는 자기 자신의 철자와 그에 대응하는 품사의 태그(tag)가 연결된 형태로 변형된다. 이때, 태그정보가 결합된 형태소들을 각각 하나의 단어로 취급될 수 있다.
음성 명령인 에버랜드 주변의 날씨와 교통정보를 지도에 표시해라.에 대응하는 디지털 문자열을 이용하여 보다 구체적으로 예를 든다.
이 경우, 매쉬업자연어처리부(120)는 디지털 문자열을 매쉬업 모듈에 대응하는 단어 예를 들면, 에버랜드(주변)(위치를 나타내는 매쉬업 모듈에 대응), 날씨, 교통정보 및 지도(표시)로 추출한다.
또한, 추출한 단어들을 매쉬업 모듈 및 매쉬업시퀀스의 메타데이터로 변환하여 매쉬업시퀀스처리부(130)에 제공한다.
매쉬업시퀀스처리부(130)는 메타데이터를 전달받고, 메타데이터에 대응하는 매쉬업시퀀스를 검색 및 선택하거나, 새로이 생성하여 런타임관리부(150)에 제공한다.
이를 위하여, 매쉬업시퀀스처리부(130)는 매쉬업시퀀스선택부(131)와, 매쉬업시퀀스생성부(132)와, 매쉬업시퀀스검색부(133)를 포함할 수 있다.
먼저, 매쉬업시퀀스검색부(133)는 메타데이터에 대응하는 매쉬업시퀀스를 매쉬업시퀀스DB(170)에서 검색한다. 여기서, 검색결과는 예를 들면, 메타데이터에 대응하는 매쉬업시퀀스가 매쉬업시퀀스DB(170)에 존재 여부에 대한 정보를 나타낸다.
또한, 매쉬업시퀀스검색부(133)는 예를 들면, 메타데이터에 대응하는 매쉬업시퀀스의 존재 여부에 대한 검색결과를 매쉬업시퀀스선택부(133)와 매쉬업시퀀스생성부(132)에 제공할 수 있다.
이때, 메타데이터에 대응하는 매쉬업시퀀스가 매쉬업시퀀스DB(170)에 존재하는 경우, 매쉬업시퀀스선택기(131)는 메타데이터에 대응하는 매쉬업시퀀스를 선택하여 런타임관리부(150)에 제공한다.
반면, 메타데이터에 대응하는 매쉬업시퀀스가 매쉬업시퀀스DB(170)에 존재하지 않는 경우, 매쉬업시퀀스생성부(132)는 메타데이터에 대응하는 매쉬업시퀀스를 구성할 수 있는 매쉬업 모듈을 제공받고, 매쉬업 모듈을 기반으로 새로운 매쉬업시퀀스를 생성한다. 이때, 매쉬업시퀀스처리부(130)는 새로이 생성한 매쉬업시퀀스를 매쉬업시퀀스DB(170)에 저장할 수 있다.
또한, 매쉬업시퀀스생성부(132)는 새로이 생성한 매쉬업시퀀스를 런타임관리부(150)에 제공한다.
이때, 매쉬업시퀀스생성부(132)는 메타데이터에 대응하는 매쉬업시퀀스를 구성하는 매쉬업 모듈을 매쉬업관리부(140)로부터 제공받을 수 있다.
매쉬업 모듈관리부(140)는 추출된 단어에 대응하는 매쉬업 모듈을 검색하고, 검색된 매쉬업 모듈의 입력 및 출력 파라미터를 비교하여 서로 연결 가능한 매쉬업 모듈을 매쉬업시퀀스처리부(130)에 제공한다. 다시 말하면, 매쉬업 모듈관리부(140)는 매쉬업 모듈의 메타데이터를 이용하여 매쉬업 모듈을 검색한다.
이를 위하여, 매쉬업 모듈관리부(140)는 매쉬업 모듈등록부(141)와, 매쉬업 모듈검색부(142)와, 매쉬업 모듈입출력비교부(143)를 포함할 수 있다.
매쉬업 모듈등록부(141)는 웹(200)의 새로운 매쉬업 모듈을 블록DB(180)에 저장한다.
구체적으로 예를 들면, 매쉬업 모듈등록부(141)는 매쉬업시퀀스를 구성할 수 있는 매쉬업 모듈이 블록DB(180)에 존재하지 않는 경우, 해당 매쉬업 모듈을 웹에서 검색하여 새로이 블록DB(180)에 저장할 수 있다.
매쉬업 모듈검색부(142)는 메타데이터에 대응하는 매쉬업시퀀스를 구성할 수 있는 매쉬업 모듈을 블록DB(180)에서 검색하고, 검색된 매쉬업 모듈을 블록DB(180)에 전달한다.
매쉬업 모듈입출력비교부(143)는 전달받은 매쉬업 모듈의 입력 및 출력 파라미터를 비교하여, 매쉬업 모듈이 서로 연결 가능한지 판단한다.
또한, 매쉬업 모듈입출력비교부(143)는 서로 연결 가능한 매쉬업 모듈을 매쉬업시퀀스처리부(130)에 제공한다.
여기서, 매쉬업 모듈은 자신의 입력 및 출력 파라미터를 가지고 있다. 구체적으로 예를 들면, 매쉬업 모듈은 n 개의 입력 파라미터(n ≥ 1)와, m 개의 출력 파라미터(m ≥ 1)를 가지고 있을 수 있다. 또한, n 개의 입력 파라미터 각각은 데이터 타입을 가지고 있다. 마찬가지로, m 개의 출력 파라미터 각각은 데이터 타입을 가지고 있다.
매쉬업 모듈_A를 일 예로 설명한다. 매쉬업 모듈_A는 아래와 같은 4개의 입력 파라미터를 가질 수 있다.
- 건물명(type: string(01))
- 위도(type: float(03))
- 경도(type: float(03))
- 시간(type: dateType(04))
즉, 매쉬업 모듈_A는 4개의 입력 파라미터를 가지고 있으며, 4개의 입력 파라미터 각각의 데이터 타입은 순차적으로 string, float, float 및 dateType이 된다.
또한, 매쉬업 모듈_A는 1 개의 출력 파라미터를 갖는다. 출력 파라미터는 아래와 같이 정의된다.
- 거리값(type: float(03))
이때, 매쉬업 모듈입출력비교부(143)는 예를 들면, 결합되는 매쉬업 모듈 간의 입력 및 출력 파라미터 수와 명칭의 의미와 블록의 데이터 타입 등을 비교함으로써, 매쉬업 모듈 간의 결합 가능성을 알려준다.
런타임관리부(150)는 전달받은 매쉬업시퀀스에 대응하는 런타임 코드(실행 코드, run-time code)를 런타임DB(190)에서 검색 및 실행하거나, 매쉬업시퀀스에 대응하는 런타임 코드를 새로이 생성 및 실행한다.
이를 위하여, 런타임관리부(150)는 런타임선택부(151)와, 런타임구동부(152)와, 런타임생성부(153)를 포함할 수 있다.
여기서, 런타임선택부(151)는 매쉬업시퀀스에 대응하는 런타임 코드를 런타임DB(190)에서 검색한다.
이때, 런타임선택부(151)는 매쉬업시퀀스에 대응하는 런타임 코드가 존재할 경우, 해당 런타임 코드를 런타임구동부(152)에 제공한다.
반면, 런타임선택부(151)는 매쉬업시퀀스에 대응하는 런타임 코드가 존재하지 않는 경우, 런타임 코드가 존재하지 않으므로 새로이 런타임 코드를 생성해야 한다는 정보인 런타임생성정보를 런타임생성부(153)에 제공한다.
런타임생성부(153)는 런타임생성정보를 전달받고, 매쉬업시퀀스에 대응하는 런타임 코드를 자동 생성하여 런타임구동부(152)에 제공한다.
런타임구동부(152)는 전달받은 런타임 코드를 실행하여, 실행된 결과물을 매쉬업표출부(160)에 제공한다. 이때, 실행된 결과물은 예를 들면, 매쉬업 서비스가 될 수 있다.
매쉬업표출부(160)는 실행된 매쉬업 서비스를 웹 브라우저(300)로 표출함으로써, 사용자가 매쉬업 서비스를 이용할 수 있도록 한다.
한편, 매쉬업시퀀스DB(170)는 다양한 매쉬업시퀀스를 저장하여 매쉬업시퀀스처리부(130)에서 요청한 매쉬업시퀀스를 매쉬업시퀀스처리부(130)에 제공한다.
블록DB(180)는 다양한 매쉬업 모듈들을 저장하여 매쉬업 모듈관리부(140)에서 요청한 매쉬업 모듈을 매쉬업 모듈관리부(140)에 제공한다.
런타임DB(190)는 다양한 런타임 코드들을 저장하여 런타임관리부(150)에서 요청한 런타임 코드를 런타임관리부(150)에 제공한다.
이들은 예를 들면, 일반적인 데이터베이스(database)로 구성될 수 있다.
이하, 도 2를 참고하여, 본 발명의 실시예에 따른 매쉬업 서비스 생성 방법에 대해서 살펴본다.
도 2는 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업 서비스를 생성하는 방법을 보여주는 순서도이다.
먼저, 사용자로부터 입력 받은 음성명령에 대응하는 디지털 문자열을 생성함으로써 음성인식을 한다(S201).
디지털 문자열을 형태소로 분석하여 매쉬업 모듈에 대응하는 단어를 추출함으로써, 디지털 문자열에 대응하는 매쉬업 모듈 및 매쉬업시퀀스의 메타데이터를 생성하는 매쉬업 자연어 처리를 한다(S202).
매쉬업시퀀스의 메타데이터에 대응하는 매쉬업시퀀스가 존재하는지 판단한다(S203).
이때, 매쉬업시퀀스의 메타데이터에 대응하는 매쉬업시퀀스가 존재하지 않는 경우, 매쉬업 모듈의 메타데이터를 기반으로 매쉬업시퀀스를 구성할 수 있는 매쉬업 모듈이 존재하는지 판단한다(S204). 여기서, 매쉬업시퀀스를 구성할 수 있는 매쉬업이 존재하지 않는 경우, 새로운 매쉬업 모듈을 등록한다(S205).
매쉬업 모듈이 기존에 존재하거나 신규로 매쉬업 모듈을 등록함으로써 매쉬업시퀀스를 구성할 수 있는 매쉬업 모듈이 존재하는 경우, 매쉬업 모듈의 입출력 파라미터를 비교한다(S206).
이어서, 매쉬업 모듈의 입출력을 비교함으로써, 매쉬업 모듈 간에 서로 결합 가능한 경우, 매쉬업 모듈을 결합함으로써 매쉬업시퀀스를 생성한다(S207).
한편, 매쉬업시퀀스의 메타데이터에 대응하는 매쉬업시퀀스가 존재하거나 새로이 매쉬업시퀀스를 생성한 경우, 매쉬업시퀀스에 대응하는 런타임 코드가 존재하는지 판단한다(S208).
이때, 매쉬업시퀀스에 대응하는 런타임 코드가 존재하는 경우, 런타임 코드를 호출한다(S209). 반면에, 매쉬업시퀀스에 대응하는 런타임 코드가 존재하지 않는 경우, 매쉬업시퀀스에 대응하는 런타임 코드를 자동으로 생성한다(S210).
호출되거나 생성된 런타임 코드를 구동한다(S211). 런타임 코드 구동에 의해서 생성되는 매쉬업 서비스를 화면에 표출함(S212)으로써, 본 발명의 실시예에 따른 매쉬업 서비스 생성 방법은 완료된다.
이하, 도 3을 참고하여 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치의 구동 방법에 대해서 보다 상세하게 살펴본다.
도 3은 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업시퀀스DB(도 1의 170)에 존재하는 매쉬업시퀀스를 이용하여 매쉬업 서비스를 생성하는 전반적인 방법을 보여주는 순서도이다.
먼저, 음성인식부(110)는 사용자로부터 음성지시 즉, 음성명령을 입력 받는다(S301).
음성인식부(110)는 음성지시를 매쉬업 서비스 생성 장치가 이해할 수 있는 디지털 문자열로 변환하여, 매쉬업자연어처리부(120)에 문자지시를 제공한다(S302).
매쉬업자연어처리부(120)는 문자지시를 분석하고, 매쉬업 모듈에 대응하는 단어를 추출하며, 추출된 단어를 매쉬업 모듈 및 매쉬업시퀀스에 대응하는 메타데이터로 변환하여, 매쉬업시퀀스처리부(130)에 매쉬업시퀀스를 요청한다(S303).
매쉬업시퀀스처리부(130)는 매쉬업시퀀스의 메타데이터를 기반으로 매쉬업시퀀스를 검색하고(S304), 검색된 매쉬업시퀀스에 대응하는 런타임 코드의 구동을 런타임관리부(150)에 요청한다(S305). 여기서, 매쉬업시퀀스에 대응하는 런타임 코드는 예를 들면, 런타임DB(도 1의 190)에 존재하는 것으로 볼 수 있다. 왜냐하면, 기존에 존재하는 매쉬업시퀀스를 이용하는 바, 그에 대응하는 런타임 코드도 함께 미리 생성되어 저장될 수 있기 때문이다. 이 경우, 매쉬업시퀀스처리부(130)는 바로 런타임관리부(150)에 매쉬업시퀀스에 대응하는 런타임 코드의 구동을 요청할 수 있다. 또한, 런타임관리부(150)는 매쉬업시퀀스에 대응하는 런타임 코드를 검색함으로써 바로 런타임 코드를 구동할 수 있다.
한편, 매쉬업시퀀스에 대응하는 런타임 코드가 이미 존재한다고 한 것은 일 예로서, 런타임 코드가 존재하지 않을 경우, 매쉬업시퀀스에 대응하는 런타임 코드를 새로이 생성할 수도 있다.
런타임관리부(150)는 매쉬업시퀀스에 대응하는 런타임 코드를 구동하여(S306), 그 결과값을 매쉬업표출부(160)에 화면에 표출하도록 요청한다(S307).
매쉬업표출부(160)는 결과화면을 예를 들면, 웹 브라우저에 표출함으로써 사용자에게 제공한다(S308).
이하, 도 4를 참고하여 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업 서비스를 생성하는 방법에 대해서 보다 상세하게 살펴본다.
도 4는 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치가 매쉬업 모듈을 이용하여 새로이 매쉬업시퀀스를 생성하여 매쉬업 서비스를 제공하는 방법을 보다 상세하게 보여주는 순서도이다.
먼저, 음성인식부(110)는 사용자로부터 음성지시 즉, 음성명령을 입력 받는다(S401).
음성인식부(110)는 음성지시를 매쉬업 서비스 생성 장치가 이해할 수 있는 디지털 문자열로 변환하여, 매쉬업자연어처리부(120)에 문자지시를 제공한다(S402).
매쉬업자연어처리부(120)는 문자지시를 분석하고, 매쉬업 모듈에 대응하는 단어를 추출하며, 추출된 단어를 매쉬업 모듈 및 매쉬업시퀀스에 대응하는 메타데이터로 변환하여, 매쉬업시퀀스처리부(130)에 매쉬업시퀀스를 요청한다(S403).
매쉬업시퀀스처리부(130)는 매쉬업시퀀스의 메타데이터를 기반으로 매쉬업시퀀스를 검색하고(S404), 이때, 매쉬업시퀀스의 메타데이터에 대응하는 매쉬업시퀀스가 존재하지 않는 경우, 매쉬업 모듈관리부(140)에 매쉬업 모듈의 메타데이터에 대응하는 매쉬업 모듈에 대한 검색을 요청한다(S405). 매쉬업 모듈관리부(140)는 매쉬업 모듈을 검색하고(S406), 매쉬업 모듈의 검색에 대한 응답을 매쉬업시퀀스처리부(130)에 제공한다.
매쉬업시퀀스처리부(130)는 매쉬업 모듈 간의 입출력 비교를 매쉬업 모듈관리부(140)에 요청하고(S408), 매쉬업 모듈관리부(140)는 매쉬업 모듈 간의 입출력을 비교한다(S409). 또한, 매쉬업 모듈관리부(140)는 매쉬업 모듈 간의 입출력 비교에 대한 응답을 매쉬업시퀀스처리부(130)에 제공한다(S410).
매쉬업시퀀스처리부(130)는 제공받은 매쉬업 모듈을 연결 또는 결합함으로써 매쉬업시퀀스를 생성한다(S411). 한편, 도시되지는 않았으나, 매쉬업시퀀스처리부(130)는 매쉬업시퀀스의 메타데이터에 대응하는 매쉬업시퀀스가 존재하는 경우, 검색된 매쉬업시퀀스를 바로 이용할 수 있다.
매쉬업시퀀스처리부(130)는 생성된 매쉬업시퀀스에 대응하는 런타임 코드 생성을 런타임관리부(150)에 요청하고(S412), 런타임관리부(150)는 매쉬업시퀀스에 대응하는 런타임 코드를 생성한다(S413). 여기서, 새로운 매쉬업 모듈을 이용하여 매쉬업시퀀스를 생성하였는바, 새로운 매쉬업시퀀스에 대응하는 런타임 코드는 예를 들면, 런타임DB(도 1의 190)에 존재하지 않을 수 있다. 이에 따라, 런타임관리부(150)는 새로운 매쉬업시퀀스에 대응하는 런타임 코드를 자동으로 생성하고(S413), 런타임 코드 생성 응답을 매쉬업시퀀스처리부(130)에 제공한다.
한편, 새로이 생성한 매쉬업시퀀스에 대응하는 런타임 코드가 미리 저장되지 않는 것은 일 예로서, 새로이 생성한 매쉬업시퀀스에 대응하는 런타임 코드가 미리 저장되어 있는 경우, 이 런타임 코드를 이용할 수도 있다.
런타임 코드 생성 응답을 받은 매쉬업시퀀스처리부(130)는 런타임관리부(150)에 런타임 코드 구동을 요청한다(S415). 이에 따라, 런타임관리부(150)는 런타임 코드를 구동하고(S416), 런타임 코드 구동의 결과값을 매쉬업표출부(160)에 제공함으로써, 결과값을 화면에 표출하도록 매쉬업표출부(160)에 요청한다.
매쉬업표출부(160)는 결과값을 웹 브라우저 등 화면에 표출함으로써(S418), 매쉬업 서비스를 사용자에게 제공한다.
전술한 바와 같이, 본 발명의 실시예에 따른 매쉬업 서비스 생성 장치 및 그 방법은, 스마트 기기 등의 음성 인식 기능을 이용하여 매쉬업 서비스를 생성한다.
이에 따라, 개발자가 매쉬업 서비스를 직접 프로그래밍 하여 일방적으로 제시하는 기존의 방식을 탈피하여, 일반 사용자가 음성명령을 통해서 맞춤형으로 개인화된 매쉬업 서비스를 직접 생성할 수 있다. 또한, 일반 사용자가 음성명령을 이용하여 쉽게 매쉬업을 생성할 수 있다.
본 발명의 도 1에서는 설명의 편의를 위하여, 각 구성이 각각 다른 블록에 도시화하여 예를 들어 설명하였으나, 각각의 구성은 하나의 블록으로 구성될 수 있다. 예를 들면, 각각의 블록은 제어부(controller) 또는 프로세서(processor) 등에 구성되어 전술한 일련의 동작들을 수행할 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
100: 매쉬업 서비스 생성 장치 110: 음성인식부
120: 매쉬업자연어처리부 130: 매쉬업시퀀스처리부
140: 매쉬업 모듈관리부 150: 런타임관리부
160: 매쉬업표출부

Claims (19)

  1. 음성명령을 문자열로 변환하는 음성인식부;
    상기 문자열을 형태소 기반으로 분석하여 매쉬업 모듈에 대응하는 단어를 추출하고, 상기 단어를 매쉬업 모듈의 메타데이터 및 상기 매쉬업 모듈이 결합된 매쉬업시퀀스의 메타데이터로 변환하는 매쉬업자연어처리기;
    상기 매쉬업시퀀스의 메타데이터에 대응하는 목표 매쉬업시퀀스를 검색 및 선택하되, 상기 목표 매쉬업시퀀스가 존재하지 않는 경우, 상기 매쉬업 모듈의 메타데이터에 대응하는 목표 매쉬업 모듈을 요청하고, 상기 목표 매쉬업 모듈을 이용하여 상기 목표 매쉬업시퀀스를 새로이 생성하는 매쉬업시퀀스처리부; 및
    상기 목표 매쉬업 모듈을 검색하여 상기 목표 매쉬업 모듈의 입출력 파라미터를 비교하고, 비교결과 서로 연결가능한 목표 매쉬업 모듈을 상기 매쉬업 시퀀스처리부에 제공하는 매쉬업 모듈관리부를 포함하는 매쉬업 서비스 생성 장치.
  2. 청구항 1에 있어서,
    상기 매쉬업시퀀스처리부는, 상기 목표 매쉬업시퀀스가 이미 존재하는 경우, 상기 목표 매쉬업시퀀스를 검색 및 선택하는 것을 특징으로 하는 매쉬업 서비스 생성 장치.
  3. 삭제
  4. 청구항 1에 있어서,
    상기 매쉬업 모듈관리부는 상기 매쉬업 모듈의 메타데이터에 대응하는 새로운 목표 매쉬업 모듈을 웹에서 검색하여 등록하는 것을 특징으로 하는 매쉬업 서비스 생성 장치.
  5. 청구항 1에 있어서,
    상기 목표 매쉬업시퀀스에 대응하는 런타임 코드를 호출 또는 생성하는 런타임관리부를 더 포함하는 매쉬업 서비스 생성 장치.
  6. 청구항 5에 있어서,
    상기 런타임관리부는, 상기 목표 매쉬업시퀀스가 선택 및 검색된 경우, 상기 런타임 코드를 호출하고, 상기 목표 매쉬업시퀀스가 새로이 생성된 경우, 상기 런타임 코드를 자동으로 생성하는 것을 특징으로 하는 매쉬업 서비스 생성 장치.
  7. 청구항 5에 있어서,
    상기 런타임관리부는, 상기 런타임 코드를 구동하여 매쉬업 서비스를 생성하는 것을 특징으로 하는 매쉬업 서비스 생성 장치.
  8. 청구항 7에 있어서,
    상기 매쉬업 서비스를 웹 브라우저에 표출하는 매쉬업표출부를 더 포함하는 것을 특징으로 하는 매쉬업 서비스 생성 장치.
  9. 청구항 2에 있어서,
    상기 목표 매쉬업시퀀스를 저장하는 매쉬업시퀀스DB와, 상기 목표 매쉬업 모듈을 저장하는 블록DB를 더 포함하는 매쉬업 서비스 생성 장치.
  10. 청구항 5에 있어서,
    상기 런타임 코드를 저장하는 런타임DB를 더 포함하는 것을 특징으로 하는 매쉬업 서비스 생성 장치.
  11. 매쉬업 서비스 생성 장치에서 매쉬업 서비스를 생성하는 매쉬업 서비스 생성 방법에 있어서,
    음성명령을 문자열로 변환하는 단계;
    상기 문자열을 형태소 기반으로 분석하여 매쉬업 모듈에 대응하는 단어를 추출하는 단계;
    상기 단어를 매쉬업 모듈의 메타데이터 및 상기 매쉬업 모듈이 결합된 매쉬업시퀀스의 메타데이터로 변환하여 문자지시를 명령하는 단계; 및
    상기 문자지시에 응답하여, 상기 매쉬업시퀀스의 메타데이터에 대응하는 목표 매쉬업시퀀스를 요청하는 단계를 포함하고,
    상기 목표 매쉬업시퀀스를 요청하는 단계는, 상기 목표 매쉬업시퀀스가 존재하지 않는 경우, 상기 매쉬업시퀀스의 메타데이터에 대응하는 상기 목표 매쉬업시퀀스를 새로이 생성하는 단계를 포함하고,
    상기 목표 매쉬업 시퀀스를 새로이 생성하는 단계는,
    상기 매쉬업 모듈의 메타데이터에 대응하는 목표 매쉬업 모듈을 요청하는 단계;
    상기 목표 매쉬업 모듈을 검색하여 상기 목표 매쉬업 모듈의 입출력 파라미터를 비교하는 단계; 및
    비교결과 서로 연결가능한 목표 매쉬업 모듈을 결합하여 상기 목표 매쉬업시퀀스를 생성하는 단계를 포함하는 매쉬업 서비스 생성 방법.
  12. 청구항 11에 있어서,
    상기 목표 매쉬업시퀀스를 요청하는 단계는, 상기 매쉬업시퀀스의 메타데이터에 대응하는 상기 목표 매쉬업시퀀스가 이미 존재하는 경우, 상기 목표 매쉬업시퀀스를 검색 및 선택하는 것을 특징으로 하는 매쉬업 서비스 생성 방법.
  13. 삭제
  14. 삭제
  15. 청구항 11에 있어서,
    상기 목표 매쉬업시퀀스를 새로이 생성하는 단계는, 상기 매쉬업 모듈의 메타데이터에 대응하는 새로운 목표 매쉬업 모듈을 웹에서 검색하여 새로이 등록하는 단계를 더 포함하는 것을 특징으로 하는 매쉬업 서비스 생성 방법.
  16. 청구항 12에 있어서,
    상기 목표 매쉬업시퀀스에 대응하는 런타임 코드를 호출 또는 생성함으로써 런타임 코드를 제공하는 단계를 더 포함하는 매쉬업 서비스 생성 방법.
  17. 청구항 16에 있어서,
    상기 런타임 코드를 제공하는 단계는, 상기 목표 매쉬업시퀀스가 검색 및 선택된 경우, 상기 런타임 코드를 호출하고, 상기 목표 매쉬업시퀀스가 새로이 생성된 경우, 상기 런타임 코드를 자동으로 생성하는 것을 특징으로 하는 매쉬업 서비스 생성 방법.
  18. 청구항 16에 있어서,
    상기 런타임 코드를 제공하는 단계는, 상기 런타임 코드를 구동하여 매쉬업 서비스를 생성하는 단계를 더 포함하는 것을 특징으로 하는 매쉬업 서비스 생성 방법.
  19. 청구항 18에 있어서,
    상기 매쉬업 서비스를 웹 브라우저에 표출하는 단계를 더 포함하는 것을 특징으로 하는 매쉬업 서비스 생성 방법.
KR1020120127608A 2012-11-12 2012-11-12 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법 Expired - Fee Related KR102062069B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120127608A KR102062069B1 (ko) 2012-11-12 2012-11-12 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법
US14/078,426 US9236049B2 (en) 2012-11-12 2013-11-12 Mash-up service generation apparatus and method based on voice command

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120127608A KR102062069B1 (ko) 2012-11-12 2012-11-12 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20140070689A KR20140070689A (ko) 2014-06-11
KR102062069B1 true KR102062069B1 (ko) 2020-01-03

Family

ID=50682568

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120127608A Expired - Fee Related KR102062069B1 (ko) 2012-11-12 2012-11-12 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법

Country Status (2)

Country Link
US (1) US9236049B2 (ko)
KR (1) KR102062069B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101593214B1 (ko) * 2014-07-10 2016-02-18 네이버 주식회사 논리적 물리적 ２중 구조를 이용한 자연어 질의 검색 방법 및 시스템
US10820992B2 (en) 2017-04-05 2020-11-03 Opus Medical Therapies, LLC Transcatheter atrial sealing skirt, anchor, and tether and methods of implantation
WO2019231027A1 (ko) * 2018-06-01 2019-12-05 엘지전자 주식회사 휴대용 음향기기

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100700622B1 (ko) * 2006-10-24 2007-03-28 주식회사 네오엠텔 매쉬업 서비스 시스템
JP4441782B2 (ja) * 2003-05-14 2010-03-31 日本電信電話株式会社 情報提示方法及び情報提示装置
US20110161833A1 (en) * 2009-12-31 2011-06-30 International Business Machines Corporation Distributed multi-user mashup session
US20110202594A1 (en) * 2010-02-12 2011-08-18 Avaya Inc. Context sensitive, cloud-based telephony

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10417298B2 (en) 2004-12-02 2019-09-17 Insignio Technologies, Inc. Personalized content processing and delivery system and media
KR100700626B1 (ko) 2006-11-02 2007-03-28 주식회사 네오엠텔 매쉬업 서비스 시스템
KR100970970B1 (ko) 2007-08-09 2010-07-20 에스케이 텔레콤주식회사 매쉬업 서비스 시스템 및 그 방법
KR100859595B1 (ko) 2007-10-30 2008-09-23 에스케이텔레콤 주식회사 모바일 매쉬-업 서비스 제공 시스템 및 방법
US9055103B2 (en) 2008-01-30 2015-06-09 Samsung Electronics Co., Ltd. Method of creating mashup application
KR101480405B1 (ko) 2008-01-30 2015-01-09 삼성전자주식회사 매쉬업 애플리케이션을 생성하는 방법
KR101087252B1 (ko) 2009-06-01 2011-11-29 경기대학교 산학협력단 매쉬업 서비스 관리 시스템

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4441782B2 (ja) * 2003-05-14 2010-03-31 日本電信電話株式会社 情報提示方法及び情報提示装置
KR100700622B1 (ko) * 2006-10-24 2007-03-28 주식회사 네오엠텔 매쉬업 서비스 시스템
US20110161833A1 (en) * 2009-12-31 2011-06-30 International Business Machines Corporation Distributed multi-user mashup session
US20110202594A1 (en) * 2010-02-12 2011-08-18 Avaya Inc. Context sensitive, cloud-based telephony

Also Published As

Publication number Publication date
US9236049B2 (en) 2016-01-12
US20140136206A1 (en) 2014-05-15
KR20140070689A (ko) 2014-06-11

Similar Documents

Publication Publication Date Title
US10296308B2 (en) Automatically generating network applications from design mock-ups
US9583097B2 (en) Dynamic inference of voice command for software operation from help information
US8751558B2 (en) Mashup infrastructure with learning mechanism
US20100281475A1 (en) System and method for mobile smartphone application development and delivery
US20160225369A1 (en) Dynamic inference of voice command for software operation from user manipulation of electronic device
US10146771B2 (en) Mobile terminal device implementing character-pictogram translation using pictogram search site
US20120109932A1 (en) Related links
EP3416054B1 (en) Method and device for page display, and storage medium
EP2866158A1 (en) Method for reader to provide service, reader, terminal and computer storage medium
CN112115244B (zh) 对话交互方法、装置、存储介质及电子设备
CN116701811B (zh) 一种网页处理方法、装置、设备及计算机可读存储介质
US20140089825A1 (en) Apparatus and method for writing mash-up using mash-up block user interface
US20180365199A1 (en) Page display method and device and storage medium
JP6378263B2 (ja) イメージを用いた翻訳文提供方法、ユーザ端末、サーバ、システムおよびコンピュータプログラム
US10789053B2 (en) Facilitated user interaction
KR102062069B1 (ko) 음성 명령 기반 매쉬업 서비스 생성 장치 및 그 방법
KR20140042537A (ko) 템플릿을 이용한 매쉬업 저작 장치 및 그 방법
US20150253969A1 (en) Apparatus and Method for Generating and Outputting an Interactive Image Object
US20150277723A1 (en) Exporting a component of a currently displayed user interface to a development system
KR101170263B1 (ko) 모바일 웹페이지를 효율적으로 개발하기 위한 크로스 플랫폼 솔루션 및 크로스 플랫폼 모바일 소스 생성 시스템
JP2002268788A (ja) ウェブ文書のクローズアップ機能を備えた情報通信システムとこれを用いたウェブ文書のクローズアップ方法及びその方法を記録した記録媒体
JP2018198043A (ja) 文字や単語を入力する方法、及び入力システム
KR102893956B1 (ko) 인공지능 기반 시각 정보 실시간 제공 자동 응답 서비스 시스템
CA2923602A1 (en) Apparatus and method for generating and outputting an interactive image object
US20250300949A1 (en) Information processing apparatus, report creation system, and information processing method

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

P22-X000 Classification modified

St.27 status event code: A-2-2-P10-P22-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

PN2301 Change of applicant

St.27 status event code: A-3-3-R10-R13-asn-PN2301

St.27 status event code: A-3-3-R10-R11-asn-PN2301

A201 Request for examination
PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E90F Notification of reason for final refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

PR1001 Payment of annual fee

St.27 status event code: A-4-4-U10-U11-oth-PR1001

Fee payment year number: 4

PC1903 Unpaid annual fee

St.27 status event code: A-4-4-U10-U13-oth-PC1903

Not in force date: 20231228

Payment event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

PC1903 Unpaid annual fee

St.27 status event code: N-4-6-H10-H13-oth-PC1903

Ip right cessation event data comment text: Termination Category : DEFAULT_OF_REGISTRATION_FEE

Not in force date: 20231228