JP2007179368A - Image editing support system, apparatus, method and program - Google Patents
Image editing support system, apparatus, method and program Download PDFInfo
- Publication number
- JP2007179368A JP2007179368A JP2005377914A JP2005377914A JP2007179368A JP 2007179368 A JP2007179368 A JP 2007179368A JP 2005377914 A JP2005377914 A JP 2005377914A JP 2005377914 A JP2005377914 A JP 2005377914A JP 2007179368 A JP2007179368 A JP 2007179368A
- Authority
- JP
- Japan
- Prior art keywords
- information
- image information
- image
- position information
- keyword
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000003384 imaging method Methods 0.000 claims abstract description 72
- 238000004891 communication Methods 0.000 claims description 29
- 230000004044 response Effects 0.000 claims description 26
- 230000005540 biological transmission Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 8
- 239000000284 extract Substances 0.000 claims description 4
- 238000001514 detection method Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 15
- 230000015654 memory Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 7
- 238000007726 management method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000010790 dilution Methods 0.000 description 1
- 239000012895 dilution Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000000699 topical effect Effects 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
Description
本発明は、たとえば旅行の様子や風景を思い出として撮影した複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する画像編集支援システムとその装置、方法、及びプログラムに関するものである。 The present invention searches an image information in which a desired subject is photographed from a plurality of pieces of image information photographed as memories of, for example, a travel state or a landscape, and supports an image editing support system for reproducing and editing the image information. And its apparatus, method, and program.
近年、社会での人間関係の希薄化は、親子や家族関係にまで及んでいる。それ故、親の側でも、子の側でも、相手との触れ合いやコミュニケーションの仕方・スキルを知らない場合、対話が成立せず、親と子の断絶につながる虞がある。
対話を成立させる手段の一つとして、全員に共通する話題を提供する方法がある。全員がその話題に参加できれば、親子や家族の触れ合いやコミュニケーションのチャンスも広がり、絆も深まる。たとえば雅俗旅行は、話題作りには絶好の機会となる。特に、思い出となる旅行の様子や風景を、映像や音声(以下、単に「画像データ」という。)で保存しておけば、いつまでも話題提供の材料と成り得る。
In recent years, the dilution of human relationships in society has extended to parent-child and family relationships. Therefore, if neither the parent side nor the child side knows how to interact with or communicate with the other party or skills, there is a possibility that the dialogue will not be established, leading to the disconnection between the parent and the child.
One way to establish a dialogue is to provide a topic that is common to all. If everyone can participate in the topic, parent-child and family contacts and communication opportunities will expand, and bonds will deepen. For example, folk travel is a great opportunity to create a topic. In particular, if the travel state and scenery that will be memorable are stored in video and audio (hereinafter simply referred to as “image data”), it can be a topical material forever.
しかしながら上記画像データは、一般的に、通し番号などでファイル名を付けるといった手法によって管理されているため、後日画像再生を行うときにファイル名からどのような画像が記録されているのか解り辛い。したがって、折角、コミュニケーションのきっかけとなる旅行の様子や風景を画像データとして保存しても、所望のファイルを探し出すのに手間取ってしまう非常に煩わしいものであっては、コミュニケーションのチャンスを逸してしまいかねない。 However, since the image data is generally managed by a method of assigning a file name with a serial number or the like, it is difficult to know what image is recorded from the file name when image reproduction is performed at a later date. Therefore, even if you save the travel situation and scenery that triggers communication as image data, if it is very troublesome to find the desired file, you may miss the chance of communication. Absent.
そこで、画像データの管理が簡単で、かつユーザにとって直感的に扱い易くしたものとして、測位手段で生成される撮像位置を表わす該測位情報から地名もしくは施設名を特定するデータベース手段を設け、被写体を撮影して生成した画像データを画像データファイルとしてメモリ手段に格納する際、該画像データファイルに該データベース手段で特定された地名もしくは施設名などをファイル名として付加して該メモリ手段に格納して管理し、撮影画像の閲覧を行う際、かかるファイル名を手がかりに所望の画像データファイルを簡単に検索することができるようにした手段が提案されている(特許文献1参照)。 In view of this, it is assumed that image data management is simple and easy for the user to handle intuitively, and a database means for specifying a place name or a facility name from the positioning information generated by the positioning means is provided. When image data generated by shooting is stored in the memory means as an image data file, a place name or facility name specified by the database means is added to the image data file as a file name and stored in the memory means. A means has been proposed that allows a user to easily search for a desired image data file based on the file name when managing and browsing a photographed image (see Patent Document 1).
ところが、上記手段の場合、測位手段で生成される撮像位置を表わす該測位情報から地名もしくは施設名を特定するデータベース手段で特定された地名もしくは施設名などをファイル名とするため、同一場所もしくは施設内で撮影された画像データは同一のファイル名となってしまう。しかも、旅行のように多くの地域や施設にて撮影を行う場合、何があったか印象深い光景は覚えていても、地名や施設名などは正確に把握できない。
また、地名もしくは施設名に代わって、撮影対象名を撮影場所名の一つとしてファイル名に用いた場合であっても、同じ場所である以上、画像データは同一のファイル名となってしまう。すなわち、たとえば「A野球場」という施設名に代わって「第○回全国高校野球選手権大会」という撮影対象名をファイル名として付加するようにした場合であっても、A野球場の入り口付近で球場全体の風景を撮影した画像や、A野球場へ入る選手達の表情を撮影した画像、A野球場のスタンドでの応援風景を撮影した画像、A野球場のグラウンドでの試合状況を撮影した画像、などA野球場という同じ場所で撮影されたものであれば、何れであっても「A野球場」や「第○回全国高校野球選手権大会」という同一のファイル名となってしまう。
したがって、ファイル名を唯一の手掛かりとしては、所望の画像データファイルを簡単に検索することができない虞がある。
Further, even when the shooting target name is used as a shooting place name instead of the place name or facility name as the file name, the image data will have the same file name as long as it is the same place. That is, for example, even if the name of the subject to be photographed is added as a file name instead of the facility name “A baseball field” as a file name, An image of the entire stadium scene, an image of the faces of the players entering the A baseball field, an image of the support scene at the A baseball field stand, and the situation of the game on the ground of the A baseball field Any images taken at the same place as the A baseball field, such as images, will have the same file name as “A baseball field” or “The Nth National High School Baseball Championship”.
Therefore, there is a possibility that a desired image data file cannot be easily searched using the file name as the only clue.
本発明は、上述のような課題に鑑みてなされたものであって、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、しかも、同じ場所で撮影されたものであっても、地名や施設名、もしくは撮影対象名に関わらず、容易に所望の画像データを見つけ出して、当該画像情報の再生・編集を支援することが出来る画像編集支援システムとその装置、方法、及びプログラムを提供することを目的とする。 The present invention has been made in view of the problems as described above, and retrieves image information in which a desired subject is photographed from a plurality of image information, and is photographed at the same place. Even if there is an image editing support system that can easily find out desired image data and support the reproduction / editing of the image information, regardless of the name of the place, the name of the facility, or the name of the subject, And to provide a program.
本発明の請求項1に記載の画像編集支援システムは、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援するシステムであって、被写体を撮影して画像情報を生成する撮像手段と、現在位置を測定して位置情報を生成する測位手段と、前記撮像手段で生成された画像情報に前記測位手段で生成された位置情報を関連付けて記憶する画像情報記憶手段と、予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段と、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける検索キーワード受付手段と、前記キーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定する位置情報特定手段と、前記特定された位置情報に基づいて前記画像情報記憶手段を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する画像情報検索手段と、前記抽出された画像情報を出力し再生する画像情報出力再生手段と、を少なくとも有して構成されることを特徴とする。
この際、位置情報から特定される場所に関連するキーワード情報とは、上記何れの画像編集支援システムの場合も、撮影した場所や施設の名称に限らず、撮影した場所を含む広域地域名や、近隣の市区町村名、観光名所、道路名、名物、特産といった、撮影内容を示す被写体とは直接関係無くとも撮影場所に関係する情報をいう。また、関連情報記憶手段とは、所定の地点(場所)の緯度・経度に応じた位置情報と、当該所定の地点(場所)に関連する前記キーワード情報とを関連付けて記憶する情報検索テーブルである。
An image editing support system according to claim 1 of the present invention is a system for searching image information in which a desired subject is photographed from a plurality of image information, and supporting the reproduction / editing of the image information. Imaging means for photographing a subject to generate image information, positioning means for measuring a current position and generating position information, and position information generated by the positioning means to image information generated by the imaging means. Image information storage means for storing in association with each other, related information storage means for storing keyword information related to a location specified from position information in advance in association with the position information, and image information on a desired subject. Search keyword receiving means for receiving input of keyword information for searching, and referring to the related information storage means in response to reception of the keyword information, the keyword Position information specifying means for specifying position information according to the information, and referring to the image information storage means based on the specified position information, and storing the image information stored in association with the position information approximate to the position information. It is characterized by comprising at least image information search means for searching and extracting and image information output / playback means for outputting and reproducing the extracted image information.
At this time, the keyword information related to the place specified from the position information is not limited to the name of the place and facility where the image was taken in any of the above image editing support systems, This refers to information related to the shooting location, such as the name of a nearby city, tourist attraction, road name, specialty, and special product, even if it is not directly related to the subject indicating the shooting content. The related information storage means is an information search table that stores positional information corresponding to the latitude / longitude of a predetermined point (place) and the keyword information related to the predetermined point (place) in association with each other. .
本発明の請求項2に記載の画像編集支援システムは、請求項1において、前記撮像手段は車両に設置されるものであり、少なくとも進行方向と当該車両の運転者を含めた搭乗者が乗車している方向の両方を交互に又は同時に撮影可能とするものであることを特徴とする。 An image editing support system according to a second aspect of the present invention is the image editing support system according to the first aspect, wherein the imaging means is installed in a vehicle, and a passenger including at least a traveling direction and a driver of the vehicle gets on the vehicle. It is characterized in that both directions can be photographed alternately or simultaneously.
本発明の請求項3に記載の画像編集支援システム、請求項2において、予め設定された所定の条件が満たされたことを感知する感知手段をさらに有し、前記撮像手段は、前記感知手段が所定の条件を感知したことに応じて自動的に撮影を開始及び/又は終了することを特徴とする。 The image editing support system according to claim 3 of the present invention, further comprising sensing means for sensing that a predetermined condition set in advance is satisfied, wherein the imaging means includes: The imaging is automatically started and / or ended in response to detection of a predetermined condition.
本発明の請求項4に記載の画像編集支援システムは、請求項1から3のいずれかにおいて、前記再生された画像情報の編集を指示する要求を受け付ける編集指示受付手段と、前記編集指示手段での編集指示要求の受け付けに応じて指示された画像情報を記憶する編集画像情報記憶手段と、をさらに有することを特徴とする。 According to a fourth aspect of the present invention, there is provided an image editing support system according to any one of the first to third aspects, comprising: an editing instruction receiving unit that receives a request to instruct editing of the reproduced image information; and the editing instruction unit. And editing image information storage means for storing image information instructed in response to the reception of the editing instruction request.
本発明の請求項5に記載の画像編集支援システムは、請求項1から4のいずれかにおいて、前記画像情報の閲覧を希望する要求を受け付ける閲覧希望要求受付手段と、前記閲覧希望要求受付手段で受け付けた閲覧希望要求に該当する画像情報を開示する画像情報開示手段と、をさらに有することを特徴とする。 According to a fifth aspect of the present invention, the image editing support system according to any one of the first to fourth aspects includes: a browsing request request receiving unit that receives a request for browsing the image information; and the browsing request request receiving unit. Image information disclosing means for disclosing image information corresponding to the received browsing request.
本発明の請求項6に記載の第一の装置は、被写体を撮影して生成した画像情報と現在位置を測定して生成した位置情報とを関連付けて記憶する撮像装置から位置情報付の画像情報を受け付け、当該画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する装置であって、前記位置情報付の画像情報を受け付ける画像情報受付手段と、予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段と、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける検索キーワード受付手段と、前記キーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定する位置情報特定手段と、前記特定された位置情報に基づいて前記画像情報受付手段で受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する画像情報検索手段と、前記抽出された画像情報を出力し再生する画像情報出力再生手段と、を少なくとも有することを特徴とする。 According to a sixth aspect of the present invention, image information with position information from an image pickup apparatus that stores image information generated by photographing a subject and position information generated by measuring a current position in association with each other. Image information in which a desired subject is photographed from the image information, and a device that supports the reproduction / editing of the image information, and accepts the image information with the position information. Means for storing keyword information related to a location specified from position information in advance in association with the position information, and keyword information for searching for image information in which a desired subject is photographed. The search keyword receiving means for receiving the input, and the related information storage means with reference to the reception of the keyword information, the position information corresponding to the keyword information is specified. Image information stored in association with position information that approximates the position information by referring to image information with position information received by the image information receiving means based on the specified position information. Image information retrieval means for retrieving and extracting the image information, and image information output reproduction means for outputting and reproducing the extracted image information.
本発明の請求項7に記載の第二の装置は、被写体を撮影して生成した画像情報と現在位置を測定して生成した位置情報とを関連付けて記憶する撮像装置から位置情報付の画像情報を受け付けると共に、所望の被写体が撮影されている画像情報を検索するためのキーワード情報を受信することによって、予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段を有し、当該キーワード情報に応じた位置情報を特定する第三の装置と通信により情報の授受を行い、当該画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する第二の装置であって、前記位置情報付の画像情報を受け付ける画像情報受付手段と、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける検索キーワード受付手段と、前記受け付けたキーワード情報を、当該キーワード情報に応じた位置情報を特定する前記第三の装置へ送信する検索キーワード送信手段と、前記キーワード情報の送信に応じて、当該キーワード情報に応じて特定した位置情報を前記第三の装置から受信する位置情報受信手段と、前記受信した位置情報に基づいて前記画像情報受付手段で受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する画像情報検索手段と、前記抽出された画像情報を出力し再生する画像情報出力再生手段と、を少なくとも有することを特徴とする。 A second device according to a seventh aspect of the present invention provides image information with position information from an image pickup apparatus that stores image information generated by photographing a subject and position information generated by measuring a current position in association with each other. And receiving keyword information for searching for image information in which a desired subject is photographed, so that keyword information related to a location specified from the position information is stored in association with the position information in advance. It has related information storage means, and exchanges information by communication with a third device that specifies position information according to the keyword information, and searches the image information for the desired subject in the image information And a second apparatus that supports the reproduction / editing of the image information, the image information receiving means for receiving the image information with the position information, and a desired subject is photographed. Search keyword receiving means for receiving input of keyword information for searching existing image information, and search keyword transmitting means for transmitting the received keyword information to the third device for specifying position information corresponding to the keyword information In response to the transmission of the keyword information, the position information receiving means for receiving the position information specified according to the keyword information from the third device, and the image information receiving means based on the received position information. Image information retrieval means for retrieving and extracting image information stored in association with position information approximate to the position information with reference to the received image information with position information, and outputting and reproducing the extracted image information Image information output / reproducing means.
本発明の請求項8に記載の画像編集支援方法は、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する方法であって、予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段を有し、撮像手段が、被写体を撮影して画像情報を生成するステップと、測位手段が、現在位置を測定して位置情報を生成するステップと、画像情報記憶手段が、前記撮像手段で生成された画像情報に前記測位手段で生成された位置情報を関連付けて記憶するステップと、検索キーワード受付手段が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けるステップと、位置情報特定手段が、前記検索キーワード受付手段でのキーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定するステップと、画像情報検索手段が、前記位置情報特定手段で特定された位置情報に基づいて前記画像情報受付手段で受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出するステップと、画像情報出力再生手段が、前記画像情報検索手段で抽出された画像情報を出力し再生するステップと、を少なくとも有することを特徴とする。 According to an eighth aspect of the present invention, there is provided an image editing support method for searching image information in which a desired subject is photographed from a plurality of pieces of image information, and supporting reproduction / editing of the image information. Preliminarily having related information storage means for storing keyword information related to a location specified from the position information in association with the position information, the image pickup means shooting a subject to generate image information, and positioning. Means for measuring the current position and generating position information; and image information storage means for storing the position information generated by the positioning means in association with the image information generated by the imaging means; A search keyword receiving unit receiving an input of keyword information for searching image information in which a desired subject is photographed; and a position information specifying unit including the search keyword A step of referring to the related information storage unit in response to the reception of the keyword information by the mode receiving unit and specifying the position information corresponding to the keyword information, and an image information searching unit is specified by the position information specifying unit Searching for and extracting image information stored in association with position information approximate to the position information, referring to image information with position information received by the image information receiving means based on position information; and outputting image information The reproduction means includes at least a step of outputting and reproducing the image information extracted by the image information search means.
本発明の請求項9に記載のコンピュータプログラムは、予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段を有し、被写体を撮影して生成した画像情報と現在位置を測定して生成した位置情報とを関連付けて記憶する撮像装置から位置情報付の画像情報を受け付け、当該画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する装置としてコンピュータを機能させるためのコンピュータプログラムであって、コンピュータに対して、前記位置情報付の画像情報を受け付ける処理と、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける処理と、前記キーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定する処理と、前記特定された位置情報に基づいて前記受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する処理と、前記抽出された画像情報を出力し再生する処理と、を実行させることを特徴とする。 The computer program according to claim 9 of the present invention has related information storage means for storing keyword information related to a location specified from position information in advance in association with the position information, and is generated by photographing a subject. The image information with the position information is received from the imaging device that stores the image information and the position information generated by measuring the current position in association with each other, and the image information in which the desired subject is photographed is searched from the image information A computer program for causing a computer to function as a device that supports reproduction / editing of the image information, wherein the computer receives the image information with the position information, and a desired subject is photographed. Processing for accepting input of keyword information for searching existing image information, and in response to acceptance of the keyword information Referring to the related information storage means, the process of specifying the position information according to the keyword information, and referring to the received image information with the position information based on the specified position information, approximate to the position information A process of searching and extracting image information stored in association with position information and a process of outputting and reproducing the extracted image information are executed.
本発明の請求項10に記載のコンピュータプログラムは、被写体を撮影して生成した画像情報と現在位置を測定して生成した位置情報とを関連付けて記憶する撮像装置から位置情報付の画像情報を受け付けると共に、所望の被写体が撮影されている画像情報を検索するためのキーワード情報を受信することによって、予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段を有し、当該キーワード情報に応じた位置情報を特定する第三の装置と通信により情報の授受を行い、当該画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する第二の装置としてコンピュータを機能させるためのコンピュータプログラムであって、コンピュータに対して、前記位置情報付の画像情報を受け付ける処理と、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける処理と、前記受け付けたキーワード情報を、当該キーワード情報に応じた位置情報を特定する処理を行う前記第三の装置へ送信する処理と、前記キーワード情報の送信に応じて、当該キーワード情報に基づいて特定された位置情報を前記第三の装置から受信する処理と、前記受信した位置情報に基づいて前記受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する処理と、前記抽出された画像情報を出力し再生する処理と、を実行させることを特徴とする。 A computer program according to a tenth aspect of the present invention receives image information with position information from an imaging device that stores image information generated by photographing a subject and position information generated by measuring a current position in association with each other. In addition, by receiving keyword information for searching for image information in which a desired subject is photographed, related information for storing keyword information related to a location specified from the position information in association with the position information in advance. Having a storage means, exchanging information by communication with a third device for specifying position information according to the keyword information, searching for image information in which a desired subject is photographed from the image information, A computer program for causing a computer to function as a second device for supporting reproduction / editing of the image information. A process for receiving image information with position information, a process for receiving input of keyword information for searching for image information in which a desired subject is photographed, and the received keyword information. A process of transmitting position information according to keyword information to the third apparatus, and a position information specified based on the keyword information in response to transmission of the keyword information. And a process of referring to the received image information with the position information based on the received position information and searching and extracting the image information stored in association with the position information approximate to the position information. And a process for outputting and reproducing the extracted image information.
本発明によれば、予め、位置情報から特定される場所に関連する少なくとも1以上のキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段を備え、該関連情報記憶手段を画像の編集時に利用するものであるから、所望の被写体が撮影されている画像データの正確なファイル名を忘れてしまっても、撮影場所に関係する広域地域名や、近隣の観光名所、道路名、名物、特産といったキーワードを手掛かりとすることで、前記関連情報記憶手段から当該キーワードに応じた位置情報を特定し、さらに該位置情報を基づいて画像情報を検索することで、所望の画像データを検索することができることとなる。しかも、検索のためのキーワードは、撮影した場所や施設の名称に限らず、撮影内容を示す被写体とは直接関係無くとも撮影した場所を含む地域に関係していれば良いので、極めて曖昧な記憶に基づくキーワードでも所望の画像データを容易に検索することが出来る。
したがって、複数の画像情報の中から所望の被写体が撮影されている画像情報を容易に検索し、当該画像情報の再生・編集によってコミュニケーションを効果的に成立させる一助とすることが出来る。
According to the present invention, it is provided with related information storage means that stores in advance at least one or more keyword information related to a location specified from position information in association with the position information, and the related information storage means is used during image editing. Because it is used, even if you forget the exact file name of the image data where the desired subject is photographed, the name of a wide area related to the shooting location, nearby tourist attractions, road names, specialties, special products By using the keyword as a clue, the position information corresponding to the keyword is specified from the related information storage means, and the image information is searched based on the position information, thereby searching for desired image data. It will be possible. Moreover, the keyword for search is not limited to the name of the place where the image was taken or the facility, but may be related to the area including the place where the image was taken, even if it is not directly related to the subject indicating the contents of the image, so it is extremely ambiguous It is possible to easily search for desired image data even with keywords based on.
Therefore, it is possible to easily search image information in which a desired subject is photographed from a plurality of image information, and to help establish communication effectively by reproducing and editing the image information.
以下、図面を参照しながら、本発明に係る画像編集支援システムの実施形態について説明する。
(第一の実施形態)
図1は、本発明に係る画像編集支援システムの第一の実施形態の構成を示す概略図であり、図2は、その構成を示すブロック図である。
図1に示すように、本実施の形態で用いる管理システムは、被写体Pを撮影して画像情報を取得する撮像装置3と、当該撮像装置3から画像情報を受け取り、検索キーワードに基づいて複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する第一の装置としての画像編集支援装置1Aとから構成される。
撮像装置3は、図2に示すように、たとえば撮像部31と、測位部32と、画像情報記憶部33と、計時部34と、音声認識部35と、音声情報記憶部36とから構成され、必要に応じて、さらに撮影開始情報認識部37を有する。
Hereinafter, an embodiment of an image editing support system according to the present invention will be described with reference to the drawings.
(First embodiment)
FIG. 1 is a schematic diagram showing the configuration of the first embodiment of the image editing support system according to the present invention, and FIG. 2 is a block diagram showing the configuration thereof.
As shown in FIG. 1, the management system used in the present embodiment captures a subject P and acquires image information. The management system receives image information from the imaging device 3, and uses a plurality of search keywords based on a search keyword. The image editing support apparatus 1A is a first apparatus that searches for image information in which a desired subject is photographed from the image information and supports the reproduction / editing of the image information.
As shown in FIG. 2, the imaging device 3 includes, for example, an imaging unit 31, a positioning unit 32, an image information storage unit 33, a timing unit 34, a voice recognition unit 35, and a voice information storage unit 36. If necessary, a photographing start information recognition unit 37 is further included.
撮像部31は、被写体を撮影して画像情報を生成する処理を行う。撮像部31は、たとえばレンズを介してCCD(Charge
Coupled Device)等の撮像素子によって得られる画像情報を生成・出力するカメラをいう。また、撮像部31は、後述する撮影開始情報認識部37からの撮影開始情報の受付に応じて、被写体の撮影を自動的に開始及び/又は終了する。
The imaging unit 31 performs a process of capturing a subject and generating image information. The imaging unit 31 is, for example, a CCD (Charge) via a lens.
A camera that generates and outputs image information obtained by an imaging device such as a coupled device. Further, the imaging unit 31 automatically starts and / or ends shooting of a subject in response to reception of shooting start information from a shooting start information recognition unit 37 described later.
測位部32は、撮影時の現在位置を測定し、位置情報を生成する処理を行う。測位部32は、たとえばGPS受信機を内蔵し、GPS衛星から測位信号を受信する機能と、撮影時に前記GPS受信機によって受信された高精度な測位信号に基づいて現在位置を検出する機能を備えたナビゲーションシステムをいう。GPS測位の原理は、GPS受信機により複数のGPS衛星から高精度の時刻信号を含む測位信号を受信し、測位信号から求めた各衛星からの疑似距離と各衛星の3次元位置座標とから3次元測量で逆算することにより、機器の地上位置座標を求めるといったものである。このGPS受信機は、GPS受信アンテナ、RF受信回路、測位演算回路、などから構成される。 The positioning unit 32 performs a process of measuring the current position at the time of shooting and generating position information. The positioning unit 32 includes, for example, a GPS receiver and has a function of receiving a positioning signal from a GPS satellite and a function of detecting a current position based on a highly accurate positioning signal received by the GPS receiver at the time of shooting. Refers to a navigation system. The principle of GPS positioning is based on the fact that a GPS receiver receives a positioning signal including a highly accurate time signal from a plurality of GPS satellites and calculates the pseudo distance from each satellite obtained from the positioning signal and the three-dimensional position coordinates of each satellite. The ground position coordinates of the device are obtained by back-calculating with dimensional surveying. This GPS receiver includes a GPS receiving antenna, an RF receiving circuit, a positioning calculation circuit, and the like.
画像情報記憶部33は、前記撮像部31で生成された画像情報に前記測位部32で生成された位置情報を関連付けて記憶する。また、画像情報記憶部33は、前記撮像部31で生成された画像情報に後述する計時部34で計時した時刻情報を関連付けて記憶する。
したがって、画像情報記憶部33に記憶されている情報は、たとえば、画像ファイル名をインデックスとして当該画像ファイルに対して規定された位置情報や、後述する計時部34で生成された撮影時刻情報などを1レコードとするデータベースを構成している。また、画像情報は、所定の圧縮方式で圧縮されて格納される。
The image information storage unit 33 stores the position information generated by the positioning unit 32 in association with the image information generated by the imaging unit 31. The image information storage unit 33 stores the time information measured by the time measuring unit 34 described later in association with the image information generated by the imaging unit 31.
Therefore, the information stored in the image information storage unit 33 includes, for example, position information defined for the image file using the image file name as an index, shooting time information generated by the time measuring unit 34 described later, and the like. A database with one record is configured. The image information is stored after being compressed by a predetermined compression method.
計時部34は、時間を計時するクロック手段であり、撮影時の現在時刻を測定して撮影時刻情報を生成する処理を行う。 The timer unit 34 is a clock unit that measures time, and performs processing for measuring the current time at the time of shooting and generating shooting time information.
音声認識部35は、前記撮像部31での被写体の撮影時の音声を認識し、周辺や撮影者等の声などの音声を入力し、音声情報を生成する処理を行う。 音声認識部35としては、いわゆるマイクが挙げられる。 The voice recognizing unit 35 recognizes the voice at the time of photographing the subject by the image pickup unit 31 and inputs a voice such as a voice of a surrounding area or a photographer to generate voice information. An example of the voice recognition unit 35 is a so-called microphone.
音声情報記憶部36は、前記音声認識部35で受け付けた音声情報を、前記撮像部31で撮影した画像情報と同期して記憶する。 The voice information storage unit 36 stores the voice information received by the voice recognition unit 35 in synchronization with the image information captured by the imaging unit 31.
撮影開始情報認識部37は、前記撮像部31が自動的に撮影を開始及び/又は終了するために、予め設定された所定の条件が満たされたことを感知する処理を行う。予め設定された所定の条件とは、たとえば、撮像を開始及び/又は終了するためスイッチが押下されたことを感知したことは勿論のこと、タイマーに設定された時刻・時間に達した時・GPSからの信号により設定された場所に達した時・車両のエンジンを始動又は停止した時・車両のドアを開閉した時、会話の音声を認識した時、車両の走行速度が一定以上の値に達した時、などをいう。したがって、前記撮像部31は、前記感知手段としての撮影開始情報認識部37が、所定の条件を感知したことに応じて被写体の撮影を自動的に開始及び/又は終了する。 The shooting start information recognizing unit 37 performs a process of sensing that a predetermined condition set in advance is satisfied in order for the imaging unit 31 to automatically start and / or end shooting. The predetermined conditions set in advance include, for example, when the switch has been pressed to start and / or end imaging, as well as when the time and time set in the timer are reached. When the vehicle reaches the location set by the signal from the vehicle, when the vehicle engine is started or stopped, when the vehicle door is opened or closed, or when the conversation voice is recognized, the vehicle traveling speed reaches a certain value or more. When you do. Accordingly, the imaging unit 31 automatically starts and / or ends the shooting of the subject in response to the shooting start information recognition unit 37 serving as the sensing unit detecting a predetermined condition.
以上のような構成の撮像装置3としては、たとえばGPS内蔵デジタルビデオカメラが挙げられ、本実施形態における撮像装置3には、前記各構成部の他に、操作部、表示部(LCD)、システム制御部、ROMなどのカメラとしての基本構成部品が設けられている。ROMには、ナビゲーション装置を動作させるためのプログラムや各種データが記憶されている。また、この撮像装置3には、たとえばフラッシュメモリカードなどの着脱式の外部メモリとそのI/Oインタフェース、画像編集支援装置1等の外部機器との間のデータ通信を行うための通信部とそのI/Oインタフェースなどが設けられている。
また、撮像装置3は、上記の例に限られず、被写体を撮影して記憶することが可能な端末、たとえばカメラ付携帯電話機などを含む電子機器であっても良い。
As the imaging device 3 having the above-described configuration, for example, a digital video camera with a built-in GPS can be cited. The imaging device 3 in this embodiment includes an operation unit, a display unit (LCD), a system in addition to the above-described components. Basic components such as a control unit and a ROM are provided. The ROM stores programs and various data for operating the navigation device. The imaging device 3 includes a communication unit for performing data communication between a removable external memory such as a flash memory card and its I / O interface and an external device such as the image editing support device 1 and the like. An I / O interface or the like is provided.
The imaging device 3 is not limited to the above example, and may be an electronic device including a terminal capable of capturing and storing a subject, for example, a mobile phone with a camera.
さらに、撮像装置3は、携帯して使用できることは勿論のこと、自動車や自動二輪車等の車両に搭載して使用することも可能なものであり、車両に設置した場合、少なくとも進行方向と当該車両の運転者を含めた搭乗者が乗車している方向の両方を交互に又は同時に撮影可能とするものすると望ましい。これにより、撮影者が除かれること無く全員が含まれた車内の光景が撮影されると共に、車外の風景も撮影され、撮影者が話題に参加できないといったことをなくし、コミュニケーションのチャンスを広げることができるものとなる。
このような撮像装置3の撮像部31としては、魚眼レンズ及びCCDが挙げられる。これにより、単一の撮像部31によって車内のほぼ全域を撮像することができ、多数の撮像部を設ける必要がなくなる。そして、車両に設置した場合の撮像装置3の電源は、たとえばルームランプ用の電源や、アクセサリ用の電源と共用させても良い。なお、魚眼レンズに映し出された像(曲面像)は、光学フィルタ及び光学レンズを介してCCDに取り込まれる。
また、撮像装置3の撮像部31は、上記魚眼レンズを用いたものに限らず、撮影方向を制御する機構が設けられ、たとえば360°の回転が可能であり、かつ0〜90°の仰角の制御が可能であるものとしても良い。
Furthermore, the imaging device 3 can be used by being carried in a vehicle such as an automobile or a motorcycle, and when installed in the vehicle, at least the traveling direction and the vehicle. It is desirable to be able to photograph both the directions in which the passengers including the driver are in the vehicle alternately or simultaneously. As a result, the scene inside the car that includes all of them is photographed without the photographer being removed, and the scenery outside the car is also photographed, so that the photographer cannot participate in the topic and widen the chance of communication. It will be possible.
Examples of the imaging unit 31 of the imaging apparatus 3 include a fisheye lens and a CCD. As a result, it is possible to image almost the entire interior of the vehicle with the single imaging unit 31, and it is not necessary to provide a large number of imaging units. And the power supply of the imaging device 3 in the case of installing in a vehicle may be shared with the power supply for room lamps and the power supply for accessories, for example. Note that the image (curved surface image) projected on the fisheye lens is taken into the CCD via the optical filter and the optical lens.
In addition, the imaging unit 31 of the imaging device 3 is not limited to the one using the fisheye lens, but is provided with a mechanism for controlling the imaging direction. For example, the imaging unit 31 can rotate 360 ° and control the elevation angle of 0 to 90 °. May be possible.
次に、画像編集支援装置1Aは、画像編集支援プログラム(ソフトウェア)を実行することで画像編集装置として機能することができるものであって、たとえば具体的に編集者等が日常使用しているパーソナルコンピュータが挙げられる。
本画像編集支援装置1Aは、本実施形態の場合スタンドアロン型であり、図2に示すように、たとえば画像情報受付部11と、検索キーワード受付部12と、位置情報特定部13と、画像情報検索部14と、画像情報出力再生部15と、関連情報記憶部16とから構成され、必要に応じて、さらに編集指示受付部17と、編集画像情報記憶部18を有する。
Next, the image editing support apparatus 1A can function as an image editing apparatus by executing an image editing support program (software). Computer.
This image editing support device 1A is a stand-alone type in the case of this embodiment, and as shown in FIG. 2, for example, an image information receiving unit 11, a search keyword receiving unit 12, a position information specifying unit 13, and an image information search Unit 14, image information output / playback unit 15, and related information storage unit 16, and further includes an edit instruction receiving unit 17 and an edited image information storage unit 18 as necessary.
また、画像編集支援装置1Aは、図示しないが、CPU(中央処理装置)とプログラム記憶部、及び操作部、表示部を有する。CPUは、プログラム記憶部に記憶されたプログラムに従い、本画像編集支援装置1の各構成要素を統制制御し、プログラム処理を実行する。プログラム記憶部は、ROM(Read Only Memory)やRAM(Random Access Memory)等で構成され、当該画像編集支援装置1Aが使用する各種プログラムを記憶している。RAMは、画像情報記憶部33に記憶された複数の画像情報を受け付ける処理などを施す際に、バッファメモリとして機能するようにしても良い。 Although not shown, the image editing support apparatus 1A includes a CPU (Central Processing Unit), a program storage unit, an operation unit, and a display unit. The CPU controls and controls each component of the image editing support apparatus 1 according to the program stored in the program storage unit, and executes program processing. The program storage unit includes a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and stores various programs used by the image editing support apparatus 1A. The RAM may function as a buffer memory when performing processing for receiving a plurality of pieces of image information stored in the image information storage unit 33.
操作部は、使用者等が要求する出力情報の条件を指定するものである。具体的には使用者等が操作するキーボード、マウスその他の入力系デバイスがこれに相当する。操作部によって指定した条件により、画像編集支援装置1Aに保存されている画像情報が読み出され、表示部に画像情報を表示する。
表示部は、指定された上記画像情報を表示する処理を行なう。具体的にはディスプレイ装置がこれに相当する。
The operation unit specifies conditions for output information requested by a user or the like. Specifically, a keyboard, mouse or other input system device operated by a user or the like corresponds to this. The image information stored in the image editing support apparatus 1A is read according to the conditions specified by the operation unit, and the image information is displayed on the display unit.
The display unit performs processing for displaying the designated image information. Specifically, a display device corresponds to this.
画像情報受付部11は、撮像装置3で撮影され、画像情報記憶部33に記憶された複数の画像情報を受け付ける処理を行う。撮像装置3から画像情報を受け付けるための手段としては、上記フラッシュメモリカードなどの着脱式の外部メモリを介して行う方法の他、シリアルケーブルやUSBケーブルによる有線接続、赤外線や無線電波による無線接続などの方法があり、その受け付け(接続)形態については特に限定されるものではない。 The image information receiving unit 11 performs processing for receiving a plurality of pieces of image information captured by the imaging device 3 and stored in the image information storage unit 33. As a means for receiving image information from the imaging device 3, in addition to a method using a removable external memory such as the flash memory card, a wired connection using a serial cable or a USB cable, a wireless connection using infrared rays or radio waves, and the like There is no particular limitation on the reception (connection) mode.
検索キーワード受付部12は、画像情報受付部11で受け付けた複数の画像情報の中から所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける処理を行う。キーワード情報としては、撮影した場所や施設の名称に限らず、撮影した場所を含む広域地域名や、近隣の市町村名、観光名所、道路名、名物、特産といった、撮影内容を示す被写体とは直接関係無くとも撮影場所に関係する情報であれば良い。また、検索キーワード受付部12は、キーワード情報として計時情報の入力を受け付ける処理を行う。 The search keyword receiving unit 12 performs a process of receiving input of keyword information for searching for image information in which a desired subject is photographed from among a plurality of image information received by the image information receiving unit 11. Keyword information is not limited to the name of the place where the photo was taken and the name of the facility. Information relating to the shooting location may be used regardless of the relationship. Moreover, the search keyword reception part 12 performs the process which receives the input of timing information as keyword information.
位置情報特定部13は、前記検索キーワード受付部12で受け付けたキーワード情報に基づいて後述する関連情報記憶部16を参照し、当該キーワード情報を、地点(場所)または関連キーワード情報として含む位置情報を検索し、特定する処理を行う。 The position information specifying unit 13 refers to a related information storage unit 16 to be described later based on the keyword information received by the search keyword receiving unit 12, and includes position information including the keyword information as a point (location) or related keyword information. Search and specify processing.
画像情報検索部14は、前記位置情報特定部13で特定された位置情報に基づいて、前記画像情報受付部11で受け付けた複数の画像情報を参照し、画像情報に含まれる位置情報の中に当該位置情報と同じもしくは近似する位置情報を関連付けて記憶する画像情報を、所望の被写体が撮影されている画像情報として検索し、抽出する処理を行う。
また、画像情報検索部15は、前記検索キーワード受付部12での計時情報の受け付けに応じて前記画像情報受付部11で受け付けた複数の画像情報に含まれる撮影時刻情報を参照し、当該計時情報と関連付けて記憶された画像情報を、所望の被写体が撮影されている画像情報として検索し、抽出する処理を行う。
The image information search unit 14 refers to the plurality of image information received by the image information receiving unit 11 based on the position information specified by the position information specifying unit 13, and includes the position information included in the image information. Image information that is stored in association with position information that is the same as or close to the position information is searched as image information in which a desired subject is photographed and extracted.
In addition, the image information search unit 15 refers to the shooting time information included in the plurality of image information received by the image information reception unit 11 in response to the reception of the time measurement information by the search keyword reception unit 12, and the time information The image information stored in association with is retrieved and extracted as image information in which a desired subject is photographed.
画像情報出力再生部15は、前記画像情報検索部14で検索された画像情報を再生可能に出力し、図示しない表示部に表示する処理を行う。 The image information output / playback unit 15 outputs the image information searched by the image information search unit 14 so that the image information can be played back, and displays it on a display unit (not shown).
関連情報記憶部16は、予め、所定の地点(場所)の緯度・経度に応じた位置情報と、当該所定の地点(場所)に関連する少なくとも1以上のキーワード情報とを関連付けて記憶する。関連情報記憶部16に含まれる位置情報を有する所定の地点(場所)は、たとえば各市区町村役場の所在地や、鉄道の駅の所在地、交差点、電柱設置場所などが挙げられる。もちろん、後から任意の場所の位置情報を測定し、適宜追加するようにしても良い。
当該関連情報記憶部16に登録されるキーワード情報は、たとえば、所定の地点(場所)を含む広域地域名や近隣市区町村名、観光名所、道路名、名物、特産といった、記憶や印象に残り易いものをいう。また、上記キーワード情報は、たとえば雑誌や、インターネットのホームページから、位置情報を有する所定の地点(場所)を最寄駅や目印としてうたっている項目を採用するようにしても良い。
The related information storage unit 16 stores in advance position information corresponding to the latitude and longitude of a predetermined point (place) and at least one or more keyword information related to the predetermined point (place). Examples of the predetermined point (location) having position information included in the related information storage unit 16 include the location of each municipality office, the location of a railway station, an intersection, and a location where a utility pole is installed. Of course, the position information of an arbitrary place may be measured later and added as appropriate.
The keyword information registered in the related information storage unit 16 remains in the memory and impression such as a wide area name including a predetermined point (location), a name of a neighboring city, a tourist attraction, a road name, a specialty, and a special product. Something easy. Further, as the keyword information, for example, an item stipulated as a nearest station or landmark from a predetermined point (location) having position information from a magazine or a homepage on the Internet may be adopted.
編集指示受付部17は、前記画像情報出力再生部15で再生された画像情報の編集を指示する編集指示情報を受け付ける処理を行う。編集指示受付部17は、前記編集指示情報を受け付けると、その情報を後述する編集画像情報記憶部18へ送る。 The editing instruction receiving unit 17 performs processing for receiving editing instruction information for instructing editing of the image information reproduced by the image information output reproducing unit 15. When the editing instruction receiving unit 17 receives the editing instruction information, the editing instruction receiving unit 17 sends the information to the edited image information storage unit 18 described later.
編集画像情報記憶部18は、前記編集指示受付部17での編集指示情報の受け付けに応じて、指示された画像情報を記憶する。 The edited image information storage unit 18 stores the instructed image information in response to the editing instruction information received by the editing instruction receiving unit 17.
なお、本実施形態における前記各データベースは、画像編集支援装置1に搭載されたハードディスクなどの外部記憶装置上に実現される。 Each database in the present embodiment is realized on an external storage device such as a hard disk installed in the image editing support apparatus 1.
次に、図1及び図2に示した画像編集支援システムにより実行される方法の一例を、家族揃って自動車で旅行する場合として、図3に基づき説明する。図3は、以上のように構成された本発明の実施の形態に係る画像編集支援システムにおいて、所望の画像情報を検索する場合の処理の流れを示すシーケンス図である。
以上のように構成された画像編集支援システムでは、図3に示すように、まず、画像編集支援装置1Aが、予め位置情報から特定される場所に関連するキーワード情報を、当該位置情報と関連付けて記憶し、関連情報データベース(DB)を生成する(A)。関連情報DBとしては、たとえば図5にその一例を示すことができる。図5において、関連情報DB110は、地点、緯度・経度により規定される位置情報、及び関連キーワード情報などによって構成されている。作成された関連情報DB110は、関連情報記憶部16に記憶される。
Next, an example of a method executed by the image editing support system shown in FIGS. 1 and 2 will be described with reference to FIG. FIG. 3 is a sequence diagram showing the flow of processing when searching for desired image information in the image editing support system according to the embodiment of the present invention configured as described above.
In the image editing support system configured as described above, as shown in FIG. 3, first, the image editing support apparatus 1A associates keyword information related to a location specified in advance from position information with the position information. Store the related information database (DB) (A). An example of the related information DB can be shown in FIG. In FIG. 5, the related information DB 110 includes position information defined by points, latitude / longitude, related keyword information, and the like. The created related information DB 110 is stored in the related information storage unit 16.
次に、撮像装置3を自動車に搭載し、所定の条件で自動的に撮像装置3による撮影が開始・停止するように設定しておく。本実施形態の場合、自動車にはナビゲーションシステムが搭載され、撮像装置3は前記ナビゲーションシステムと接続される。
また、本実施形態の場合、撮影が自動的に開始・停止する所定の条件として、たとえば、GPSからの信号によって設定された場所に自動車が達した時に撮影開始情報を感知するように、前記ナビゲーションシステムを利用して撮影開始地点、及び撮影終了地点を予め設定しておく。なお、本発明においては、撮影が自動的に開始・停止する所定の条件を設定せず、手動で撮影を行っても良い。
Next, the image pickup apparatus 3 is mounted on a car, and it is set so that shooting by the image pickup apparatus 3 is automatically started and stopped under a predetermined condition. In the case of the present embodiment, the navigation system is mounted on the automobile, and the imaging device 3 is connected to the navigation system.
In the case of the present embodiment, as the predetermined condition for automatically starting / stopping the shooting, for example, the navigation is performed so that the shooting start information is detected when the vehicle reaches a place set by a signal from GPS. A shooting start point and a shooting end point are set in advance using the system. In the present invention, it is also possible to perform shooting manually without setting a predetermined condition for automatically starting and stopping shooting.
そして、自動車が走行し、所定の条件が満たされると、撮像装置3が、撮影開始情報を受け付ける(11)。
撮像装置3は、撮影開始情報を受け付けると、被写体を撮影して画像情報を生成すると共に(12a)、現在位置を測定して位置情報を生成する(12b)。
また、撮像装置3は、前記生成された画像情報に、前記生成された位置情報を関連付けて記憶し、画像情報データベース(DB)を生成する(13)。画像情報DBとしては、たとえば図4にその一例を示すことができる。図4において、画像情報DB100は、連続した画像ファイル名、緯度・経度により規定される位置情報、及び撮影時刻情報などによって構成されている。作成された画像情報DB100は、画像情報記憶部35に記憶される。
そして、再び所定の条件が満たされると、撮像装置3は、撮影終了情報を受け付け、撮影を停止する(14)。
When the vehicle travels and a predetermined condition is satisfied, the imaging device 3 receives the shooting start information (11).
Upon receiving the shooting start information, the imaging device 3 shoots the subject to generate image information (12a), and measures the current position to generate position information (12b).
Further, the imaging device 3 stores the generated position information in association with the generated image information, and generates an image information database (DB) (13). An example of the image information DB can be shown in FIG. In FIG. 4, the image information DB 100 is composed of continuous image file names, position information defined by latitude and longitude, shooting time information, and the like. The created image information DB 100 is stored in the image information storage unit 35.
When the predetermined condition is satisfied again, the imaging device 3 accepts the shooting end information and stops shooting (14).
次に、撮影された複数の画像情報の中から所望の画像情報を検索する場合、前記画像情報と位置情報とを関連付けて記憶した位置情報付画像情報を画像編集支援装置1Aへ移動する(15)。画像編集支援装置1Aへの位置情報付画像情報の移動は、たとえばフラッシュメモリカードなどの着脱式の外部メモリを介して行う方法の他、シリアルケーブルやUSBケーブルによる有線接続、赤外線や無線電波による無線接続など、任意の方法で行う。
これにより、画像編集支援装置1Aは、撮像装置3から位置情報付画像情報を受け付ける(16)。
Next, when searching for desired image information from a plurality of photographed image information, the image information with position information stored in association with the image information and position information is moved to the image editing support apparatus 1A (15). ). The image information with position information is moved to the image editing support apparatus 1A through a removable external memory such as a flash memory card, a wired connection using a serial cable or a USB cable, a wireless connection using infrared rays or radio waves, for example. Use any method such as connection.
As a result, the image editing support device 1A receives the image information with position information from the imaging device 3 (16).
次いで、画像編集支援装置1Aは、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける(17)。
画像編集支援装置1Aは、前記キーワード情報を受け付けると、予め(A)で生成した前記関連情報DB110を参照し、当該キーワード情報に応じた位置情報を特定する(18)。位置情報の特定は、たとえば、検索のためのキーワードとして「会津」と入力されたとすると、関連情報DB110を参照し、関連キーワード情報として「会津」を有する若松の位置情報「N37度29分18秒,E139度54分36秒」が検索されることにより達成される。
Next, the image editing support device 1A accepts input of keyword information for searching image information in which a desired subject is photographed (17).
When receiving the keyword information, the image editing support device 1A refers to the related information DB 110 generated in advance in (A) and specifies position information corresponding to the keyword information (18). For example, if “Aizu” is input as a keyword for search, the position information is identified by referring to the related information DB 110 and the position information “N37 degrees 29 minutes 18 seconds of Wakamatsu having“ Aizu ”as related keyword information. , E139 degrees 54 minutes 36 seconds "is retrieved.
引き続き画像編集支援装置1Aは、前記特定された位置情報に基づいて、前記受け付けた位置情報付画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する(19)。所望の画像情報抽出は、たとえば先程特定された位置情報「N37度29分18秒,E139度54分36秒」に基づいて画像情報DB100を参照し、前記位置情報に近似する位置情報と関連付けて記憶された画像ファイル名AA00014からAA00026までの画像情報が検索されることにより達成される。
そして、画像編集支援装置1Aは、前記抽出された画像情報を出力し、再生する(20)。
Subsequently, the image editing support device 1A refers to the received image information with position information based on the specified position information, and searches and extracts image information stored in association with position information approximate to the position information. (19). The desired image information extraction is performed by referring to the image information DB 100 based on, for example, the position information “N37 degrees 29 minutes 18 seconds, E139 degrees 54 minutes 36 seconds” specified earlier and associating with the position information approximate to the position information. This is accomplished by retrieving stored image information from image file names AA00014 to AA00026.
Then, the image editing support apparatus 1A outputs and reproduces the extracted image information (20).
また、出力・再生された画像応報を、編集画像情報として別に記憶しておきたい場合、画像編集支援装置1Aは、前記再生された画像情報の編集を指示する要求を受け付ける(21)。
画像編集支援装置1Aは、前記集指示要求の受け付けに応じて指示された画像情報を記憶、編集画像情報データベース(DB)を生成する(22)。編集画像情報DBとしては、たとえば図6にその一例を示すことができる。図6において、画像情報DB120は、緯度・経度により規定される位置情報、及び関連キーワード情報などによって構成されている。作成された編集画像情報DB120は、編集画像情報記憶部18に記憶される。
画像情報の編集は、先程再生された画像ファイル名AA00014からAA00026までの画像情報のうち、たとえば、所望の画像ファイル名としてAA00014、AA00015、AA00019、及びAA00025を選択することで達成される。
If the output / reproduced image response is to be stored separately as edited image information, the image editing support apparatus 1A accepts a request for instructing editing of the regenerated image information (21).
The image editing support apparatus 1A stores the image information instructed in response to the acceptance of the collection instruction request, and generates an edited image information database (DB) (22). An example of the edited image information DB can be shown in FIG. In FIG. 6, the image information DB 120 includes position information defined by latitude and longitude, related keyword information, and the like. The created edited image information DB 120 is stored in the edited image information storage unit 18.
The editing of the image information is achieved by selecting, for example, AA00014, AA00015, AA00019, and AA00025 as the desired image file names from the image file names AA00014 to AA00026 reproduced previously.
そして、同様にして、「大宮」をキーワードとして特定した位置情報から画像ファイル名AA00001を抽出し、編集を指示する。また、「宇都宮」をキーワードとして特定した位置情報から画像ファイル名AA00002を抽出し、編集を指示する。また、「鬼怒川」をキーワードとして特定した位置情報から画像ファイル名AA00003を抽出し、編集を指示する。また、「万古焼」をキーワードとして特定した位置情報から画像ファイル名AA00005を抽出し、編集を指示する。さらに、「野口英世」をキーワードとして特定した位置情報から画像ファイル名AA00012を抽出し、編集を指示する。 Similarly, the image file name AA00001 is extracted from the position information specified with “Omiya” as a keyword, and editing is instructed. Also, the image file name AA00002 is extracted from the position information specified with “Utsunomiya” as a keyword, and editing is instructed. Also, the image file name AA00003 is extracted from the position information specified with “Kinugawa” as a keyword, and editing is instructed. Further, the image file name AA00005 is extracted from the position information specified with “Manko Yaki” as a keyword, and editing is instructed. Further, the image file name AA00012 is extracted from the position information specified with “Hideyo Noguchi” as a keyword, and editing is instructed.
以上によって、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を容易に行うことが可能となり、たとえば、図6に示すように編集された編集画像情報データベース(DB)を生成し、編集画像情報記憶部18に記憶することができる。 As described above, it is possible to retrieve image information in which a desired subject is photographed from a plurality of image information, and to easily reproduce and edit the image information. For example, as shown in FIG. An edited image information database (DB) can be generated and stored in the edited image information storage unit 18.
次に、上述の画像編集支援システムにおける画像編集支援装置1Aの動作の一例を、図7を参照して説明する。
図7は、画像編集支援装置1Aのプログラム記憶部に記憶されているプログラムが実行する処理の流れを示したフローチャートである。
まず、画像情報受付部11が、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索するための位置情報付画像情報を受け付けたか否か判断する(S11)。
その結果、画像情報受付部11が位置情報付画像情報を受け付けた場合(Y)は、引き続き、検索キーワード受付部12が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けたか否か判断する(S12)。
一方、画像情報受付部11が位置情報付画像情報を受け付けていない場合(N)は、繰り返し画像情報受付部11が、前記位置情報付画像情報を受け付けたか否か判断する(S11)。
Next, an example of the operation of the image editing support apparatus 1A in the above-described image editing support system will be described with reference to FIG.
FIG. 7 is a flowchart showing the flow of processing executed by the program stored in the program storage unit of the image editing support apparatus 1A.
First, it is determined whether the image information receiving unit 11 has received image information with position information for searching for image information in which a desired subject is photographed from among a plurality of image information (S11).
As a result, when the image information receiving unit 11 receives the image information with position information (Y), the search keyword receiving unit 12 continues to search for the keyword information for searching the image information in which the desired subject is photographed. It is determined whether or not an input has been accepted (S12).
On the other hand, when the image information receiving unit 11 has not received the image information with position information (N), it is determined whether the repeated image information receiving unit 11 has received the image information with position information (S11).
次に、画像情報受付部11が、キーワード情報の入力を受け付けた場合(Y)は、位置情報特定部13が、当該キーワード情報に応じた位置情報を特定する(S13)。位置情報の特定は、位置情報特定部13が、予め関連情報記憶部16に記憶された関連情報DBを参照することにより行われる。関連情報DBは、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する。
当該キーワード情報に応じた位置情報が特定されると、引き続き、画像情報検索部14が、前記画像情報受付部11で受け付けた位置情報付画像情報を参照し、特定した当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する(S14)。
また、画像情報が抽出されると、画像情報出力再生部15が、抽出された画像情報を出力し、再生する(S15)。
Next, when the image information receiving unit 11 receives input of keyword information (Y), the position information specifying unit 13 specifies position information corresponding to the keyword information (S13). The position information is specified by the position information specifying unit 13 referring to the related information DB stored in the related information storage unit 16 in advance. The related information DB stores keyword information related to a location specified from the position information in association with the position information.
When the position information corresponding to the keyword information is specified, the image information search unit 14 continues to refer to the image information with position information received by the image information receiving unit 11 and approximates the specified position information. The image information stored in association with the information is searched and extracted (S14).
When the image information is extracted, the image information output / playback unit 15 outputs and plays back the extracted image information (S15).
一方、検索キーワード受付部12が、キーワード情報の入力を受け付けていない場合(N)は、画像情報を検索せず、記憶された順番通りに最初から画像情報を出力し、再生する(S15)。
そして、画像情報出力再生部15によって再生された画像情報は、表示部(図示せず)に表示される(S16)。
引き続き、画像情報の出力・再生中に、編集指示受付部17が、画像情報の編集を指示する再生画像記録要求を受け付けたか否か判断する(S17)。
その結果、編集指示受付部17が、前記再生画像記録要求を受け付けた場合(Y)は、指示された再生画像情報を、編集画像情報記憶部18に記録する(S18)。
On the other hand, if the search keyword receiving unit 12 has not received the input of keyword information (N), the image information is not searched but output from the beginning in the stored order and reproduced (S15).
Then, the image information reproduced by the image information output reproduction unit 15 is displayed on a display unit (not shown) (S16).
Subsequently, during the output / reproduction of the image information, the editing instruction reception unit 17 determines whether a reproduction image recording request for instructing the editing of the image information has been received (S17).
As a result, when the editing instruction receiving unit 17 receives the playback image recording request (Y), the instructed playback image information is recorded in the editing image information storage unit 18 (S18).
その後、画像情報出力再生部15が、再生終了情報を受け付けたか否か判断する(S19)。
一方、編集指示受付部17が、前記再生画像記録要求を受け付けていない場合(N)は、再生画像情報を記録せず、画像情報出力再生部15が、再生終了情報を受け付けたか否か判断する(S19)。
その結果、画像情報出力再生部15が、再生終了情報を受け付けた場合(Y)は、これにより、画像編集支援装置1Aでの基本的な一連の動作は終了(エンド)する。
一方、画像情報出力再生部15が、再生終了情報を受け付けていない場合(N)は、繰り返し検索キーワード受付部12が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けたか否か判断する(S12)。
Thereafter, the image information output reproduction unit 15 determines whether or not the reproduction end information has been received (S19).
On the other hand, when the editing instruction receiving unit 17 has not received the reproduction image recording request (N), it is determined whether or not the reproduction information is not recorded and the image information output reproduction unit 15 has received reproduction end information. (S19).
As a result, when the image information output / playback unit 15 receives the playback end information (Y), the basic series of operations in the image editing support apparatus 1A is finished (end).
On the other hand, when the image information output reproduction unit 15 has not received the reproduction end information (N), the repeated search keyword reception unit 12 inputs keyword information for searching for image information in which a desired subject is photographed. Is determined (S12).
以上により本発明は、正確なファイル名を忘れてしまった場合でも、撮影内容を示す被写体とは直接関係は無いが、撮影した場所に関連する広域地域名や、近隣の観光名所、道路名、名物、特産といった、関連キーワード情報を手掛かりとすることで、位置情報を特定し、特定した位置情報から所望の画像データを容易に検索することが出来る。 As described above, the present invention is not directly related to the subject indicating the shooting contents even if the accurate file name is forgotten, but the wide area name related to the shooting location, the nearby tourist attractions, the road name, By using related keyword information such as specialties and special products as clues, it is possible to specify position information and easily search for desired image data from the specified position information.
また、本発明では、前記実施形態に加え、前記音声情報記憶部36に記憶され、前記撮像部31で撮影された画像情報と共に画像情報受付部11で受け付けられた音声情報付画像情報に含まれる音声情報を分化し、音声キーワード情報を生成する処理を行なう音声キーワード情報生成部や、前記音声キーワード情報生成部で生成された音声キーワード情報を、前記撮像部31で生成された画像情報を記憶する関連情報記憶部16に関連付けて登録する音声キーワード情報記憶部を設け、画像情報検索部15が、前記検索キーワード受付部12でのキーワード情報の受け付けに応じ、前記関連情報記憶部16に代えてもしくは前記関連情報記憶部16と共に、前記音声キーワード情報記憶部を参照し、当該キーワード情報に応じた画像情報を特定する処理をさらに行なうようにしても良い。 Further, in the present invention, in addition to the above-described embodiment, it is stored in the audio information storage unit 36 and is included in the image information with audio information received by the image information receiving unit 11 together with the image information captured by the imaging unit 31. The voice keyword information generation unit that performs processing to differentiate the voice information and generate the voice keyword information, the voice keyword information generated by the voice keyword information generation unit, and the image information generated by the imaging unit 31 are stored. A voice keyword information storage unit that is registered in association with the related information storage unit 16 is provided, and the image information search unit 15 replaces the related information storage unit 16 or accepts the keyword information in the search keyword reception unit 12 or The voice keyword information storage unit is referred to together with the related information storage unit 16, and image information corresponding to the keyword information is specified. Treatment may be further performed to.
さらに、本発明では、前記関連情報記憶部16に記憶されたキーワード情報に関連する付加キーワード情報を、前記位置情報から特定される場所を示す場所特定情報と共に受け付ける処理を行なう付加キーワード情報受付部や、前記付加キーワード情報受付部で受け付けた付加キーワード情報を、前記場所特定情報に基づいて前記関連情報記憶部16に登録する処理を行なう付加キーワード登録部を設け、逐次所望のキーワード情報を追加可能なようにしても良い。 Furthermore, in the present invention, an additional keyword information receiving unit that performs processing for receiving additional keyword information related to the keyword information stored in the related information storage unit 16 together with place specifying information indicating a place specified from the position information, An additional keyword registration unit for performing processing for registering the additional keyword information received by the additional keyword information receiving unit in the related information storage unit 16 based on the location specifying information can be provided, and desired keyword information can be added sequentially. You may do it.
(第二の実施形態)
また、本発明は上記のようなスタンドアロン型の画像編集支援装置を構成とした実施形態に限らず、通信ネットワークを介して接続されたネットワーク型の画像編集支援装置と画像検索支援装置とで構成されたものとすることもできる。通信ネットワークの例としては、インターネットやLANなどのコンピュータ通信網がある。
図8は、本発明に係る画像編集支援システムの第二の実施形態の構成を示す概略図であり、図9は、その構成を示すブロック図である。
図8に示すように、本実施の形態で用いる画像編集支援システムは、被写体Pを撮影して画像情報を取得する撮像装置3と、当該撮像装置3から画像情報を受け取り、検索キーワードに基づいて複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を支援する、いわゆるサーバとしての画像編集支援装置1Bと、画像編集支援装置1Bから検索キーワード情報を受け付け、当該検索キーワード情報に応じた画像情報を検索するための位置情報を特定する画像検索支援装置5Aとから構成される。
撮像装置3は、図9に示すように、たとえば撮像部31と、測位部32と、画像情報記憶部33と、計時部34と、音声認識部35と、音声情報記憶部36とから構成され、必要に応じて、さらに撮影開始情報認識部37を有する。
なお、第二の実施形態においては、上記第一実施形態と同様の構成部分の同じ符号を付してその説明は省略し、特に説明しない限り他の部分も同じであるものとする。
(Second embodiment)
Further, the present invention is not limited to the embodiment configured as the stand-alone type image editing support device as described above, but is configured by a network type image editing support device and an image search support device connected via a communication network. It can also be Examples of communication networks include computer communication networks such as the Internet and LAN.
FIG. 8 is a schematic diagram showing the configuration of the second embodiment of the image editing support system according to the present invention, and FIG. 9 is a block diagram showing the configuration thereof.
As shown in FIG. 8, the image editing support system used in the present embodiment captures image information from the imaging device 3 that captures a subject P and acquires image information, receives image information from the imaging device 3, and based on a search keyword. The image editing support device 1B as a so-called server that searches for image information in which a desired subject is photographed from a plurality of image information and supports the reproduction / editing of the image information, and the image editing support device 1B. An image search support device 5A that receives keyword information and identifies position information for searching for image information corresponding to the search keyword information.
As shown in FIG. 9, the imaging device 3 includes, for example, an imaging unit 31, a positioning unit 32, an image information storage unit 33, a timing unit 34, a voice recognition unit 35, and a voice information storage unit 36. If necessary, a photographing start information recognition unit 37 is further included.
In the second embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, the description thereof is omitted, and the other parts are the same unless otherwise specified.
次に、画像編集支援装置1Bは、図9に示すように、たとえば画像情報受付部11と、検索キーワード受付部12と、画像情報検索部14と、画像情報出力再生部15と、検索キーワード送信部19と、位置情報受信部20と、画像情報送信部21とから構成され、必要に応じて、さらに編集指示受付部17と、編集画像情報記憶部18を有する。 Next, as shown in FIG. 9, the image editing support apparatus 1 </ b> B, for example, an image information reception unit 11, a search keyword reception unit 12, an image information search unit 14, an image information output reproduction unit 15, and a search keyword transmission. The unit 19 includes a position information receiving unit 20 and an image information transmitting unit 21, and further includes an editing instruction receiving unit 17 and an edited image information storage unit 18 as necessary.
検索キーワード送信部19は、前記検索キーワード受付部12で受け付けたキーワード情報を、当該キーワード情報に応じた位置情報を特定する画像検索支援装置5Aへ通信ネットワーク10を介して送信する処理を行う。 The search keyword transmitting unit 19 performs processing for transmitting the keyword information received by the search keyword receiving unit 12 to the image search support device 5A that specifies the position information corresponding to the keyword information via the communication network 10.
位置情報受信部20は、前記検索キーワード送信部19でのキーワード情報の送信に応じて前記画像検索支援装置5Aにて特定され、当該画像検索支援装置5Aより送信された位置情報を、通信ネットワーク10を介して受信する処理を行う。 The position information receiving unit 20 specifies the position information transmitted from the image search support device 5A, which is specified by the image search support device 5A in response to the transmission of the keyword information from the search keyword transmission unit 19, and the communication network 10 The process to receive via is performed.
画像情報送信部21は、前記画像情報受付部11で受け付けた画像情報、もしくは前記編集画像情報記憶部18に記録された編集画像情報を前記画像検索支援装置5Aへ登録するため、画像検索支援装置5Aへ通信ネットワーク10を介して送信する処理を行う。 The image information transmitting unit 21 registers the image information received by the image information receiving unit 11 or the edited image information recorded in the edited image information storage unit 18 in the image search support device 5A. A process of transmitting to 5A via the communication network 10 is performed.
また、画像検索支援装置5Aは、検索キーワード受信部51と、位置情報特定部52と、関連情報記憶部53と、位置情報送信部54とから構成される。
検索キーワード受信部51は、前記画像編集支援装置1Bから送信されたキーワード情報を、通信ネットワーク10を介して受信する処理を行う。前記キーワード情報は、前記画像編集支援装置1Bが所望の被写体が撮影されている画像情報を検索するための情報である。
位置情報特定部52は、第一の実施形態における画像編集支援装置1Aに備えられた位置情報特定部13と同様に、受け付けたキーワード情報に基づいて関連情報記憶部を参照し、当該キーワード情報を、地点(場所)または関連キーワード情報として含む位置情報を検索し、特定する処理を行う。
関連情報記憶部53もまた、第一の実施形態における画像編集支援装置1Aに備えられた関連情報記憶部16と同様に、予め、所定の地点(場所)の緯度・経度に応じた位置情報と、当該所定の地点(場所)に関連する少なくとも1以上のキーワード情報とを関連付けて記憶する。
The image search support device 5 </ b> A includes a search keyword receiving unit 51, a position information specifying unit 52, a related information storage unit 53, and a position information transmitting unit 54.
The search keyword receiving unit 51 performs a process of receiving the keyword information transmitted from the image editing support apparatus 1B via the communication network 10. The keyword information is information for the image editing support apparatus 1B to search for image information in which a desired subject is photographed.
The position information specifying unit 52 refers to the related information storage unit based on the received keyword information, similarly to the position information specifying unit 13 provided in the image editing support apparatus 1A in the first embodiment, and stores the keyword information. The position information included as point (location) or related keyword information is searched and specified.
Similarly to the related information storage unit 16 provided in the image editing support apparatus 1A in the first embodiment, the related information storage unit 53 also includes position information corresponding to the latitude and longitude of a predetermined point (location) in advance. Then, at least one or more keyword information related to the predetermined point (place) is stored in association with each other.
位置情報送信部54は、前記位置情報特定部52で特定した位置情報を、前記画像編集支援装置1Bへ通信ネットワーク10を介して送信する処理を行う。
したがって、前記画像編集支援装置1Bは、画像検索支援装置5Aより通信ネットワーク10を介して送信された当該位置情報を位置情報受信部20で受け付け、画像情報検索部14において、当該位置情報に基づいて、前記画像情報受付部11で受け付けた複数の画像情報を参照し、画像情報に含まれる位置情報の中に当該位置情報と同じもしくは近似する位置情報を関連付けて記憶する画像情報を、所望の被写体が撮影されている画像情報として検索し、抽出する処理を行うこととなる。
The position information transmitting unit 54 performs processing for transmitting the position information specified by the position information specifying unit 52 to the image editing support apparatus 1B via the communication network 10.
Accordingly, the image editing support device 1B receives the position information transmitted from the image search support device 5A via the communication network 10 by the position information receiving unit 20, and the image information search unit 14 based on the position information. A plurality of pieces of image information received by the image information receiving unit 11 are referenced, and image information stored in association with position information that is the same as or similar to the position information is stored in the position information included in the image information. Is retrieved and extracted as image information.
次に、図8及び図9に示した画像編集支援システムにより実行される方法の一例を、図10に基づき説明する。図3は、以上のように構成された本発明の第二の実施の形態に係る画像編集支援システムにおいて、所望の画像情報を検索する場合の処理の流れを示すシーケンス図である。
以上のように構成された画像編集支援システムでは、図10に示すように、まず、画像編集検索装置5Aが、予め位置情報から特定される場所に関連するキーワード情報を、当該位置情報と関連付けて記憶し、関連情報データベース(DB)を生成する(A)。
Next, an example of a method executed by the image editing support system shown in FIGS. 8 and 9 will be described based on FIG. FIG. 3 is a sequence diagram showing the flow of processing when searching for desired image information in the image editing support system according to the second embodiment of the present invention configured as described above.
In the image editing support system configured as described above, as shown in FIG. 10, first, the image editing search device 5A associates keyword information related to a location specified in advance from position information with the position information. Store the related information database (DB) (A).
次に、撮像装置3を自動車に搭載し、所定の条件で自動的に撮像装置3による撮影が開始・停止するように設定しておく。
そして、自動車が走行し、所定の条件が満たされると、撮像装置3が、撮影開始情報を受け付ける(31)。
撮像装置3は、撮影開始情報を受け付けると、被写体を撮影して画像情報を生成すると共に(32a)、現在位置を測定して位置情報を生成する(32b)。
また、撮像装置3は、前記生成された画像情報に、前記生成された位置情報を関連付けて記憶し、画像情報データベース(DB)を生成する(33)。
そして、再び所定の条件が満たされると、撮像装置3は、撮影終了情報を受け付け、撮影を停止する(34)。
Next, the image pickup apparatus 3 is mounted on a car, and it is set so that shooting by the image pickup apparatus 3 is automatically started and stopped under a predetermined condition.
When the vehicle travels and a predetermined condition is satisfied, the imaging device 3 receives the shooting start information (31).
Upon receiving the shooting start information, the imaging device 3 shoots the subject to generate image information (32a), and measures the current position to generate position information (32b).
Further, the imaging apparatus 3 stores the generated position information in association with the generated image information, and generates an image information database (DB) (33).
When the predetermined condition is satisfied again, the imaging device 3 receives the shooting end information and stops shooting (34).
次に、撮影された複数の画像情報の中から所望の画像情報を検索する場合、前記画像情報と位置情報とを関連付けて記憶した位置情報付画像情報を画像編集支援装置1Bへ移動する(35)。画像編集支援装置1Bへの位置情報付画像情報の移動は、第一の実施形態と同様に、たとえばフラッシュメモリカードなどの着脱式の外部メモリを介して行う方法の他、シリアルケーブルやUSBケーブルによる有線接続、赤外線や無線電波による無線接続など、任意の方法で行う。
これにより、画像編集支援装置1Aは、撮像装置3から位置情報付画像情報を受け付ける(36)。
次いで、画像編集支援装置1Aは、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける(37)。
ここまでは、第一の実施形態と同様である。
Next, when searching for desired image information from a plurality of photographed image information, the image information with position information stored in association with the image information and position information is moved to the image editing support apparatus 1B (35). ). As in the first embodiment, the movement of the image information with position information to the image editing support apparatus 1B is performed by a serial cable or a USB cable, in addition to a method using a removable external memory such as a flash memory card. Use any method such as wired connection or wireless connection using infrared or radio waves.
As a result, the image editing support device 1A receives the image information with position information from the imaging device 3 (36).
Next, the image editing support apparatus 1A accepts input of keyword information for searching for image information in which a desired subject is photographed (37).
Up to this point, the process is the same as in the first embodiment.
そして、画像編集支援装置1Bは、前記キーワード情報を受け付けると、受け付けたキーワード情報を画像検索支援装置5Aへ通信ネットワーク10を介して送信する(38)。
画像検索支援装置5Aは、前記画像編集支援装置1Bから送信されたキーワード情報を受信する(39)。
引き続き画像検索支援装置5Aは、予め(A)で生成した前記関連情報DBを参照し、当該キーワード情報に応じた位置情報を特定する(40)。
その後、画像検索支援装置5Aは、特定した位置情報を前記画像編集支援装置1Bへ通信ネットワーク10を介して送信する(41)。
When receiving the keyword information, the image editing support apparatus 1B transmits the received keyword information to the image search support apparatus 5A via the communication network 10 (38).
The image search support device 5A receives the keyword information transmitted from the image editing support device 1B (39).
Subsequently, the image search support device 5A refers to the related information DB generated in advance in (A) and specifies position information corresponding to the keyword information (40).
Thereafter, the image search support device 5A transmits the specified position information to the image editing support device 1B via the communication network 10 (41).
画像編集支援装置1Bは、前記画像検索支援装置5Aから送信された位置情報を受信する(42)。
引き続き画像編集支援装置1Bは、前記受信した位置情報に基づいて、前記受け付けた位置情報付画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する(43)。
そして、画像編集支援装置1Bは、再び第一の実施形態と同様、前記抽出された画像情報を出力し、再生する(44)。
The image editing support device 1B receives the position information transmitted from the image search support device 5A (42).
Subsequently, the image editing support apparatus 1B refers to the received image information with position information based on the received position information, and searches and extracts image information stored in association with position information approximate to the position information. (43).
Then, the image editing support apparatus 1B outputs and reproduces the extracted image information again as in the first embodiment (44).
また、出力・再生された画像応報を、編集画像情報として別に記憶しておきたい場合、画像編集支援装置1Bは、前記再生された画像情報の編集を指示する要求を受け付ける(45)。
画像編集支援装置1Bは、前記集指示要求の受け付けに応じて指示された画像情報を記憶、編集画像情報データベース(DB)を生成する(46)。
When the output / reproduced image response is to be stored separately as edited image information, the image editing support apparatus 1B accepts a request to instruct editing of the regenerated image information (45).
The image editing support apparatus 1B stores the image information instructed in response to acceptance of the collection instruction request, and generates an edited image information database (DB) (46).
以上によっても、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を容易に行うことが可能となる。しかも、通信ネットワーク10を介して接続された画像検索支援装置5Aに関連情報DBを備えているので、関連情報DBの共有化が可能で出ると共に、常に最新の関連情報が記憶された関連情報DBとするように管理することができる。 Also by the above, it is possible to search image information in which a desired subject is photographed from a plurality of image information, and to easily reproduce and edit the image information. Moreover, since the related information DB is provided in the image search support device 5A connected via the communication network 10, the related information DB can be shared and the related information DB in which the latest related information is always stored. Can be managed.
次に、上述の画像編集支援システムにおける画像編集支援装置1Bの動作の一例を、図11を参照して説明する。
図11は、画像編集支援装置1Bのプログラム記憶部に記憶されているプログラムが実行する処理の流れを示したフローチャートである。
まず、画像情報受付部11が、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索するための位置情報付画像情報を受け付けたか否か判断する(S31)。
その結果、画像情報受付部11が位置情報付画像情報を受け付けた場合(Y)は、引き続き、検索キーワード受付部12が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けたか否か判断する(S32)。
一方、画像情報受付部11が位置情報付画像情報を受け付けていない場合(N)は、繰り返し画像情報受付部11が、前記位置情報付画像情報を受け付けたか否か判断する(S31)。
Next, an example of the operation of the image editing support apparatus 1B in the above-described image editing support system will be described with reference to FIG.
FIG. 11 is a flowchart showing the flow of processing executed by the program stored in the program storage unit of the image editing support apparatus 1B.
First, it is determined whether the image information receiving unit 11 has received image information with position information for searching for image information in which a desired subject is photographed from among a plurality of image information (S31).
As a result, when the image information receiving unit 11 receives the image information with position information (Y), the search keyword receiving unit 12 continues to search for the keyword information for searching the image information in which the desired subject is photographed. It is determined whether an input has been accepted (S32).
On the other hand, when the image information receiving unit 11 has not received the image information with position information (N), it is determined whether the repeated image information receiving unit 11 has received the image information with position information (S31).
次に、画像情報受付部11が、キーワード情報の入力を受け付けた場合(Y)は、検索キーワード送信部19が、当該キーワード情報を画像検索支援装置5Aへ送信する(S33)。
次いで、位置情報受信部20が、前記検索キーワード送信部19でのキーワード情報の送信に応じて、前記画像検索支援装置5Aにて特定された位置情報を当該画像検索支援装置5Aより受信したか否か判断する(S34)。
その結果、位置情報受信部20が、特定された位置情報を受信した場合(Y)は、引き続き、画像情報検索部14が、前記画像情報受付部11で受け付けた位置情報付画像情報を参照し、特定した当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する(S35)。
一方、位置情報受信部20が、特定された位置情報を受信していない場合(N)は、繰り返し検索キーワード受付部12が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けたか否か判断する(S32)。
また、画像情報が抽出されると、画像情報出力再生部15が、抽出された画像情報を出力し、再生する(S36)。
Next, when the image information receiving unit 11 receives an input of keyword information (Y), the search keyword transmitting unit 19 transmits the keyword information to the image search support device 5A (S33).
Next, whether or not the position information receiving unit 20 has received the position information specified by the image search support device 5A from the image search support device 5A in response to the transmission of the keyword information by the search keyword transmission unit 19 (S34).
As a result, when the position information receiving unit 20 receives the specified position information (Y), the image information search unit 14 continues to refer to the image information with position information received by the image information receiving unit 11. The image information stored in association with the position information approximate to the specified position information is searched and extracted (S35).
On the other hand, when the position information receiving unit 20 has not received the specified position information (N), the keyword information for the repeated search keyword receiving unit 12 to search for image information in which a desired subject is photographed. It is determined whether or not an input of is accepted (S32).
When the image information is extracted, the image information output / playback unit 15 outputs and plays back the extracted image information (S36).
一方、検索キーワード受付部12が、キーワード情報の入力を受け付けていない場合(N)は、画像情報を検索せず、記憶された順番通りに最初から画像情報を出力し、再生する(S36)。
そして、画像情報出力再生部15によって再生された画像情報は、表示部(図示せず)に表示される(S37)。
引き続き、画像情報の出力・再生中に、編集指示受付部17が、画像情報の編集を指示する再生画像記録要求を受け付けたか否か判断する(S38)。
その結果、編集指示受付部17が、前記再生画像記録要求を受け付けた場合(Y)は、指示された再生画像情報を、編集画像情報記憶部18に記録する(S39)。
On the other hand, if the search keyword accepting unit 12 does not accept the input of keyword information (N), the image information is not retrieved but outputted from the beginning in the stored order and reproduced (S36).
Then, the image information reproduced by the image information output reproduction unit 15 is displayed on a display unit (not shown) (S37).
Subsequently, during output / reproduction of the image information, the editing instruction receiving unit 17 determines whether or not a reproduction image recording request for instructing editing of the image information has been received (S38).
As a result, when the editing instruction receiving unit 17 receives the playback image recording request (Y), the instructed playback image information is recorded in the editing image information storage unit 18 (S39).
その後、画像情報出力再生部15が、再生終了情報を受け付けたか否か判断する(S40)。
一方、編集指示受付部17が、前記再生画像記録要求を受け付けていない場合(N)は、再生画像情報を記録せず、画像情報出力再生部15が、再生終了情報を受け付けたか否か判断する(S40)。
その結果、画像情報出力再生部15が、再生終了情報を受け付けた場合(Y)は、これにより、画像編集支援装置1Aでの基本的な一連の動作は終了(エンド)する。
一方、画像情報出力再生部15が、再生終了情報を受け付けていない場合(N)は、繰り返し検索キーワード受付部12が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けたか否か判断する(S32)。
Thereafter, the image information output reproduction unit 15 determines whether or not the reproduction end information has been received (S40).
On the other hand, when the editing instruction receiving unit 17 has not received the reproduction image recording request (N), it is determined whether or not the reproduction information is not recorded and the image information output reproduction unit 15 has received reproduction end information. (S40).
As a result, when the image information output / playback unit 15 receives the playback end information (Y), the basic series of operations in the image editing support apparatus 1A is finished (end).
On the other hand, when the image information output reproduction unit 15 has not received the reproduction end information (N), the repeated search keyword reception unit 12 inputs keyword information for searching for image information in which a desired subject is photographed. Is determined (S32).
(第三の実施形態)
また、本発明は上記のようなスタンドアロン型の画像編集支援装置やネットワーク型の画像編集支援装置と画像検索支援装置によって、画像の編集を容易なものとするだけでなく、第三者からの画像情報閲覧希望を受け付けることもできる。
図12は、本発明に係る画像編集支援システムの第三の実施形態として、第三者からの画像情報閲覧希望を受け付けるとした場合における画像編集支援装置の構成を示すブロック図である。
画像編集支援装置5Bは、上記第二の実施形態における画像編集支援装置5Aに代わって、通信ネットワーク10を介して画像編集支援装置1Bと情報の授受を行う。
図12に示すように、画像編集支援装置5Bは、検索キーワード受信部51と、位置情報特定部52と、関連情報記憶部53と、位置情報送信部54と、画像情報受信部55と、画像情報登録部56と、画像情報検索部57と、画像情報出力部58と、閲覧希望要求受付部59と、画像情報開示部60とから構成される。なお、本実施形態においても、上記第二実施形態と同様の構成部分の同じ符号を付してその説明は省略し、特に説明しない限り他の部分も同じであるものとする。
(Third embodiment)
The present invention not only facilitates image editing by the stand-alone image editing support device, the network-type image editing support device, and the image search support device as described above, but also allows images from third parties. Information browsing requests can also be accepted.
FIG. 12 is a block diagram showing the configuration of an image editing support apparatus when it is assumed that an image information browsing request from a third party is accepted as a third embodiment of the image editing support system according to the present invention.
The image editing support device 5B exchanges information with the image editing support device 1B via the communication network 10 in place of the image editing support device 5A in the second embodiment.
As shown in FIG. 12, the image editing support device 5B includes a search keyword receiving unit 51, a position information specifying unit 52, a related information storage unit 53, a position information transmitting unit 54, an image information receiving unit 55, and an image. The information registration unit 56, the image information search unit 57, the image information output unit 58, the browsing request request reception unit 59, and the image information disclosure unit 60 are configured. Also in this embodiment, the same reference numerals are assigned to the same components as those in the second embodiment, and the description thereof is omitted, and other portions are the same unless otherwise specified.
画像情報受信部55は、前記画像編集支援装置1Bから送信された画像情報を受信する処理を行う。
画像情報登録部56は、前記画像情報受信部55で受信した画像情報をデータベース化して記憶する。
閲覧希望要求受付部59は、前記画像編集支援装置1Bから受け付け、前記画像情報登録部56に記憶された画像情報の閲覧を希望する要求を、画像情報を検索するためのキーワード情報の入力と共に第三者の通信端末である画像情報閲覧装置7から受け付ける処理を行なう。
画像情報開示部60は、前記閲覧希望要求受付部59での画像閲覧希望要求に応じて、要求のあった画像情報を前記画像情報閲覧装置7に対して通信ネットワーク10を介して開示する処理を行なう。
この際、要求のあった画像情報は、前記位置情報特定部52にて位置情報が特定され、前記画像情報検索部57にて前記画像情報登録部56を参照して、特定された位置情報に応じた画像情報を検索し、前記画像情報出力部58にて前記検索された画像情報を出力し、再生される。
The image information receiving unit 55 performs a process of receiving the image information transmitted from the image editing support apparatus 1B.
The image information registration unit 56 stores the image information received by the image information receiving unit 55 in a database.
The browsing request request receiving unit 59 receives a request for browsing the image information received from the image editing support apparatus 1B and stored in the image information registration unit 56 together with the input of keyword information for searching the image information. Processing to be accepted from the image information browsing device 7 which is a three-party communication terminal is performed.
The image information disclosing unit 60 performs a process of disclosing requested image information to the image information browsing apparatus 7 via the communication network 10 in response to an image browsing request by the browsing request receiving unit 59. Do.
At this time, for the requested image information, the position information is specified by the position information specifying unit 52, and the image information searching unit 57 is referred to the image information registering unit 56 to obtain the specified position information. The corresponding image information is searched, the image information output unit 58 outputs the searched image information, and is reproduced.
次に、図12に示した画像編集支援装置5Bにより実行される画像情報開示方法の一例を、図13に基づき説明する。図13は、以上のように構成された本発明の第三の実施形態において所望の画像情報の閲覧を希望する場合の処理の流れを示すシーケンス図である。
以上のように構成された画像編集支援システムでは、図13に示すように、まず、画像編集支援装置1Bが、撮像装置3より受け付けた位置情報付の画像情報を、登録目的で画像編集検索装置5Bへ送信する(51)。
Next, an example of the image information disclosure method executed by the image editing support device 5B shown in FIG. 12 will be described based on FIG. FIG. 13 is a sequence diagram showing the flow of processing when the user wishes to view desired image information in the third embodiment of the present invention configured as described above.
In the image editing support system configured as described above, as shown in FIG. 13, first, the image editing support apparatus 1B receives image information with position information received from the imaging apparatus 3 as an image editing search apparatus for registration purposes. Transmit to 5B (51).
次に、画像編集検索装置5Bが、前記画像編集支援装置1Bから送信された画像情報を受信し、所定の記憶部に登録する(52)。
次いで、画像情報閲覧装置7が、画像情報を検索するためのキーワード情報を入力し、画像編集検索装置5Bに登録されている画像情報の閲覧を希望する画像閲覧希望要求と共に前記画像編集検索装置5Bへ送信する(53)。
画像編集検索装置5Bは、画像情報閲覧装置7から送信された画像閲覧希望要求を受け付ける(54)。
引き続き画像編集検索装置5Bは、予めで生成した前記関連情報DBを参照し、画像閲覧希望要求と共に送信されたキーワード情報に応じた位置情報を特定する(55)。
また、画像検索支援装置5Bは、特定した位置情報に基づいて、前記受け付けた位置情報付画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する(56)。
そして、画像編集検索装置5Bは、前記抽出された画像情報を前記画像情報閲覧装置7に対して出力し、開示する(44)。
これにより、前記画像情報閲覧装置7では、所望の被写体が撮影されている画像情報を閲覧することができる。
Next, the image editing search device 5B receives the image information transmitted from the image editing support device 1B and registers it in a predetermined storage unit (52).
Next, the image information browsing device 7 inputs keyword information for searching for image information, and the image editing search device 5B together with an image browsing request for requesting browsing of image information registered in the image editing search device 5B. (53).
The image editing / retrieval device 5B accepts the image browsing request sent from the image information browsing device 7 (54).
Subsequently, the image editing / retrieval device 5B refers to the related information DB generated in advance, and specifies position information corresponding to the keyword information transmitted together with the image browsing request (55).
Further, the image search support device 5B refers to the received image information with position information based on the specified position information, and searches and extracts image information stored in association with position information approximate to the position information. (56).
Then, the image editing / retrieval device 5B outputs the extracted image information to the image information browsing device 7 and discloses it (44).
Thereby, in the said image information browsing apparatus 7, the image information in which the desired to-be-photographed object is image | photographed can be browsed.
次に、上述の画像編集支援システムにおける画像編集検索装置5Bの動作の一例を、図14を参照して説明する。画像編集検索装置5Bのプログラム記憶部に記憶されているプログラムが実行する処理の流れを示したフローチャートである。
まず、画像情報受信部55が、所望の被写体が撮影されている位置情報付画像情報を受け付けたか否か判断する(S51)。
その結果、前記画像情報受信部55が、所望の被写体が撮影されている位置情報付画像情報を受け付けた場合(Y)は、受け付けた位置情報付画像情報を画像情報登録部56に登録する(S52)。
一方、前記画像情報受信部55が、所望の被写体が撮影されている位置情報付画像情報を受け付けていない場合(N)は、閲覧希望要求受付部59が、前記画像情報登録部56に記憶された画像情報の閲覧を希望する画像閲覧希望要求を受け付けか否か判断する(S53)。
Next, an example of the operation of the image editing search device 5B in the above-described image editing support system will be described with reference to FIG. It is the flowchart which showed the flow of the process which the program memorize | stored in the program memory | storage part of the image edit search device 5B performs.
First, it is determined whether the image information receiving unit 55 has received image information with position information in which a desired subject is photographed (S51).
As a result, when the image information receiving unit 55 receives image information with position information where a desired subject is photographed (Y), the received image information with position information is registered in the image information registration unit 56 ( S52).
On the other hand, when the image information receiving unit 55 has not received the image information with position information where the desired subject is photographed (N), the browsing request receiving unit 59 is stored in the image information registration unit 56. It is determined whether or not an image browsing request for requesting browsing of the image information is accepted (S53).
その結果、前記閲覧希望要求受付部59が、画像閲覧希望要求を受け付けた場合(Y)は、引き続き当該画像閲覧希望要求に、所望の画像情報を検索するためのキーワード情報が含まれているか否か判断する(S54)。
一方、前記閲覧希望要求受付部59が、画像閲覧希望要求を受け付けていない場合(N)は、繰り返し画像情報受信部55が、所望の被写体が撮影されている位置情報付画像情報を受け付けたか否か判断する(S51)。
そして、画像閲覧希望要求と共に所望の画像情報を検索するためのキーワード情報を受け付けている場合(Y)は、位置情報特定部53が、当該キーワード情報に応じた位置情報を特定する(S55)。位置情報の特定は、位置情報特定部53が、予め関連情報記憶部53に記憶された関連情報DBを参照することにより行われる。
As a result, when the browsing request request receiving unit 59 receives an image browsing request (Y), whether or not keyword information for searching for desired image information is continuously included in the image browsing request. (S54).
On the other hand, if the browsing request request receiving unit 59 has not received an image browsing request (N), whether or not the repeated image information receiving unit 55 has received image information with position information where a desired subject is photographed. (S51).
When keyword information for searching for desired image information is received together with the image browsing request (Y), the position information specifying unit 53 specifies position information corresponding to the keyword information (S55). The position information is specified by the position information specifying unit 53 referring to the related information DB stored in the related information storage unit 53 in advance.
当該キーワード情報に応じた位置情報が特定されると、引き続き、画像情報検索部57が、前記画像情報受信部55で受信し、画像情報登録部56に登録された位置情報付画像情報を参照し、特定した当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する(S56)。
また、画像情報が抽出されると、画像情報出力部58が、抽出された画像情報を出力し、画像情報開示部60が、前記画像情報閲覧装置7に対して出力された画像情報を、開示する(S57)。これにより、画像編集検索装置5Bでの基本的な一連の動作は終了(エンド)する。
一方、画像閲覧希望要求と共に所望の画像情報を検索するためのキーワード情報を受け付けていない場合(N)は、そのまま終了する。
When the position information corresponding to the keyword information is specified, the image information search unit 57 continues to refer to the image information with position information received by the image information reception unit 55 and registered in the image information registration unit 56. The image information stored in association with the position information approximate to the specified position information is searched and extracted (S56).
When the image information is extracted, the image information output unit 58 outputs the extracted image information, and the image information disclosure unit 60 discloses the image information output to the image information browsing device 7. (S57). Thus, a basic series of operations in the image editing / retrieval apparatus 5B is finished (end).
On the other hand, when keyword information for searching for desired image information is not received together with the image browsing request (N), the processing ends as it is.
これにより、第三者からの画像情報閲覧希望を、画像情報を検索するためのキーワード情報の入力と共に受け付け、当該キーワード情報から位置情報を特定し、特定した位置情報から所望の画像データを検索することで、画像情報が整理されていなくとも、要求された画像情報を容易に検索して、広く開示することが出来る。
また、第三の実施形態によれば、撮像装置に通信機能を持たせ、画像編集検索装置5Bと通信ネットワークを介して情報の授受が可能なものとすれば、直接、撮像装置と画像編集検索装置5Bとの組み合わせによって、複数の画像情報の中から所望の被写体が撮影されている画像情報を検索し、当該画像情報の再生・編集を容易に行うことが可能なものとなる。したがって、撮影された画像情報を直ちに画像編集検索装置5Bへ登録し、親や親戚、友人・知人に画像情報の開示要求を行ってもらうことによって、リアルタイムで画像情報を共有することができるものとなる。
As a result, a request for browsing image information from a third party is received together with the input of keyword information for searching for image information, position information is specified from the keyword information, and desired image data is searched from the specified position information. Thus, even if the image information is not organized, the requested image information can be easily retrieved and widely disclosed.
In addition, according to the third embodiment, if an imaging device is provided with a communication function and information can be exchanged with the image editing / retrieval device 5B via a communication network, the imaging device and the image editing / searching can be directly performed. By combining with the device 5B, it is possible to search image information in which a desired subject is photographed from a plurality of image information, and to easily reproduce and edit the image information. Therefore, it is possible to share the image information in real time by registering the captured image information in the image editing / retrieval device 5B immediately and having a parent, relative, friend or acquaintance make a request for disclosure of the image information. Become.
1A,1B・・・画像編集支援装置、3・・・撮像装置、5A,5B・・・画像検索支援装置、10・・・通信ネットワーク、11・・・画像情報受付部、12・・・検索キーワード受付部、13・・・位置情報特定部、14・・・画像情報検索部、15・・・画像情報出力再生部、16・・・関連情報記憶部、17・・・編集指示受付部、18・・・編集画像情報記憶部、19・・・検索キーワード送信部、20・・・位置情報受信部、21・・・画像情報送信部、31・・・撮像部、32・・・測位部、33・・・計時部、34・・・音声認識部、35・・・画像情報記憶部、36・・・音声情報記憶部、37・・・撮影開始情報認識部、51・・・検索キーワード受信部、52・・・位置情報特定部、53・・・関連情報記憶部、54・・・位置情報送信部、55・・・画像情報受信部、56・・・画像情報登録部、57・・・画像情報検索部、58・・・画像情報出力再生部、59・・・閲覧希望要求受付部、60・・・画像情報開示部。
DESCRIPTION OF SYMBOLS 1A, 1B ... Image editing support device, 3 ... Imaging device, 5A, 5B ... Image search support device, 10 ... Communication network, 11 ... Image information reception part, 12 ... Search Keyword receiving unit, 13 ... Position information specifying unit, 14 ... Image information searching unit, 15 ... Image information output / reproducing unit, 16 ... Related information storage unit, 17 ... Editing instruction receiving unit, 18 ... Edited image information storage unit, 19 ... Search keyword transmission unit, 20 ... Position information reception unit, 21 ... Image information transmission unit, 31 ... Imaging unit, 32 ... Positioning unit , 33 ... Time measuring part, 34 ... Voice recognition part, 35 ... Image information storage part, 36 ... Voice information storage part, 37 ... Shooting start information recognition part, 51 ... Search keyword Receiving unit, 52 ... position information specifying unit, 53 ... related information storage unit, 54 ..Position information transmission unit, 55... Image information reception unit, 56... Image information registration unit, 57... Image information search unit, 58. Request accepting unit, 60... Image information disclosing unit.
Claims (10)
被写体を撮影して画像情報を生成する撮像手段と、
現在位置を測定して位置情報を生成する測位手段と、
前記撮像手段で生成された画像情報に前記測位手段で生成された位置情報を関連付けて記憶する画像情報記憶手段と、
予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段と、
所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける検索キーワード受付手段と、
前記キーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定する位置情報特定手段と、
前記特定された位置情報に基づいて前記画像情報記憶手段を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する画像情報検索手段と、
前記抽出された画像情報を出力し再生する画像情報出力再生手段と、
を少なくとも有して構成されることを特徴とする画像編集支援システム。 A system for searching image information in which a desired subject is photographed from a plurality of image information, and supporting reproduction / editing of the image information,
Imaging means for photographing a subject and generating image information;
A positioning means for measuring the current position and generating position information;
Image information storage means for storing the position information generated by the positioning means in association with the image information generated by the imaging means;
In advance, related information storage means for storing keyword information related to a location specified from position information in association with the position information;
Search keyword receiving means for receiving input of keyword information for searching for image information in which a desired subject is photographed;
Position information specifying means for referring to the related information storage means in response to reception of the keyword information and specifying position information according to the keyword information;
Image information search means for referring to the image information storage means based on the specified position information and searching and extracting image information stored in association with position information approximate to the position information;
Image information output reproduction means for outputting and reproducing the extracted image information;
An image editing support system characterized by comprising at least.
前記撮像手段は、前記感知手段が所定の条件を感知したことに応じて自動的に撮影を開始及び/又は終了することを特徴とする請求項2に記載の画像編集支援システム。 Sensing means for sensing that a predetermined condition set in advance is satisfied;
3. The image editing support system according to claim 2, wherein the imaging unit automatically starts and / or ends shooting in response to the detection unit detecting a predetermined condition.
前記編集指示手段での編集指示要求の受け付けに応じて指示された画像情報を記憶する編集画像情報記憶手段と、
をさらに有することを特徴とする請求項1から3のいずれかに記載の画像編集支援システム。 Editing instruction receiving means for receiving a request to instruct editing of the reproduced image information;
Edit image information storage means for storing image information instructed in response to acceptance of an edit instruction request in the edit instruction means;
The image editing support system according to claim 1, further comprising:
前記閲覧希望要求受付手段で受け付けた閲覧希望要求に該当する画像情報を開示する画像情報開示手段と、
をさらに有することを特徴とする請求項1から4のいずれかに記載の画像編集支援システム。 Browsing request request receiving means for receiving a request for browsing the image information;
Image information disclosing means for disclosing image information corresponding to the browsing request received by the browsing request request receiving means;
The image editing support system according to claim 1, further comprising:
前記位置情報付の画像情報を受け付ける画像情報受付手段と、
予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段と、
所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける検索キーワード受付手段と、
前記キーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定する位置情報特定手段と、
前記特定された位置情報に基づいて前記画像情報受付手段で受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する画像情報検索手段と、
前記抽出された画像情報を出力し再生する画像情報出力再生手段と、
を少なくとも有することを特徴とする第一の装置。 Image information with position information is received from an imaging device that stores image information generated by photographing a subject in association with position information generated by measuring the current position, and a desired subject is photographed from the image information. A device that searches for image information and supports playback / editing of the image information,
Image information receiving means for receiving the image information with the position information;
In advance, related information storage means for storing keyword information related to a location specified from position information in association with the position information;
Search keyword receiving means for receiving input of keyword information for searching for image information in which a desired subject is photographed;
Position information specifying means for referring to the related information storage means in response to reception of the keyword information and specifying position information according to the keyword information;
Image information for searching and extracting image information stored in association with position information approximate to the position information with reference to image information with position information received by the image information receiving means based on the specified position information Search means;
Image information output reproduction means for outputting and reproducing the extracted image information;
A first device characterized by comprising at least
前記位置情報付の画像情報を受け付ける画像情報受付手段と、
所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける検索キーワード受付手段と、
前記受け付けたキーワード情報を、当該キーワード情報に応じた位置情報を特定する前記第三の装置へ送信する検索キーワード送信手段と、
前記キーワード情報の送信に応じて、当該キーワード情報に応じて特定した位置情報を前記第三の装置から受信する位置情報受信手段と、
前記受信した位置情報に基づいて前記画像情報受付手段で受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する画像情報検索手段と、
前記抽出された画像情報を出力し再生する画像情報出力再生手段と、
を少なくとも有することを特徴とする第二の装置。 Image information with position information is received from an imaging device that stores image information generated by photographing a subject and position information generated by measuring the current position, and image information on a desired subject is captured. Relevant information storage means for storing keyword information related to a location specified from position information in advance in association with the position information by receiving keyword information for searching, and a position corresponding to the keyword information A second device that exchanges information by communication with a third device that specifies information, searches the image information for the image of the desired subject, and supports reproduction / editing of the image information. A device,
Image information receiving means for receiving the image information with the position information;
Search keyword receiving means for receiving input of keyword information for searching for image information in which a desired subject is photographed;
Search keyword transmission means for transmitting the received keyword information to the third device for identifying position information corresponding to the keyword information;
Position information receiving means for receiving, from the third device, position information specified according to the keyword information in response to transmission of the keyword information;
Image information search that searches and extracts image information stored in association with position information approximate to the position information with reference to image information with position information received by the image information receiving means based on the received position information Means,
Image information output reproduction means for outputting and reproducing the extracted image information;
A second device characterized by comprising:
予め、位置情報から特定される場所に関連するキーワード情報を当該位置情報と関連付けて記憶する関連情報記憶手段を有し、
撮像手段が、被写体を撮影して画像情報を生成するステップと、
測位手段が、現在位置を測定して位置情報を生成するステップと、
画像情報記憶手段が、前記撮像手段で生成された画像情報に前記測位手段で生成された位置情報を関連付けて記憶するステップと、
検索キーワード受付手段が、所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付けるステップと、
位置情報特定手段が、前記検索キーワード受付手段でのキーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定するステップと、
画像情報検索手段が、前記位置情報特定手段で特定された位置情報に基づいて前記画像情報受付手段で受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出するステップと、
画像情報出力再生手段が、前記画像情報検索手段で抽出された画像情報を出力し再生するステップと、
を少なくとも有することを特徴とする画像編集支援方法。 A method of searching image information in which a desired subject is photographed from a plurality of image information, and supporting reproduction / editing of the image information,
In advance, there is related information storage means for storing keyword information related to the location specified from the position information in association with the position information,
Imaging means for photographing a subject and generating image information;
The positioning means measures the current position and generates position information;
An image information storage means for storing the position information generated by the positioning means in association with the image information generated by the imaging means;
A step of accepting input of keyword information for searching for image information in which a desired subject is photographed;
Position information specifying means, referring to the related information storage means in response to receiving keyword information in the search keyword receiving means, and specifying position information according to the keyword information;
The image information search unit refers to the image information with the position information received by the image information receiving unit based on the position information specified by the position information specifying unit, and stores the image information in association with the position information approximate to the position information. Retrieving and extracting the image information obtained,
An image information output reproduction means for outputting and reproducing the image information extracted by the image information search means;
An image editing support method comprising:
コンピュータに対して、
前記位置情報付の画像情報を受け付ける処理と、
所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける処理と、
前記キーワード情報の受け付けに応じて前記関連情報記憶手段を参照し、当該キーワード情報に応じた位置情報を特定する処理と、
前記特定された位置情報に基づいて前記受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する処理と、
前記抽出された画像情報を出力し再生する処理と、
を実行させるコンピュータプログラム。 Position information generated by measuring image information generated by photographing a subject and current position, and having related information storage means for storing keyword information related to a location specified from position information in association with the position information in advance An apparatus that receives image information with position information from an imaging device that stores information in association with the information, searches for image information in which a desired subject is photographed from the image information, and supports reproduction / editing of the image information A computer program for causing a computer to function as
Against the computer,
Processing for receiving image information with the position information;
Processing for accepting input of keyword information for searching image information in which a desired subject is photographed;
A process of referring to the related information storage unit in response to reception of the keyword information and specifying position information in accordance with the keyword information;
A process of referring to the received image information with the position information based on the specified position information, and searching and extracting the image information stored in association with the position information approximate to the position information;
Processing for outputting and reproducing the extracted image information;
A computer program that executes
コンピュータに対して、
前記位置情報付の画像情報を受け付ける処理と、
所望の被写体が撮影されている画像情報を検索するためのキーワード情報の入力を受け付ける処理と、
前記受け付けたキーワード情報を、当該キーワード情報に応じた位置情報を特定する処理を行う前記第三の装置へ送信する処理と、
前記キーワード情報の送信に応じて、当該キーワード情報に基づいて特定された位置情報を前記第三の装置から受信する処理と、
前記受信した位置情報に基づいて前記受け付けた位置情報付の画像情報を参照し、当該位置情報に近似する位置情報と関連付けて記憶された画像情報を検索し抽出する処理と、
前記抽出された画像情報を出力し再生する処理と、
を実行させるコンピュータプログラム。
Image information with position information is received from an imaging device that stores image information generated by photographing a subject and position information generated by measuring the current position, and image information on a desired subject is captured. Relevant information storage means for storing keyword information related to a location specified from position information in advance in association with the position information by receiving keyword information for searching, and a position corresponding to the keyword information A second device that exchanges information by communication with a third device that specifies information, searches the image information for the image of the desired subject, and supports reproduction / editing of the image information. A computer program for causing a computer to function as a device,
Against the computer,
Processing for receiving image information with the position information;
Processing for accepting input of keyword information for searching image information in which a desired subject is photographed;
A process of transmitting the received keyword information to the third device for performing a process of specifying position information according to the keyword information;
In response to the transmission of the keyword information, a process of receiving position information specified based on the keyword information from the third device;
A process of referring to the received image information with the position information based on the received position information, and searching and extracting the image information stored in association with the position information approximate to the position information;
Processing for outputting and reproducing the extracted image information;
A computer program that executes
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005377914A JP2007179368A (en) | 2005-12-28 | 2005-12-28 | Image editing support system, apparatus, method and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005377914A JP2007179368A (en) | 2005-12-28 | 2005-12-28 | Image editing support system, apparatus, method and program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2007179368A true JP2007179368A (en) | 2007-07-12 |
Family
ID=38304477
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005377914A Withdrawn JP2007179368A (en) | 2005-12-28 | 2005-12-28 | Image editing support system, apparatus, method and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2007179368A (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009064218A (en) * | 2007-09-06 | 2009-03-26 | Pioneer Electronic Corp | Voice related information retrieval device, voice related information retrieval method, and voice related information retrieval program |
| JP2010158038A (en) * | 2010-02-04 | 2010-07-15 | Yasuaki Iwai | Image recording device mounted to vehicle |
| JP2010218423A (en) * | 2009-03-18 | 2010-09-30 | Toshiba Corp | Musical concept data processing method, image display device, and musical concept data processing server |
| JP2010237992A (en) * | 2009-03-31 | 2010-10-21 | Denso It Laboratory Inc | Information management system and information management method |
| JP2012105174A (en) * | 2010-11-12 | 2012-05-31 | Software Factory:Kk | Image voice recording/playback system |
| JP2014081964A (en) * | 2008-05-12 | 2014-05-08 | Google Inc | Automatic discovery of popular landmarks |
-
2005
- 2005-12-28 JP JP2005377914A patent/JP2007179368A/en not_active Withdrawn
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009064218A (en) * | 2007-09-06 | 2009-03-26 | Pioneer Electronic Corp | Voice related information retrieval device, voice related information retrieval method, and voice related information retrieval program |
| JP2014081964A (en) * | 2008-05-12 | 2014-05-08 | Google Inc | Automatic discovery of popular landmarks |
| JP2010218423A (en) * | 2009-03-18 | 2010-09-30 | Toshiba Corp | Musical concept data processing method, image display device, and musical concept data processing server |
| JP2010237992A (en) * | 2009-03-31 | 2010-10-21 | Denso It Laboratory Inc | Information management system and information management method |
| JP2010158038A (en) * | 2010-02-04 | 2010-07-15 | Yasuaki Iwai | Image recording device mounted to vehicle |
| JP2012105174A (en) * | 2010-11-12 | 2012-05-31 | Software Factory:Kk | Image voice recording/playback system |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8144232B2 (en) | Camera system and method for picture sharing using geotagged pictures | |
| KR101990073B1 (en) | Method and apparatus for shooting and storing multi-focused image in electronic device | |
| US20090193021A1 (en) | Camera system and method for picture sharing based on camera perspective | |
| JP2017538948A (en) | Navigation, navigation video generation method and apparatus | |
| JPH11122638A (en) | Image processor, image processing method, and computer-readable information recording medium recorded with image processing program | |
| CN103685960A (en) | Method and system for processing image with matched position information | |
| CN105450736A (en) | Method and device for establishing connection with virtual reality | |
| CN105578027A (en) | Photographing method and device | |
| JP2003323440A (en) | Information providing system for captured image using mobile terminal, information providing method for captured image, and program for causing computer to execute the method | |
| CN108572969A (en) | Method and device for providing introduction information of geographic information points | |
| CN101911072A (en) | Methods for searching in a collection of data items | |
| KR20160087284A (en) | Image processing apparatus, the image processing apparatus for performing image storage method and image search method | |
| CN115103206A (en) | Video data processing method, device, equipment, system and storage medium | |
| US9154545B2 (en) | Video information control apparatus and method | |
| US20160100110A1 (en) | Apparatus, Method And Computer Program Product For Scene Synthesis | |
| JP2007179368A (en) | Image editing support system, apparatus, method and program | |
| JP2006338553A (en) | Content playback device | |
| WO2023021759A1 (en) | Information processing device and information processing method | |
| CN101110889B (en) | Method and device for automatically recording document forming information in output document | |
| JP2009043006A (en) | Peripheral information providing system, server, and peripheral information providing method | |
| JP2005191892A (en) | Information acquisition apparatus and multimedia information creation system using the same | |
| JP2010256642A (en) | Karaoke system with singer image shooting function | |
| JP2010256643A (en) | Karaoke system with a function to exclude inappropriate acts | |
| JP2010165081A (en) | Display apparatus, and system, apparatus and method for creating three-dimensional content | |
| JP6394729B2 (en) | Information processing apparatus, music data extraction method in information processing apparatus, program, and information processing system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20090303 |