JP2016062162A - Automatic tag generator, automatic tag generator system - Google Patents
Automatic tag generator, automatic tag generator system Download PDFInfo
- Publication number
- JP2016062162A JP2016062162A JP2014187748A JP2014187748A JP2016062162A JP 2016062162 A JP2016062162 A JP 2016062162A JP 2014187748 A JP2014187748 A JP 2014187748A JP 2014187748 A JP2014187748 A JP 2014187748A JP 2016062162 A JP2016062162 A JP 2016062162A
- Authority
- JP
- Japan
- Prior art keywords
- data
- tag
- image data
- accumulated
- feature
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
本発明は、画像データを表示するタグデータを生成する自動タグ生成装置又は自動タグ生成システムに関する。 The present invention relates to an automatic tag generation device or an automatic tag generation system that generates tag data for displaying image data.
画像データを表示するタグデータは、画像データの整理や画像データの検索を容易するために必要不可欠なものである。このタグデータは、ユーザが手作業で生成する場合もあれば、例えば特許文献１のように、装置等によって生成される場合もある。 Tag data for displaying image data is indispensable for facilitating image data organization and image data search. The tag data may be generated manually by the user, or may be generated by a device or the like as in Patent Document 1, for example.
この特許文献１記載の装置は、サーバに蓄積された画像データにタグデータを付与するものであって、サーバから選択した１の主画像データをもとに、この主画像データを用いてサーバ内を類似画像検索して、複数の従画像データをサーバから抽出する。そして、ユーザが主画像データと抽出した複数の従画像データとを比較して類似するものだけを選択し、これら主画像データと選択された従画像データのそれぞれに関連するタグデータを生成するものである。 The apparatus described in Patent Document 1 adds tag data to image data stored in a server. Based on one main image data selected from the server, the main image data is used to store the image data in the server. The similar image search is performed, and a plurality of sub image data is extracted from the server. Then, the user compares the main image data with the plurality of extracted sub image data, selects only similar ones, and generates tag data related to each of the main image data and the selected sub image data It is.
しかしながら、昨今では画像データの数は膨大な量にのぼり、これら１つ１つにユーザが手作業でタグデータを生成するとなれば、ユーザに過度の負担をかけることになる。また、装置がタグデータを生成するといっても、特許文献１記載の装置では、タグデータ生成にユーザが関与しているので、サーバに蓄積された画像データが増加して、サーバから抽出される従画像データの数が増加すれば、それを全て確認するユーザにはやはり過度の負担がかかるという問題が生じる。 However, in recent years, the number of image data has become enormous, and if the user manually generates tag data for each of these, an excessive burden is placed on the user. Even if the device generates tag data, in the device described in Patent Document 1, since the user is involved in tag data generation, the image data accumulated in the server increases and is extracted from the server. If the number of sub-image data increases, a problem arises in that an excessive burden is imposed on the user who confirms all of the sub-image data.
本発明は上記問題に鑑み、自動で画像データにタグ付けを行い、ユーザにかかる負担を減らす自動タグ生成装置及びそのシステムを提供することを主たる目的とするものである。 SUMMARY OF THE INVENTION In view of the above problems, an object of the present invention is to provide an automatic tag generation apparatus and system for automatically tagging image data and reducing the burden on the user.
本発明の自動タグ生成装置は、過去に蓄積された蓄積画像データ及び前記蓄積画像データを表示する蓄積タグデータを紐付けて記録する格納部と、入力された画像データの特徴を示す特徴データを生成する特徴生成部と、前記特徴データと同一又は類似の特徴を有する前記蓄積画像データに紐付けられた前記蓄積タグデータを前記格納部から抽出し、この前記蓄積タグデータを用いて前記画像データを表示するタグデータを生成するタグ生成部とを具備することを特徴とする。 The automatic tag generation device of the present invention includes a storage unit that records and stores accumulated image data accumulated in the past and accumulated tag data that displays the accumulated image data, and feature data indicating characteristics of input image data. A feature generation unit to be generated, the storage tag data associated with the storage image data having the same or similar feature as the feature data is extracted from the storage unit, and the image data is used using the storage tag data And a tag generation unit that generates tag data for displaying.
このような構成であれば、タグ生成部が格納部から抽出した蓄積タグデータを用いてタグデータを生成するので、タグ生成にユーザが関与せずに自動でタグデータを生成することができる。そのため、タグデータを生成する際にユーザにかかる負担を減らすことができる。 With such a configuration, tag data is generated by the tag generation unit using the accumulated tag data extracted from the storage unit, so that tag data can be automatically generated without involvement of the user in tag generation. Therefore, it is possible to reduce the burden on the user when generating tag data.
上述した自動タグ生成装置の具体的な一形態としては、前記タグ生成部が、前記格納部から複数の前記蓄積タグデータを抽出し、これら複数の前記蓄積タグデータに共通するデータを前記タグデータとするものを挙げることができる。
このようなものであれば、複数の蓄積データに共通するデータをタグデータとしているので、タグデータの精度を上げることができる。
As a specific form of the above-described automatic tag generation device, the tag generation unit extracts a plurality of the accumulated tag data from the storage unit, and sets data common to the plurality of accumulated tag data as the tag data. Can be mentioned.
If it is such, since the data common to several accumulation | storage data is used as tag data, the precision of tag data can be raised.
上述した自動タグ生成装置の別な具体的な一形態としては、複数のテキストデータが格納されたテキストデータ格納部を、前記タグデータを用いてテキストマイニングし、得られたテキストデータから前記タグデータに関連する第１補助タグデータを生成する第１補助生成部をさらに具備するものを挙げることができる。
このようなものであれば、テキストマイニングによって得られたテキストデータからタグデータに関連する第１補助タグデータを生成するので、画像データにタグデータ及び第１補助タグデータからなる複数のタグデータを付与することができる。そのため、画像データの検索のヒット数を上げて、画像データをより容易に検索することができる。
As another specific form of the above-described automatic tag generation device, a text data storage unit storing a plurality of text data is subjected to text mining using the tag data, and the tag data is obtained from the obtained text data. And a first auxiliary generation unit that generates first auxiliary tag data related to.
In such a case, since the first auxiliary tag data related to the tag data is generated from the text data obtained by text mining, a plurality of tag data consisting of the tag data and the first auxiliary tag data is added to the image data. Can be granted. Therefore, the image data can be searched more easily by increasing the number of hits for searching the image data.
上述した効果を得るための別の形態としては、前記画像データに予め関連付けられた関連データ又はユーザが前記画像データに付与したユーザデータの少なくとも１つから前記タグデータに関連する第２補助タグデータを生成する第２補助生成部をさらに具備するものを挙げることができる。このようなものであっても、画像データにタグデータ及び第２補助タグデータからなる複数のタグデータを付与することができる。 As another form for obtaining the above-described effect, the second auxiliary tag data related to the tag data from at least one of the related data previously associated with the image data or the user data given to the image data by the user Can further include a second auxiliary generation unit that generates. Even in such a case, a plurality of tag data including tag data and second auxiliary tag data can be added to the image data.
上述した自動タグ生成装置の別な具体的な一形態としては、前記特徴生成部が、前記画像データの所定領域から前記特徴データを生成するものを挙げることができる。
このようなものであれば、画像データが示す画像の中に複数の物体が写り込んでいたとしても、画像データのうち、所定の物体が写っている画像を示す所定領域から特徴データを生成することができるので、格納部から抽出する蓄積タグデータの精度を上げて、より適確に画像データを表示するタグデータを生成することができる。
As another specific form of the automatic tag generation device described above, the feature generation unit generates the feature data from a predetermined area of the image data.
If this is the case, even if a plurality of objects appear in the image indicated by the image data, feature data is generated from a predetermined area indicating an image in which the predetermined object is included in the image data. Therefore, it is possible to increase the accuracy of the accumulated tag data extracted from the storage unit and generate tag data for displaying the image data more accurately.
上述した自動タグ生成装置の別な具体的な一形態としては、前記特徴生成部が、ＨＯＧ特徴量やｗａｖｅｌｅｔ特徴量等の所定の特徴量を用いて前記特徴データを生成するものを挙げることができる。
このようなものであれば、画像データの中から特徴データを生成するのに必要となる所定領域を選択する場合に、例えばＨＯＧ特徴量であればヒストグラム、ｗａｖｅｌｅｔ特徴量であれば輝度を用いて所定領域を自動で選択することができるので、ユーザが画像データを確認して所定領域を絞りこむ必要がなく、ユーザにかかる負担を低減することができる。
As another specific form of the automatic tag generation device described above, the feature generation unit generates the feature data using a predetermined feature amount such as a HOG feature amount or wavelet feature amount. it can.
If it is such, when selecting the predetermined area | region required in order to produce | generate feature data from image data, for example, if it is a HOG feature amount, a histogram will be used, and if it is a wavelet feature amount, it will use luminance. Since the predetermined area can be automatically selected, it is not necessary for the user to check the image data and narrow down the predetermined area, and the burden on the user can be reduced.
上述した自動タグ生成装置の別な具体的な一形態としては、前記格納部が、前記タグデータ及び前記画像データを紐付けて記録するものを挙げることができる。
このようなものであれば、格納部は新しく入力された画像データ及びタグデータを紐付けて記録するので、格納部に収容されるデータ量を増加させて、新しく入力された画像データにタグを付与する際の精度を向上させることができる。
As another specific form of the automatic tag generation device described above, the storage unit records the tag data and the image data in association with each other.
If this is the case, the storage unit records the newly input image data and tag data in association with each other, so the amount of data stored in the storage unit is increased, and a tag is added to the newly input image data. The accuracy at the time of providing can be improved.
また、上述したような自動タグ生成装置を用いた自動タグ生成システムを本発明の１つである。 An automatic tag generation system using the automatic tag generation apparatus as described above is one aspect of the present invention.
本発明によれば、自動で画像データにタグ付けを行い、ユーザにかかる負担を減らす自動タグ生成装置及びそのシステムを提供することができる。 According to the present invention, it is possible to provide an automatic tag generation apparatus and system for automatically tagging image data and reducing the burden on the user.
本発明の自動タグ生成システムの一実施形態について以下、図面を参照しながら説明する。 An embodiment of an automatic tag generation system of the present invention will be described below with reference to the drawings.
本実施形態の自動タグ生成システム１は、図１に示すように、スマートフォン、タブレット端末、デジタルカメラ、パソコン、サーバ等の画像データを収容する外部機器２と、これら外部機器２から有線又は無線のネットワークを介して送られてくる画像データにタグデータを付加する自動タグ生成装置３とを具備する。 As shown in FIG. 1, the automatic tag generation system 1 of the present embodiment includes an external device 2 that stores image data such as a smartphone, a tablet terminal, a digital camera, a personal computer, and a server, and a wired or wireless connection from these external devices 2. And an automatic tag generation device 3 for adding tag data to image data sent via a network.
この自動タグ生成装置３は、構造的には、ＣＰＵ、内部メモリ、Ｉ／Ｏバッファ回路、ＡＤコンバータ等を有した所謂コンピュータ回路である。そして、内部メモリの所定領域に格納したプログラムに従って動作することで情報処理を行い、図２に示すように、受信部１０、特徴生成部４、格納部５、タグ生成部６、テキストデータ格納部５、第１補助生成部７、第２補助生成部８としての機能を発現するものである。 The automatic tag generation device 3 is a so-called computer circuit having a CPU, an internal memory, an I / O buffer circuit, an AD converter, and the like in terms of structure. Then, information processing is performed by operating according to a program stored in a predetermined area of the internal memory, and as shown in FIG. 2, a receiving unit 10, a feature generating unit 4, a storing unit 5, a tag generating unit 6, a text data storing unit 5. The function as the 1st auxiliary generation part 7 and the 2nd auxiliary generation part 8 is expressed.
各部について図２を用いて説明する。 Each part will be described with reference to FIG.
受信部１０は、外部機器２から有線又は無線のネットワークを介して送られてきた画像データを受け付ける。このとき、画像データに、外部機器２に内蔵されたクロックやＧＰＳによって取得された時間データや位置データ等の関連データや、ユーザが画像データに付与したユーザデータ等が紐付けられていた場合には、これらのデータも受け付ける。
そして、受信部１０が画像データ及び画像データに紐付けられたデータを受け付けるとともに、画像データと画像データに紐付けられたデータとを分けて、画像データを特徴生成部４へ送るとともに、画像データに紐付けられたデータを第２補助生成部８へと送る。
The receiving unit 10 receives image data transmitted from the external device 2 via a wired or wireless network. At this time, when the image data is associated with related data such as time data or position data acquired by a clock or GPS built in the external device 2 or user data attached to the image data by the user. Also accepts these data.
The receiving unit 10 receives the image data and the data associated with the image data, separates the image data and the data associated with the image data, sends the image data to the feature generation unit 4, and the image data The data linked to is sent to the second auxiliary generator 8.
特徴生成部４は、受信部１０から送られた画像データを受け付けて、この画像データの特徴を示す特徴データを生成するものである。具体的には画像データの解析を行うことにとって特徴点を抽出し、この特徴点から特徴記述子と呼ばれる特徴データを生成して、特徴データと画像データとをタグ生成部６に送る。この特徴点を抽出する方法としては、例えばクラスタリング分析が用いられている。 The feature generation unit 4 receives the image data sent from the reception unit 10 and generates feature data indicating the feature of the image data. Specifically, for analyzing image data, feature points are extracted, feature data called feature descriptors are generated from the feature points, and the feature data and image data are sent to the tag generator 6. As a method for extracting the feature points, for example, clustering analysis is used.
ところで、画像データ内に複数の物体が写り込んでいると、認識対象となる物体が多くなり特徴点を誤って抽出するおそれがある。しかし、本実施形態では、認識対象となる物体があると推定される所定領域（以下、関心領域ともいう）を絞りこんで、この関心領域から特徴点を抽出し特徴データを生成している。この関心領域を絞り込む方法としては、ＨＯＧ（Ｈｉｓｔｏｇｒａｍ ｏｆ ｏｒｉｅｎｔｅｄ Ｇｒａｄｉｅｎｔ）特徴量やｗａｖｅｌｅｔ特徴量等の所定の特徴量を用いることができる。このＨＯＧ特徴量とは、画像データを微分等して得られるヒストグラムを特徴量として用いて関心領域を絞り込むものであり、ｗａｖｅｌｅｔ特徴量とは、画像データの輝度データの空間分布の差異を特徴量として検出し、特徴点の出現頻度を縦横方向のヒストグラムとし、特徴点の集中している部分を関心領域として、絞りこむものである。 By the way, when a plurality of objects are reflected in the image data, there are many objects to be recognized, and there is a possibility that feature points are extracted by mistake. However, in this embodiment, a predetermined region (hereinafter also referred to as a region of interest) where it is estimated that there is an object to be recognized is narrowed down, feature points are extracted from this region of interest, and feature data is generated. As a method of narrowing down the region of interest, a predetermined feature amount such as a HOG (Histogram of Oriented Gradient) feature amount or a wavelet feature amount can be used. The HOG feature value is a feature that uses a histogram obtained by differentiating image data as a feature value to narrow down a region of interest, and a wavelet feature value is a difference in spatial distribution of luminance data of image data. The frequency of appearance of feature points is set as a histogram in the vertical and horizontal directions, and the portion where the feature points are concentrated is narrowed down as a region of interest.
そのため、画像データが示す画像の中に複数の物体が写り込んでいたとしても、画像データのうち、所定の物体が写っている画像を示す関連領域から特徴データを生成することができるので、格納部５から抽出する蓄積タグデータの精度を上げて、より適確に画像データを表示するタグデータを生成することができる。
また、ＨＯＧ特徴量やｗａｖｅｌｅｔ特徴量等の所定の特徴量を用いて、関連領域を絞りこむので、ユーザが画像データを確認して所定領域を絞りこむ必要がなく、ユーザにかかる負担を低減することができる。
Therefore, even if a plurality of objects appear in the image indicated by the image data, the feature data can be generated from the related area indicating the image in which the predetermined object is reflected in the image data. The tag data for displaying the image data more accurately can be generated by increasing the accuracy of the accumulated tag data extracted from the unit 5.
In addition, since a related area is narrowed down using a predetermined feature amount such as a HOG feature amount or wavelet feature amount, the user does not need to check the image data to narrow down the predetermined region, and the burden on the user is reduced. be able to.
格納部５は、過去に蓄積された蓄積画像データ及び蓄積画像データを表示する蓄積タグデータを紐付けて記録するものであり、本実施形態では、蓄積画像データ及び蓄積タグデータに加えて、蓄積画像データの特徴を示す蓄積特徴データもこれらのデータに紐付けられて記録されている。また、蓄積画像データ、蓄積タグデータ及び蓄積特徴データは、１つの格納領域にセットで記録されているものである。 The storage unit 5 records the accumulated image data accumulated in the past and the accumulated tag data for displaying the accumulated image data in association with each other, and in this embodiment, in addition to the accumulated image data and the accumulated tag data, the accumulated image data is accumulated. Accumulated feature data indicating the features of the image data is also recorded in association with these data. The stored image data, the stored tag data, and the stored feature data are recorded as a set in one storage area.
タグ生成部６は、特徴生成部４から送られてきた特徴データを受け付けて、この特徴データと同一又は類似の特徴を示す蓄積画像データに紐付けられた蓄積タグデータを格納部５から抽出し、この蓄積タグデータを用いて画像データを表示するタグデータを生成する。そして、このタグデータを画像データに付与するとともに、画像データと、タグデータと、特徴データとを第１補助生成部７へと送る。 The tag generation unit 6 receives the feature data sent from the feature generation unit 4, and extracts accumulated tag data associated with accumulated image data showing the same or similar feature as the feature data from the storage unit 5. The accumulated tag data is used to generate tag data for displaying image data. The tag data is added to the image data, and the image data, the tag data, and the feature data are sent to the first auxiliary generation unit 7.
タグ生成部６の動作について詳細に説明する。
タグ生成部６は、特徴生成部４が生成した入力された画像データの特徴を示す特徴データを受け付けると、この特徴データと同一又は類似する蓄積特徴データ、及びこの蓄積特徴データに紐付けて記録されている蓄積画像データ及び蓄積タグデータをセットで格納部５から抽出する。このとき、特徴データと同一又は類似する蓄積特徴データが複数あれば、格納部５からは複数のセットが抽出されることになる。
The operation of the tag generator 6 will be described in detail.
When the tag generation unit 6 receives the feature data indicating the feature of the input image data generated by the feature generation unit 4, the tag generation unit 6 records the feature data that is the same as or similar to the feature data, and the stored feature data. The stored stored image data and stored tag data are extracted from the storage unit 5 as a set. At this time, if there are a plurality of accumulated feature data identical or similar to the feature data, a plurality of sets are extracted from the storage unit 5.
そして、抽出したセットに収容されている蓄積タグデータを用いてタグデータを生成する。このとき、蓄積タグデータが１つしかなければ、その蓄積タグデータがタグデータとなり、蓄積タグデータが複数あれば、これら複数の蓄積タグデータに共通するデータがタグデータとなる。 And tag data is produced | generated using the accumulation | storage tag data accommodated in the extracted set. At this time, if there is only one accumulated tag data, the accumulated tag data becomes tag data, and if there are a plurality of accumulated tag data, data common to the plurality of accumulated tag data becomes tag data.
具体例を用いて説明する。
図３に示すように、タグ生成部６が抽出したセット１、２、３があり、この３つのセットにはそれぞれ蓄積タグデータが含まれている。これら蓄積タグデータ１、２、３を比較すると、「金閣寺」というテキストデータが共通している。そこで、タグ生成部６は、この「金閣寺」というテキストデータをタグデータとして生成し、画像データに付与する。
This will be described using a specific example.
As shown in FIG. 3, there are sets 1, 2, and 3 extracted by the tag generator 6, and the three sets each contain accumulated tag data. When these accumulated tag data 1, 2, and 3 are compared, the text data “Kinkakuji” is common. Therefore, the tag generation unit 6 generates the text data “Kinkakuji” as tag data and assigns it to the image data.
テキストデータ格納部５は、複数のテキストデータが格納されたものであり、自動タグ生成装置３に収容されたものであってもよいし、自動タグ生成装置３と例えば有線又は無線のネットワークを介して、サーバに収容されたものであってもよい。 The text data storage unit 5 stores a plurality of text data, and may be accommodated in the automatic tag generator 3 or may be connected to the automatic tag generator 3 via, for example, a wired or wireless network. Or may be accommodated in a server.
第１補助生成部７は、タグ生成部６から送られてきた画像データと、タグデータと、特徴データとを受け付ける。そして、このタグデータを用いて、テキストデータ格納部５をテキストマイニングし、得られたテキストデータからタグデータに関連する第１補助タグデータを生成する。そして、画像データに第１補助タグデータを付与して、画像データと、タグデータ及び第１補助タグデータと、特徴データとを第２補助生成部８へと送る。 The first auxiliary generation unit 7 receives the image data, tag data, and feature data sent from the tag generation unit 6. Then, the text data storage unit 5 is text mined using the tag data, and first auxiliary tag data related to the tag data is generated from the obtained text data. Then, the first auxiliary tag data is added to the image data, and the image data, the tag data, the first auxiliary tag data, and the feature data are sent to the second auxiliary generation unit 8.
第２補助生成部８は、第１補助生成部７から送られてきた画像データと、タグデータ及び第１補助タグデータと、特徴データとを受け付けるとともに、受信部１０から送られてきた画像データに紐付けられたデータを受け付ける。
そして、第２補助生成部８は、画像データに紐付けられたデータ、すなわち、画像データに予め関連付けられた関連データ又はユーザが画像データに付与したユーザデータの少なくとも１つをタグデータに関連する第２補助タグデータとして画像データに付与する。
The second auxiliary generation unit 8 accepts the image data sent from the first auxiliary generation unit 7, the tag data, the first auxiliary tag data, and the feature data, and the image data sent from the receiving unit 10. The data associated with is accepted.
The second auxiliary generation unit 8 associates at least one of data associated with the image data, that is, related data associated in advance with the image data or user data provided to the image data by the user with the tag data. It is added to the image data as second auxiliary tag data.
この関連データとは、例えば外部機器２に内蔵されているクロックやＧＰＳ等によって、画像データに関連付けられた時間データや位置データのことである。また、ユーザデータとは、ユーザ自らが画像データに付与したデータに加えて、ユーザが画像データをＷｅｂ上にアップロードした場合に、この画像データに対してＷｅｂの管理者が付与したデータのことも含む。 The related data is time data or position data associated with image data by a clock, GPS, or the like built in the external device 2, for example. User data refers to data provided by a Web administrator to image data when the user uploads the image data on the Web in addition to the data provided by the user himself / herself to the image data. Including.
第２補助生成部８は、画像データと、タグデータ、第１補助タグデータ及び第２補助タグデータと、特徴データとを格納部５へと送る。格納部５は、これらのデータを紐付けて記録して蓄積する。そのため、格納部５に記録された画像データと、タグデータ、第１補助タグデータ及び第２補助タグデータと、特徴データとは、格納部５に記録された時点から、画像データが蓄積画像データとなり、タグデータ、第１補助タグデータ及び第２補助タグデータが蓄積タグデータとなり、特徴データが蓄積特徴データとなる。そのため、格納部５に収容されるデータ量を増加させることができるので、新しく入力された画像データにタグを付与する際の精度を向上させることができる。 The second auxiliary generation unit 8 sends the image data, tag data, first auxiliary tag data, second auxiliary tag data, and feature data to the storage unit 5. The storage unit 5 records and accumulates these data in association with each other. Therefore, the image data recorded in the storage unit 5, the tag data, the first auxiliary tag data, the second auxiliary tag data, and the feature data are stored in the accumulated image data from the time when the image data is recorded in the storage unit 5. Thus, the tag data, the first auxiliary tag data, and the second auxiliary tag data become accumulated tag data, and the feature data becomes accumulated feature data. Therefore, since the amount of data accommodated in the storage unit 5 can be increased, the accuracy when a tag is added to newly input image data can be improved.
上述のタグ生成部６、第１補助生成部７及び第２補助生成部８を経てタグが生成された画像データのイメージ図を図４に示す。
図４に示すように、画像データには、タグ生成部６において生成された「富士山」というタグデータ、第１補助生成部７において生成された「逆さ富士」という第１補助タグデータ、第２補助生成部８において生成された「２０１４／９／８、河口湖、中秋の名月」という第２補助タグデータが付与されている。
なお、第２補助タグデータは、外部装置２が内蔵されたクロック及びＧＰＳを用いて画像データに予め関連付けた「２０１４／９／８」及び「河口湖」という関連データ、及び、ユーザが自ら生成した「中秋の名月」というユーザデータからなるものである。
FIG. 4 shows an image diagram of image data in which a tag is generated through the tag generation unit 6, the first auxiliary generation unit 7, and the second auxiliary generation unit 8.
As shown in FIG. 4, the image data includes tag data “Mt. Fuji” generated by the tag generator 6, first auxiliary tag data “inverted Fuji” generated by the first auxiliary generator 7, and second The second auxiliary tag data “2014/9/8, Lake Kawaguchi, famous moon in middle autumn” generated in the auxiliary generation unit 8 is given.
The second auxiliary tag data is generated by the user himself / herself with related data “2014/9/8” and “Lake Kawaguchi” that are associated with the image data in advance using the clock and GPS with which the external device 2 is built. It consists of user data “Mid-Autumn Famous Moon”.
上述したように構成した自動タグ生成システム１は、以下のような格別の効果を有する。 The automatic tag generation system 1 configured as described above has the following special effects.
つまり、タグ生成部６が格納部５から抽出した蓄積タグデータを用いてタグデータを生成するので、タグ生成にユーザが関与せずに自動で画像データにタグデータを付与することができる。そのため、タグデータを生成する際にユーザにかかる負担を減らすことができる。 That is, since the tag generation unit 6 generates the tag data using the accumulated tag data extracted from the storage unit 5, the tag data can be automatically added to the image data without involving the user in the tag generation. Therefore, it is possible to reduce the burden on the user when generating tag data.
このとき、タグ生成部６が、格納部５から複数の蓄積タグデータを抽出し、これら複数の蓄積タグデータに共通するデータをタグデータとして画像データに付与するので、タグデータの精度を上げることができる。 At this time, the tag generation unit 6 extracts a plurality of accumulated tag data from the storage unit 5 and assigns data common to the plurality of accumulated tag data to the image data as tag data, thereby increasing the accuracy of the tag data. Can do.
また、第１補助生成部７が、テキストマイニングによって得られたテキストデータからタグデータに関連する第１補助タグデータを生成するとともに、第２補助生成部８が、画像データに予め関連付けられた関連データやユーザデータから第２補助タグデータを生成するので、画像データにタグデータ及び第１補助タグデータ及び／又は第２補助タグデータからなる複数のタグデータを付与することができる。そのため、画像データの検索のヒット数を上げて、画像データをより容易に検索することができる。 In addition, the first auxiliary generation unit 7 generates first auxiliary tag data related to the tag data from the text data obtained by text mining, and the second auxiliary generation unit 8 relates in advance to the image data. Since the second auxiliary tag data is generated from the data and the user data, a plurality of tag data including the tag data and the first auxiliary tag data and / or the second auxiliary tag data can be added to the image data. Therefore, the image data can be searched more easily by increasing the number of hits for searching the image data.
なお、本発明は上記実施形態に限られたものではない。 The present invention is not limited to the above embodiment.
上記実施形態では、格納部がタグ生成部、第１補助生成部、第２補助生成部でそれぞれ画像データに付加したタグデータ、第１補助タグデータ、第２補助タグデータを蓄積タグデータとして記録しているが、蓄積タグデータは、タグデータだけで構成されていてもよいし、タグデータ及び第１補助タグデータ又は第２補助タグデータのいずれか一方とで構成されたものであってもよい。 In the above embodiment, the storage unit records the tag data, the first auxiliary tag data, and the second auxiliary tag data added to the image data by the tag generation unit, the first auxiliary generation unit, and the second auxiliary generation unit, respectively, as accumulated tag data. However, the accumulated tag data may be composed only of the tag data, or may be composed of either the tag data and the first auxiliary tag data or the second auxiliary tag data. Good.
また、格納部は蓄積画像データ、蓄積タグデータ及び蓄積特徴データを１セットとして記録するものであったが、蓄積画像データ及び蓄積タグデータのみを記録するものであってもよい。
この場合、タグ生成部は、格納部に記録されている全ての蓄積画像データを抽出し、全ての蓄積画像データに蓄積特徴データを生成するとともに、この蓄積特徴データと特徴データとを比較して、特徴データに同一又は類似する蓄積特徴データを有する蓄積画像データに紐付けられた蓄積タグデータを抽出する。
Further, the storage unit records the accumulated image data, the accumulated tag data, and the accumulated feature data as one set. However, the storage unit may record only the accumulated image data and the accumulated tag data.
In this case, the tag generation unit extracts all accumulated image data recorded in the storage unit, generates accumulated feature data for all accumulated image data, and compares the accumulated feature data with the feature data. The storage tag data associated with the storage image data having the storage feature data identical or similar to the feature data is extracted.
上述した実施形態では、第１補助生成部が、テキストデータ格納部をテキストマイニングして得たテキストデータを、タグデータに関連する第１補助タグデータとして付与するものであったが、このテキストデータからユーザが所望のデータのみを選択し、選択されたデータのみを第１補助タグデータとしてもよい。なお、第２補助生成部においても、画像データに関連付けられたデータのうち、ユーザが所望するデータのみを選択し、選択されたデータのみを第２補助タグデータとしてもよい。 In the embodiment described above, the first auxiliary generation unit gives the text data obtained by text mining the text data storage unit as the first auxiliary tag data related to the tag data. The user may select only desired data, and only the selected data may be used as the first auxiliary tag data. The second auxiliary generation unit may also select only the data desired by the user from the data associated with the image data, and use only the selected data as the second auxiliary tag data.
上述した実施形態では、格納部に生成したタグデータ、第１補助タグデータ及び第２補助タグデータを画像データに紐付けて記録するものであったが、これらのデータを、外部装置２に有線又は無線を介して送信し、外部装置において、これらのタグデータを画像データに紐つけて記録するように構成してもよい。このとき、外部装置２に送信するデータは、タグデータのみ、あるいは、タグデータと第１補助タグデータ又は第２補助タグデータの何れか一方であっても構わない。 In the embodiment described above, the tag data, the first auxiliary tag data, and the second auxiliary tag data generated in the storage unit are recorded in association with the image data. However, these data are wired to the external device 2. Alternatively, the tag data may be transmitted via wireless and recorded in the external device in association with the tag data. At this time, the data transmitted to the external device 2 may be only the tag data, or may be any one of the tag data and the first auxiliary tag data or the second auxiliary tag data.
本発明は、その趣旨に反しない範囲で様々な変形が可能である。 The present invention can be variously modified without departing from the spirit of the present invention.
１・・・自動タグ生成システム
３・・・自動タグ生成装置
４・・・特徴生成部
５・・・格納部
６・・・タグ生成部
DESCRIPTION OF SYMBOLS 1 ... Automatic tag generation system 3 ... Automatic tag generation apparatus 4 ... Feature generation part 5 ... Storage part 6 ... Tag generation part
Claims (8)
入力された画像データの特徴を示す特徴データを生成する特徴生成部と、
前記特徴データと同一又は類似の特徴を有する前記蓄積画像データに紐付けられた前記蓄積タグデータを前記格納部から抽出し、この前記蓄積タグデータを用いて前記画像データを表示するタグデータを生成するタグ生成部とを具備する自動タグ生成装置。 A storage unit that records and stores accumulated image data accumulated in the past and accumulated tag data that displays the accumulated image data;
A feature generation unit that generates feature data indicating the characteristics of the input image data;
The accumulated tag data associated with the accumulated image data having the same or similar characteristics as the feature data is extracted from the storage unit, and tag data for displaying the image data is generated using the accumulated tag data An automatic tag generation device comprising a tag generation unit that performs the above operation.
An automatic tag generation system comprising the automatic tag generation device according to claim 1, 2, 3, 4, 5, 6 or 7.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014187748A JP2016062162A (en) | 2014-09-16 | 2014-09-16 | Automatic tag generator, automatic tag generator system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014187748A JP2016062162A (en) | 2014-09-16 | 2014-09-16 | Automatic tag generator, automatic tag generator system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2016062162A true JP2016062162A (en) | 2016-04-25 |
Family
ID=55797911
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014187748A Pending JP2016062162A (en) | 2014-09-16 | 2014-09-16 | Automatic tag generator, automatic tag generator system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2016062162A (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2025154934A1 (en) * | 2024-01-16 | 2025-07-24 | 삼성전자주식회사 | Electronic device, method, and non-transitory computer-readable recording medium for assigning tag to content |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001229382A (en) * | 2000-02-17 | 2001-08-24 | Nippon Telegr & Teleph Corp <Ntt> | Information storage device, information search device, information storage method, information search method, and recording medium recording these methods |
| JP2009064148A (en) * | 2007-09-05 | 2009-03-26 | Seiko Epson Corp | Information processing apparatus, control method for information processing apparatus, and control program |
| JP2009217742A (en) * | 2008-03-12 | 2009-09-24 | Fujifilm Corp | Metadata attachment method, device, and metadata attachment program |
| JP2010067014A (en) * | 2008-09-11 | 2010-03-25 | Ricoh Co Ltd | Image classification device and image classification method |
| US20100080470A1 (en) * | 2008-09-30 | 2010-04-01 | International Business Machines Corporation | Tagging images by determining a set of similar pre-tagged images and extracting prominent tags from that set |
| JP2010218372A (en) * | 2009-03-18 | 2010-09-30 | Olympus Corp | Server system, terminal device, program, information storage medium, and image retrieval method |
| US20120158686A1 (en) * | 2010-12-17 | 2012-06-21 | Microsoft Corporation | Image Tag Refinement |
| US20130024329A1 (en) * | 2006-09-29 | 2013-01-24 | Apple Inc. | User supplied and refined tags |
-
2014
- 2014-09-16 JP JP2014187748A patent/JP2016062162A/en active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001229382A (en) * | 2000-02-17 | 2001-08-24 | Nippon Telegr & Teleph Corp <Ntt> | Information storage device, information search device, information storage method, information search method, and recording medium recording these methods |
| US20130024329A1 (en) * | 2006-09-29 | 2013-01-24 | Apple Inc. | User supplied and refined tags |
| JP2009064148A (en) * | 2007-09-05 | 2009-03-26 | Seiko Epson Corp | Information processing apparatus, control method for information processing apparatus, and control program |
| JP2009217742A (en) * | 2008-03-12 | 2009-09-24 | Fujifilm Corp | Metadata attachment method, device, and metadata attachment program |
| JP2010067014A (en) * | 2008-09-11 | 2010-03-25 | Ricoh Co Ltd | Image classification device and image classification method |
| US20100080470A1 (en) * | 2008-09-30 | 2010-04-01 | International Business Machines Corporation | Tagging images by determining a set of similar pre-tagged images and extracting prominent tags from that set |
| JP2010218372A (en) * | 2009-03-18 | 2010-09-30 | Olympus Corp | Server system, terminal device, program, information storage medium, and image retrieval method |
| US20120158686A1 (en) * | 2010-12-17 | 2012-06-21 | Microsoft Corporation | Image Tag Refinement |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2025154934A1 (en) * | 2024-01-16 | 2025-07-24 | 삼성전자주식회사 | Electronic device, method, and non-transitory computer-readable recording medium for assigning tag to content |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9972113B2 (en) | Computer-readable recording medium having stored therein album producing program, album producing method, and album producing device for generating an album using captured images | |
| JP6168996B2 (en) | Content control method, content control apparatus, and program | |
| US20160335493A1 (en) | Method, apparatus, and non-transitory computer-readable storage medium for matching text to images | |
| US10769216B2 (en) | Data acquisition method, data acquisition apparatus, and recording medium | |
| US20190164078A1 (en) | Information processing system, information processing method, and recording medium | |
| US20160196453A1 (en) | Data securing device, recording medium, and data securing method | |
| US10210431B2 (en) | Image processing device, image processing method and recording medium | |
| US9977793B2 (en) | Information processing system, information processing method, and information processing apparatus | |
| US10645345B2 (en) | System and method of video capture and search optimization | |
| JP2016062162A (en) | Automatic tag generator, automatic tag generator system | |
| US20150286687A1 (en) | Information processing apparatus, information processing method, and recording medium | |
| CN111949819B (en) | Method and device for pushing video | |
| KR101376596B1 (en) | System and method for searching images | |
| JP2015060421A (en) | Similar image search method, and similar image search device | |
| JP6195815B2 (en) | Touching information providing device, touching information providing method, and touching information providing program | |
| CN114416256A (en) | Information processing method, information processing device, electronic equipment and storage medium | |
| JP6348916B2 (en) | Data processing method, data processing apparatus, and data processing program | |
| US20150264268A1 (en) | Display control apparatus, control method, and storage medium | |
| JP7011447B2 (en) | Information processing equipment and programs | |
| JP2017028407A (en) | Program, device and method for imaging instruction | |
| JP2015144724A (en) | In-game graphic recognition system and in-game graphic recognition program | |
| JP6420162B2 (en) | Image search device, image search method, and image search program | |
| JP6165595B2 (en) | Form identification system | |
| JP7553501B2 (en) | Information processing device, information processing method, and program | |
| US20180101582A1 (en) | System and method for providing a visual scroll representation of production data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170831 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180605 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180619 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180816 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190115 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190820 |