[go: up one dir, main page]

JP2015041340A - 方法、電子機器およびプログラム - Google Patents

方法、電子機器およびプログラム Download PDF

Info

Publication number
JP2015041340A
JP2015041340A JP2013173393A JP2013173393A JP2015041340A JP 2015041340 A JP2015041340 A JP 2015041340A JP 2013173393 A JP2013173393 A JP 2013173393A JP 2013173393 A JP2013173393 A JP 2013173393A JP 2015041340 A JP2015041340 A JP 2015041340A
Authority
JP
Japan
Prior art keywords
image
related information
information
captured
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013173393A
Other languages
English (en)
Inventor
大介 平川
Daisuke Hirakawa
大介 平川
晃治 齊木
Koji Saiki
晃治 齊木
勇宇次 入本
Yuji Irimoto
勇宇次 入本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2013173393A priority Critical patent/JP2015041340A/ja
Priority to US14/185,031 priority patent/US9244944B2/en
Publication of JP2015041340A publication Critical patent/JP2015041340A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

【課題】一例として、ユーザが自分で登録した画像群のみを対象にして関連情報を抽出することが可能な方法を得る。
【解決手段】実施形態による方法は、一例として、複数の画像を記憶部に記憶し、複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を登録し、複数の画像の中の第1画像と、撮像部により撮像される第2画像とが互いに対応する場合に、第1画像の第1関連情報または第1関連情報により取得可能な情報を表示部に表示する。
【選択図】図8

Description

本発明の実施形態は、方法、電子機器およびプログラムに関する。
従来、web画像検索を行うことが可能なサーバに画像を送信することにより、送信した画像と同一または類似の画像に関連する関連情報をサーバから取得する技術が知られている。
特開2012−155362号公報
上記のような従来技術では、web画像検索技術が用いられているため、検索対象のデータベースが、関連情報の取得要求を行ったユーザによって変化することがない。このため、従来技術では、たとえばユーザが自分で撮像(登録)した画像群のみを対象にして関連情報を抽出することが困難であった。
実施形態による方法は、一例として、複数の画像を記憶部に記憶し、複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を登録し、複数の画像の中の第1画像と、撮像部により撮像される第2画像とが互いに対応する場合に、第1画像の第1関連情報または第1関連情報により取得可能な情報を表示部に表示する。
図1は、本実施形態によるタブレットコンピュータ(電子機器)の外観の一例を示した図である。 図2は、図1に示したタブレットコンピュータの内部構成の一例を示したブロック図である。 図3は、本実施形態によるタブレットコンピュータによって実行される関連情報表示プログラムの機能的な構成の一例を示したブロック図である。 図4は、本実施形態によるタブレットコンピュータによって関連情報表示プログラムが実行される際に表示部に表示される画面の遷移の一例を説明するための図である。 図5は、本実施形態によるタブレットコンピュータによって関連情報表示プログラムが実行される際に表示部に表示される画面の遷移の一例を説明するための図である。 図6は、本実施形態によるタブレットコンピュータによって関連情報表示プログラムが実行される際に表示部に表示される画面の遷移の一例を説明するための図である。 図7は、本実施形態によるタブレットコンピュータのカメラモジュールによって画像が撮像された際にCPUにより実行される処理フローの一例を示したフローチャートである。 図8は、本実施形態によるタブレットコンピュータの表示部に関連情報が表示される際にCPUにより実行される処理フローの一例を示したフローチャートである。 図9は、本実施形態の変形例によるタブレットコンピュータの表示部に関連情報が表示された状態の一例を示した図である。
以下、実施形態を図面に基づいて説明する。
まず、図1〜図4を参照して、本実施形態による電子機器の構成の一例について説明する。この電子機器は、タブレットコンピュータや、ノートブック型パーソナルコンピュータや、スマートフォンや、PDA(携帯情報端末)や、デジタルカメラなどの各種電子機器に内蔵される組み込みシステムとして実現されうる。以下では、この電子機器がタブレットコンピュータ10として実現されている場合について説明する。なお、タブレットコンピュータ10とは、タブレットまたはスマートコンピュータと称される携帯型の電子機器(情報処理装置)である。
図1に示すように、タブレットコンピュータ10は、本体部11と、表示部17とを備える。本体部11は、薄い箱型の筐体を有する。表示部17には、フラットパネルディスプレイと、フラットパネルディスプレイの画面上のペンまたは指の接触位置を検出するように構成されたセンサとが組み込まれている。
上記フラットパネルディスプレイとしては、たとえばLCD(液晶表示装置)17A(図2参照)が用いられる。また、上記センサとしては、たとえば静電容量式のタッチパネル17B(図2参照)が用いられる。なお、上記センサとしては、電磁誘導方式のデジタイザなどを用いることも可能である。また、図1には図示されていないが、本体部11の背面には、画像(写真)を撮像するためのカメラモジュール109(図2参照)が設けられている。
また、図2に示すように、タブレットコンピュータ10は、CPU101と、表示部17と、システムコントローラ102と、主メモリ103と、グラフィクスコントローラ104と、BIOS−ROM105と、不揮発性メモリ106と、無線通信デバイス107と、GPSユニット108と、カメラモジュール109を主として備える。なお、CPU101は、「記憶制御部」および「表示制御部」の一例である。また、不揮発性メモリ106およびカメラモジュール109は、それぞれ、「記憶部」および「撮像部」の一例である。
表示部17は、静止画や動画などの映像が表示されるLCD17Aと、タブレットコンピュータ10に対する各種操作(タッチ操作)を行うための操作部として機能するタッチパネル17Bとを有する。
また、CPU101は、タブレットコンピュータ10内の各種モジュールの動作を制御するように構成されている。このCPU101は、ストレージデバイスである不揮発性メモリ106から主メモリ103にロードされる各種ソフトウェアを実行するように構成されている。これらのソフトウェアには、OS(オペレーティングシステム)201や各種アプリケーションプログラムなどが含まれている。本実施形態では、アプリケーションプログラムとして、後述する関連情報表示プログラム202が含まれている。
また、CPU101は、BIOS−ROM105に格納された基本入出力システムプログラム(BIOSプログラム)も実行するように構成されている。なお、BIOSプログラムとは、ハードウェアの制御を行うためのプログラムである。
システムコントローラ102は、CPU101のローカルバスと各種コンポーネントとの間を接続するデバイスである。このシステムコントローラ102には、主メモリ103に対するアクセスを制御するためのメモリコントローラなどが内蔵されている。また、システムコントローラ102は、PCI EXPRESS(登録商標)などの規格に準拠したシリアルバスなどを介してグラフィクスコントローラ104との間の通信を実行する機能を有する。
グラフィクスコントローラ104は、タブレットコンピュータ10のディスプレイモニタとして用いられるLCD17Aを制御する表示コントローラである。LCD17Aは、グラフィクスコントローラ104から入力される表示信号に基づいて画面イメージ(静止画や動画などの映像)を表示するように構成されている。
なお、無線通信デバイス107は、無線LANまたは3G移動通信などの無線通信を実行するためのデバイスである。また、GPSユニット108は、人工衛星を利用して現在位置を測定するためのデバイスである。また、カメラモジュール109は、画像(写真)を撮像するためのデバイスである。
ここで、本実施形態では、不揮発性メモリ106は、画像(第1画像)と、この第1画像に関連する関連情報とを互いに対応付けて登録(記憶)することが可能なように構成されている。なお、第1画像は、カメラモジュール109によって撮像された画像であってもよいし、ネットワークを介してダウンロードされた画像であってもよい。
関連情報とは、たとえば第1画像が有する特徴である。より具体的には、関連情報とは、第1画像が撮像された日時や、第1画像が撮像された場所や、第1画像に映っている対象物(人物)に関する情報などである。このような関連情報は、ユーザの手動の入力操作に基づいて不揮発性メモリ106に登録される場合もあるし、CPU101の自動制御に基づいて不揮発性メモリ106に登録される場合もある。本実施形態では、一例として、CPU101は、不揮発性メモリ106に記憶された複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を自動で登録するように構成されている。すなわち、CPU101は、カメラモジュール109により第1画像が撮像された場合に、第1画像の関連情報(第1画像が有する特徴など)を自動的に抽出し、抽出した関連情報を第1画像と対応付けて不揮発性メモリ106に登録する制御を行うように構成されている。このように構成すれば、ユーザが関連情報を手動で入力するひつよう作業負担を軽減することができる。なお、画像の特徴を抽出する手法については、後述する。
ここで、関連情報は、第1画像が有する特徴に制限されるものではなく、第1画像に関連する情報であればよい。したがって、たとえばユーザが第1画像をウェブログなどのwebページにアップロードした場合には、そのアップロード先のアドレス情報(URLなど)が第1画像に対応する関連情報として不揮発性メモリ106に登録されてもよい。たとえば、ユーザがwebサーバにアクセスしてウェブログ(webページ)の更新を行う際には、タブレットコンピュータ10の無線通信デバイス107は、そのwebサーバに第1画像を送信する。そして、タブレットコンピュータ10は、第1画像と、第1画像のアップロード先であるウェブログのURLなどのアドレス情報とを互いに対応付けて不揮発性メモリ106に登録する。
なお、関連情報は、第1画像が撮像された場所の具体的な説明が示されたwebページなどであってもよい。このように、本実施形態では、タブレットコンピュータ10とは異なる外部機器に記憶されているデータを関連情報として第1画像に対応付けることもできる。
さらに、関連情報は、第1画像が有する特徴や、第1画像のアップロード先のアドレス情報などのテキストデータに制限されるものではなく、音楽データなどのバイナリデータであってもよい。したがって、たとえば第1画像が撮像された場所で聞いた音楽が第1画像に対応する関連情報として不揮発性メモリ106に登録されてもよい。
このように、本実施形態によれば、ユーザが日常で頻繁に画像を撮像する場合に、撮像した画像を種々の関連情報と対応付けることができるので、ユーザの生活・行い・体験をタブレットコンピュータ10により一括して記録・管理することができる。これにより、画像を用いたいわゆるライフログサービスを実現することができる。
本実施形態では、CPU101は、不揮発性メモリ106に記憶された複数の画像の中の第1画像と、カメラモジュール109により撮像される第2画像とが互いに対応する場合に、第1画像の関連情報(第1関連情報)、または、この第1関連情報により取得可能な情報を表示部17に表示する制御を行うように構成されている。より具体的には、CPU101は、ユーザが対象物に向けてカメラモジュール109をかざすことによって対象物の画像がカメラモジュール109を介して取得された場合に、その対象物の画像(第2画像)と同一または類似の画像(第1画像)に対応する関連情報を不揮発性メモリ106から抽出し、抽出した関連情報を表示部17に表示する制御を行うように構成されている。なお、第2画像と同一または類似の第1画像とは、所定値以上の一致率で特徴が第2画像と一致する第1画像のことであり、たとえば、第2画像と同じ日時に撮像された第1画像や、第2画像と同じ場所で撮像された画像や、第2画像と同じ対象物(人物)が写っている第1画像などである。
本実施形態では、一例として、図4に示すような第2画像IM11がカメラモジュール109を介して取得された場合、CPU101は、第2画像IM11を含む画像IM1を表示部17に表示する制御を行うように構成されている。この図4に示した画像IM1には、第2画像IM11の背景画像として、第2画像IM11と同一または類似の複数(6個)の第1画像IM12〜IM17と、これら6個の第1画像IM12〜IM17にそれぞれ対応する6個の関連情報(「aaa」〜「fff」という文字列)とがテキストデータとして表示されている。
すなわち、本実施形態では、図4に示すように、CPU101は、カメラモジュール109を介して第2画像IM11が取得された場合、第2画像IM11を表示部17に表示する制御と平行して、第2画像IM11と同一または類似の第1画像IM12〜IM17の関連情報を不揮発性メモリ106から抽出し、抽出した関連情報とともに第1画像IM12〜IM17を表示部17に表示する制御を行うことが可能なように構成されている。
また、本実施形態では、CPU101は、上記図4に示した画像IM1から第2画像IM11を消去した画像IM2(図5参照)を表示部17に表示させることとも可能なように構成されている。すなわち、本実施形態では、図5に示すように、CPU101は、第1画像IM12〜IM17と、これらの第1画像IM12〜IM17にそれぞれ対応する関連情報(「aaa」〜「fff」という文字列)とのみが表示された画像IM2を表示部17に表示する制御を行うことも可能なように構成されている。
なお、表示部17に表示された関連情報が第1画像のアップロード先のwebページのアドレス情報である場合には、上記図4に示した画像IM1や図5に示した画像IM2上に関連情報として表示される文字列(「aaa」〜「fff」という文字列)は、上記webページのURLなどのアドレス情報になる。そして、ユーザは、関連情報として表示されたアドレス情報を選択する操作を行うことによって、そのアドレス情報で示されるwebページにアクセスすることができる。この場合、たとえば図6に示すように、第1画像IM12のアップロード先のwebページや、第1画像IM12の説明などが示されたwebページなどを含む画像IM3が表示部17に表示される。
ここで、上記図4〜図6では、第2画像IM11と、第1画像IM12〜IM17とが、「山が写っている」という点において互いに共通した特徴を有している例を示したが、本実施形態はこれに限らない。本実施形態では、第2画像IM11と、第1画像IM12〜IM17とが、「同一人物が写っている」という点において互いに共通した特徴を有していてもよい。この場合、タブレットコンピュータ10は、不揮発性メモリ106や、外部のクラウドサーバなどに記憶された複数の画像(第1画像)の中から、人物の顔が映っている第1画像を抽出する。そして、タブレットコンピュータ10は、抽出した第1画像から顔の特徴を抽出し、抽出した顔の特徴を関連情報として登録する。
このような構成においては、タブレットコンピュータ10は、ユーザがカメラモジュール109をかざすことにより取得した第2画像に人物が写っている場合に、その第2画像に写っている人物の顔の特徴を抽出する。そして、タブレットコンピュータ10は、第2画像に移っている人物の顔の特徴と、上記において関連情報として登録した第1画像に写っている人物の顔の特徴とのマッチングをとり、それらの特徴が互いに対応関係にあるか否かを判定する。すなわち、タブレットコンピュータ10は、第2画像に写っている人物と第1画像に写っている人物とが同一人物であるか否かを判定する。そして、タブレットコンピュータ10は、不揮発性メモリ107などに記憶された複数の第1画像を、同一人物が写っているか否かに基づいてグループ化する。そして、タブレットコンピュータ10は、第2画像に写っている人物と同一人物が写っている第1画像のグループ化を表示部17に一覧表示する。
なお、関連情報が第1画像に対応付けられた音楽などのバイナリデータの場合には、上記図4に示した画像IM1や図5に示した画像IM2上に関連情報として表示される文字列(「aaa」〜「fff」という文字列)は、上記バイナリデータを表すファイル名になる。そして、ユーザは、関連情報として表示されたファイル名を選択する操作を行うことによって、そのファイル名に対応するバイナリデータ(たとえば音楽データ)を視聴できる。
また、上記図4および図5に示した例では、関連情報として「aaa」〜「fff」という文字列が表示された例を示したが、本実施形態は、関連情報がwebページであって、かつ、そのwebページのキャッシュなどがタブレットコンピュータ10に記憶されている場合において、そのキャッシュなどから生成されたサムネイル画像が関連情報として表示されるような構成であってもよい。
ここで、上記のようなCPU101の処理は、不揮発性メモリ106に記憶された関連情報表示プログラム202(図3参照)に基づいて行われる。図3に示すように、関連情報表示プログラム202は、画像取得部51と、特徴抽出部52と、比較部53と、関連情報出力部54と、表示制御部55とを主として備える。
画像取得部51は、ユーザが対象物に向けてカメラモジュール109をかざした場合に、その対象物の画像(第2画像)を取得する機能を有する。また、特徴抽出部52は、画像取得部51により取得された第2画像の特徴を抽出する機能を有する。この特徴抽出部52は、第2画像の特徴が抽出される際のみならず、過去に不揮発性メモリ106に登録された第1画像(カメラモジュール109によって実際に撮像された画像など)の特徴が抽出される際にも用いられる。なお、画像の特徴を抽出する手法としては、たとえば、領域ベースエッジ画像認識技術に基づく特徴検出や、HOG(Histograms of Oriented Gradients)などの特徴量に基づく特徴検出などが挙げられる。これらの手法を用いることにより、たとえばQRコード(登録商標)のような特殊な情報が付加されていない画像に対しても特徴検出を行うことができる。
また、比較部53は、画像取得部51により取得された第2画像の特徴と、不揮発性メモリ106に登録された全ての第1画像の特徴とをそれぞれ比較して、所定値以上の一致率で特徴が第2画像と一致する第1画像を不揮発性メモリ106から抽出する機能を有する。また、関連情報出力部54は、比較部53により抽出された第1画像(所定値以上の一致率で特徴が第2画像と一致する第1画像)に対応する関連情報を不揮発性メモリ106から読み出して出力する機能を有する。また、表示制御部55は、関連情報出力部54により出力された関連情報を表示部17に表示させるようにグラフィクスコントローラ104を制御する機能を有する。
次に、図7を参照して、本実施形態によるタブレットコンピュータ10のカメラモジュール109によって画像(第1画像)が撮像された際にCPU101により実行される処理フローの一例について説明する。
この処理フローでは、まず、図7に示すように、ステップS1において、カメラモジュール109によって撮像された第1画像の特徴を抽出する処理が実行され、ステップS2に進む。
次に、ステップS2において、上記ステップS1の処理により抽出された特徴を関連情報として、この関連情報を第1画像と対応付けて不揮発性メモリ106に登録(記憶)する処理が実行される。なお、このとき、ユーザが手動で関連情報を入力するのを受け付けて、入力された関連情報を第1画像と対応付けて不揮発性メモリ106に登録する処理が実行されてもよい。これにより、第1画像と関連情報とが互いに対応付けられた状態で不揮発性メモリ106に登録され、処理が終了する。
次に、図8を参照して、本実施形態によるタブレットコンピュータ10の表示部17に関連情報が表示される際にCPU101により実行される処理フローの一例について説明する。この処理フローは、ユーザが対象物に向けてカメラモジュール109をかざすことによって対象物の画像(第2画像)がカメラモジュール109を介して取得された場合に開始する。
この処理フローでは、まず、図8に示すように、ステップS11において、カメラモジュール109を介して取得された第2画像の特徴を抽出する処理が実行され、ステップS12に進む。
次に、ステップS12において、第2画像と同一または類似の第1画像を不揮発性メモリ106から抽出する処理が実行される。具体的には、上記ステップS11の処理により抽出された第2画像の特徴と、上記ステップS2(図7参照)の処理により不揮発性メモリ106に登録された全ての第1画像の特徴とをそれぞれ比較して、所定値以上の一致率で特徴が第2画像と一致する第1画像を不揮発性メモリ106から抽出する処理が実行される。
なお、上記ステップS12の処理は、所定値以上の一致率で特徴が第2画像と一致する第1画像が見つからなかった場合に上記ステップS11の処理(第2画像に対する特徴抽出処理)に戻るように設定されていてもよい。また、上記ステップS12の処理は、所定値以上の一致率で特徴が第2画像と一致する第1画像の個数が表示部17に表示可能な数を超えた場合に、閾値となる一致率を大きくして、第1画像の個数をさらに絞り込むように設定されていてもよい。
上記のようなステップS12の処理が実行された後には、ステップS13に進む。そして、ステップS13において、上記ステップS12の処理により抽出された第1画像の関連情報を算出する処理が実行される。すなわち、不揮発性メモリ106には、第1画像と、第1画像に関連する関連情報とが互いに対応付けられて登録されているため、このステップS13では、不揮発性メモリ106が参照されることにより、上記ステップS12の処理により抽出された第1画像の関連情報が算出される。そして、ステップS14に進む。
次に、ステップS14において、上記ステップS13の処理により算出された関連情報を表示部17に表示する処理が実行される。これにより、上記図4に示したような画像IM1や、上記図5に示したような画像IM2などが表示部17に表示される。そして、処理が終了する。
以上説明したように、本実施形態では、タブレットコンピュータ10に、第1画像および関連情報が互いに対応付けられて登録される不揮発性メモリ106と、カメラモジュール109を介して取得された第2画像と同一または類似の第1画像に対応する関連情報を不揮発性メモリ106から抽出し、抽出した関連情報を表示部17に表示する制御を行うCPU101とが設けられている。すなわち、CPU101は、不揮発性メモリ106に記憶された複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を登録するとともに、複数の画像の中の第1画像と、カメラモジュール109により撮像される第2画像とが互いに対応する場合に、第1画像の関連情報(第1関連情報)、または、この第1関連情報により取得可能な情報を表示部17に表示する制御を行うように構成されている。これにより、ユーザが自分で登録した画像群(不揮発性メモリ106に記憶された第1画像の群)のみを対象にして関連情報を抽出することができる。
なお、上記実施形態によるタブレットコンピュータ(電子機器)10は、通常のコンピュータを利用したハードウェア構成となっており、タブレットコンピュータ10のCPU101により実行されるプログラム(関連情報表示プログラム202)は、ROMやRAMなどからなる不揮発性メモリ106に格納されている。そして、このプログラムは、インストール可能な形式または実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD(Digital Versatile Disk)などの、コンピュータで読み取り可能な記録媒体に記録された状態で提供される。上記プログラムは、インターネットなどのネットワークに接続されたコンピュータ上に格納され、ネットワーク経由で提供または配布されるように構成されていてもよい。また、上記プログラムは、ROMなどに予め組み込まれた状態で提供されるように構成されていてもよい。
以上、本発明の実施形態を説明したが、上記実施形態はあくまで一例であって、発明の範囲を限定することは意図していない。上記実施形態は、様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上記実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
たとえば、上記実施形態では、第1画像と関連情報とがそれぞれ6個ずつ表示部に表示される例を示したが、表示部に表示される第1画像および関連情報の個数は、7個以上であってもよいし、5個以下であってもよい。
また、上記実施形態では、第1画像(およびその関連情報)が表示部に表示される際のUI(ユーザインターフェース)として、カメラモジュールを介して取得された第2画像と同一または類似の第1画像(およびその関連情報)が第2画像の背景画像として表示部に表示される例(図4参照)や、第2画像が表示されずに第1画像(およびその関連情報)のみが表示部にされる例(図5参照)を示したが、他の実施形態として、第1画像と第2画像との両方が表示部上に一覧表示されるようなUIを用いてもよい。すなわち、図9に示したタブレットコンピュータ20のように、第2画像IM11と、第1画像IM12〜IM15およびこれらの第1画像IM12〜IM14にそれぞれ対応する関連情報(「aaa」〜「ddd」という文字列)とが一覧表示された画像IM4が表示部17に表示されるようなUIを用いてもよい。
また、上記実施形態では、第1画像が有する特徴(第1画像が撮像された日時や、第1画像が撮像された場所など)や、第1画像のアップロード先のアドレス情報を関連情報として表示部に表示させる例を示したが、他の実施形態として、第1画像が撮像された場所を示す地図の画像や、第1画像に含まれる商品の広告webサイトなどを関連情報として表示部に表示させることも可能である。
10、20 タブレットコンピュータ(電子機器)
17 表示部
101 CPU(制御部)
106 不揮発性メモリ(記憶部)
109 カメラモジュール(撮像部)

Claims (15)

  1. 複数の画像を記憶部に記憶し、
    前記複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を登録し、
    前記複数の画像の中の第1画像と、撮像部により撮像される第2画像とが互いに対応する場合に、前記第1画像の第1関連情報または前記第1関連情報により取得可能な情報を表示部に表示する、方法。
  2. 前記第1関連情報は、前記第1画像のアップロード先であるwebページのアドレス情報に関する情報である、請求項1に記載の方法。
  3. 前記第1関連情報は、前記第1画像の少なくとも一部が有する特徴に関する情報である、請求項1に記載の方法。
  4. 前記第1関連情報は、前記第1画像が撮像された日時、または、前記第1画像が撮像された場所のうちいずれか1以上に関する情報である、請求項3に記載の方法。
  5. 前記第1関連情報が前記第1画像に対して登録されるタイミングは、前記第1画像が前記撮像部により撮像されて前記記憶部に記憶されるタイミングよりも後である、請求項1〜4のいずれか1項に記載の方法。
  6. 記憶部に記憶された複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を登録する記憶制御部と、
    前記複数の画像の中の第1画像と、撮像部により撮像される第2画像とが互いに対応する場合に、前記第1画像の第1関連情報または前記第1関連情報により取得可能な情報を表示部に表示する表示制御部とを備える、電子機器。
  7. 前記第1関連情報は、前記第1画像のアップロード先であるwebページのアドレス情報に関する情報である、請求項6に記載の電子機器。
  8. 前記第1関連情報は、前記第1画像の少なくとも一部が有する特徴に関する情報である、請求項6に記載の電子機器。
  9. 前記第1関連情報は、前記第1画像が撮像された日時、または、前記第1画像が撮像された場所のうちいずれか1以上に関する情報である、請求項8に記載の電子機器。
  10. 前記第1関連情報が前記第1画像に対して登録されるタイミングは、前記第1画像が前記撮像部により撮像されて前記記憶部に記憶されるタイミングよりも後である、請求項6〜9のいずれか1項に記載の電子機器。
  11. 複数の画像を記憶部に記憶することと、
    前記複数の画像のうち少なくとも1以上の画像に対して、その画像に関連する関連情報を登録することと、
    前記複数の画像の中の第1画像と、撮像部により撮像される第2画像とが互いに対応する場合に、前記第1画像の第1関連情報または前記第1関連情報により取得可能な情報を表示部に表示することとをコンピュータに実行させるための、プログラム。
  12. 前記第1関連情報は、前記第1画像のアップロード先であるwebページのアドレス情報に関する情報である、請求項11に記載のプログラム。
  13. 前記第1関連情報は、前記第1画像の少なくとも一部が有する特徴に関する情報である、請求項11に記載のプログラム。
  14. 前記第1関連情報は、前記第1画像が撮像された日時、または、前記第1画像が撮像された場所のうちいずれか1以上に関する情報である、請求項13に記載のプログラム。
  15. 前記第1関連情報が前記第1画像に対して登録されるタイミングは、前記第1画像が前記撮像部により撮像されて前記記憶部に記憶されるタイミングよりも後である、請求項11〜14のいずれか1項に記載のプログラム。
JP2013173393A 2013-08-23 2013-08-23 方法、電子機器およびプログラム Pending JP2015041340A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013173393A JP2015041340A (ja) 2013-08-23 2013-08-23 方法、電子機器およびプログラム
US14/185,031 US9244944B2 (en) 2013-08-23 2014-02-20 Method, electronic device, and computer program product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013173393A JP2015041340A (ja) 2013-08-23 2013-08-23 方法、電子機器およびプログラム

Publications (1)

Publication Number Publication Date
JP2015041340A true JP2015041340A (ja) 2015-03-02

Family

ID=50235893

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013173393A Pending JP2015041340A (ja) 2013-08-23 2013-08-23 方法、電子機器およびプログラム

Country Status (2)

Country Link
US (1) US9244944B2 (ja)
JP (1) JP2015041340A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2024015212A (ja) * 2018-04-03 2024-02-01 株式会社Mixi 情報処理装置、探索履歴記憶方法及び探索履歴記憶プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1091634A (ja) * 1996-08-15 1998-04-10 Hewlett Packard Co <Hp> 写真画像検索システム
JPH10289243A (ja) * 1997-04-14 1998-10-27 Casio Comput Co Ltd データ検索システム
JP2012156640A (ja) * 2011-01-24 2012-08-16 Olympus Imaging Corp 画像表示装置及び撮影装置
WO2013099472A1 (ja) * 2011-12-27 2013-07-04 ソニー株式会社 サーバ、クライアント端末、システム、および記録媒体

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6345274B1 (en) * 1998-06-29 2002-02-05 Eastman Kodak Company Method and computer program product for subjective image content similarity-based retrieval
US6353823B1 (en) * 1999-03-08 2002-03-05 Intel Corporation Method and system for using associative metadata
JP2001045257A (ja) 1999-07-23 2001-02-16 Fuji Photo Film Co Ltd 画像処理装置、画像処理方法、及び記録媒体
JP4017790B2 (ja) 1999-08-10 2007-12-05 富士フイルム株式会社 画像処理装置、画像処理方法、及び記録媒体
JP4069841B2 (ja) 2003-09-26 2008-04-02 ノーリツ鋼機株式会社 写真処理装置
US7702681B2 (en) 2005-06-29 2010-04-20 Microsoft Corporation Query-by-image search and retrieval system
US8024343B2 (en) * 2006-04-07 2011-09-20 Eastman Kodak Company Identifying unique objects in multiple image collections
US20070244925A1 (en) 2006-04-12 2007-10-18 Jean-Francois Albouze Intelligent image searching
US8086600B2 (en) * 2006-12-07 2011-12-27 Google Inc. Interleaving search results
US20080208791A1 (en) 2007-02-27 2008-08-28 Madirakshi Das Retrieving images based on an example image
WO2010075430A1 (en) * 2008-12-24 2010-07-01 Strands, Inc. Sporting event image capture, processing and publication
US20110211737A1 (en) * 2010-03-01 2011-09-01 Microsoft Corporation Event Matching in Social Networks
JP5014494B2 (ja) 2011-01-21 2012-08-29 パナソニック株式会社 情報処理装置、拡張現実感システム、情報処理方法、及び情報処理プログラム
US20120213404A1 (en) 2011-02-18 2012-08-23 Google Inc. Automatic event recognition and cross-user photo clustering
GB2495978A (en) 2011-10-28 2013-05-01 Maurizio Pilu Smartphone application
JP2013235553A (ja) * 2012-04-13 2013-11-21 Hitachi Solutions Ltd 情報提供システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1091634A (ja) * 1996-08-15 1998-04-10 Hewlett Packard Co <Hp> 写真画像検索システム
JPH10289243A (ja) * 1997-04-14 1998-10-27 Casio Comput Co Ltd データ検索システム
JP2012156640A (ja) * 2011-01-24 2012-08-16 Olympus Imaging Corp 画像表示装置及び撮影装置
WO2013099472A1 (ja) * 2011-12-27 2013-07-04 ソニー株式会社 サーバ、クライアント端末、システム、および記録媒体

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2024015212A (ja) * 2018-04-03 2024-02-01 株式会社Mixi 情報処理装置、探索履歴記憶方法及び探索履歴記憶プログラム
JP7719391B2 (ja) 2018-04-03 2025-08-06 株式会社Mixi 情報処理装置、探索履歴記憶方法及び探索履歴記憶プログラム

Also Published As

Publication number Publication date
US9244944B2 (en) 2016-01-26
US20150055891A1 (en) 2015-02-26

Similar Documents

Publication Publication Date Title
US11822600B2 (en) Content tagging
US20240346069A1 (en) Recognizing text in image data
CN103995889B (zh) 图片分类方法及装置
US9111255B2 (en) Methods, apparatuses and computer program products for determining shared friends of individuals
KR102257826B1 (ko) 상황 로컬 이미지 인식 데이터세트
CN107633066B (zh) 一种信息展示方法、装置、电子设备及存储介质
CN109189879B (zh) 电子书籍显示方法及装置
CN106777007A (zh) 相册分类优化方法、装置及移动终端
WO2016101757A1 (zh) 一种基于移动设备的图片处理方法和装置
CN106934376A (zh) 一种图像识别方法、装置及移动终端
KR102380979B1 (ko) 이미지의 메타데이터 관리 방법 및 장치
WO2016199662A1 (ja) 画像情報処理システム
WO2019105457A1 (zh) 图像处理方法、计算机设备和计算机可读存储介质
CN108781252B (zh) 一种图像拍摄方法及装置
CN103092946A (zh) 终端批量图片选择的方法及系统
CN103455642B (zh) 一种多媒体文件检索的方法和装置
CN104536990B (zh) 一种图片显示方法及终端
US10185724B2 (en) Method for sorting media content and electronic device implementing same
JP6419969B2 (ja) 画像の提示情報を提供するための方法及び機器
US10877641B2 (en) Image adjustment method, apparatus, device and computer readable storage medium
CN106919326A (zh) 一种图片搜索方法及装置
JP6085067B2 (ja) ユーザデータ更新方法、装置、プログラム、及び記録媒体
JP2015041340A (ja) 方法、電子機器およびプログラム
CN109242763B (zh) 图片处理方法、图片处理装置、终端设备
CN120612735B (zh) 数据生成方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20151102

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160610

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170203

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170328

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170704

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180123