JP7416237B2 - 処理装置、処理方法及びプログラム - Google Patents

Description

本発明は、処理装置、処理方法及びプログラムに関する。

特許文献１は、冷蔵庫の内部を撮影した時系列な画像群各々内の食材を認識し、認識結果に基づき食材の移動の有無を判断し、移動していない期間が閾値を超えた食材は放置品と判断して警告を行う技術を開示している。

特開２０１６－５７０２２号公報

事故回避等の目的で、商品に販売期限を設ける店舗がある。このような店舗においては、販売期限を過ぎた商品や販売期限間近の商品等を店員が把握する手段が必要となる。例えば、各商品に賞味期限や消費期限等の各種情報を印字したラベルが付与される場合、陳列されている商品各々のラベルを確認する手段が利用できる。しかし、コロッケ、焼き鳥等のような個包装されていな総菜や生鮮食品などの商品においては、ラベルを付与できない場合がある。また、陳列されている商品各々のラベルを確認する作業は、非常に手間である。特許文献１は、このような店舗での課題及び解決手段を開示していない。

本発明は、陳列されている商品各々の販売期限の状況を把握するための技術を提供することを課題とする。

本発明によれば、
陳列領域を含む複数の時系列な画像を取得する取得手段と、
複数の時系列な前記画像各々から商品を検出する商品検出手段と、
互いに異なる前記画像から検出された商品の同一性を判断する同一性判断手段と、
前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理する陳列時間管理手段と、
検出された商品各々の前記陳列時間に関する情報を出力する出力手段と、
を有する処理装置が提供される。

また、本発明によれば、
コンピュータが、
陳列領域を含む複数の時系列な画像を取得し、
複数の時系列な前記画像各々から商品を検出し、
互いに異なる前記画像から検出された商品の同一性を判断し、
前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理し、
検出された商品各々の前記陳列時間に関する情報を出力する処理方法が提供される。

また、本発明によれば、
コンピュータを、
陳列領域を含む複数の時系列な画像を取得する取得手段、
複数の時系列な前記画像各々から商品を検出する商品検出手段、
互いに異なる前記画像から検出された商品の同一性を判断する同一性判断手段、
前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理する陳列時間管理手段、
検出された商品各々の前記陳列時間に関する情報を出力する出力手段、
として機能させるプログラムが提供される。

本発明によれば、陳列されている商品各々の販売期限の状況を把握するための技術が実現される。

本実施形態の処理装置のハードウエア構成の一例を示す図である。 本実施形態の処理装置の機能ブロック図の一例である。 本実施形態の処理装置が処理する情報の一例を示す図である。 本実施形態の処理装置の処理の流れの一例を示すフローチャートである。 本実施形態の処理装置が出力する画像の一例を示す図である。 本実施形態の処理装置が処理する情報の一例を示す図である。 本実施形態の処理装置が出力する画像の一例を示す図である。

「前提事項」
本実施形態の処理装置を利用する店舗では、少なくとも一部の商品の販売期限が、その商品の陳列時間（陳列されている時間）に基づき定められる。具体的には、陳列時間が上限値を超えたタイミングが販売期限となる。

陳列時間に基づき販売期限を管理される少なくとも一部の商品は、例えばコロッケ、焼き鳥等のようなラベルを付与できない商品であってもよいし、ラベルを付与できる商品であってもよい。また、当該商品は、例えば食品であるがこれに限定されず、家電製品や文房具のようなその他の商品であってもよい。

販売期限を過ぎた商品又は販売期限間近の商品は、陳列棚から回収されたり、値引き販売されたりする。

「概要」
本実施形態の処理装置は、商品の陳列領域を含む複数の時系列な画像各々から商品を検出すると、互いに異なる画像から検出された商品の同一性を判断し、検出結果及び同一性の判断結果に基づき、陳列領域に陳列されている商品各々の陳列時間を管理する。そして、処理装置は、陳列されている商品各々の陳列時間に関する情報を出力する。

店員は、処理装置が出力した情報に基づき、陳列されている商品各々の販売期限の状況、すなわち「販売期限を過ぎているか否か」や「販売期限間近か否か」等を把握することができる。

「ハードウエア構成」
次に、処理装置のハードウエア構成の一例を説明する。処理装置の各機能部は、任意のコンピュータのＣＰＵ（Central Processing Unit）、メモリ、メモリにロードされるプログラム、そのプログラムを格納するハードディスク等の記憶ユニット（あらかじめ装置を出荷する段階から格納されているプログラムのほか、ＣＤ（Compact Disc）等の記憶媒体やインターネット上のサーバ等からダウンロードされたプログラムをも格納できる）、ネットワーク接続用インターフェイスを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。

図１は、処理装置のハードウエア構成を例示するブロック図である。図１に示すように、処理装置は、プロセッサ１Ａ、メモリ２Ａ、入出力インターフェイス３Ａ、周辺回路４Ａ、バス５Ａを有する。周辺回路４Ａには、様々なモジュールが含まれる。処理装置は周辺回路４Ａを有さなくてもよい。なお、処理装置は物理的及び／又は論理的に分かれた複数の装置で構成されてもよいし、物理的及び／又は論理的に一体となった１つの装置で構成されてもよい。処理装置が物理的及び／又は論理的に分かれた複数の装置で構成される場合、複数の装置各々が上記ハードウエア構成を備えることができる。

バス５Ａは、プロセッサ１Ａ、メモリ２Ａ、周辺回路４Ａ及び入出力インターフェイス３Ａが相互にデータを送受信するためのデータ伝送路である。プロセッサ１Ａは、例えばＣＰＵ、ＧＰＵ（Graphics Processing Unit）などの演算処理装置である。メモリ２Ａは、例えばＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）などのメモリである。入出力インターフェイス３Ａは、入力装置、外部装置、外部サーバ、外部センサー、カメラ等から情報を取得するためのインターフェイスや、出力装置、外部装置、外部サーバ等に情報を出力するためのインターフェイスなどを含む。入力装置は、例えばキーボード、マウス、マイク、物理ボタン、タッチパネル等である。出力装置は、例えばディスプレイ、スピーカ、プリンター、メーラ等である。プロセッサ１Ａは、各モジュールに指令を出し、それらの演算結果をもとに演算を行うことができる。

「機能構成」
図２に、処理装置１０の機能ブロック図の一例を示す。図示するように、処理装置１０は、取得部１１と、商品検出部１２と、同一性判断部１３と、陳列時間管理部１４と、出力部１５とを有する。

取得部１１は、陳列領域を含む複数の時系列な画像を取得する。陳列領域は、商品が陳列される領域であり、例えば商品陳列棚等により実現される。処理装置１０を利用する店舗では、陳列領域に陳列された商品（好ましくは、陳列領域に陳列されたすべての商品）を撮影する位置及び向きでカメラが設置される。

カメラは動画像を常時（例えば、営業時間中）撮影してもよいし、動画像のフレーム間隔よりも大きい時間間隔で静止画像を継続的に撮影してもよい。取得部１１は、このようなカメラが生成した画像を取得する。

商品検出部１２は、時系列な複数の画像各々から商品を検出する。そして、商品検出部１２は、検出結果として、検出した商品毎に、画像内の位置を示す位置情報（以下、「商品位置情報」）、及び、商品識別情報（商品コード、商品名等）を出力する。

商品の検出は、周知のあらゆる商品認識技術を利用して実現することができる。例えば、商品検出部１２は、周知の物体検出技術を用いて、画像内の物体領域（物体が存在する領域）を検出する。商品検出部１２は、物体及びその周辺を含む領域（例えば矩形領域）を、物体領域として検出してもよい。その他、商品検出部１２は、物体のみが存在する物体の輪郭に沿った形状の領域を、物体領域として検出してもよい。後者は、例えば、セマンティックセグメンテーションやインスタンスセグメンテーションと呼ばれる検出対象が存在するピクセル領域を検出する手法を利用して実現することができる。

そして、商品検出部１２は、周知の商品認識技術（特徴点マッチング、ディープラーニング等）を用いて、物体領域の画像に含まれる商品を認識する。

商品位置情報は、例えば画像上に設定された二次元座標系の座標で示される。商品位置情報は、画像内の一点で示されてもよいし、画像内の一部を占める領域で示されてもよい。例えば、商品位置情報は、上記物体領域の代表点（中心、重心等）を示す情報であってもよいし、上記物体領域（画像内の一部領域）を示す情報であってもよい。

同一性判断部１３は、互いに異なる画像から検出された商品の同一性を判断する。すなわち、同一性判断部１３は、第１の画像から検出された商品と、第２の画像から検出された商品とが同一か否かを判断する。ここでの同一は、同一の個体であることを意味する。すなわち、商品識別情報が一致していても、異なる個体である場合、ここでの同一に該当しない。以下、同一性を判断する処理の例を説明する。

＜判断例１＞
同一性判断部１３は、互いに異なる画像各々から検出された商品の画像内の位置に基づき、商品の同一性を判断することができる。複数の画像各々から検出された商品の画像内の位置が同じか又はその差が閾値以内である場合、複数の画像各々から検出された商品は同一の商品と判断することができる。この例の場合、画像生成タイミング（撮影タイミング）の差が基準時間以下の２つの画像が、同一性判断の処理対象（上記第１の画像及び第２の画像）となる。基準時間は設計的事項であるが、ある程度小さい値となる。

商品位置情報が画像内の一点で示されている場合、同一性判断部１３は、「点間の距離が閾値以下」を、同一の商品と判断する条件としてもよい。また、商品位置情報が画像内の一部領域で占めされている場合、同一性判断部１３は、「互いに重なる領域が、各々の商品位置情報が示す領域の基準割合以上を占める」を、同一の商品と判断する条件としてもよい。ここで例示した同一の商品と判断する条件はあくまで一例であり、これに限定されない。

なお、同一性判断部１３は、「上述の条件を満たし、かつ、商品識別情報が一致すること」を、同一の商品と判断する条件としてもよい。

＜判断例２＞
同一性判断部１３は、互いに異なる画像各々から検出された商品の外観の特徴量（形状、大きさ、色等）に基づき、商品の同一性を判断することができる。同一種類（商品識別情報が一致）であっても、商品の外観に個体差が現れる場合がある。同一性判断部１３は、このような外観の個体差に基づき、商品の同一性を判断することができる。

陳列時間管理部１４は、商品検出部１２による検出結果と、同一性判断部１３による同一性の判断結果とに基づき、商品検出部１２により検出された商品各々の陳列時間を管理する。

例えば、陳列時間管理部１４は、画像から検出された商品の中の、時系列順がそれ以前の画像から検出された商品のいずれとも同一と判断されなかった商品を、新たに陳列領域に陳列された商品として陳列時間の管理を開始することができる。また、陳列時間管理部１４は、画像から検出された商品の中の、それ以降の画像から検出された商品のいずれとも同一と判断されなかった商品の陳列時間の管理を終了することができる。

ここで、図３及び図４を用いて、陳列時間管理部１４による処理の具体例を説明する。まず、陳列時間管理部１４は、図３に示すような陳列時間管理情報を管理している。図示する陳列時間管理情報は、通番と、商品識別情報と、商品位置情報と、陳列開始時刻とを互いに紐付けている。通番は、陳列時間理情報で管理されている商品を互いに識別するための情報である。商品識別情報は、陳列時間理情報で管理されている商品の商品識別情報である。商品位置情報は、陳列時間理情報で管理されている商品各々の最新の商品位置情報である。陳列開始時刻は、陳列時間理情報で管理されている商品各々の陳列が開始された時刻である。なお、陳列開始時刻に代えて、陳列開始日時や陳列開始日等としてもよい。

図４に示すように、商品検出部１２が第１の画像から商品を検出すると（Ｓ１０）、同一性判断部１３は検出された商品各々の商品位置情報と、図３に示すような陳列時間管理情報で管理されている商品各々の商品位置情報とに基づき、第１の画像から検出された商品各々と、陳列時間管理情報で管理されている商品との同一性を判断する（Ｓ１１）。

そして、陳列時間管理部１４は、第１の画像から検出された商品の中に、陳列時間管理情報で管理されている商品いずれとも同一と判断されない商品が存在する場合（Ｓ１２のＹｅｓ）、その商品の陳列時間の管理を開始する（Ｓ１３）。具体的には、陳列時間管理部１４は、新たな通番に紐付けて、その商品の商品識別情報及び商品位置情報を登録するとともに、第１の画像の生成タイミング（撮影タイミング）またはその近辺のタイミングを、陳列開始時刻として登録する。

なお、Ｓ１１の判断タイミングにおいて、陳列時間管理情報で管理されている商品がない場合、陳列時間管理部１４は、第１の画像から検出された商品の中に、陳列時間管理情報で管理されている商品いずれとも同一と判断されない商品が存在すると判断し（Ｓ１２のＹｅｓ）、第１の画像から検出されたすべての商品の陳列時間の管理を開始することとなる（Ｓ１３）。

一方、第１の画像から検出された商品の中に、陳列時間管理情報で管理されている商品いずれとも同一と判断されない商品が存在しない場合（Ｓ１２のＮｏ）、陳列時間管理部１４は、Ｓ１３の処理を実行しない。

また、陳列時間管理部１４は、陳列時間管理情報で管理されている商品の中に、第１の画像から検出された商品いずれとも同一と判断されない商品が存在する場合（Ｓ１４のＹｅｓ）、その商品の陳列時間の管理を終了する（Ｓ１５）。例えば、陳列時間管理部１４は、その商品の情報を陳列時間管理情報から削除してもよい。その他、陳列時間管理部１４は、その商品に紐付けて陳列時間の管理が終了した旨を示す情報を登録してもよい。

なお、上述した「陳列時間の管理が終了した旨を示す情報」は、第１の画像の生成タイミング（撮影タイミング）またはその近辺のタイミングを示す時間情報又は日時情報であってもよい。このような情報を登録することにより、複数の商品各々の陳列開始時刻及び陳列終了時刻を記録することができる。そして、当該情報をマーケティング等で利用することができる。

一方、陳列時間管理情報で管理されている商品の中に、第１の画像から検出された商品いずれとも同一と判断されない商品が存在しない場合（Ｓ１４のＮｏ）、陳列時間管理部１４は、Ｓ１５の処理を実行しない。

また、陳列時間管理部１４は、陳列時間管理情報で管理されている商品の中に、第１の画像から検出された商品のいずれかと同一と判断される商品が存在する場合（Ｓ１６のＹｅｓ）、陳列時間管理情報で管理されているその商品の商品位置情報を、第１の画像から検出されたその商品の商品位置情報に更新する（Ｓ１７）。

一方、陳列時間管理情報で管理されている商品の中に、第１の画像から検出された商品のいずれかと同一と判断される商品が存在しない場合（Ｓ１６のＮｏ）、陳列時間管理部１４は、Ｓ１７の処理を実行しない。

なお、Ｓ１２、Ｓ１４及びＳ１６の判断順は図示する例に限定されない。

図２に戻り、出力部１５は、商品検出部１２により検出された商品各々の陳列時間に関する情報を出力する。例えば、出力部１５は、取得部１１が取得した画像上に、当該画像から検出された商品各々に紐付けて、各々の陳列時間に関する情報を表示した加工画像を出力する。出力部１５は、処理装置１０に接続されたディスプレイ、投影装置、プリンター、メーラ等の出力装置を介して上記情報の出力を実現してもよいし、他の外部装置に上記情報を送信してもよい。以下、陳列時間に関する情報の例を説明する。

＜陳列時間に関する情報の例１＞
出力される「陳列時間に関する情報」は、「陳列時間の目安を示す情報」であってもよい。例えば、陳列時間は、「Ｍ１未満」、「Ｍ１以上Ｍ２未満」、「Ｍ２以上」等のように複数のグループに分けられる。なお、グループの数は２以上の任意の数である。そして、「陳列時間の目安を示す情報」は、各商品の現在の陳列時間がどのグループに属するかを示す情報となる。

図５に当該情報を表示した加工画像の一例を示す。図示する例では、商品検出部１２により検出された商品Ｐ各々に紐付けて枠Ｆを表示している。枠Ｆの表示位置は、例えば各商品Ｐの商品位置情報に基づき決定される。各商品Ｐの枠Ｆの表示態様（線の色、線の濃淡、線の種類等）は、各商品Ｐの陳列時間がいずれのグループに属するかに応じて変化する。予め、図６に示すような陳列時間に応じた枠Ｆの表示態様が定められており、それに応じた表示態様で各商品Ｐの枠Ｆが表示される。

なお、図６に示すような枠表示基準は、商品Ｐごとに異なってもよい。すなわち、枠表示基準のＭ１、Ｍ２の値は、商品Ｐごとに異なってもよい。また、図６に示す例では３つのグループに分かれているが、グループの数も商品Ｐごとに異なってもよい。

また、出力部１５は、陳列時間が上限値を超えた商品Ｐを強調表示してもよい。強調表示の手法は様々であるが、例えば該当する商品Ｐの枠Ｆを点滅させたり、所定の色（赤）で表示したりしてもよい。上限値は、商品Ｐごとに異なってもよい。

＜陳列時間に関する情報の例２＞
出力される「陳列時間に関する情報」は、「販売期限までの残時間の目安を示す情報」であってもよい。販売期限までの残時間（以下、単に「残時間」という場合がある）は、上述した上限値から陳列時間を引くことで算出される。例えば、残時間は、「Ｌ１未満」、「Ｌ１以上Ｌ２未満」、「Ｌ２以上」等のように複数のグループに分けられる。なお、グループの数は２以上の任意の数である。そして、「残時間の目安を示す情報」は、各商品の残時間がどのグループに属するかを示す情報となる。

図５に当該情報を表示した加工画像の一例を示す。図示する例では、商品検出部１２により検出された商品Ｐ各々に紐付けて枠Ｆを表示している。枠Ｆの表示位置は、例えば各商品Ｐの商品位置情報に基づき決定される。各商品Ｐの枠Ｆの表示態様（線の色、線の濃淡、線の種類等）は、各商品Ｐの残時間がいずれのグループに属するかに応じて変化する。予め、残時間に応じた枠Ｆの表示態様が定められており、それに応じた表示態様で各商品Ｐの枠Ｆが表示される。

なお、枠表示基準は、商品Ｐごとに異なってもよい。また、上記グループの数も商品Ｐごとに異なってもよい。また、出力部１５は、残時間が下限値を下回った商品Ｐを強調表示してもよい。強調表示の手法は様々であるが、例えば該当する商品Ｐの枠Ｆを点滅させたり、所定の色（赤）で表示したりしてもよい。

＜陳列時間に関する情報の例３＞
出力される「陳列時間に関する情報」は、「陳列時間」や「販売期限までの残時間」そのものであってもよい。図７に当該情報を表示した加工画像の一例を示す。枠Ｆに紐付いて表示されている数字が、「陳列時間」又は「販売期限までの残時間」を示す。「陳列時間」や「販売期限までの残時間」は、「月」、「日」、「時間」、「分」、「秒」等の任意の単位で示される。例えば、「１」が紐付いている商品は、陳列時間又は残時間が、「１カ月」、「１日」、「１時間」、「１分」又は「１秒」であることを示す。

なお、上記した例１乃至３において、枠Ｆを他のマークに変更してもよい。

＜陳列時間に関する情報の例４＞
当該例では、陳列時間管理部１４は、複数の陳列領域における商品各々の陳列時間を、陳列領域毎に管理する。そして、出力部１５は、陳列時間が報告基準値を超えた商品が存在する陳列領域識別情報を、陳列時間に関する情報として出力する。陳列領域識別情報は、複数の陳列領域を互いに識別する情報である。報告基準値は商品毎に異なってもよい。

「作用効果」
以上、本実施形態の処理装置１０によれば、陳列領域を含む複数の時系列な画像に基づき、陳列領域に陳列されている商品の陳列時間を管理することができる。そして、処理装置１０は、陳列されている商品各々の陳列時間に関する情報を出力することができる。店員は、処理装置１０が出力した情報に基づき、陳列されている商品各々の販売期限の状況、すなわち「販売期限を過ぎているか否か」や「販売期限間近か否か」等を把握することができる。

また、処理装置１０は、図５及び図７に示すように、陳列領域を含む画像上に、当該画像から検出された商品各々に紐付けて陳列時間を示す情報を表示した加工画像を出力することができる。このような加工画像によれば、店員は、直感的に陳列されている商品各々の販売状況を把握することができる。

なお、本明細書において、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置が他の装置や記憶媒体に格納されているデータを取りに行くこと（能動的な取得）」、たとえば、他の装置にリクエストまたは問い合わせして受信すること、他の装置や記憶媒体にアクセスして読み出すこと等、および、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置に他の装置から出力されるデータを入力すること（受動的な取得）」、たとえば、配信（または、送信、プッシュ通知等）されるデータを受信すること、また、受信したデータまたは情報の中から選択して取得すること、及び、「データを編集（テキスト化、データの並び替え、一部データの抽出、ファイル形式の変更等）などして新たなデータを生成し、当該新たなデータを取得すること」の少なくともいずれか一方を含む。

以上、実施形態（及び実施例）を参照して本願発明を説明したが、本願発明は上記実施形態（及び実施例）に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限定されない。
１． 陳列領域を含む複数の時系列な画像を取得する取得手段と、
複数の時系列な前記画像各々から商品を検出する商品検出手段と、
互いに異なる前記画像から検出された商品の同一性を判断する同一性判断手段と、
前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理する陳列時間管理手段と、
検出された商品各々の前記陳列時間に関する情報を出力する出力手段と、
を有する処理装置。
２． 前記出力手段は、前記画像上に、前記画像から検出された商品各々に紐付けて前記陳列時間を示す情報を表示した加工画像を出力する１に記載の処理装置。
３． 前記出力手段は、前記画像から検出された商品各々に紐付けて、前記陳列時間の長さに応じた情報を表示した前記加工画像を出力する２に記載の処理装置。
４． 前記出力手段は、前記陳列時間が上限値を超えた商品を強調表示する前記加工画像を出力する２に記載の処理装置。
５． 前記上限値は、商品毎に異なる４に記載の処理装置。
６． 前記同一性判断手段は、互いに異なる前記画像各々から検出された商品の前記画像内の位置に基づき、商品の同一性を判断する１から５のいずれか１項に記載の処理装置。
７． 前記陳列時間管理手段は、前記画像から検出された商品の中の、それ以前の前記画像から検出された商品のいずれとも同一と判断されなかった商品を、新たに前記陳列領域に陳列された商品として前記陳列時間の管理を開始する１から６のいずれかに記載の処理装置。
８． 前記陳列時間管理手段は、前記画像から検出された商品の中の、それ以降の前記画像から検出された商品のいずれとも同一と判断されなかった商品の前記陳列時間の管理を終了する１から７のいずれかに記載の処理装置。
９． コンピュータが、
陳列領域を含む複数の時系列な画像を取得し、
複数の時系列な前記画像各々から商品を検出し、
互いに異なる前記画像から検出された商品の同一性を判断し、
前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理し、
検出された商品各々の前記陳列時間に関する情報を出力する処理方法。
１０． コンピュータを、
陳列領域を含む複数の時系列な画像を取得する取得手段、
複数の時系列な前記画像各々から商品を検出する商品検出手段、
互いに異なる前記画像から検出された商品の同一性を判断する同一性判断手段、
前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理する陳列時間管理手段、
検出された商品各々の前記陳列時間に関する情報を出力する出力手段、
として機能させるプログラム。

Claims (10)

1. 陳列領域を含む複数の時系列な画像を取得する取得手段と、
   複数の時系列な前記画像各々から商品を検出する商品検出手段と、
   互いに異なる前記画像から検出された商品の同一性を判断する同一性判断手段と、
   前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理する陳列時間管理手段と、
   検出された商品各々の前記陳列時間に関する情報を出力する出力手段と、
   を有する処理装置。
2. 前記出力手段は、前記画像上に、前記画像から検出された商品各々に紐付けて前記陳列時間を示す情報を表示した加工画像を出力する請求項１に記載の処理装置。
3. 前記出力手段は、前記画像から検出された商品各々に紐付けて、前記陳列時間の長さに応じた情報を表示した前記加工画像を出力する請求項２に記載の処理装置。
4. 前記出力手段は、前記陳列時間が上限値を超えた商品を強調表示する前記加工画像を出力する請求項２に記載の処理装置。
5. 前記上限値は、商品毎に異なる請求項４に記載の処理装置。
6. 前記同一性判断手段は、互いに異なる前記画像各々から検出された商品の前記画像内の位置に基づき、商品の同一性を判断する請求項１から５のいずれか１項に記載の処理装置。
7. 前記陳列時間管理手段は、前記画像から検出された商品の中の、それ以前の前記画像から検出された商品のいずれとも同一と判断されなかった商品を、新たに前記陳列領域に陳列された商品として前記陳列時間の管理を開始する請求項１から６のいずれか１項に記載の処理装置。
8. 前記陳列時間管理手段は、前記画像から検出された商品の中の、それ以降の前記画像から検出された商品のいずれとも同一と判断されなかった商品の前記陳列時間の管理を終了する請求項１から７のいずれか１項に記載の処理装置。
9. コンピュータが、
   陳列領域を含む複数の時系列な画像を取得し、
   複数の時系列な前記画像各々から商品を検出し、
   互いに異なる前記画像から検出された商品の同一性を判断し、
   前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理し、
   検出された商品各々の前記陳列時間に関する情報を出力する処理方法。
10. コンピュータを、
    陳列領域を含む複数の時系列な画像を取得する取得手段、
    複数の時系列な前記画像各々から商品を検出する商品検出手段、
    互いに異なる前記画像から検出された商品の同一性を判断する同一性判断手段、
    前記検出結果と、前記同一性の判断結果とに基づき、検出された商品各々の陳列時間を管理する陳列時間管理手段、
    検出された商品各々の前記陳列時間に関する情報を出力する出力手段、
    として機能させるプログラム。

Images