JP2012029164A - 携帯端末及び装置管理方法 - Google Patents

Abstract

【課題】画像形成装置などの被管理装置の状態を直感的に把握でき、操作性を改善することができる携帯端末及び装置管理方法の提供。
【解決手段】表示部を備える携帯端末であって、自端末の位置を特定する位置特定部と、自端末の方向を特定する方向特定部と、予め記憶した１又は複数の被管理装置の位置情報に基づいて、自端末から所定の距離範囲内、かつ、自端末の特定の方向に存在する所定の被管理装置を特定し、当該所定の被管理装置の状態を示すステータス情報を取得して前記表示部に表示させる制御部と、を備えるものであり、更に、自端末の前記特定の方向を撮像する撮像部を備え、前記制御部は、前記撮像部が撮像した前記所定の被管理装置の画像に前記ステータス情報を合成した画像を前記表示部に表示させる。
【選択図】図５

Description

本発明は、携帯端末及び装置管理方法に関し、特に、位置及び方向を特定する機能を備えた携帯端末及び当該携帯端末を用いた画像形成装置の状態表示、操作方法に関する。

コピー機能やプリント機能、スキャン機能などを備えた画像形成装置（ＭＦＰ：Multi Function Peripheral）が普及しており、会社等では、複数の画像形成装置をネットワークに接続して、ユーザが選択した画像形成装置から印刷物を出力している。

このようなシステムにおいて、ユーザが印刷を指示した画像形成装置が他のユーザに使用されている場合には、他のユーザのジョブが終了するまで印刷が待たされることになることから、ユーザはジョブを送信する前に、どの画像形成装置がジョブの処理中であり、どの画像形成装置が印刷可能な状態であるかを確認する必要があるが、従来は、ユーザが画像形成装置のパネルが見える場所まで移動してパネルの表示を確認しなければならず、面倒であった。

また、PageScope WebConnectionのようにＷＥＢブラウザを使用してリモートで画像形成装置の状態を表示する方法もあるが、この方法では、接続ＵＲＬ（Uniform Resource Locator）として画像形成装置のＩＰ（Internet Protocol）アドレスが必要であり、複数の画像形成装置の状態を一度に知りたい場合などは、一つ一つの画像形成装置にアクセスして見て回る必要があり、簡便に画像形成装置の状態を確認することができない。

また、別の方法として、下記特許文献１には、サーバ装置と無線を介して通信可能な携帯端末装置から送信されたデータに基づいて画像形成装置により画像を形成する画像形成処理システムであって、前記サーバ装置は、前記携帯端末装置からの要求に応じて、当該携帯端末装置の近辺に存在するネットワーク上の画像形成装置を検索する検索手段と、前記検索手段により見つけられた画像形成装置の所在位置を示した地図画像を表示するための前記携帯端末により閲覧可能なデータを生成する生成手段と、前記生成手段により生成されたデータを識別するための識別情報を前記携帯端末に対して通知する通知手段と、前記識別情報が示すデータへのアクセス要求に対応して、前記生成手段により生成されたデータを前記携帯端末装置に向けて送信する送信手段とを有し、前記地図画像の中で示されている画像形成装置の中から前記携帯端末装置において指定された画像形成装置により画像が形成される画像形成処理システムが開示されている。

特開２００４−２３４２１８９号公報

上記特許文献１の方法は、携帯端末に画像形成装置の所在位置を示した地図画像を表示する方法であり、データを送信する携帯端末とその周囲の画像形成装置との位置関係を把握することは可能であるが、この方法では、携帯端末と画像形成装置の位置関係を２次元の地図上で把握しなければならないため、画像形成装置がどの方向にあるのかが分かりづらく、また、地図上に表示できる情報に限定されるため、画像形成装置の状態を把握しにくいという問題もあった。

本発明は、上記問題点に鑑みてなされたものであって、その主たる目的は、画像形成装置などの被管理装置の状態を直感的に把握することができる携帯端末及び装置管理方法を提供することにある。

また、本発明の他の目的は、画像形成装置などの被管理装置の操作性を改善する携帯端末及び装置管理方法を提供することにある。

上記目的を達成するため、本発明は、表示部を備える携帯端末であって、自端末の位置を特定する位置特定部と、自端末の方向を特定する方向特定部と、予め記憶した１又は複数の被管理装置の位置情報に基づいて、自端末から所定の距離範囲内、かつ、自端末の特定の方向に存在する所定の被管理装置を特定し、当該所定の被管理装置の状態を示すステータス情報を取得して前記表示部に表示させる制御部と、を備えるものである。

また、本発明は、表示部を備える携帯端末と、１又は複数の被管理装置と、サーバと、が通信ネットワークで接続されたシステムにおける装置管理方法であって、前記サーバに、前記１又は複数の被管理装置の位置情報を記述したテーブルを記憶するステップと、前記携帯端末が、自端末の位置を特定し、前記サーバに自端末の位置情報を送信するステップと、前記サーバが、前記テーブルを参照して、前記携帯端末から所定の距離範囲内に存在する被管理装置を特定し、前記携帯端末に通知するステップと、前記携帯端末が、自端末の方向を特定し、自端末から所定の距離範囲内に存在する被管理装置の中から、自端末の特定の方向に存在する所定の被管理装置を特定するステップと、前記携帯端末が、前記所定の被管理装置の状態を示すステータス情報を取得し、当該ステータス情報を前記表示部に表示する表示ステップと、を実行するものである。

また、本発明は、表示部を備える携帯端末と、１又は複数の被管理装置と、サーバと、が通信ネットワークで接続されたシステムにおける装置管理方法であって、前記サーバに、前記１又は複数の被管理装置の位置情報を記述したテーブルを記憶するステップと、前記携帯端末が、自端末の位置及び方向を特定し、前記サーバに自端末の位置情報及び方向情報を送信するステップと、前記サーバが、前記テーブルを参照して、前記携帯端末から所定の距離範囲内、かつ、前記携帯端末の特定の方向に存在する所定の被管理装置を特定し、前記携帯端末に通知するステップと、前記携帯端末が、前記所定の被管理装置の状態を示すステータス情報を取得し、当該ステータス情報を前記表示部に表示する表示ステップと、を実行するものである。

また、本発明は、表示部を備える携帯端末と、１又は複数の被管理装置と、が通信ネットワークで接続されたシステムにおける装置管理方法であって、前記携帯端末は、前記１又は複数の被管理装置の位置情報を記述したテーブルを記憶するステップと、自端末の位置及び方向を特定し、前記テーブルを参照して、自端末から所定の距離範囲内、かつ、自端末の特定の方向に存在する所定の被管理装置を特定するステップと、前記所定の被管理装置の状態を示すステータス情報を取得し、当該ステータス情報を前記表示部に表示する表示ステップと、を実行するものである。

本発明の携帯端末及び装置管理方法によれば、画像形成装置の状態を直感的に把握することができる。その理由は、携帯端末の画面には、携帯端末の周囲、かつ、携帯端末の特定の方向に存在する画像形成装置のステータス情報が表示されるからである。

また、本発明の携帯端末及び装置管理方法によれば、画像形成装置の操作性を改善することができる。その理由は、携帯端末の画面に表示された画像形成装置の状態表示部分を選択すると、その画像形成装置の機能を選択／設定する操作パネルが表示され、その操作パネルで画像形成装置を遠隔操作することができるからである。

これにより、ユーザは画像形成装置の前まで行く必要がなくなり、また、壁の向こう側など物理的に見えない位置に配置された画像形成装置の状態も確認することができる。また、画像形成装置のＩＰアドレスやＵＲＬが分からなくても操作が可能になり、操作性を格段に向上させることができる。

また、携帯端末の画面上で画像形成装置を操作することができるため、画像形成装置のパネルで操作する場合のように、機密文書やパスワード等を横から覗き見られるといったリスクを軽減することもできる。

本発明の一実施例に係る制御システムの構成例を示す図である。 本発明の一実施例に係るＡＲサーバの構成を示すブロック図である。 本発明の一実施例に係る携帯端末の構成を示すブロック図である。 本発明の一実施例に係る画像形成装置の構成を示すブロック図である。 本発明の一実施例に係る携帯端末でのＡＲ（拡張現実）アプリケーションのイメージを示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（ステータス表示画面）を示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（ステータス表示画面）を示す図である。 本発明の一実施例に係る携帯端末に表示される情報の一例（ステータス表示画面の状態表示部）を示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（アイコン付きステータス表示画面）を示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（複数の画像形成装置に対するステータス表示画面）を示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（遠隔操作画面：機能選択）を示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（遠隔操作画面：印刷ファイル選択）を示す図である。 本発明の一実施例に係る携帯端末に表示される画面の一例（遠隔操作画面：印刷設定）を示す図である。 本発明の一実施例に係るＡＲサーバに記憶される管理テーブルデータの一例である。 電界強度からの位置を特定する方法を示すイメージ図である。 ステータス情報を合成する位置を算出する方法を示す図である。 本発明の一実施例に係る制御システムの動作（ステータス情報を合成表示する処理）を示すシーケンス図である。 本発明の一実施例に係る携帯端末の動作（ステータス情報を合成表示する処理）を示すフローチャート図である。 本発明の一実施例に係る制御システムの動作（画像形成装置の遠隔操作処理）を示すシーケンス図である。 本発明の一実施例に係る携帯端末の動作（画像形成装置の遠隔操作処理）を示すフローチャート図である。

背景技術で示したように、会社等のように複数の画像形成装置がネットワークに接続されているシステムでは、各画像形成装置の状態を容易に確認できるようにすることが求められており、地図上に画像形成装置を表示して状態を確認できるようにする方法が提案されている。しかしながら、この方法では表示する情報が限定され、また、２次元の地図に表示される画像形成装置が実際にどこにあるのかが分かりづらいという問題がある。

そこで、本発明の一実施の形態では、携帯端末の周囲の画像形成装置の内、携帯端末の特定の方向（カメラの画角）に存在する画像形成装置を特定し、画面（カメラで撮像したライブビュー映像）に、特定した画像形成装置のステータスや画像形成装置を操作する操作パネルを合成して表示して、直感的に画像形成装置の状態を確認したり、画像形成装置を操作できるようにする。

なお、セカイカメラのように、利用者が位置データと紐づけてアップロードした情報をスマートフォンのカメラを通した映像に合成して表示する拡張現実技術は存在するが、本発明のように、画像形成装置の状態をリアルタイムに表示したり、画像形成装置の操作を行ったりするものは存在しない。

上記した本発明の実施の形態についてさらに詳細に説明すべく、本発明の一実施例に係る携帯端末及び装置管理方法について、図１乃至図２０を参照して説明する。図１は、本実施例の制御システムの構成例を示す図であり、図２乃至図４は、各々、ＡＲサーバ、携帯端末、画像形成装置の構成を示すブロック図である。また、図５は、携帯端末での拡張現実アプリケーションのイメージを示す図であり、図６乃至図１３は、携帯端末の表示画面の一例、図１４は、ＡＲサーバに記憶される管理テーブルデータの一例である。また、図１５は、電界強度からの携帯端末の位置を特定する方法を示すイメージ図であり、図１６は、ステータス情報を合成する位置を算出する方法を示す図である。また、図１７及び図１９は、本実施例の制御システムの動作を示すシーケンス図であり、図１８及び図２０は、本実施例の携帯端末の動作を示すフローチャート図である。

図１に示すように、本実施例の制御システム１０は、拡張現実（ＡＲ：augmented reality）サーバ２０と、スマートフォンや携帯電話機、ＰＤＡ（Personal Digital Assistants）などの携帯端末３０と、ＭＦＰなどの画像形成装置４０とで構成され、これらは、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）などのネットワークに接続（携帯端末３０は、無線ルータや無線基地局を介してネットワークに接続）されている。以下、各装置の構成について詳細に説明する。

［ＡＲサーバ］
図２に示すように、ＡＲサーバ２０は、制御部２１、記憶部２２、通信Ｉ／Ｆ部２３などで構成される。

制御部２１は、ＣＰＵ（Central Processing Unit）とＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）などのメモリとで構成され、ＡＲサーバ２０全体を制御する。また、制御部２１は、画像形成装置４０から装置の状態を示す情報（ステータス情報と呼ぶ。）を取得すると共に、携帯端末３０から位置情報を取得し、携帯端末３０の周囲（携帯端末３０から所定の距離範囲内）に存在する画像形成装置４０を特定して、その画像形成装置４０のリスト（周辺ＭＦＰリストと呼ぶ。）を送信すると共に、携帯端末３０に画像形成装置４０のステータス情報を送信する装置情報処理部２１ａと、画像形成装置４０から機能や設定に関する情報（機能情報と呼ぶ。）を取得して携帯端末３０に送信すると共に、携帯端末３０から画像形成装置４０に対する指示情報を取得し、その指示情報に従って画像形成装置４０に指示された動作を実行させる装置制御部２１ｂとしても機能する。

記憶部２２は、ＨＤＤ（Hard Disk Drive）などで構成され、各画像形成装置４０の位置情報を記述した管理テーブルデータ、ＰＣＬ（Printer Control Language）やＰＳ（Post Script）などのＰＤＬ（Page Description Language）で記述した実データなどを保存する。

通信Ｉ／Ｆ部２３は、ＮＩＣ（Network Interface Card）やモデムなどのインターフェースであり、イーサネット（登録商標）などの規格に基づいて、携帯端末３０や画像形成装置４０との通信を行う。

［携帯端末］
図３に示すように、携帯端末３０は、制御部３１、記憶部３２、通信Ｉ／Ｆ部３３、表示部３４、操作部３５、位置特定部３６、方向特定部３７、撮像部３８などで構成される。

制御部３１は、ＣＰＵとＲＡＭやＲＯＭなどのメモリとで構成され、携帯端末３０全体を制御する。また、制御部３１は、ＡＲサーバ２０に自端末の位置情報を送信し、ＡＲサーバ２０から自端末の周囲の画像形成装置４０の周辺ＭＦＰリストを取得すると共に、画像形成装置のステータス情報や機能情報（これらを総称して装置情報と呼ぶ。）を取得する装置情報取得部３１ａと、ステータス情報を表示部３４の画面に合成して画像形成装置４０の状態を確認できるようにすると共に、機能情報に基づいて操作パネルを作成して表示部３４の画面に合成し、画像形成装置４０を遠隔操作できるようにする装置管理部３１ｂとしても機能する。なお、上記装置情報取得部３１ａや装置管理部３１ｂとしての機能はハードウェアとして実現してもよいし、制御部３１を装置情報取得部３１ａや装置管理部３１ｂとして機能させるプログラム（ＡＲアプリケーションと呼ぶ。）として実現してもよい。

記憶部３２は、ＨＤＤなどで構成され、ＡＲサーバ２０から取得した周辺ＭＦＰリストや装置情報などを保存する。

通信Ｉ／Ｆ部３３は、ＮＩＣやモデムなどのインターフェースであり、無線ルータや無線基地局を介してネットワークに接続し、ＡＲサーバ２０や画像形成装置４０との通信を行う。

表示部３４は、ＬＣＤ（Liquid Crystal Display）や有機ＥＬ（electroluminescence）ディスプレイなどであり、ステータス情報を合成した画面や操作パネルを合成した画面などを表示する。

操作部３５は、ハードキーや表示部３４上のタッチパネルであり、表示されている操作パネルに対する操作を受け付け、画像形成装置４０に対する各種指示を可能にする。

位置特定部３６は、ＧＰＳ（Global Positioning System）を使用して自端末の位置（座標）を特定する。また、方向特定部３７は、ジャイロと加速度センサを組み合わせた自立測位技術を用いて、自端末の方向を特定する。なお、位置が特定されている画像形成装置４０が電磁波（無線ＬＡＮやWi-Fi（Wireless Fidelity）、Bluetoothなどの規格で定められる電波）を発信しており、携帯端末３０が、その電磁波を受信可能な場合は、図１５に示すように、携帯端末３０が複数（好ましくは３以上）の画像形成装置４０から発信される電磁波の電界強度を測定し、その電界強度の値に基づいて、複数の画像形成装置４０に対する自端末の位置（座標）や方向を特定してもよい。また、撮像部３８で撮像した画像を解析し、色や形状、模様等を画像認識して画像形成装置４０を特定し、その画像形成装置の位置から自端末の位置や方向を特定してもよい。また、画像形成装置４０に貼り付けたＱＲコードのようなバーコード等を画像認識したり、ＲＦＩＤ（Radio Frequency Identification）等のタグを認識して画像形成装置４０を特定し、その画像形成装置の位置から自端末の位置や方向を特定してもよい。

撮像部３８は、ＣＣＤ（Charge Coupled Devices）カメラやＣＭＯＳ（Complementary Metal Oxide Semiconductor）カメラなどであり、画像形成装置４０などを撮像する。

なお、図３では、携帯端末３０に撮像部３８を設けているが、撮像部３８で撮像した画像にステータス情報や操作パネルを合成する必要がない場合は、撮像部３８を省略することもできる。

［画像形成装置］
図４に示すように、画像形成装置４０は、制御部４１、記憶部４２、通信Ｉ／Ｆ部４３、表示部４４、操作部４５、スキャナ部４６、印刷部４７などで構成される。

制御部４１は、ＣＰＵとＲＡＭやＲＯＭなどのメモリとで構成され、画像形成装置４０全体を制御する。また、制御部４１は、ＰＣＬやＰＤＬで記述した実データを解析するデータ解析部、解析結果に基づいて実データをラスタライズ（ビットマップ展開）してイメージデータを生成する画像処理部としても機能する。

記憶部４２は、ＨＤＤなどで構成され、実データやイメージデータ、各種設定情報などを保存する。

通信Ｉ／Ｆ部４３は、ＮＩＣやモデムなどのインターフェースであり、イーサネット（登録商標）などの規格に基づいて、ＡＲサーバ２０や携帯端末３０との通信を行う。

表示部４４は、ＬＣＤや有機ＥＬディスプレイなどであり、コピーやスキャン、印刷、ＦＡＸなどの機能を実現するための各種画面を表示する。

操作部４５は、ハードキーや表示部４４上のタッチパネルであり、コピーやスキャン、印刷、ＦＡＸなどの機能に対する各種指示を行う。

スキャナ部４６は、原稿台上の原稿用紙から画像データを光学的に読み取る部分であり、原稿を走査する光源と、原稿で反射された光を電気信号に変換するＣＣＤ等のイメージセンサと、電気信号をＡ／Ｄ変換するＡ／Ｄ変換器等により構成される。

印刷部４７は、イメージデータを用紙に転写する。具体的には、帯電装置により帯電された感光体ドラムに露光装置から画像に応じた光を照射して静電潜像を形成し、現像装置で帯電したトナーを付着させて現像し、そのトナー像を転写ベルトに１次転写し、転写ベルトから紙媒体に２次転写し、更に定着装置で紙媒体にトナー像を定着させる処理を行う。また、必要に応じて、折りや製本、ステープルなどの処理を行う。

なお、本実施例では、ＡＲサーバ２０の制御部２１が携帯端末３０の周囲の画像形成装置４０を特定する構成とするが、画像形成装置４０の位置情報を携帯端末３０に記憶しておき、携帯端末３０の制御部３１が、自端末の周囲かつ特定の方向に存在する画像形成装置４０を特定する構成としてもよい。また、本実施例では、ＡＲサーバ２０が画像形成装置４０からステータス情報や機能情報を取得する構成とするが、携帯端末３０が画像形成装置４０から直接これらの情報を取得する構成としてもよい。また、本実施例では、ＡＲサーバ２０が画像形成装置４０に処理を指示する構成とするが、携帯端末３０が画像形成装置４０に直接、処理を指示する構成としてもよい。このように、携帯端末３０にＡＲサーバ２０の制御部２１の機能を備えている場合は、ＡＲサーバ２０を省略することもできる。

次に、上記構成の制御システム１０の基本動作について説明する。なお、以下の説明において、各画像形成装置４０に関する情報（ネットワーク上の登録名称や製品名、ＩＰアドレス、接続ポート、ＳＳＬ（Secure Socket Layer）通信の可否など）と各画像形成装置４０の位置情報（緯度、経度、高度など）は、図１４に示す管理テーブルデータとして予めＡＲサーバ２０の記憶部２２などに記憶されているものとする。この管理テーブルデータの位置情報はユーザが登録してもよいし、画像形成装置４０にＧＰＳ等の位置特定機能が搭載されている場合は、画像形成装置４０から送信される位置情報を使用して登録してもよいし、画像形成装置４０の近傍に携帯端末３０を持って行き、携帯端末３０から送信される位置情報を使用して登録してもよい。

ＡＲサーバ２０は、ネットワークに接続されている画像形成装置４０に定期的にアクセス（若しくは、画像形成装置４０側が定期的にＡＲサーバ２０にアクセス）して、各画像形成装置４０のステータス情報を取得する。

次に、携帯端末３０に予め記憶されたＡＲアプリケーションを動作させると、位置特定部３６は、自端末の位置情報（緯度や経度などの座標）を取得し、装置情報取得部３１ａは、特定した位置情報をＡＲサーバ２０に送信する。例えば、画像形成装置４０が発信する電磁波の電界強度を用いて位置や方向を特定する場合において、図１５に示すように、装置Ａ、Ｂ、Ｃの３つの画像形成装置４０が各々、図の同心円で示す領域に電界強度１〜３で電磁波を発信しており、装置Ａの電界強度が「１」、装置Ｂ及び装置Ｃの電界強度が「２」の場合は、携帯端末３０は図の網掛け領域に存在することから、各画像形成装置４０の位置（座標）に基づいて、自端末の位置（座標）を特定する。

ＡＲサーバ２０は、携帯端末３０から位置情報を取得すると、予め記憶した管理テーブルデータを参照して、携帯端末３０の周囲（携帯端末３０からの距離が所定範囲内）に存在する画像形成装置４０を特定する。そして、特定した画像形成装置４０のリスト（周辺ＭＦＰリスト）を携帯端末３０に送信する。

携帯端末３０は、位置特定部３６及び方向特定部３７を用いて自端末の位置及び方向を特定し、周辺ＭＦＰリストの画像形成装置４０の内、携帯端末３０の周囲かつ特定の方向に存在する画像形成装置４０を特定し、その画像形成装置４０のステータス情報をＡＲサーバ２０から取得する。なお、ここでは、ＡＲサーバ２０から周辺ＭＦＰリストを取得し、その中から自端末の周囲かつ特定の方向に存在する画像形成装置４０を特定する構成とするが、ＡＲサーバ２０に自端末の位置情報及び方向情報を送信し、ＡＲサーバ２０が携帯端末３０の周囲かつ特定の方向に存在する画像形成装置４０を特定し、その画像形成装置４０のステータス情報を送信してもよい。また、ここでは周辺ＭＦＰリストを取得した後に、再度、位置特定部３６を用いて自端末の位置を特定しているが、携帯端末３０の位置を動かさない（方向のみを回転させる）場合は、方向特定部３７を用いて自端末の方向のみを特定すればよい。

そして、ＡＲサーバ２０から画像形成装置４０のステータス情報を取得すると、装置管理部３１ｂは、取得したステータス情報を表示部３４に表示させる。そして、携帯端末３０の方向が変化して、その画像形成装置４０が特定の方向から外れたらステータス情報の表示を消去し、新たな画像形成装置４０が特定の方向に入ったら、その画像形成装置４０のステータス情報を表示する動作を繰り返す。すなわち、携帯端末３０を３６０度回転させると、特定の方向に存在する画像形成装置４０のステータス情報が順次表示されることになる。

このステータス情報の表示形態は特に限定されず、ステータス情報を単独で表示してもよいし、撮像部３８で画像形成装置４０を撮像している場合は、その画像形成装置４０の画像にステータス情報を合成して表示してもよい。図５は、撮像部３８で撮像している画像形成装置４０の画像にステータス情報（当該画像形成装置４０がジョブ待ちの状態であることを示す「待機中」の文字）を合成した例であり、画像形成装置４０の画像にステータス情報を合成して表示する（ステータス情報を合成した部分を状態表示部と呼ぶ。）ことにより、画像形成装置４０の状態を直感的に把握することができる。また、図６は、ステータス表示画面５０に、ステータス情報に加えて、ネットワークに接続されている画像形成装置４０の配置や携帯端末３０の周辺の範囲を図示した例である。

図６の構成に表示形態において、ステータス情報が画像形成装置４０の画像上に表示されるようにするためには、ステータス情報の配置位置のｘ座標と画面上の画像形成装置４０の中心のｘ座標とが一致するようにすればよい。この画像形成装置４０のｘ座標は、図１６（ａ）に示すように、携帯端末３０の画面表示サイズ（Ｘ方向のサイズ）をｗｋし、図１６（ｂ）に示すように、携帯端末３０の特定方向（ここでは上方向）を基準方向とした場合の時計回りの画像形成装置４０の向きをαｍ、カメラの水平方向への画角（正確には表示可能な範囲の撮影範囲角度）をαｒ、基準方向からの携帯端末３０の向き（カメラの撮像範囲角度（αｒ）の中心）をαｃとすると、
ｘ＝ｗｋ×（αｍ−（αｃ−αｒ／２））／αｒ
となる。

また、図１６（ｃ）に示すように、上記αｍは、携帯端末３０の座標を（ｘｋ、ｙｋ）とし、画像形成装置４０の座標を（ｘｍ、ｙｍ）とすると、
αｍ＝１８０−（ｔａｎ^−１（（ｙｍ−ｙｋ）／（ｘｍ−ｘｋ））×（３６０／２π））
となる。

従って、上記式に従ってｘを求め、ステータス情報の表示位置のｘ座標をこの値に設定すれば、画像形成装置４０の画像の中心にステータス情報を合成することができる。

なお、位置決めに際して、カメラが捉えた映像をリアルタイムで解析し、画像形成装置４０の形状を認識して正確な位置を特定したり、画像形成装置４０の機種毎の形状データ（高さ、幅）や、オプション装着状態等に基づいて表示位置を補正するようにしてもよい。

以下、ステータス情報の表示形態のバリエーションについて説明する。

図６は、画像形成装置４０がジョブ待ちの状態の例であるが、画像形成装置４０がジョブの実行中の場合は、図７に示すように、ステータス情報として「印刷中」の文字を表示する。その際、図８（ａ）に示すように、残ジョブ数やジョブ終了予測時時刻等を表示したり、図８（ｂ）に示すように、ジョブを登録したユーザ情報等の詳細情報を表示したりしてもよい。また、エラー状態やエラーからのリカバリ方法や操作手順を示すガイダンスなどを表示してもよい。また、画像形成装置４０を識別しやすくするために、図９に示すように、画像形成装置４０を模式的に示すアイコンや画像形成装置４０の名称などを表示する構成としてもよい。

また、図５乃至図９では、ステータス表示画面５０に１つの画像形成装置４０のステータス情報を表示したが、図１０に示すように、携帯端末３０の特定の方向に複数の画像形成装置４０が存在する場合は、各々の画像形成装置４０のステータス情報を表示することも可能である。

上記ステータス情報の表示に際して、画像形成装置４０と携帯端末３０の距離により、遠近法に従ってステータス情報の表示サイズを変えたり、装置の状態や残ジョブ数によって、表示の色、透明度、大きさ、アニメーション効果等を変えたり、ユーザ権限やシステム設定等によって表示する項目を変えたりしてもよい。また、デバイス毎にステータスを表示するのではなく、ジョブ毎にステータスを表示して、ジョブ実行中止、削除、再実行等のジョブ制御が行えるようにしてもよい。

また、図５乃至図１０では、画像形成装置４０のステータス情報を表示する場合について記載したが、ステータス情報により画像形成装置４０が待機中であれば、その画像形成装置４０を用いた処理が可能であることから、携帯端末３０を用いて画像形成装置４０を遠隔操作できれば便利である。そこで、ＡＲサーバ２０が画像形成装置４０から機能情報を取得して携帯端末３０に送信（若しくは携帯端末３０が画像形成装置４０から直接、機能情報を取得）し、携帯端末３０の表示部３３に画像形成装置４０を操作するための操作パネルを表示することもできる。

例えば、ステータス表示画面５０で所定の操作（例えば、状態表示部をタッチしたり、携帯端末３０の特定の操作ボタンを押下する等の操作）を行うと、画面上に操作パネルを合成した遠隔操作画面５１を表示し、図１１に示すように、コピー、スキャン、プリント、Ｆａｘ、ＭＦＰ管理等の操作を遠隔で行うことができるようにしてもよい。

具体的には、操作パネルの各ボタンの画面上の位置を予め記憶しておき、ユーザが画面上でタッチした位置がボタンの位置と一致する場合に、そのボタンの機能を実行させる指示情報を作成し、その指示情報を直接若しくはＡＲサーバ２０を介して画像形成装置４０に送信し、画像形成装置４０の制御部４１は、その指示に従って各機能を動作させる。その際、この操作パネルでは、ログインユーザの権限によって利用できる機能のみを表示することが好ましい。

また、事前に登録した共有サーバや携帯端末３０のローカルディスク、画像形成装置４０内蔵のハードディスク等をスキャン文書や印刷文書の保存先とし、図１２に示すような画面を表示して、印刷文書の選択ができるようにしてもよい。また、図１３のような画面を表示して、印刷条件の設定ができるようにしてもよい。

次に、本実施例の制御システム１０の詳細動作について説明する。

まず、画像形成装置４０のステータス情報を合成表示する処理について、図１７及び図１８を参照して説明する。図１７は、制御システムの全体動作を示すシーケンス図であり、図１８は、携帯端末３０の動作を示すフローチャート図である。なお、以下の説明において、各画像形成装置４０の位置を特定するための管理テーブルデータは予めＡＲサーバ２０の記憶部２２に記憶されているものとする。

ＡＲサーバ２０は、所定の間隔で画像形成装置４０にアクセスし、画像形成装置４０からステータス情報を取得して、記憶部２２に保存する。なお、各画像形成装置４０が自装置のステータスの変化を監視し、ステータスが変化したらＡＲサーバ２０に通知するようにしてもよい。

一方、ユーザの操作により、携帯端末３０の制御部３１は、ＡＲアプリケーションを起動し（Ｓ１０１）、ログイン画面を表示部３４に表示させる。そして、ユーザがＩＤ、パスワードを入力してログインボタンを押下すると、制御部３１は、ログイン情報をＡＲサーバ２０に送信し、ＡＲサーバ２０にログインする（Ｓ１０２）。

次に、携帯端末３０の制御部３１は、必要に応じて、撮像部３８を起動してライブビュー映像を表示部３４に表示する。そして、位置特定部３６は、自端末の位置を検出し（Ｓ１０３）、その位置情報をＡＲサーバ２０に送信する。

ＡＲサーバ２０は、予め記憶した管理テーブルデータを参照して、携帯端末３０から所定の距離範囲に存在する画像形成装置４０を抽出し、そのリスト（周辺ＭＦＰリスト）を携帯端末３０に送信する。なお、ＡＲサーバ２０は、携帯端末３０と画像形成装置４０の距離に応じてステータス情報を取得する間隔を変更（すなわち、携帯端末３０から所定の距離範囲の画像形成装置４０に対してステータス情報の取得間隔を短く）することが好ましい。

携帯端末３０は、ＡＲサーバ２０から周辺ＭＦＰリストを取得すると（Ｓ１０４）、周辺ＭＦＰリストから１番目の画像形成装置４０の登録情報を取得する（Ｓ１０５、１０７）。次に、位置特定部３６及び方向特定部３７は、自端末の位置や方向を検出し（Ｓ１０８、１０９）、制御部３１は、１番目の画像形成装置４０の位置と自端末の位置及び方向とに基づいて、当該画像形成装置４０が自端末の特定方向に存在するか（撮像部３９を駆動している場合は画角内の位置であるか）を判断する（Ｓ１１１）。

画像形成装置４０が自端末の特定方向に存在しなければ、周辺ＭＦＰリストの次の画像形成装置４０に対して（Ｓ１１５）、同様の処理を繰り返す。一方、画像形成装置４０が自端末の特定方向に存在する場合は、制御部３１は、ＡＲサーバ２０にアクセスして、その画像形成装置４０のステータス情報を取得し（Ｓ１１２）、画像形成装置４０と自端末の距離、画像形成装置４０のステータス等により、ステータス情報の表示サイズや色、透明度、形状、アニメーション効果などを決定し（Ｓ１１３）、表示部３４の画面（撮像部３８を駆動している場合はライブビュー映像）にステータス情報を合成する（Ｓ１１４）。

その後、周辺ＭＦＰリストの次の画像形成装置４０に対して（Ｓ１１５）、同様の処理を繰り返し、周辺ＭＦＰリストの全ての画像形成装置４０に対する処理が終了したら（Ｓ１０６のＹｅｓ）、ＡＲアプリケーションの終了が指示されたかを判断し（Ｓ１１６）、終了が指示されていなければＳ１０３に戻って同様の処理を繰り返す。一方、終了が指示されたら、制御部３１は、ＡＲサーバ２０にログアウトを通知し、ＡＲサーバ２０からログアウト処理の応答を受信したら（Ｓ１１７）、ＡＲアプリケーションを終了する（Ｓ１１８）。

このように、携帯端末３０は、自端末から所定の距離範囲内に存在する画像形成装置４０のリストをＡＲサーバ２０から取得し、リスト内の各々の画像形成装置４０が自端末の特定方向（ライブビュー映像の画角内）にある場合には、その画像形成装置４０のステータス情報をＡＲサーバ２０から取得して画面（ライブビュー映像）に合成して表示するため、携帯端末３０を周囲に向けるだけで、その方向かつ近傍にある画像形成装置４０のステータスを知ることができ、２次元の地図上にステータス情報を表示する方法に比べて、直感的に画像形成装置４０の状態を把握することができる。

なお、上記フローでは、携帯端末３０が自端末の位置情報をＡＲサーバ２０に送信し、ＡＲサーバ２０がその携帯端末３０近傍の画像形成装置４０のリストを送信し、携帯端末３０がリストの各々の画像形成装置４０に対して、自端末の特定方向に存在するか否かを判断したが、携帯端末３０が自端末の位置情報及び方向情報をＡＲサーバ２０に送信し、ＡＲサーバ２０がその携帯端末３０の特定方向かつ周辺の画像形成装置４０を特定し、その画像形成装置４０のステータス情報を送信するようにしてもよい。

次に、携帯端末３０の表示画面で画像形成装置４０を遠隔操作する処理について、図１９及び図２０を参照して説明する。図１９は、制御システムの全体動作を示すシーケンス図であり、図２０は、携帯端末３０の動作を示すフローチャート図である。

まず、上記フローに従って、携帯端末３０の表示部３４の画面（ライブビュー映像）に画像形成装置４０のステータス情報を合成して表示する。そして、ユーザがステータス情報の表示領域（状態表示部）を押下すると（Ｓ２０１）、制御部３１は、ＡＲサーバ２０にアクセスして、ＡＲサーバ２０からログインユーザの操作権限（コピー、プリント、スキャン、Ｆａｘ送信、管理機能等の機能毎の操作権限）を取得する（Ｓ２０２）。なお、この操作権限は、利用回数や利用時間帯等の制限を付加してもよいし、画像形成装置４０毎に設定できるようにしてもよい。

次に、制御部３１は、ＡＲサーバ２０から、その画像形成装置４０の機能情報（各機能の実行可否、各機能の設定可能値など）を取得し（Ｓ２０３）、ログインユーザの操作権限情報及び画像形成装置４０の機能情報に応じて、表示部３４に、図１１乃至図１３に示すような、画像形成装置４０を遠隔操作するための操作パネルを表示させる（Ｓ２０４）。なお、各機能の設定可能値とは、例えば、印刷機能におけるカラー、n in 1、両面、パンチ・ステープル等の可否、スキャン機能におけるカラー、解像度等可否、コピー機能におけるカラー、n in 1、両面、パンチ・ステープル等の可否、Ｆａｘ送信機能におけるＦａｘ送信可否などである。

そして、制御部３１は、操作パネルのどの機能が押下されたかを判断し（Ｓ２０５）、押下された機能に応じた処理を実行する。ここでは、コピーとスキャンとプリントの各機能が選択された場合について例示する。

まず、操作パネルでコピーのボタンが押下された場合は、制御部３１は、画像形成装置４０の機能情報に基づいて、表示部３４にコピー設定選択画面を表示させる（Ｓ２０６）。そして、ユーザがコピー設定を選択し（Ｓ２０７）、スタートボタンを押下したら（Ｓ２０８）、制御部３１は、コピー設定情報をＡＲサーバ２０に送信し（Ｓ２０９）、ＡＲサーバ２０は、そのコピー設定情報に従って画像形成装置４０にコピーの実行を指示し（Ｓ２１０）、画像形成装置４０は、コピーを実行する（Ｓ２１１）。なお、ここでは携帯端末３０からＡＲサーバ２０にコピー設定情報を送信し、ＡＲサーバ２０が画像形成装置４０にコピーの実行を指示する構成としているが、携帯端末３０が画像形成装置４０と通信する機能を搭載している場合は、ＡＲサーバ２０を介することなく、携帯端末３０から直接、画像形成装置４０にコピーの実行を指示してもよい。

また、操作パネルでスキャンのボタンが押下された場合は、制御部３１は、画像形成装置４０の機能情報に基づいて、表示部３４にスキャン設定選択画面を表示させる（Ｓ２１２）。そして、ユーザがスキャン設定を選択したら（Ｓ２１３）、制御部３１は、表示部３４にスキャンファイル保存先選択画面を表示させる。このスキャンファイル保存先選択画面でユーザが保存先を選択し（Ｓ２１５）、スタートボタンを押下したら（Ｓ２１６）、制御部３１は、スキャン設定情報及び保存先情報をＡＲサーバ２０に送信し（Ｓ２１７）、ＡＲサーバ２０は、そのスキャン設定情報及び保存先情報に従って画像形成装置４０にリモートスキャンの実行を指示し（Ｓ２１８）、画像形成装置４０は、スキャンを実行する（Ｓ２１９）。なお、上記と同様に、携帯端末３０が画像形成装置４０と通信する機能を搭載している場合は、ＡＲサーバ２０を介することなく、携帯端末３０から直接、画像形成装置４０にリモートスキャンの実行を指示してもよい。

保存先のストレージが携帯端末３０の場合は、ＡＲサーバ２０は画像形成装置４０からスキャンデータを取得し（Ｓ２２１）、携帯端末３０は、ＡＲサーバ２０からスキャンデータを取得し（Ｓ２２２）、取得したスキャンデータを保存する（Ｓ２２３）。保存先のストレージが共有サーバの場合は、ＡＲサーバ２０は画像形成装置４０からスキャンデータを取得し（Ｓ２２４）、そのスキャンデータを共有サーバに転送する（Ｓ２２５）。保存先のストレージが画像形成装置４０のＨＤＤの場合は、スキャンデータをＨＤＤに保存する（Ｓ２２６）。

また、操作パネルでプリントのボタンが押下された場合は、制御部３１は、表示部３４にファイル選択画面を表示させる（Ｓ２２７）。そして、ユーザがファイルを選択したら（Ｓ２２８）、制御部３１は、画像形成装置４０の機能情報に基づいて、表示部３４に印刷設定選択画面を表示させる（Ｓ２２９）。そして、ユーザが印刷設定を選択したら（Ｓ２３０）、制御部３１は、選択ファイルの保存場所を判断し（Ｓ２３１）、携帯端末３０に保存されている場合は、制御部３１は、印刷設定情報及び選択ファイルの実データをＡＲサーバ２０に送信する（Ｓ２３２）。また、共有サーバに保存されている場合は、制御部３１は、印刷設定情報及び選択ファイルのパス情報をＡＲサーバ２０に送信し（Ｓ２３３）、ＡＲサーバ２０は、そのパス情報に従って共有サーバからファイルを取得する（Ｓ２３４）。その後、ＡＲサーバ２０は、ＰＣＬファイルを作成して（Ｓ２３５）、画像形成装置４０に転送し（Ｓ２３６）、画像形成装置４０は、印刷を実行する（Ｓ２３７）。

このように、携帯端末３０は、ステータス情報を表示した後、操作パネルを表示し、その操作パネルで画像形成装置４０を遠隔操作できるようにするため、待機中の画像形成装置４０に対して迅速に指示を行うことができ、ユーザの利便性を格段に向上させることができる。

なお、本発明は上記実施例の記載に限定されるものではなく、本発明の趣旨を逸脱しない限りにおいて、その構成や制御は適宜変更可能である。

例えば、上記実施例では、画像形成装置４０のステータス情報を表示する場合について説明したが、装置の状態を把握することによって適切な処理を行うことができる任意の被管理装置に対して同様に適用することができる。

本発明は、被管理対象となる装置の情報を表示する携帯端末及び装置の情報を表示する方法並びに装置を遠隔操作する方法に利用可能である。

１０ 制御システム
２０ ＡＲサーバ
２１ 制御部
２１ａ 装置情報処理部
２１ｂ 装置制御部
２２ 記憶部
２３ 通信Ｉ／Ｆ部
３０ 携帯端末
３１ 制御部
３１ａ 装置情報取得部
３１ｂ 装置管理部
３２ 記憶部
３３ 通信Ｉ／Ｆ部
３４ 表示部
３５ 操作部
３６ 位置特定部
３７ 方向特定部
３８ 撮像部
４０ 画像形成装置
４１ａ データ解析部
４１ｂ 画像処理部
４２ 記憶部
４３ 通信Ｉ／Ｆ部
４４ 表示部
４５ 操作部
４６ スキャナ部
４７ 印刷部
５０ ステータス表示画面
５１ 遠隔操作画面

Claims (10)

1. 表示部を備える携帯端末であって、
   自端末の位置を特定する位置特定部と、
   自端末の方向を特定する方向特定部と、
   予め記憶した１又は複数の被管理装置の位置情報に基づいて、自端末から所定の距離範囲内、かつ、自端末の特定の方向に存在する所定の被管理装置を特定し、当該所定の被管理装置の状態を示すステータス情報を取得して前記表示部に表示させる制御部と、を備える、ことを特徴とする携帯端末。
2. 更に、自端末の前記特定の方向を撮像する撮像部を備え、
   前記制御部は、前記撮像部が撮像した前記所定の被管理装置の画像に前記ステータス情報を合成した画像を前記表示部に表示させる、ことを特徴とする請求項１に記載の携帯端末。
3. 前記制御部は、前記携帯端末を動かした結果、前記所定の被管理装置が、自端末から所定の距離範囲内、又は、自端末の特定の方向に存在しなくなったときは、前記表示部に表示された前記ステータス情報を消去する、ことを特徴とする請求項１又は２に記載の携帯端末。
4. 前記制御部は、前記ステータス情報を前記表示部に表示させた後、前記所定の被管理装置を操作するための操作パネルを前記表示部に表示させる、ことを特徴とする請求項１乃至３のいずれか一に記載の携帯端末。
5. 表示部を備える携帯端末と、１又は複数の被管理装置と、サーバと、が通信ネットワークで接続されたシステムにおける装置管理方法であって、
   前記サーバに、前記１又は複数の被管理装置の位置情報を記述したテーブルを記憶するステップと、
   前記携帯端末が、自端末の位置を特定し、前記サーバに自端末の位置情報を送信するステップと、
   前記サーバが、前記テーブルを参照して、前記携帯端末から所定の距離範囲内に存在する被管理装置を特定し、前記携帯端末に通知するステップと、
   前記携帯端末が、自端末の方向を特定し、自端末から所定の距離範囲内に存在する被管理装置の中から、自端末の特定の方向に存在する所定の被管理装置を特定するステップと、
   前記携帯端末が、前記所定の被管理装置の状態を示すステータス情報を取得し、当該ステータス情報を前記表示部に表示する表示ステップと、を実行する、ことを特徴とする装置管理方法。
6. 表示部を備える携帯端末と、１又は複数の被管理装置と、サーバと、が通信ネットワークで接続されたシステムにおける装置管理方法であって、
   前記サーバに、前記１又は複数の被管理装置の位置情報を記述したテーブルを記憶するステップと、
   前記携帯端末が、自端末の位置及び方向を特定し、前記サーバに自端末の位置情報及び方向情報を送信するステップと、
   前記サーバが、前記テーブルを参照して、前記携帯端末から所定の距離範囲内、かつ、前記携帯端末の特定の方向に存在する所定の被管理装置を特定し、前記携帯端末に通知するステップと、
   前記携帯端末が、前記所定の被管理装置の状態を示すステータス情報を取得し、当該ステータス情報を前記表示部に表示する表示ステップと、を実行する、ことを特徴とする装置管理方法。
7. 表示部を備える携帯端末と、１又は複数の被管理装置と、が通信ネットワークで接続されたシステムにおける装置管理方法であって、
   前記携帯端末は、
   前記１又は複数の被管理装置の位置情報を記述したテーブルを記憶するステップと、
   自端末の位置及び方向を特定し、前記テーブルを参照して、自端末から所定の距離範囲内、かつ、自端末の特定の方向に存在する所定の被管理装置を特定するステップと、
   前記所定の被管理装置の状態を示すステータス情報を取得し、当該ステータス情報を前記表示部に表示する表示ステップと、を実行する、ことを特徴とする装置管理方法。
8. 前記携帯端末は、自端末の前記特定の方向を撮像する撮像部を備え、
   前記表示ステップでは、前記撮像部が撮像した前記所定の被管理装置の画像に前記ステータス情報を合成した画像を前記表示部に表示する、ことを特徴とする請求項５乃至７のいずれか一に記載の装置管理方法。
9. 前記表示ステップでは、前記携帯端末を動かした結果、前記所定の被管理装置が、前記携帯端末から所定の距離範囲内、又は、前記携帯端末の特定の方向に存在しなくなったときは、前記表示部に表示された前記ステータス情報を消去する、ことを特徴とする請求項５乃至８のいずれか一に記載の装置管理方法。
10. 前記表示ステップでは、前記ステータス情報を表示した後、前記所定の被管理装置を操作するための操作パネルを前記表示部に表示し、
    前記携帯端末は、前記操作パネルで指定された機能を前記所定の被管理装置に実行させる指示情報を送信する、ことを特徴とする請求項５乃至９のいずれか一に記載の装置管理方法。

Images