JP2013140440A - 情報処理装置およびその駆動方法、制御プログラム、可読記憶媒体 - Google Patents

Abstract

【課題】起動時または操作時に、現行動作に新たな動作を追加なく自動で、操作の簡便性と機密保持を両立させて、バイオメトリック認証を用いてセキュリティ管理を行う。
【解決手段】表示画面３にタッチパネルを備えた情報処理装置１において、タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサ６が設けられ、指紋センサ６により取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証手段１１１と、指紋認証手段による照合結果が一致の場合に、機密機能を持つ複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示手段１１２と、操作者の顔画像を撮影する顔画像認証用カメラ５と、顔画像認証用カメラ５で撮影した操作者の顔画像と情報処理装置１の管理者の登録顔画像とを照合する顔画像認証手段１１３を有している。
【選択図】図１

Description

本発明は、携帯電話装置に代表されるタッチパネルを備えた情報処理装置およびその駆動方法、この情報処理装置の駆動方法の各工程をコンピュータに実行させるための処理手順が記述された制御プログラム、この制御プログラムが格納されたコンピュータ読み取り可能な可読記憶媒体に関する。

この種の従来の情報処理装置は、例えば携帯電話装置などに用いられ、その表示画面にはタッチパネルが用いられている。電源投入後、表示画面上のタッチパネルに指先の腹部分（指紋側）をタッチすると複数のアイコンが表示画面上に表示され、引き続きアイコンを指先の腹部分でタッチすると、そのタッチしたアイコンに応じてアプリケーションが選択されると共にタッチパネルにより指先の腹部分で操作したユーザの指紋が読み取られる。従来の情報処理装置に読み取られたユーザの指紋情報は、登録された装置の管理者の指紋か否かが照合される。その情報処理装置による指紋照合の結果、読み取った指紋が実行権限がある管理者の指紋である場合にのみ、選択したアイコンのアプリケーションが実行される。このことが特許文献１に提案されている。

さらに、特許文献１では、当該アプリ―ケーションの実行が開始された後も、アイコンが表示画面上に表示され、その表示画面上のアイコンを指先の腹部分（指紋側）でタッチすることにより、タッチした指先の指紋が管理者の指紋か否かを照合し、否の場合には、一旦アプレケーションが実行された後でも、強制的にアプリケーションが終了されるようになっている。

図１３は、特許文献１に開示されている従来の携帯電話装置のシステム構成を示すブロック図である。

図１３に示すように、従来の携帯電話装置１００は、各種通信機器からの信号をアンテナＡＴで受信し、受信した信号をシステム制御部１０３に出力すると共に、システム制御部１０３で生成された送信信号をアンテナＡＴを介して各種通信機器に送信する無線処理部１０１と、スキャナ機能付きのタッチセンサ１０２ａおよび液晶表示パネル１０２ｂで構成された画面表示用のタッチパネル１０２と、ＣＰＵ（中演算処理装置）で構成され各部を制御するシステム制御部１０３と、システム制御部１０３からの音声データを音声に変換して出力すると共に、外部からの入力音声を音声データに変換してシステム制御部１０３に出力する音声処理部１０４と、ＲＯＭおよびＲＡＭで構成されて、ＣＰＵを実行させるためのＯＳプログラムおよび複数のアプリケーションプログラムなどの各種制御プログラムおよびそのデータが格納されたメモリ１０５とを有している。

タッチパネル１０２は、システム制御部１０３により制御されてアプリケーションプログラムを起動するためのアイコンや文字などの各種情報を表示画面上に表示する。タッチパネル１０２は、タッチセンサ１０２ａにより表示画面に対するユーザの指先の腹部分による操作指令を検出して操作指令信号をシステム制御部１０３に出力すると共に、表示画面に接触したユーザの指先の指紋を検出してその検出した指紋データをシステム制御部１０３に出力するようになっている。

図１４は、従来の携帯電話装置の動作において、セキュリティロックが設定されたアプリケーションを実行する機密管理動作を説明するためのフローチャートである。

図１４に示すように、まず、ステップＳ１０１でメインメニュー処理を経てセキュリティロックが設定されたアプリケーションの実行を開始する。このとき、ステップＳ１０２で表示画面上に、実行開始されたアプリケーションを操作するための操作メニューが表示される。

次に、装置の管理者または第３者が指先の腹部分（指紋側）で操作メニュー中の所定の操作項目にタッチすると（ステップＳ１０３）、そのタッチした指先の指紋がタッチセンサ１０２ａにより読み取られ、その読み取られた指紋データと予めメモリ１０５に登録された管理者の指紋データとが照合され（ステップＳ１０４）、その読み取られた指紋データと登録指紋データとが一致した場合（ステップＳ１０５でＹＥＳ）には、管理者であると判定されてステップＳ１０６の処理に移行する。その読み取られた指紋データと登録指紋データとが不一致の場合（ステップＳ１０５でＮＯ）には第３者であると判定されてステップＳ１０８の処理に移行する。

ステップＳ１０５で読み取られた指紋データと登録指紋データとが一致する場合にはステップＳ１０６で選択された操作メニューの実行を行い、アプリケーションの終了を確認するまでステップＳ１０２以降の動作を繰り返し、アプリケーションの終了を確認したら上記メインメニュー処理に戻る。

また、ステップＳ１０５で読み取られた指紋データと登録指紋データとが不一致の場合にはステップＳ１０８でアプリケーション再開に必要な設定情報として各種パラメータを保存し、ステップＳ１０９でフラグを「１」に設定して実行者が第３者であることを記録する。

その後、ステップＳ１１０で実行者の第３者がどのアプリケーションでどのような操作を実行しようとしたかについての操作履歴をメモリ１０５に記録し、ステップＳ１１１でアプリケーションを強制終了する。

特開２０１１−４９８７６号公報

特許文献１に開示されている上記従来の携帯電話装置では、タッチパネル１０２に指先でタッチした際に取得した指紋データを元に指紋認証を行いセキュリティを認証するが、タッチパネル１０２のタッチ位置認識精度は、タッチパネル１０２に構成された電極密度に依存するため、タッチ位置識別精度は精々３ｍｍ〜５ｍｍ程度で、タッチパネル１０２の表示精度が高くても、タッチパネル１０２のタッチ位置認識精度は、指紋認証の実行には全く不十分であるという問題を有していた。要するに、タッチパネル１０２には、指紋を認証できる精度がない。

したがって、管理者の指紋であっても、指紋照合の結果、登録指紋データと不一致と判断され得る。登録者の指紋でない場合であっても、指紋照合の結果、登録データと判断されたりする。このように、タッチパネル１０２で取得した指紋情報では、測定精度が低く、十分にセキュリティ性を保つことができず、装置の正規の管理者を非管理者と誤認したり、非管理者を正規の管理者と誤認したりする虞があった。

また、上記従来の携帯電話装置では、アプリケーションが実行開始された後のセキュリティ確保のため、アプリ―ケーションの実行の最中にアイコン表示画面に戻り、再度、指紋認証動作が必要で、正規の管理者が使用する際には操作が煩わしいという問題を有していた。

本発明は、上記従来の問題を解決するもので、起動時または操作時に、現行動作に新たな動作を追加することなく自動で、操作の簡便性と機密保持を両立させて、バイオメトリック認証を用いてセキュリティ管理を行うことができる情報処理装置およびその駆動方法、この情報処理装置の駆動方法の各工程をコンピュータに実行させるための処理手順が記述された制御プログラム、この制御プログラムが格納されたコンピュータ読み取り可能な可読記憶媒体を提供することを目的とする。

本発明の情報処理装置は、表示画面にタッチパネルを備えた情報処理装置において、該タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けられ、該指紋センサにより取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証手段と、該指紋認証手段による照合結果が一致の場合に、機密機能を持つ一または複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示手段とを有するものであり、そのことにより上記目的が達成される。

また、好ましくは、本発明の情報処理装置における指紋センサは、前記タッチパネルに対する指による起動スライド操作の延長線上の装置片方の端部または両端部に設けられている。

さらに、好ましくは、本発明の情報処理装置における指紋センサは、１または複数本の指の指紋が読み取り可能に構成され、前記指紋認証手段は、読み取られた１または複数本の指の指紋情報とこれに対応した管理者の登録指紋情報とを照合する。

さらに、好ましくは、本発明の情報処理装置における複数の指紋照合によりセキュリティが求められるアプリケーションの機密レベルが複数存在している。

さらに、好ましくは、本発明の情報処理装置において、第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとする。

さらに、好ましくは、本発明の情報処理装置において、第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合に第３の指紋照合を行い、該第３の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第３の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第３に求められるアプリケーションとする。

さらに、好ましくは、本発明の情報処理装置において、操作者の顔画像を撮影可能とする顔画像認証用カメラと、該顔画像認証用カメラで撮影した該操作者の顔画像と前記管理者の登録顔画像とを照合する顔画像認証手段と、顔画像照合が不一致の場合にアプリケーションを終了し、該顔画像照合が一致の場合にアプリケーションを続行するアプリ制御手段とをさらに有する。

さらに、好ましくは、本発明の情報処理装置におけるセキュリティレベルの重要度に応じて顔画像認証周期を段階的に短く設定している。

さらに、好ましくは、本発明の情報処理装置において、前記指紋認証手段または前記顔画像認証手段による照合結果が不一致の場合に、履歴データをバックアップして電源を遮断する電源遮断手段をさらに有する。

さらに、好ましくは、本発明の情報処理装置における指紋センサはラインセンサまたはエリアセンサで構成されている。

さらに、好ましくは、本発明の情報処理装置における指紋センサは複数の指の指紋を同時に取得可能なサイズを有している。

さらに、好ましくは、本発明の情報処理装置における表示画面エリアよりも指紋センサ周囲の表面摩擦係数を大きく設定している。

さらに、好ましくは、本発明の情報処理装置における顔画像認証手段は、顔画像の照合の他に、瞬きをしたかどうか、鼻の影が顔面に投影される所定方向の照明による撮像顔画像の鼻の影の長さを検出するかまたは、２Ｄカメラ２台からなる３Ｄカメラで３Ｄの画像検証を行う。

本発明の情報処理装置の駆動方法は、表示画面にタッチパネルを備えた情報処理装置の駆動方法において、該タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けられ、指紋認証手段が、該指紋センサにより取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証工程と、該指紋認証手段による照合結果が一致の場合に、アイコン画面表示手段が、機密機能を持つ一または複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示工程とを有するものであり、そのことにより上記目的が達成される。

また、好ましくは、本発明の情報処理装置の駆動方法における指紋センサは、前記タッチパネルに対する指による起動スライド操作の延長線上の装置片方の端部または両端部に設けられている。

さらに、好ましくは、本発明の情報処理装置の駆動方法における指紋センサは、１または複数本の指の指紋が読み取り可能に構成され、前記指紋認証工程で前記指紋認証手段が、読み取られた１または複数本の指の指紋情報とこれに対応した管理者の登録指紋情報とを照合する。

さらに、好ましくは、本発明の情報処理装置の駆動方法における複数の指紋照合によりセキュリティが求められるアプリケーションの機密レベルが複数存在している。

さらに、好ましくは、本発明の情報処理装置の駆動方法において、第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとする。

さらに、好ましくは、本発明の情報処理装置の駆動方法において、第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合に第３の指紋照合を行い、該第３の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第３の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第３に求められるアプリケーションとする。

さらに、好ましくは、本発明の情報処理装置の駆動方法における顔画像認証用カメラが操作者の顔画像を撮影する顔画像撮影工程と、顔画像認証手段が、該顔画像認証用カメラで撮影した該操作者の顔画像と前記管理者の登録顔画像とを照合する顔画像認証工程と、アプリ制御手段が、顔画像照合が不一致の場合にアプリケーションを終了し、該顔画像照合が一致の場合にアプリケーションを続行するアプリ制御工程とをさらに有する。

さらに、好ましくは、本発明の情報処理装置の駆動方法におけるセキュリティレベルの重要度に応じて顔画像認証周期を段階的に短く設定している。

さらに、好ましくは、本発明の情報処理装置の駆動方法における指紋認証手段または前記顔画像認証手段による照合結果が不一致の場合に、電源遮断手段が履歴データをバックアップして電源を遮断する電源遮断工程をさらに有する。

さらに、好ましくは、本発明の情報処理装置の駆動方法における顔画像認証工程は、前記顔画像認証手段が顔画像の照合の他に、瞬きをしたかどうか、所定の照明による撮像顔画像の鼻の影の長さを検出するかまたは、２Ｄカメラ２台からなる３Ｄカメラで３Ｄの画像検証を行う。

本発明の制御プログラムは、本発明の上記情報処理装置の駆動方法の各工程をコンピュータに実行させるための処理手順が記述されたものであり、そのことにより上記目的が達成される。

本発明の可読記憶媒体は、本発明の上記制御プログラムが格納されたコンピュータ読み取り可能なものであり、そのことにより上記目的が達成される。

上記構成により、以下、本発明の作用を説明する。

本発明においては、表示画面にタッチパネルを備えた情報処理装置において、該タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けられ、該指紋センサにより取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証手段と、該指紋認証手段による照合結果が一致の場合に、機密機能を持つアプリケーションに対応する複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示手段とを有している。さらに、情報処理装置は、操作者の顔画像（例えば虹彩など）を撮影可能とする顔画像認証用カメラと、該顔画像認証用カメラで撮影した該操作者の顔画像と前記管理者の登録顔画像とを照合する顔画像認証手段と、顔画像照合が不一致の場合にアプリケーションを終了し、該顔画像照合が一致の場合にアプリケーションを続行するアプリ制御手段とをさらに有している。

これによって、セキュリティの保持のための煩わしい操作を行うことなく、高度なセキュリティ保持を行うことが可能となる。また、アプリケーション動作の中断の際のセキュリティ操作忘れなどの場合も、機密保持で問題が発生しないようにすることが可能となる。さらに、携帯端末に限定されず、中型および大型サイズのタッチパネルにも適用可能である。

このように、タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けたので、起動時または操作時に、現行動作に新たな動作を追加することなく自動で、操作の簡便性と機密保持を両立させて、バイオメトリック認証を用いてセキュリティ管理を行うことが可能となる。

以上により、本発明によれば、タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けたため、起動時または操作時に、現行動作に新たな動作を追加することなく自動で、操作の簡便性と機密保持を両立させて、バイオメトリック認証を用いてセキュリティ管理を行うことができる。

本発明の実施形態１における情報処理装置の要部構成例を示す外観図であって、（ａ）はその正面図、（ｂ）はその背面図である。 図１の情報処理装置において、アプリケーション起動および指紋取得動作を説明するための正面図である。 （ａ）は、図１の情報処理装置１の変形例を示す外観正面図であって、（ｂ）および（ｃ）はアプリケーション起動動作および指紋取得動作を説明するための外観正面図である。 （ａ）は、図１の情報処理装置１の別の変形例を示す外観正面図であって、（ｂ）はアプリケーション起動動作および指紋取得動作を説明するための外観正面図である。 （ａ）は、図１の電子情報機器の更に別の変形例を示す外観正面図であって、（ｂ）はこの場合のアプリケーション起動動作および指紋取得動作を説明するための外観正面図である。 本発明の実施形態１における情報処理装置の基本システム構成例を示すブロック図である。 本発明の実施形態１における情報処理装置の具体的なシステム構成例を示すブロック図である。 図６および図７の記憶部に記憶されている各種情報の具体例を示す図である。 本実施形態１のアプリケーション起動および指紋取得照合動作、顔画像取得照合動作の第１事例を示すフローチャートである。 図９のバックグラウンド顔画像認証処理について詳細に説明するためのフローチャートである。 本実施形態１のアプリケーション起動および指紋取得照合動作、顔画像取得照合動作の第２事例を示すフローチャートである。 （ａ）〜（ｅ）は、図７および図１１の操作例とは異なる操作例を説明するための情報処理装置の正面図である。 特許文献１に開示されている従来の携帯電話装置のシステム構成を示すブロック図である。 従来の携帯電話装置の動作において、セキュリティロックが設定されたアプリケーションを実行する機密管理動作を説明するためのフローチャートである。

以下に、本発明の情報処理装置およびその駆動方法の実施形態１について図面を参照しながら詳細に説明する。なお、各図における構成部材のそれぞれの厚みや長さなどは図面作成上の観点から、図示する構成に限定されるものではない。

（実施形態１）
図１は、本発明の実施形態１における情報処理装置の要部構成例を示す外観図であって、（ａ）はその正面図、（ｂ）はその背面図である。

図１（ａ）に示すように、本実施形態１の情報処理装置１は、表面保護用の筐体２の表面中央に、ディスプレイ部およびその上のタッチセンサを内蔵したタッチパネル部で構成された表示画面３が大きく設けられている。表示画面３の外周上側には音声出力部４と顔画像認証用カメラ５とが左右に並んで設けられている。また、表示画面３の外周右側でかつその下側には、縦方向に細長い指紋認証用の指紋センサ６が設けられている。指紋センサ６の縦方向のサイズは表示画面３の右辺の下端から１／４辺程度のサイズである。さらに、表示画面３の外周下側には、その左側に電源をオンオフするキー入力部としてのボタンスイッチ７と、その右側に音声を集音する集音部８とが設けられている。一方、図１（ｂ）に示すように、筐体２の裏面の右上位置には撮像用のカメラモジュール９が設けられている。

表示画面３は、ディスプレイ部と、その上のタッチセンサを内蔵したタッチパネル部で構成されている。ディスプレイ部は、液晶表示パネルの他に、有機ＥＬ表示パネルや静止画像や動画などの映像を表示する表示パネルであってもよい。タッチパネルは、ディスプレイ部の上部に一体となって構成され、指やペンなどでタッチしてそのタッチ座標を読み取り、ディスプレイ部に当該情報を反映させる位置選択画面である。なお、マルチタッチ動作が可能なタッチパネルは現実には静電容量型に限定される。本実施形態１では、指一本のタッチ動作では抵抗膜方式でも静電容量型でも構わない。マルチタッチ方式のタッチパネルが増加傾向にある。

音声出力部４は、後述する制御部からの音声データを音声に変換して出力する。音声出力部４は、スピーカやイヤホンなどで構成され、音楽や声などを出力する。ステレオタイプであれば２チャネル以上の出力信号を出力する必要がある。

顔画像認証用カメラ５は、自分撮り用のカメラでありこれにより撮像された画像データを顔画像認証に用いる。この顔画像認証用カメラは、タッチパネル部を操作している人物の顔を撮像するカメラで、操作する自画像を撮影するために、タッチパネルの表示画面側に備えられる。数百万画素以上のＣＣＤやエリアセンサが望ましく、機密保持精度の向上のため、すでに実用化されている１０００万画素以上のＣＣＤやＣＭＯＳイメージセンサを用いることが望ましい。

指紋センサ６は、エリアセンサで構成される指紋読取装置であって、読み取った指紋から個人の識別精度を上げるために、ＣＣＤやＣＭＯＳイメージセンサを用いる。また、２次元の画像を読み取るエリアセンサであっても１次元に情報を読み取るラインセンサ であっても構わないが、指の移動速度で取得画像情報が不安定とならないようにするには、２次元センサが望ましい。ＬＥＤなどの光源と光センサを一体として構成し、光源で認証対象となる指紋領域を照射しその反射光を光電変換センサで受光する。なお、現在の光電変換センサでは、指紋の山と谷の間隔の１/１０以上の識別精度があり、指紋認証用として活用できる。エッジライト型ＬＥＤ部品とエリアセンサの組み合わせによって構成する数ｍｍ以下の狭い幅で構成できる。携帯電話用エッジライトは０．６ｍｍ厚程度の製品が実用化されている。ラインセンサも同程度の厚みである。

ボタンスイッチ７は、本ボタンをオンすることにより、電源遮断状態から初期画面の表示状態へと移行する。待ち受け画像や事項表示などのセキュリティに関係しない情報が表示されるが、この状態では、アプリケーション選択画面には至っていない。

集音部８は、マイクであり、外部からの入力音声を音声データに変換して後述する制御部に出力する。

画像撮像用カメラ９は、通常撮影用のカメラモジュールが組み込まれている。画像撮像用カメラ９は、周囲の画像や映像を撮像するカメラであって、表示画面３の裏面側に備えられる。数百万画素以上のＣＣＤやエリアセンサが備えられる。

ボタンスイッチ７による電源投入後の表示画面３の待ち受け画面からのアプリケーション選択画面において、アプリケーションを起動するための指のスライド動作方向の延長線上に指紋のある指先の腹部分がかかるように、筐体２の外周枠に沿って縦方向にエリアセンサなどの指紋センサ６が設けられている。

ここで、アプリケーション起動および指紋取得動作について図２を用いて詳細に説明する。

図２は、図１の情報処理装置において、アプリケーション起動および指紋取得動作を説明するための正面図である。

図２に示すように、スリープモードからアクティブモードに移行するため、指先のスライド動作（左から右へ）の延長線上の表示画面横で筐体２の端部に指紋認証モジュールとしてのセンサ手段６が組み込まれている。

１本の指先の腹部分（指紋側）によりタッチパネル３の表示画面上のアイコンを選択して起動し、起動した指先の操作動線方向に設けられた細長い指紋認証用のセンサ手段６上を指先の腹部分（指紋側）が通過させることにより指紋情報を取り込んで登録指紋データとの間で指紋認証を行う。このように、情報処理装置１の操作者は、指紋取得動作を別途行わなくても、アプリケーションを起動するために指の一連のスライド動作の中で指紋取得動作が含まれて、セキュリティ確保のための煩わしい操作が別途不要となる。アプリケーション起動動作の際に得られた指紋データに基づいてセキュリティを確保することができる。セキュリティ確保を必要とするアプリケーションには例えばメール、電話番号帳およびお財布機能などがある。

また、表示画面の上側に自分撮りのカメラモジュールとしての顔画像認証用カメラ５が組み込まれている。これによって、アプリケーション実行を開始した後も、顔画像認証用カメラ５で撮像した画像データで登録顔画像認証データとの間で顔画像認証を行うため、顔画像認証が一致せずに他人が使用した場合には強制的にアプケーションを終了させることができる。

なお、電源投入後の待ち受け画面やアプケーション選択画面などの表示状態の情報処理装置１を持った状態では、アプリケーションを起動するための指先のスライド動作は、人指し指でもよいが、親指で行う操作の方が安定して行え、かつ、親指の指紋取得領域が一番大きいため、照合する情報量が多く指紋認証としてはセキュリティ性が高くなる。

次に、指紋センサ６とは別に反対側に指紋センサを設けて人差し指と中指の各指紋認証を行う場合について図３を用いて説明する。

図３（ａ）は、図１の情報処理装置１の変形例を示す外観正面図であって、図３（ｂ）および図３（ｃ）はアプリケーション起動動作および指紋取得動作を説明するための外観正面図である。

図３（ａ）に示すように、本実施形態１の情報処理装置１Ａは、筐体２の表面中央に、ディスプレイ部およびその上のタッチセンサを内蔵したタッチパネル部で構成された表示画面３が大きく設けられている。表示画面３の外周上側には音声出力部４と顔画像認証用カメラ５とが左右に並んで設けられている。また、表示画面３の外周右側でかつその下側には、縦方向に細長い指紋認証用の指紋センサ６が設けられている。この指紋センサ６の縦方向のサイズは表示画面３の右辺の下端から１／４辺程度のサイズである。さらに、表示画面３の外周下側には、その左側に電源をオンオフするキー入力部としてのボタンスイッチ７と、その右側に音声を集音する集音部８とが設けられている。さらに、表示画面３の外周左側でかつその中央よりやや下側には、縦方向に細長い指紋認証用の指紋センサ４Ａが設けられている。指紋センサ６Ａは表示画面３の左辺の中央位置から下側に１／４辺程度のサイズで設けられている。

図３（ａ）に示すように、ボタンスイッチ７による電源投入後の表示画面３の待ち受け画面からアプリケーション選択画面において、選択したアプリケーションを起動するための人指し指の左から右側へのスライド動作方向の延長線上に指紋のある指先の腹部分がかかるように、筐体２の右側の外周枠に沿って縦方向にエリアセンサなどの指紋センサ６が設けられている。また、図３（ｂ）に示すように、選択したアプリケーションを起動するための中指の右から左側へのスライド動作方向の延長線上に指紋のある指先の腹部分がかかるように、筐体２の左側の外周枠に沿って縦方向にエリアセンサなどのセンサ手段６Ａが設けられている。

このように、最初のアプリケーションの起動と指紋認証を行う際のスライド動作する指と、次のアプリケーションを選択する際のスライド動作する指を異なる指とすることにより機密性を高めることができる。また、左右に指紋センサ６，６Ａを設け、次のアプリケーション選択動作のスライド動作方向を、最初のスライド動作と反対方向とし、左右の指紋センサ６，６Ａの位置を異なる高さに設けることで手の操作位置を変更する必要がなくなりより操作が簡便化される。

次に、複数の指、例えば人差し指と中指でセキュリティの高いアプリケーションを選択する選択動作の中で人差し指と中指の各指紋を同時に照合する場合について説明する。この場合、１本の親指による指紋照合を行う動作に比べて、人差し指と中指の２本の方が機密性保持が高まることになる。

図４（ａ）は、図１の情報処理装置１の別の変形例を示す外観正面図であって、図４（ｂ）はアプリケーション起動動作および指紋取得動作を説明するための外観正面図である。

図４（ａ）に示すように、本実施形態１の情報処理装置１Ｂは、筐体２の表面中央に、ディスプレイ部およびその上のタッチセンサを内蔵したタッチパネル部で構成された表示画面３が大きく設けられている。表示画面３の外周上側の筐体２上には音声出力部４と顔画像認証用カメラ５とが左右に並んで設けられている。また、表示画面３の外周右側の筐体２上には、縦方向に細長い指紋認証用の指紋センサ６Ｂが表示画面３の右辺に沿っていっぱいまで長く設けられている。さらに、表示画面３の外周下側の筐体２上には、その左側に電源をオンオフするキー入力部としてのボタンスイッチ７と、その右側に音声を集音する集音部８とが設けられている。

ボタンスイッチ７による電源投入後の表示画面３における待ち受け画面からアプリケーション選択画面において、選択したアプリケーションを起動するための複数の指の同時スライド動作方向の延長線上に指紋のある複数の指先がかかるように、筐体２の外周枠に沿って縦方向に長くエリアセンサなどのセンサ手段６Ｂが設けられている。

図４（ｂ）に示すように、複数の指、例えば人差し指と中指でセキュリティの高いアプリケーションを選択する選択動作の中で人差し指と中指の各指紋を同時に照合する。これによって、１本の例えば親指による指紋照合を行う動作に比べて、人差し指と中指の２本の方が機密性保持を高めることができる。

次に、複数の指、例えば人差し指と中指の各指紋を同時に照合し、さらにこれとは別の指、例えば薬指と子指の各指紋を同時に照合して合計４本の指の指紋照合する場合について説明する。この場合、２本の指紋照合を行う動作に比べて、４本の方が機密性保持を高めることができる。

図５（ａ）は、図１の電子情報機器の更に別の変形例を示す外観正面図であって、図５（ｂ）はこの場合のアプリケーション起動動作および指紋取得動作を説明するための外観正面図である。

図５（ａ）に示すように、本実施形態１の情報処理装置１Ｃは、筐体２の表面中央に、ディスプレイ部およびその上のタッチセンサを内蔵したタッチパネル部で構成された表示画面３が大きく設けられている。表示画面３の外周上側には音声出力部４と顔画像認証用カメラ５とが左右に並んで設けられている。また、表示画面３の外周右側の筐体２上には、縦方向に細長い指紋認証用の指紋センサ６Ｂが表示画面３の右辺に沿っていっぱいまで長く設けられている。また同様に、表示画面３の外周左側の筐体２上には、縦方向に細長い指紋認証用の指紋センサ６Ｃが表示画面３の左辺に沿っていっぱいまで長く設けられている。さらに、表示画面３の外周下側には、その左側に電源をオンオフするキー入力部としてのボタンスイッチ７と、その右側に音声を集音する集音部８とが設けられている。

ボタンスイッチ７による電源投入後の表示画面３における待ち受け画面からアプリケーション選択画面において、選択したアプリケーションを起動するための複数の指、例えば人差し指と中指の同時スライド動作方向（左から右）の延長線上に指紋のある複数（ここでは２本）の指先がかかるように、筐体２の外周枠に沿って縦方向に長くエリアセンサなどのセンサ手段６Ｂが設けられている。

図５（ｂ）に示すように、別の複数（ここでは２本）の指、例えば薬指と子指でセキュリティの高いアプリケーションを選択する選択動作の中で薬指と子指の各指紋を同時に照合する。これによって、２本の例えば人差し指と中指の同時指紋照合を行う動作に比べても、人差し指と中指の２本の他に、薬指と子指方の２本が加わって計４本の指紋認証となり、いっそう機密性保持を高めることができる。

指紋センサ６Ｂ、６Ｃを、複数の指の指紋が容易に取得できる縦方向の縦方向幅サイズまで広げ、例えば情報処理装置１Ｂ、１Ｃの表示画面３の縦辺サイズと同程度の縦方向幅サイズまで広げたことにより、複数指の指紋を同時に取得することができる。この結果、最初のアプリケーションの起動のためのスライド動作により、最初のアプリケーションの表示を飛ばして、いきなり、２番目のアプリケーションのアイコン表示を行うことができ、操作者がお財布携帯動作などのセキュリティ保持を求められるアプリケーションを行う時の操作回数を削減できて煩わしさを低減することができる。

なお、本実施形態１では、同時に２本の指の指紋を読み取る指紋センサ６Ｂ、６Ｃの横方向幅サイズを１本の指の指紋を検出する指紋センサ６、６Ａと同等の横方向幅サイズとしたが、これに限らず、２本の指の指紋を検出する指紋センサ６Ｂ、６Ｃを１本の指の指紋を検出する指紋センサ６、６Ａに比べて横方向幅サイズを太く構成して指紋を読み取り易くするように構成してもよい。

次に、本実施形態１の情報処理装置１または１Ｂにおける基本システム構成について図６を用いて詳細に説明する。

図６は、本発明の実施形態１における情報処理装置１または１Ｂの基本システム構成例を示すブロック図である。

図６において、本実施形態１の情報処理装置１または１Ｂは、コンピュータシステムで構成されており、各種入力指令を可能とする画面入力装置としてのタッチパネル３１、作業者の指紋を入力するための指紋センサ６または６Ｂ、およびボタンスイッチ７などの操作入力部と、各種入力指令に応じて表示画面３上に、初期画面（待受画面）、アプリケーション選択画面および処理結果画面などの各種画像を表示可能とするディスプレイ部３２と、全体的な制御を行うＣＰＵ（中央演算処理装置）で構成された制御部１１と、ＣＰＵの起動時にワークメモリとして働く一時記憶手段としてのＲＡＭおよび、ＣＰＵを動作させるための制御プログラムおよびこれに用いる各種データなどが記録されたコンピュータ読み取り可能な可読記録媒体（記憶手段）としてのＲＯＭを構成する記憶部１２と、データを送受信する無線送受信部１３（または有線送受信部）と、ディスプレイ部３２を制御するディスプレイ制御部１４と、タッチパネル部３１を制御するタッチパネル制御部１５と、指紋認証を行う指紋認証部１６とを有している。

制御部１１は、操作入力部からの入力指令および入力情報の他、ＲＯＭ内からＲＡＭ内に読み出された制御プログラムおよびこれに用いる各種データに基づいて、操作者の指紋と管理者の登録指紋情報とを照合する指紋認証手段１１１と、指紋認証が一致の場合にアプリケーション選択画面を表示するアイコン画面表示手段１１２と、履歴データをバックアップして電源を遮断する電源遮断手段１１５とを有している。

この場合に、制御部１１としては、操作者の顔画像と管理者の登録顔画像とを照合する顔画像認証手段１１３と、顔画像認証が不一致の場合にアプリケーションを終了し、顔画像認証が一致の場合にアプリケーションを続行するするアプリ制御手段１１４とを有していてもよい。顔画像認証手段１１３およびアプリ制御手段１１４を有する場合には、次の図１１で説明する顔画像認証用カメラ５、顔画像認証部１８およびタイマ１９を必要とする。

記憶部１２は、アプリケーション用プログラムを記憶するアプリケーション記憶部１２１、情報処理装置１の制御プログラムを記憶する制御プログラム記憶部１２２、指紋情報や顔画像情報などの認証用データ記憶部１２３および、キャッシュ関連情報を記憶するキャッシュ情報記憶部１２４を有するＲＯＭと、一時蓄積情報などを記憶するＲＡＭとを有している。記憶部１２は、ディスクやＩＣメモリなどのＲＯＭを構成する可読記録媒体を有している。この制御プログラムおよびこれに用いる各種データは、ディスクやＩＣメモリなどからＲＯＭにダウンロードされてもよいし、コンピュータのハードディスクからＲＯＭにダウンロードされてもよいし、無線または有線、インターネットなどを介してＲＯＭにダウンロードされてもよい。情報処理装置１または１Ｂの駆動方法をコンピュータに実行させるための処理手順が記述された制御プログラムをコンピュータ読み取り可能な可読記憶媒体に格納して、コンピュータ（ＣＰＵ）により制御するものである。

無線送受信部１３は、各種通信機器からの信号をアンテナで受信し、受信した信号を制御部１１に出力すると共に、制御部１１で生成された送信信号をアンテナを介して各種通信機器に送信する。要するに、無線送受信部１３は、アンテナを介して外部の通信機器と無線で情報の送受信を行う。

ディスプレイ制御部１４は、ディスプレイ部３２への表示を制御する。

タッチパネル制御部１５は、指先によるタッチパネル部３１への入力位置情報を読み取って、その入力位置情報をデータ処理してディスプレイ部３２のアイコンの位置情報に反映させる。ディスプレイ部３２、タッチパネル部３１およびタッチパネル制御部１５が一体となってタッチパネル装置として機能する。

指紋認証部１６は、事前に記憶部１２に記憶されている管理者の登録指紋情報と指紋センサ６または６Ｂで取得した指紋情報とを比較して、一致するか否かを照合する。一致する場合のみ、機密保持を伴うアプリケーションを実行可能とする。

なお、図８の基本システム構成例では、顔画像認証用カメラ５、顔画像認証部１８、音声処理部１７、音声出力部４、集音部８、タイマ部１９および画像撮像用カメラ９については本発明の必須事項ではないのでここでは説明していないが、当然これらを有していても構わない。この場合について次の図７で具体的なシステム構成例として説明する。

次に、本実施形態１の情報処理装置１Ａ、１Ｃにおける具体的なシステム構成について図７を用いて詳細に説明する。図７では、第１指紋センサ６および第２指紋センサ６Ａを表示画面３の左右に有するかまたは、第１指紋センサ６Ｂおよび第２指紋センサ６Ｃを表示画面３の左右に有する場合について説明する。

図７は、本発明の実施形態１における情報処理装置１Ａまたは１Ｃの具体的なシステム構成例を示すブロック図である。

図７において、本実施形態１の情報処理装置１Ａまたは１Ｃは、コンピュータシステムで構成されており、各種入力指令を可能とする画面入力装置としてのタッチパネル部３１、作業者の指紋を入力するための第１指紋センサ６および第２指紋センサ６Ａ、または第１指紋センサ６Ｂおよび第２指紋センサ６Ｃ、およびボタンスイッチ７などの操作入力部と、各種入力指令に応じて表示画面３上に、初期画面（待受画面）、アプリケーション選択画面および処理結果画面などの各種画像を表示可能とするディスプレイ部３２と、全体的な制御を行うＣＰＵ（中央演算処理装置）で構成された制御部１１Ａと、ＣＰＵの起動時にワークメモリとして働く一時記憶手段としてのＲＡＭおよび、ＣＰＵを動作させるための制御プログラムおよびこれに用いる各種データなどが記録されたコンピュータ読み取り可能な可読記録媒体（記憶手段）としてのＲＯＭを構成する記憶部１２と、データを送受信する無線送受信部１３（または有線送受信部）と、ディスプレイ部３２を制御するディスプレイ制御部１４と、タッチパネル部３１を制御するタッチパネル制御部１５と、指紋認証を行う第１指紋認証部１６Ａおよび第２指紋認証部１６Ｂと、音声と音声信号間の変換を行う音声処理部１７と、顔画像照合を行う顔画像認証部１８と、定期的な顔画像認証の時間を設定するためのタイマ部１９とを有している。

制御部１１Ａは、操作入力部からの入力指令および入力情報の他、ＲＯＭ内からＲＡＭ内に読み出された制御プログラムおよびこれに用いる各種データに基づいて、操作者の指紋と管理者の登録指紋情報とを照合する指紋認証手段１１１Ａと、指紋認証が一致の場合にアプリケーション選択画面を表示するアイコン画面表示手段１１２Ａと、操作者の顔画像と管理者の登録顔画像とを照合する顔画像認証手段１１３Ａと、顔画像認証が不一致の場合にアプリケーションを終了し、顔画像認証が一致の場合にアプリケーションを続行するするアプリ制御手段１１４Ａと、履歴データをバックアップして電源を遮断する電源遮断手段１１５Ａとを有している。

指紋認証手段１１１Ａによって第１指紋照合と第２指紋照合を行い、第１指紋照合と第２指紋照合によってセキュリティが求められるアプリケーションの機密レベルが複数存在している。第１指紋照合で一致した場合に前記第２指紋照合を行い、第２指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、第２指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとする。

記憶部１２は、アプリケーション用プログラムを記憶するアプリケーション記憶部１２１、情報処理装置１の制御プログラムを記憶する制御プログラム記憶部１２２、指紋情報や顔画像情報などの認証用データ記憶部１２３および、キャッシュ関連情報を記憶するキャッシュ情報記憶部１２４を有するＲＯＭと、一時蓄積情報などを記憶するワークメモリとしてのＲＡＭとを有している。記憶部１２は、ディスクやＩＣメモリなどのＲＯＭを構成する可読記録媒体を有している。この制御プログラムおよびこれに用いる各種データは、ディスクやＩＣメモリなどからＲＯＭにダウンロードされてもよいし、コンピュータのハードディスクからＲＯＭにダウンロードされてもよいし、無線または有線、インターネットなどを介してＲＯＭにダウンロードされてもよい。情報処理装置１Ａまたは１Ｃの駆動方法をコンピュータに実行させるための処理手順が記述された制御プログラムをコンピュータ読み取り可能な可読記憶媒体に格納して、コンピュータ（ＣＰＵ）により制御するものである。

無線送受信部１３は、各種通信機器からの信号をアンテナで受信し、受信した信号を制御部１１に出力すると共に、制御部１１で生成された送信信号をアンテナを介して各種通信機器に送信する。要するに、無線送受信部１３は、アンテナを介して外部の通信機器と無線で情報の送受信を行う。

ディスプレイ制御部１４は、ディスプレイ部３２への表示を制御する。

タッチパネル制御部１５は、指先によるタッチパネル部３１への入力位置情報を読み取って、その入力位置情報をデータ処理してディスプレイ部３２のアイコンの位置情報に反映させる。ディスプレイ部３２、タッチパネル部３１およびタッチパネル制御部１５が一体となってタッチパネル装置として機能する。

第１指紋認証部１６Ａは、事前に記憶部１２に記憶されている管理者の登録指紋情報と指紋センサ６および６Ａで取得した指紋情報とをそれぞれ比較して、それぞれが一致するか否かを照合する。それぞれが共に一致する場合のみ、機密保持を伴うアプリケーションを実行可能とする。

第２指紋認証部１６Ｂは、事前に記憶部１２に記憶されている管理者の登録指紋情報と指紋センサ６Ｂよび６Ｃで取得した指紋情報とをそれぞれ比較して、それぞれが一致するか否かを照合する。それぞれが共に一致する場合のみ、機密保持を伴うアプリケーションを実行可能とする。

音声処理部１７は、音声信号をデータ処理して音声出力部４（スピーカ）から人間に聞こえる音声に変換して出力すると共に、音声をマイクロフォンなどの集音部８で受けて音声信号に変換する。音声信号は、無線送受信部１３からアンテナＡＴを介して送受信され、また、記憶装置１２に音声信号データとして記憶される。

顔画像認証部１８は、事前に記憶部１２の認証用データ記憶部１２３に記憶されている管理者の登録顔画像情報と顔画像認証用カメラ５で取得した操作者の顔画像情報とを比較して、一致するか否かを照合する。一致する場合のみ、選択した機密保持を伴うアプリケーションが継続して実行可能となる。

タイマ部１９は、時計機能やカウンタ機能として動作する部分で、設定された所定時間毎に顔画像認証の動作を行う際は、当該所定時間のカウンタとして動作する。顔画像周期設定部１９Ａとしての顔画像認証周期時間設定用レジスタはタイマ部１９に設けられている。

したがって、顔画像認証用カメラ５と顔画像認証部１８を備えることにより、機密性が求められるアプリケーション起動後に他人にそのアプリケーションを操作されることを自動的に回避することができる。また、指紋センサ６および６Ａ（または６Ｂおよび６Ｃ）の２セットを備えたので、一方が故障の場合も、制御部１１Ａが情報処理装置１Ａまたは１Ｃの動作を停止することなく他方の正常動作の方で認証動作を行うように制御することもできて、制限なく正常に使用できる。

図８は、図６および図７の記憶部１２に記憶されている各種情報の具体例を示す図である。

図８に示すように、アプリケーション記憶部１２１は、時計機能、ゲーム機能、通信機能、電話番号帳機能、財布機能およびメール機能などの各種のアプリケーション用プログラムを記憶する。制御プログラム記憶部１２２は、表示制御プログラム、指紋認証制御プログラム、顔画像認証制御プログラム、通信制御プログラムおよび画像撮像制御プログラムなどの各種の制御プログラムを記憶する、認証用データ記憶部１２３は、指紋情報、顔画像情報および虹彩情報などのやバイオメトリック情報を記憶する。キャッシュ情報記憶部１２４は、残高と支払い情報、カード管理情報および銀行口座情報などのキャッシュ関連情報を記憶する。これらの照合のための指紋情報や顔画像情報は予め記憶部１２に記憶されている。これらの照合情報は、一旦記憶された後は、書き換えができない構成であることが望ましい。

上記構成により、その動作を説明する。

図９は、本実施形態１の報処理装置１においてアプリケーション起動および指紋取得照合動作、顔画像取得照合動作の第１事例を示すフローチャートである。

図９に示すように、まず、ステップＳ１でボタンスイッチ７を押して電源を投入する。初期状態として指紋センサ６または６Ｂ、顔画像認証用カメラ５、顔画像認証周期時間用カウンタは非アクティブである。

次に、ステップＳ２で初期画面表示をして指紋センサ６または６Ｂをアクティブ化する。

続いて、ステップＳ３で情報処理装置１または１Ｂの表示画面３に対して指の腹部分でタッチして横方向に移動させると共に、表示画面３近傍の指紋センサ６または６Ｂを指の腹部分が横切るように指の腹部分をスライド移動させて指紋センサ６または６Ｂにて指紋を読み取る。

その後、ステップＳ４で指紋認証手段１１１が指紋センサ６または６Ｂで読み取った操作者の指紋と登録された管理者の指紋とを比較認証する。ステップＳ４の指紋認証で操作者の指紋情報と登録指紋情報とが一致しなかった場合（ＮＯ）には、ステップＳ１１で電源遮断手段１１５が履歴データをバックアップした後に次のステップＳ１２で電源遮断を行う。また、ステップＳ４の指紋認証で操作者の指紋情報と登録指紋情報とが一致した場合（ＹＥＳ）には、次のステップＳ５の処理に移行する。

さらに、ステップＳ５では、アイコン画面表示手段１１２がｍ種類のアプリケーションのアイコンが表示されるアプリケーション選択画面を表示画面３に表示する。

さらに、ステップＳ６で顔画像認証用カメラ５をアクティブ化して、ステップＳ７で顔画像認証周期時間をレジスタに設定する。ステップＳ８で顔画像認証手段１１３がバックグラウンド顔画像認証処理を実行する。このステップＳ８のバックグラウンド顔画像認証処理については次の図１０で詳細に説明する。

次に、ステップＳ４の指紋認証がＯＫでかつステップＳ８のバックグラウンド顔画像認証がＯＫであれば、ステップＳ９で目的のアプリケーションのアイコンを指でタッチして選択する。これによって、目的のアプリケーションを表示画面３上で表示しつつ実行する。

続いて、ステップＳ１０で全ての選択すべきアプリケーションが終了するまで待ち、ステップＳ１０で全ての選択すべきアプリケーションが終了した場合（ＹＥＳ）に、ステップＳ１１で履歴データをバックアップした後に次のステップＳ１２で電源遮断を行ってそのアプリケーションの選択を終了する。

図１０は、図９のバックグラウンド顔画像認証処理について詳細に説明するためのフローチャートである。

図１０に示すように、ステップＳ８のバックグラウンド顔画像認証処理において、まず、ステップＳ８１で顔画像認証用周期カウンタに、顔画像認証周期時間が設定されたレジスタから顔画像認証周期時間をロードする。さらに、ステップＳ８２で顔画像認証用周期カウンタのカウントダウンを行う。ステップＳ８３で顔画像認証用周期カウンタのカウント値が「０」になるまで顔画像認証用周期カウンタのカウントダウンを行う。

次に、ステップＳ８４で顔画像認証用カメラ５で顔画像を撮影する。ステップＳ８５で顔画像認証処理を行う。即ち、顔画像認証が不一致になるまで、顔画像認証処理を行うと共に、顔画像認証が一致の場合（ＹＥＳ）に図９のステップＳ９の処理に移行する。顔画像認証処理としては、定期的に、顔画像認証用カメラ５で撮影した操作者の顔画像と、登録された管理者の顔画像とを比較して一致しているかどうかを判定する。

続いて、ステップＳ８５で顔画像認証が不一致の場合（ＮＯ）にステップＳ８６でアプリ制御手段１１４が実行中のアプリケーションの強制ログアウト処理を行う。その後、ステップＳ８７で電源遮断手段１１５が履歴データをバックアップした後に次のステップＳ８８で電源遮断を行ってそのアプリケーションの選択を終了する。

以上のように、指紋認証の後にセキュリティが求められるアプリケーションが実行されると、顔情報認証動作が起動される。顔画像認証動作は、アプリケーション実行時のバックグランド認証動作で、所定時間経過毎にアプリケーション実行時に割り込み動作が行われ、顔情報認証動作が行われ、不一致と判断された場合は、これまでのアプリケーション履歴情報が保存された後に、電源が遮断される。また、一致と判断された場合は、アプリ制御手段１１４がアプリケーション動作を継続して実行する。

次に、セキュリティが求められるアプリケーションの機密レベルが複数存在する場合、顔情報認証周期が機密レベルが高いほど短く設定されている場合を図１１で説明する。その他は、図９の場合と同じである。要するに、セキュリティレベルの重要度に応じて顔画像認証周期を段階的に短く設定している
図１１は、本実施形態１の情報処理装置１Ａにおいてアプリケーション起動および指紋取得照合動作、顔画像取得照合動作の第２事例を示すフローチャートである。

図１１に示すように、まず、ステップＳ２１でボタンスイッチ７を押して電源を投入する。初期状態として指紋センサ６および６Ａ、または６Ｂおよび６Ｃ、顔画像認証用カメラ５、顔画像認証周期時間用カウンタは非アクティブである。

次に、ステップＳ２２で初期画面表示をして指紋センサ６および６Ａ、または６Ｂおよび６Ｃをアクティブ化する。

続いて、ステップＳ２３で情報処理装置１Ａまたは１Ｃの表示画面３に対して指の腹部分でタッチして横方向に移動させると共に、表示画面３近傍の指紋センサ６または６Ｂを指の腹部分が横切るように指の腹部分をそれぞれ移動させて指紋センサ６または６Ｂにて指紋をそれぞれ読み取る。

その後、ステップＳ２４で指紋認証手段１１１Ａが指紋センサ６または６Ｂで読み取った操作者の指紋と登録された管理者の指紋とを比較認証する。ステップＳ２４の指紋認証で操作者の指紋情報と登録指紋情報とが一致しなかった場合（ＮＯ）には、電源遮断手段１１５Ａが、ステップＳ３４で履歴データをバックアップした後に次のステップＳ４０で電源遮断を行ってその選択したアプリケーションを終了する。また、ステップＳ２４の指紋認証で操作者の指紋情報と登録指紋情報とが一致した場合（ＹＥＳ）には、次のステップＳ２５のアイコン選択画面表示処理に移行する。

さらに、ステップＳ２５では、アイコン画面表示手段１１２Ａによりｍ種類のアプリケーションの各アイコンが表示されるアプリケーション選択画面が表示画面３上に表示される。ｍ種類（ｍは正の整数）のアプリケーションの各アイコンから操作者は所定のアイコンを選択して起動させることができる。

さらに、ステップＳ２７で指紋認証手段１１１Ａが、ステップＳ２６で指紋センサ６Ａまたは６Ｃで読み取った操作者の他の指の指紋と登録された管理者の指紋とを比較認証する。ステップＳ２７の指紋認証で操作者の他の指の指紋情報とこれに対応する登録指紋情報とが一致しなかった場合（ＮＯ）には、ステップＳ３５の処理に移行し、また、ステップＳ２７の指紋認証で操作者の他の指の指紋情報と登録指紋情報とが一致した場合（ＹＥＳ）には、次のステップＳ２８のアイコン選択画面表示処理に移行する。

さらに、ステップＳ２８では、アイコン画面表示手段１１２Ａによりｎ種類のアプリケーションの各アイコンが表示されるアプリケーション選択画面が表示画面３上に表示される。アプリケーションＢｉはアプリケーションＡｉよりもセキュリティレベルが高い。ｎ種類（ｎは正の整数）のアプリケーションの各アイコンから操作者は所定のアイコンを選択して起動させることができる。

さらに、ステップＳ２９で顔画像認証用カメラ５をアクティブ化して、ステップＳ３０で第２の顔画像認証周波時間Ｔ２（Ｔ２＜Ｔ１）をレジスタに設定する。ステップＳ３１で顔画像認証手段１１３Ａがバックグラウンド顔画像認証処理を実行する。このステップＳ３１のバックグラウンド顔画像認証処理については上記図１０で詳細を説明している。図１０のステップＳ８５で顔画像認証が不一致の場合（ＮＯ）にステップＳ８６でアプリ制御手段１１４Ａが実行中のアプリケーションの強制ログアウト処理を行う。その後、ステップＳ８７で電源遮断手段１１５Ａが履歴データをバックアップした後に次のステップＳ８８で電源遮断を行ってそのアプリケーションの選択を終了する。

次に、ステップＳ２７の指紋認証がＯＫでかつステップＳ３１のバックグラウンド顔画像認証がＯＫであれば、ステップＳ３２で目的のアプリケーションのアイコンを指でタッチして選択する。これによって、目的のアプリケーションを表示画面３上で表示しつつ実行する。

続いて、ステップＳ３３でｎ種類の全ての選択すべきアプリケーションが終了するまで待ち、ステップＳ３３で全ての選択すべきアプリケーションが終了した場合（ＹＥＳ）に、電源遮断手段１１５Ａが、ステップＳ３４で履歴データをバックアップした後に次のステップＳ４０で電源遮断を行ってそのアプリケーションの選択を終了する。

一方、ステップＳ２７の指紋認証で操作者の他の指の指紋情報とこれに対応する登録指紋情報とが一致しなかった場合（ＮＯ）に、ステップＳ３５の処理に移行し、ステップＳ３５で顔画像認証用カメラ５をアクティブ化して、ステップＳ３６で第１の顔画像認証周波時間Ｔ１をレジスタに設定する。ステップＳ３７で顔画像認証手段１１３Ａがバックグラウンド顔画像認証処理を実行する。このステップＳ３７のバックグラウンド顔画像認証処理については上記図１０で詳細を説明している。図１０のステップＳ８５で顔画像認証が不一致の場合（ＮＯ）にステップＳ８６でアプリ制御手段１１４Ａが実行中のアプリケーションの強制ログアウト処理を行う。その後、ステップＳ８７で電源遮断手段１１５Ａが履歴データをバックアップした後に次のステップＳ８８で電源遮断を行ってそのアプリケーションの選択を終了する。

次に、ステップＳ２４の指紋認証がＯＫでかつステップＳ３７のバックグラウンド顔画像認証がＯＫであれば、ステップＳ３８で目的のアプリケーションのアイコンを指でタッチして選択する。これによって、目的のアプリケーションを表示画面３上で表示しつつ実行する。

続いて、ステップＳ３８でｍ種類の全ての選択すべきアプリケーションが終了するまで待ち、ステップＳ３８で全ての選択すべきアプリケーションが終了した場合（ＹＥＳ）に、電源遮断手段１１５Ａが、ステップＳ３４で履歴データをバックアップした後に次のステップＳ４０で電源遮断を行ってそのアプリケーションの選択を終了する。

本実施形態１の情報処理装置の駆動方法は、タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサ６が設けられ、指紋認証手段が、指紋センサ６により取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証工程と、アイコン画面表示手段が、指紋認証手段による照合結果が一致の場合に、機密機能を持つ一または複数のアイコンのアイコン選択画面を表示し、照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示工程と、顔画像認証用カメラ５が操作者の顔画像を撮影する顔画像撮影工程と、顔画像認証手段が、顔画像認証用カメラ５で撮影した操作者の顔画像と管理者の登録顔画像とを照合する顔画像認証工程と、アプリ制御手段が、顔画像照合が不一致の場合にアプリケーションを終了し、顔画像照合が一致の場合にアプリケーションを続行するアプリ制御工程と、指紋認証手段または顔画像認証手段による照合結果が不一致の場合に、電源遮断手段が履歴データをバックアップして電源を遮断する電源遮断工程とを有している。

以上により、本実施形態１によれば、表示画面３にタッチパネルを備えた例えば情報処理装置１において、タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサ６が設けられ、指紋センサ６により取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証手段１１１と、指紋認証手段による照合結果が一致の場合に、機密機能を持つアプリケーションに対応する複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示手段１１２と、操作者の顔画像を撮影する顔画像認証用カメラ５と、顔画像認証用カメラ５で撮影した操作者の顔画像と管理者の登録顔画像とを照合する顔画像認証手段１１３と、顔画像照合が不一致の場合にアプリケーションを終了し、顔画像照合が一致の場合にアプリケーションを続行するアプリ制御手段１１４とを有している。

タッチセンサを備えた情報処理装置１および１Ａ〜１Ｄにおいて、起動スライド操作の動作延長線上の装置端部に指紋センサを設けたことにより、操作性の向上とセキュリティ確保の両立が可能となる。

また、指紋センサはラインセンサまたはエリアセンサであるため、額縁の幅を広くすることなく縦長の幅の狭い指紋センサを備えた情報処理装置１および１Ａ〜１Ｄを実現することができる。

さらに、指紋センサは複数の指の指紋を同時に取得可能な大きさを有するため、複数の指紋の取得が一連のスライド動作で可能であり、操作性とセキュリティ性を両立して向上できる。

さらに、情報処理装置１および１Ａ〜１Ｄには顔画像認証用カメラ５を備えているため、セキュリティが求められるアプリケーションの実行開始された後も、顔画像認証により、新たなスライド操作を行うことなく自動的にセキュリティを確保できる。また、正規の管理者が操作する場合は中断することなく上記アプリケーションを実行できる。

さらに、セキュリティレベルの重要度に応じて、顔画像認証周期を段階的に短くするため、高いセキュリティレベルのアプリケーション実行時には、そのレベル応じたセキュリティ確保を行うことができる。

さらに、スライド操作は情報処理装置１および１Ａ〜１Ｄ以外のタブレット型端末、大型情報処理装置などについても全く同様に実現可能である。

以上により、ユーザが携帯電話装置に代表されるタッチパネルを備えた情報処理装置を操作する場合において、起動時または操作時に、現行動作に新たな動作を追加することなく簡便な操作で自動的に、操作の簡便性と機密保持を両立させて、バイオメトリック認証を用いてセキュリティ管理を行うことができる。

なお、本実施形態１において図７および図１１で複数の指紋照合の操作例について説明したが、更にその操作例の変形例について説明する。

指紋認証手段１１１Ａによって第１指紋照合と第２指紋照合を行い、異なる指による第１指紋照合と第２指紋照合によってセキュリティが求められるアプリケーションの機密レベルが複数存在している。第１指紋照合で一致した場合に第２指紋照合を行い、第２指紋照合で一致した場合にセキュリティ管理が特に重要な高機密アプリケーションとし、第２指紋照合で不一致の場合にセキュリティ管理が通常レベルのアプリケーションとする。

図１２（ａ）〜図１２（ｅ）は、図７および図１１の操作例とは異なる操作例を説明するための情報処理装置１Ｄの正面図である。なお、図７および図１１では情報処理装置１Ａまたは１Ｃに対応している。

図１２（ａ）に示すように、本発明の情報処理装置１Ｄにおいて、ユーザが表示画面３上を左から右に親指をスライドさせてアクティブ化の操作を行う。同じスライド操作の延長線上の表示画面３の右近傍の細長い指紋センサ６Ｄにより親指の指紋を読み取って、この読み取った操作者の指紋情報と管理者の登録指紋情報とを照合する。操作者の指紋情報と管理者の登録指紋情報とが一致すると、アイコン選択画面が表示画面上に表示される。

親指以外の別の指、例えば人指し指でアイコン選択画面上を左から右にスライド操作する。この場合にも、同じスライド操作の延長線上の表示画面３の右近傍の細長い指紋センサ６Ｄにより人差し指の指紋を読み取って、この読み取った操作者の指紋情報とこれに対応する管理者の登録指紋情報とを照合する。操作者の人指し指の指紋情報とこれに対応した管理者の登録指紋情報とが一致すると、高機密アプリケーション用のアイコン選択画面が表示画面３上に表示される。また、操作者の人指し指の指紋情報とこれに対応した管理者の登録指紋情報とが不一致であると、通常機密アプリケーション用のアイコン選択画面が表示画面３上に表示される。

表示画面３の少なくとも一端側に指紋センサ６または６Ｂまたは６Ｄが設けられ、さらに、指紋センサ６または６Ｂまたは６Ｄに隣接してエッジライト型ＬＥＤが設けられている。これらの上方位置には指の爪とは反対側の腹部分が接触してスライドする表面ガバーが設けられている。

なお、本実施形態１では、特に説明しなかったが、本発明の変形例１として、顔画像認証用のカメラモジュールを備え、顔画像認証されて正常にアプリケーションを実行している状況であっても、写真やお面で偽装している可能性があるので、セキュリティ確保が不十分であるという課題があった。セキュリティを確保するためにアプリケーション実行時に瞬きをしたかどうかをチェックする。瞬きをしない場合は、写真やお面で偽装している可能性があり、この場合には電源を遮断する。瞬きをしている場合は、アプリケーションを継続実行する。これによって、なりすまし状況でのアプリケーション実行に対してセキュリティ性を確保することができる。

なお、本実施形態１では、特に説明しなかったが、本発明の変形例２として、顔画像認証用のカメラモジュールを備え、顔画像認証されて正常にアプリケーションを実行している状況であっても、写真やお面で偽装している可能性があるので、セキュリティ確保が不十分であるという課題があった。セキュリティを確保するために２Ｄカメラで３Ｄの画像検証を行う。左右にＬＥＤランプを設け、左右のＬＥＤランプをそれぞれ単独でフラッシュとして使用し、鼻の影が顔面に投影される所定方向のＬＥＤランプの照射による撮像画像の鼻の影の長さでお面かどうかを判定する。これによって、なりすまし状況でのアプリケーション実行に対してセキュリティ性を確保することができる。

なお、本実施形態１では、特に説明しなかったが、本発明の変形例３として、顔画像認証用のカメラモジュールを備え、顔画像認証されて正常にアプリケーションを実行している状況であっても、写真やお面で偽装している可能性があるので、セキュリティ確保が不十分であるという課題があった。セキュリティを確保するために２Ｄカメラ２台からなる３Ｄのカメラで３Ｄの画像検証を行う。これによって、なりすまし状況でのアプリケーション実行に対してセキュリティ性を確保することができる。

なお、本実施形態１では、特に説明しなかったが、本発明の変形例４として、指紋の取得を課実に行う必要がある。表示部エリアよりも指紋センサ周囲の摩擦係数を大きくする。例えば同じアクリル系樹脂で覆う場合には、表示画面部は鏡面仕上げで指紋センサの周辺部では梨地仕上げにする。これによって、指の移動速度が表示画面部の鏡面仕上げ部に比べて指紋周辺部で遅くなるため、指紋認証を確実に行うことができる。

なお、本実施形態１では、第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第２指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとする場合について説明したが、これに限らず、第１の指紋照合で一致した場合に第２の指紋照合を行い、第２の指紋照合で一致した場合に第３の指紋照合を行い、第３の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、第３指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとし、第２指紋照合で不一致の場合にセキュリティが第３に求められるアプリケーションとするようにしてもよい。

以上のように、本発明の好ましい実施形態１を用いて本発明を例示してきたが、本発明は、この実施形態１に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態１の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。本明細書において引用した特許、特許出願および文献は、その内容自体が具体的に本明細書に記載されているのと同様にその内容が本明細書に対する参考として援用されるべきであることが理解される。

本発明は、携帯電話装置に代表されるタッチパネルを備えた情報処理装置およびその駆動方法、この情報処理装置の駆動方法の各工程をコンピュータに実行させるための処理手順が記述された制御プログラム、この制御プログラムが格納されたコンピュータ読み取り可能な可読記憶媒体、この情報処理装置を用いた携帯電話装置などの携帯端末装置やカーナビゲーション装置などの電子情報機器の分野において、タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けたため、起動時または操作時に、現行動作に新たな動作を追加することなく自動で、操作の簡便性と機密保持を両立させて、バイオメトリック認証を用いてセキュリティ管理を行うことができる。

１、１Ａ〜１Ｄ 情報処理装置
２ 筐体
３ 表示画面
３１ タッチパネル部
３２ ディスプレイ部
４ 音声出力部
５ 顔画像認識用カメラ
６、６Ａ〜６Ｄ 指紋センサ
７ ボタンスイッチ
８ 集音部
９ 画像撮像用カメラ
１１、１１Ａ 制御部
１２ 記憶部
１２１ アプリケーション記憶部
１２２ 制御プログラム記憶部
１２３ 認証用データ記憶部
１２４ キャッシュ情報記憶部
１３ 無線送受信部
１４ ディスプレイ制御部
１５ タッチパネル制御部
１６ 指紋認証部
１６Ａ 第１指紋認証部
１６Ｂ 第２指紋認証部
１７ 音声処理部
１８ 顔画像認証部
１９ タイマ部
１９Ａ 顔画像周期設定部
１１１、１１１Ａ 指紋認証手段
１１２、１１２Ａ アイコン画面表示手段
１１３、１１３Ａ 顔画像認証手段
１１４、１１４Ａ アプリ制御手段
１１５、１１５Ａ 電源遮断手段

Claims (25)

1. 表示画面にタッチパネルを備えた情報処理装置において、該タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けられ、該指紋センサにより取り込んだ操作者の指紋情報と該情報処理装置の管理者の登録指紋情報とを照合する指紋認証手段と、該指紋認証手段による照合結果が一致の場合に、機密機能を持つアプリケーションに対応する複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示手段とを有する情報処理装置。
2. 前記指紋センサは、前記タッチパネルに対する指による起動スライド操作の延長線上の装置の片方の端部または両端部に設けられている請求項１に記載の情報処理装置。
3. 前記指紋センサは、１または複数本の指の指紋が読み取り可能に構成され、前記指紋認証手段は、読み取られた１または複数本の指の指紋情報とこれに対応した管理者の登録指紋情報とを照合する請求項１に記載の情報処理装置。
4. 複数の指紋照合によりセキュリティが求められるアプリケーションの機密レベルが複数存在している請求項１に記載の情報処理装置。
5. 第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとする請求項４に記載の情報処理装置。
6. 第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合に第３の指紋照合を行い、該第３の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第３の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第３に求められるアプリケーションとする請求項４に記載の情報処理装置。
7. 操作者の顔画像を撮影可能とする顔画像認証用カメラと、該顔画像認証用カメラで撮影した該操作者の顔画像と前記管理者の登録顔画像とを照合する顔画像認証手段と、顔画像照合が不一致の場合にアプリケーションを終了し、該顔画像照合が一致の場合にアプリケーションを続行するアプリ制御手段とをさらに有する請求項１に記載の情報処理装置。
8. セキュリティレベルの重要度に応じて顔画像認証周期を段階的に短く設定している請求項７に記載の情報処理装置。
9. 前記指紋センサはエリアセンサで構成されている請求項１から請求項８のいすれかに記載の情報処理装置。
10. 前記指紋センサは複数の指の指紋を同時に取得可能なサイズを有している請求項１から請求項９のいずれかに記載の情報処理装置。
11. 前記表示画面エリアよりも指紋センサ周囲の表面摩擦係数を大きく設定している請求項１から請求項１０のいずれかに記載の情報処理装置。
12. 前記顔画像認証手段は、顔画像の照合の他に、瞬きをしたかどうかの画像検証を行う請求項７に記載の情報処理装置。
13. 前記顔画像認証手段は、顔画像の照合の他に、鼻の影が顔面に投影される所定方向の照射による撮像顔画像の鼻の影の長さを検出するかまたは、２Ｄカメラ２台からなる３Ｄカメラで３Ｄの画像検証を行う請求項７に記載の情報処理装置
14. 表示画面にタッチパネルを備えた情報処理装置の駆動方法において、該タッチパネルに対する指による起動スライド操作の延長線上の装置端部に指紋センサが設けられ、指紋認証手段が、該指紋センサにより取り込んだ操作者の指紋情報と管理者の登録指紋情報とを照合する指紋認証工程と、該指紋認証手段による照合結果が一致の場合に、アイコン画面表示手段が、機密機能を持つアプリケーションに対応する複数のアイコンのアイコン選択画面を表示し、複数のアイコンのアイコン選択画面を表示し、該照合結果が不一致の場合には該アイコン選択画面を表示しないアイコン画面表示工程とを有する情報処理装置の駆動方法。
15. 前記指紋センサは、前記タッチパネルに対する指による起動スライド操作の延長線上の装置片方の端部または両端部に設けられている請求項１４に記載の情報処理装置の駆動方法。
16. 前記指紋センサは、１または複数本の指の指紋が読み取り可能に構成され、前記指紋認証工程で前記指紋認証手段が、読み取られた１または複数本の指の指紋情報とこれに対応した管理者の登録指紋情報とを照合する請求項１４に記載の情報処理装置の駆動方法。
17. 複数の指紋照合によりセキュリティが求められるアプリケーションの機密レベルが複数存在している請求項１４に記載の情報処理装置の駆動方法。
18. 第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとする請求項１７に記載の情報処理装置の駆動方法。
19. 第１の指紋照合で一致した場合に第２の指紋照合を行い、該第２の指紋照合で一致した場合に第３の指紋照合を行い、該第３の指紋照合で一致した場合にセキュリティが第１に求められるアプリケーションとし、該第３の指紋照合で不一致の場合にセキュリティが第２に求められるアプリケーションとし、該第２の指紋照合で不一致の場合にセキュリティが第３に求められるアプリケーションとする請求項１７に記載の情報処理装置の駆動方法。
20. 顔画像認証用カメラが操作者の顔画像を撮影する顔画像撮影工程と、顔画像認証手段が、該顔画像認証用カメラで撮影した該操作者の顔画像と前記管理者の登録顔画像とを照合する顔画像認証工程と、アプリ制御手段が、顔画像照合が不一致の場合にアプリケーションを終了し、該顔画像照合が一致の場合にアプリケーションを続行するアプリ制御工程とをさらに有する請求項１４に記載の情報処理装置の駆動方法。
21. セキュリティレベルの重要度に応じて顔画像認証周期を段階的に短く設定している請求項２０に記載の情報処理装置の駆動方法。
22. 前記顔画像認証工程は、前記顔画像認証手段が顔画像の照合の他に、瞬きをしたかどうかの画像検証を行う請求項２０に記載の情報処理装置の駆動方法。
23. 前記顔画像認証工程は、前記顔画像認証手段が顔画像の照合の他に、鼻の影が顔面に投影される所定方向の照明による撮像顔画像の鼻の影の長さを検出するかまたは、２Ｄカメラ２台からなる３Ｄカメラで３Ｄの画像検証を行う請求項２０に記載の情報処理装置の駆動方法。
24. 請求項１４〜２３のいずれかに記載の情報処理装置の駆動方法の各工程をコンピュータに実行させるための処理手順が記述された制御プログラム。
25. 請求項２４に記載の制御プログラムが格納されたコンピュータ読み取り可能な可読記憶媒体。

Images