[go: up one dir, main page]

CN1369858A - 信息终端装置以及认证系统 - Google Patents

信息终端装置以及认证系统 Download PDF

Info

Publication number
CN1369858A
CN1369858A CN02103387A CN02103387A CN1369858A CN 1369858 A CN1369858 A CN 1369858A CN 02103387 A CN02103387 A CN 02103387A CN 02103387 A CN02103387 A CN 02103387A CN 1369858 A CN1369858 A CN 1369858A
Authority
CN
China
Prior art keywords
human body
authentication
body information
terminal device
information terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN02103387A
Other languages
English (en)
Inventor
古山浩志
长尾健司
山田伸
秋元俊昭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1369858A publication Critical patent/CN1369858A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F7/00—Mechanisms actuated by objects other than coins to free or to actuate vending, hiring, coin or paper currency dispensing or refunding apparatus
    • G07F7/08—Mechanisms actuated by objects other than coins to free or to actuate vending, hiring, coin or paper currency dispensing or refunding apparatus by coded identity card or credit card or other personal identification means
    • G07F7/10—Mechanisms actuated by objects other than coins to free or to actuate vending, hiring, coin or paper currency dispensing or refunding apparatus by coded identity card or credit card or other personal identification means together with a coded signal, e.g. in the form of personal identification information, like personal identification number [PIN] or biometric data
    • G07F7/1008—Active credit-cards provided with means to personalise their use, e.g. with PIN-introduction/comparison system
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/34—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using cards, e.g. integrated circuit [IC] cards or magnetic cards
    • G06Q20/341—Active cards, i.e. cards including their own processing means, e.g. including an IC or chip
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G06Q20/401—Transaction verification
    • G06Q20/4014—Identity check for transactions
    • G06Q20/40145—Biometric identity checks
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
    • G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
    • G07C9/257—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition electronically

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Accounting & Taxation (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Library & Information Science (AREA)
  • Finance (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)
  • Digital Computer Display Output (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Image Input (AREA)
  • Studio Devices (AREA)

Abstract

具备输入用户的人体信息的输入手段、显示输入的人体信息的人体信息确认手段、根据输入的人体信息来认证预先登录的用户的认证手段。人体信息确定手段具备显示手段、显示用于指定输入的人体信息的大小以及位置的范围等的指标的指标显示手段。该指标显示手段具备用户确认输入的人体信息状况的功能以及在输入人体信息时指定人体信息的大小以及位置的功能。

Description

信息终端装置以及认证系统
技术领域
本发明涉及具有使用用户的人体信息进行个人认证的功能的信息终端装置以及认证系统。
背景技术
当前，将用户认证手段分为存取特征型与存储数据型2个类型。对于存取特征型，存在智能卡、信用卡、密钥等，对于存储数据型存在密码、用户名、个人认证号等。
存取特征型的问题在于，容易丢失或被盗窃。另一方面，存储数据型的问题在于，容易忘记或者担心忘记而设定为简单的数据。虽然，通过采用组合两者后的手段可以提高安全性，而也存在相同的问题。
生物测定学技术是将身体的特征(人体信息)作为个人认证手段的技术，能够解决上述中容易丢失的问题、存储的问题。作为具体的人体信息，已知指纹、手形、脸、虹彩、网膜、声纹等。
作为利用了脸部图像的用户认证，已知如电视电话装置那样的为了实现装置本身的功能而必须具备摄像手段(摄像机)的携带型信息处理装置中，利用从该摄像手段读取的图像数据来实现安全功能的移动型信息处理装置(特开2000-137809号公报)等。
又，近年在迅速普及的移动电话或者便携型个人计算机中，通过附加图像的输入输出功能与图像的传送功能，也能够利用上述以往示例中的用户认证技术。
然而，在上述示例中，在通过对比预先登录的用户的脸部图像数据(或者从脸部图像数据中抽出的特征参数)与认证时输入的用户的脸部图像数据(或者从脸部图像数据中抽出的特征参数)进行用户的认证中，存在下述问题。
(1)认证精确度的问题
例如，采用安装在移动终端的摄像机抽出脸等的人体信息时，由于照明条件改变、背景改变、或者获取自己脸的摄像机的方向、距离发生改变，很难获得与登录图像相同的识别结果。即，与以往的存取特征型、存储数据型相比，本人认证被拒绝的机会增多。
(2)人体信息的识别中的安全问题
例如，为了进行脸识别而输入脸画像时，他人而不是本人采用本人的照片就能够冒充本人。
本发明为了解决上述两个问题，目的在于提供脸部图像等的人体信息的输入接口。
发明内容
本发明为了解决上述问题，其特点在于，具备：输入用户人体信息用的输入手段；显示输入的人体信息的显示手段；根据所述人体信息对于预先登录的用户进行个人认证的认证手段，并且所述显示手段显示用于指定所述人体信息的大小以及位置的范围指标。
如此，在显示用于指定输入的人体信息的大小以及位置的范围指标的同时显示输入的人体信息的结果，通过提供能够确认照明方向以及输入的脸的大小、方向等偏差的输入接口，用户能够简单地调整照明条件、摄像机的方向、距离、脸等的位置，能够在适合于用户的认证的条件下读取人体信息。
由于具备上述信息终端装置与登录用服务器，能够实现高精度的用户认证系统，所述登录用服务器具有：将从所述信息终端装置通过通信网络输入的所述人体信息登记到数据库并且从所述人体信息与已经登录的数据库中的各人体信息中研究各人的识别函数的研究手段；管理所述人体信息、所述各人的识别函数以及ID的系统管理手段。
本发明的信息终端装置具有显示输入的用户的人体信息的显示手段与根据该人体信息对于预先登录的用户进行个人认证的认证手段，该显示手段用于显示指定该人体信息的大小以及位置的范围指标。由此，能够正确地输入人体信息。
又，在本发明的信息终端装置中，该人体信息是用户的脸部图像、以及用户的脸部图像与声音中的任意一种。由此，能够进行利用了输入摄像机以及麦克风的非接触输入，不需要特别的输入装置。
又，在本发明的信息终端装置中，所述范围指标规定脸的外形以及两眼位置的任意一种。由此，能够输入适合于认证的大小及方向的脸部图像。
又，在本发明的信息终端装置中，还具备在输入人体信息时向用户发出指示的指示手段。由此，为了提高抽出精度，用户能够进行适当的对应。
又，在本发明的信息终端装置中，该指示手段发出下述任意的指示，即眨眼的指示、改变身体方向的指示、将脸上下或左右移动的指示以及移动位置的指示。由此，能够防止使用照片来冒充本人、通过改变脸上的照明条件能够提高认证精确度、以及能够防止由于脸的上下或左右的方向引起的认证精度的下降。
又，在本发明的信息终端装置中，将所述脸部图像变换成镜像进行显示。由此，能够容易地使得从摄像机中获得自己本身的脸的位置位于中央。
又，在本发明的信息终端装置是具备通信手段的移动信息终端、或者便携型个人计算机以及移动电话中的任意一种。由此，通过利用便携型终端，在任何地方都能够正确地输入人体信息。
本发明的认证系统具有信息终端装置以及登录用服务器，该登录用服务器具有：将从所述信息终端装置通过通信网络输入的人体信息登记到数据库并且从该人体信息与已经登录的数据库中的各人体信息中研究各人的识别函数的研究手段；管理该人体信息、该识别函数以及ID的系统管理手段。由此，能够作为用于因特网上的服务例如，电子商务、访问电子银行的个人认证手段发挥作用。
又，在本发明的认证系统中，在每一定期间更新个人的该人体信息。由此，能够更进一步地确保安全性。
又，在本发明的认证系统中，该登录用服务器促使各信息终端装置在每一定期间更新个人的所述人体信息。由此，能够进行更加安全的认证。
附图简述
图1表示具有本发明的认证功能的信息处理装置的功能构造图。
图2表示本发明实施例1的登录·认证系统的系统构造图。
图3表示本发明实施例1的带有摄像机的移动电话的外观概要图。
图4表示本发明实施例3的带有摄像机的移动电话的功能构造图。
图5表示本发明实施例1的带有认证功能的移动电话的功能构造图。
图6A表示用于说明本发明实施例1的脸部图像登录处理的登录顺序图。
图6B表示用于说明本发明实施例2的声音处理的登录顺序图。
图7是表示用于说明本发明实施例1的脸部图像抽出处理的流程图。
图8是表示用于说明本发明实施例1的脸部图像研究处理的流程图。
图9A是表示用于说明本发明实施例1的识别处理成功时的顺序的识别顺序图。
图9B是表示用于说明本发明实施例1的识别处理失败时的顺序的识别顺序图。
图10是用于说明本发明实施例1的脸部图像识别处理的流程图。
图11表示本发明实施例2的带有多个认证功能的移动电话的功能构造图。
图12表示本发明实施例2的登录·认证系统的系统构造图。
图13用于说明本发明实施例2的声音抽出处理的流程图。
图14是用于说明本发明实施例2的声音研究处理的流程图。
图15是用于说明本发明实施例2的认证动作的流程图。
图16是用于说明本发明实施例2的话者识别处理的流程图。
图17是表示本发明实施例3的登录·认证系统的构造图。
图18是用于说明本发明实施例3的认证处理的认证顺序图。
图19是用于说明本发明实施例3的脸部图像识别处理的流程图。
图20是表示本发明实施例4的带有认证功能的移动电话的功能构造图。
图21是表示用于说明本发明实施例4的脸部图像登录处理的流程图。
图22A是本发明实施例1的输入脸部图像的第1示例。
图22B是本发明实施例1的输入脸部图像的第2示例。
最佳实施形态
以下，参照附图对于本发明的实施例进行说明。
实施例1
第1实施例如以下的图1所示。
图1表示本发明的具有认证功能的信息终端装置6的功能构造图。图1中的具有认证功能的信息终端装置6是具备输入人体信息的输入手段、显示输入的人体信息的显示手段2、根据输入的人体信息认证预先登录的用户的认证手段4并且具有根据人体信息进行个人认证的功能的信息终端装置6，该显示手段2具备显示用于指定输入的人体信息的大小以及位置的矩形范围或二点等的指标的范围指标显示手段3，由确认用户输入的人体信息状况的人体信息确认手段5构成。
作为本发明的信息终端装置6，包含移动信息终端(以下，记作“PDA”)、移动电话、便携型个人计算机等，但并不仅限定于此。
图2是作为本发明实施例1的信息终端装置的一示例表示采用了移动电话1001根据脸来进行个人认证的登录·认证系统的构造，以下，进行说明。
构造上通过网络101连接移动电话1001与登录用服务器201。登录用服务器201具备采用为进行脸认证用所登录的画像进行研究的功能，由系统管理部分202、脸部图像登录/更新部分203、脸部图像数据库204、数据输入输出部分205构成。数据输入输出部分205具备从移动电话1001接收发送来的数据的功能以及将登录用服务器201处理结果从移动电话1001发送出去的功能。
系统管理部分202具备管理有关脸部图像登录的个人信息与管理登录处理的功能，它由个人信息管理部分206与登录记录管理部分207构成。个人信息管理部分206具备管理作为个人信息的所有者姓名、移动电话号码、使用者姓名以及用户ID的功能，登录记录管理部分207具备管理用户ID、登录画像ID、登录日期、更新日期、研究结果的功能。脸部图像登录/更新部分203具备采用登录脸部图像进行研究并且对于输入的图像求出判定是否为本人的函数的功能。脸部图像数据库204具备存储通过登录脸部图像或者研究获得的函数的功能。
又，移动电话1001上能够安装IC卡50。
又，图3是作为信息终端装置的带有摄像机的移动电话1001的外观示意图。在图3中，带有摄像机的移动电话1001由扬声器11、显示器12、用于获取脸部图像的摄像机13、麦克风14、天线15、按钮16、IC卡50、IC卡读取接口51构成。带有摄像机的移动电话1001的全体数据处理由图5所示的数据处理部分17进行。数据处理部分17由设备控制部分18以及数据存储部分19构成。
图5表示本发明实施例1的带有摄像机的移动电话1001的功能构造。
在图5中，数据处理部分17具备处理通过摄像机13、麦克风14、按钮16或者来自IC卡50通过IC卡读取接口51输入的数据并且输出到扬声器11、显示器12、天线15的功能，它由设备控制部分18与数据存储部分19构成。设备控制部分18采用各种各样的程序不仅处理数据，还进行移动电话1001的设备控制。数据存储部分19能够存储设备控制部分18使用的各种程序以及从摄像机13、麦克风14、按钮16输入的数据以及由设备控制部分18处理后的结果数据。脸认证部分20由存储研究登录画像的结果的研究完成函数存储部分22、采用从IC卡50读取的登录图像与从研究完成函数存储部分22读取的研究结果对于从摄像机13获得脸部图像进行认证的认证部分21构成。
在图5的带有个人认证功能的移动电话1001中，摄像机13、显示器12、数据处理部分17、脸认证部分20分别对应于图1中的输入手段1、输出手段2、指标显示手段3、认证手段4。
其次，对于本发明实施例1的动作进行说明。
首先，参照图6A、图7以及图8对于登录动作进行说明。图6A表示脸部图像的登录顺序，移动电话1001与登录用服务器201之间的命令由移动电话1001中的脸部图像抽出处理601、登录用服务器201中的脸部图像研究处理602构成。
在脸部图像抽出处理601中，通过模板匹配法进行脸部区域的抽出处理。模板匹配法的处理如下所述。预先从多个画像中抽出脸部区域，将由脸部区域图像的浓淡图案形成的特征向量x的平均向量xm作为标准参数。切出输入画像使得输入画像(N×M象素)的中心坐标(Xc、Yc：0＜Xc＜M、o＜Yc＜N)为以纵n象素、横m象素(N＞n、M＞m)的尺寸切出的画像的中心，将其变换成与标准图案画像相同的尺寸。此后，计算出由浓淡图案构成的特征向量xi，若标准图案的特征向量xm与xi的类似度(例如下述的欧几里得距离的倒数)大于预先设定的阈值，则作为脸部图像抽出结果输出。又，也可以具有采用相同的方法在抽出脸部区域之后抽出眼部的功能。
通过操作移动电话1001的按钮6，设备控制部分18从数据存储部分19读出登录用程序并且实行。然而，为了避免本人以外人员的操作，只有输入仅本人存储的号码时，才读出登录用程序。设备控制部分18向登录用服务器201发送登录要求603，当接收来自登录用服务器201的要求受理应答604时，开始脸部图像抽出处理601。
另一方面，当登录用服务器201接收到登录要求603时，系统管理部分202对照各人信息来判断是新登录还是更新登录信息。当新登录的情况下，追加接收的个人信息并且重新作成登录记录。当完成登录准备时，则登录用服务器201将包含登录要求受理ID的要求受理应答604发送给移动电话1001。
参照图7、图22A、图22B对于脸部图像抽出处理601进行说明。
图7是脸部图像抽出处理601的流程图。设备控制部分18切换显示器12的显示(从当前的显示切换到摄像机输入显示)(步骤1)。在切换成摄像机输入显示时，在显示器12上显示将摄像机输入画像左右反转的镜像。在显示器12上显示确定脸或者眼睛位置的范围二点等的指标2217(步骤2)，输出表示从摄像机13输入的登录者脸部图像已满的指示(步骤3)。指示的方法可以是将指示显示于显示器12或者通过扬声器11以声音进行指示。指示内容除此之外还包括眨眼、改变脸的方向、上下移动脸、改变身体方向、移动位置等。
图22A是以输入脸部图像为例，表示输入脸部图像小并且偏离范围二点等的指标2217时的示例。通过脸部图像抽出处理601抽出脸部区域2218以及眼睛，抽出的眼睛的中心坐标2219与上述的指标2217的距离大于预先设定的阈值时，输出上述的指示(步骤3)。如图22B所示，为了进行输入脸部图像识别处理，使之为适当位置以及大小，则重复脸部图像抽出处理601与指示(步骤3)。又，用于确定脸或者眼睛位置的指标2217可以设定为矩形的框，但对其不作限定，只要是用于确定位置的指标即可。
设备控制部分18压缩输入的脸部图像(步骤4)并且存储到数据存储部分19中(步骤5)。将登录所必要的个人信息、登录要求受理ID与脸部图像信息同时发送给登录用服务器201(步骤6)。然而，当数据存储部分19没有足够的存储容量时，不进行存储处理。这里，登录所必要的个人信息是指由个人信息管理部分206管理的信息。
登录用服务器201当接收脸部图像信息605时，开始脸部图像登录处理。
以下，对于脸部图像登录处理进行说明。登录服务器201将脸部图像记录到脸部图像数据库204并且将脸部图像接收应答606发送给移动电话1001。另一方面，对于发送了脸部图像接收应答606的登录用服务器201，系统管理部分202将登录画像ID传递到脸部图像登录/更新部分203。获得登录画像ID的脸部图像登录/更新部分203从脸部图像数据库204中读出登录画像并且进行研究处理602。
研究处理602的流程图如图8所示。
在研究处理602中，首先，从脸部图像数据库204中读出从登录图像生成的向量，采用由多个脸部图像的浓淡图案形成的特征向量xf的方差协方差矩阵W，从式1中计算出固有向量lf，
(W-λjI)lj＝0    …(式1)(这里，λ是固有值、I是单位矩阵)
而且，作为变换矩阵(以下，将该变换矩阵称作研究完成函数)求得固有值寄与率、Cj＝λj/tr(W)的上位n个固有向量形成的矩阵A＝(l1、l2…、In)(步骤11)。这里，tr(W)表示方差协方差矩阵W的轨迹。又，研究完成函数是使用于用户识别中的识别函数。其次，将本人的登录画像向量xs作为ys＝Atxs并生成本人的登录画像特征向量ys。在这个固有空间中将用于进行变换的研究完成函数A作为研究结果(步骤12)。
当结束研究处理602时，脸部图像登录/更新部分203将研究结果与用于判定的阈值传递到系统管理部分202。系统管理部分202将研究结果ID赋予研究结果与用于判定的阈值，并且存储在脸部图像数据库204中。而且，系统管理部分202通过数据输入输出部分205将研究结果与用于判定的阈值作为登录完成应答607发送给移动电话1001。
移动电话1001中，当设备控制部分18接收来自登录用服务器201的脸部图像接收应答606时，删除记录在数据存储部分19上的脸部图像。又，当接收登录完成应答607时，数据处理部分17将接收到的研究结果与用于判定的阈值记录到研究完成函数存储部分22。设备控制部分18通过扬声器11或者显示器12传达用户已完成登录的情况。设备控制部分18结束登录处理并且恢复到预置状态。所谓预置状态是指与接入移动电话1001的电源时的初期状态相同的状态。
又，登录用服务器201从存储在脸部图像数据库204的画像中抽出1幅本人的画像，将登录画像或者登录画像的特征向量写入IC卡50。此时，除了登录画像以外还向IC卡50写入个人信息。将IC卡送交给本人。
又，登录用服务器201具有在以前登录之后经过一定期间后将新输入的本人画像写入IC卡50或者每经过一定期间通过移动电话1001促使用户输入登录画像的功能。
其次，参照图9A与图9B对于认证动作进行说明。
通过操作移动电话1001的按钮16，设备控制部分18从数据存储部分19读出识别用程序并且实行。又，用户将记录了的登录画像的IC卡50插入IC卡读取接口51。
脸部图像抽出处理901与脸部图像识别处理902的流程图如图10所示。
首先，与登录同样地进行脸部图像抽出处理901(步骤21)。
其次，进行利用脸部图像的脸部图像识别处理902。设备控制部分18向脸认证部分20指示开始脸部图像识别处理902(步骤22)。在此开始指示(步骤22)中包含抽出的脸部图像的存放位置。认证部分21生成抽出画像的向量(步骤23)。
同样地，设备控制部分18从IC卡50中读出登录画像并且生成登录画像的向量(步骤24)。然而，对于预先生成登录画像的特征向量并记录到IC卡50的情况，则不需要该处理。
设备控制部分18从研究完成函数存储部分22中读出研究完成函数A与用于判定的阈值，登录用画像的向量xs与抽出画像的向量xi采用研究完成函数A分别求出登录用画像的特征向量ys＝Atxs与抽出画像的特征向量yi＝Atxi(步骤25)。采用求出的登录用画像的特征向量ys与抽出画像的特征向量yi计算类似度，根据类似度大于或者小于阈值判定是否为本人。类似度的计算是从登录画像与输入画像、作为对于各自的向量进行KL展开(Karhunen-Loeve展开)的结果的特征向量ys、ys中例如采用输出结果的欧几里得距离d(d2＝∑(ysm-yim)2)的倒数。认证部分21将判定结果发送给设备控制部分18(步骤26)。
当判定为本人时，设备控制部分18使得移动电话1001的所有程序有效(步骤27)。当判定不为本人时，返回步骤21。
又，在上述实施例1中，采用本人的登录画像与阈值判定是否为本人，而也存在不采用阈值的方法。作为登录画像，采用多幅本人的画像与他人的画像，在抽出的画像与本人画像的类似度最大的情况下判定为本人，与他人的画像类似度最大的情况下判定为他人。
带有认证功能的移动电话1001作为识别成功通知903将该脸部图像识别处理902的结果发送给登录用服务器201。又，如图9B所示，当该脸部图像识别处理902的结果为认证失败时，带有认证功能的移动电话1001向登录用服务器201发送认证失败通知904。
实施例2
对于本发明实施例2的构造进行说明。
与实施例1的构造的不同点在于，移动电话1002的构造与登录用服务器301的构造，而其他构造相同。因此，在实施例2中参照图11、图12仅对于与实施例1不同的构造进行说明。
移动电话1002的构造的不同点在于，附加有采用话者的声音进行认证的话者认证部分23。话者认证部分23由存储研究登录声音的结果的研究完成函数存储部分25、采用从IC卡50通过IC卡读取接口51读出的登录声音与从研究完成函数存储部分25读出的研究结果对于从麦克风14输入的话者的声音进行认证的认证部分24所构成。
又，登录用服务器301的构造的不同点在于，用于存储脸部图像的脸部图像数据库204变成存储脸部图像与声音的脸部图像/声音数据库302，以及追加了进行声音研究处理的声音登录/更新部分303。
其次，参照图6B对于本发明实施例2的动作进行说明。脸部图像的登录动作与实施例1相同。这里，对于声音的登录动作进行说明。
图6B表示声音的登录顺序，移动电话1002与登录用服务器301之间的命令由移动电话1002中的声音抽出处理608、登录用服务器301中的声音研究处理609构成。
通过操作移动电话1002的按钮16，与登录脸部图像时相同地，设备控制部分18从数据存储部分19读出登录用程序并实行。然而，为了避免本人以外的操作，只有在输入仅本人存储的号码时，才读出登录用程序。
设备控制部分18向登录用服务器301作为声音发送人体信息以及发送登录要求，当接收到来自登录用服务器301的要求受理应答611时，开始声音抽出处理608。另一方面，登录用服务器301接收登录要求时，系统管理部分202对照个人信息，判断是新登录还是更新登录信息。在新登录的情况下，追加接收的个人信息并且重新作成登录记录。当完成登录准备时，登录用服务器301将包含登录要求受理ID的要求受理应答611发送给移动电话1002。
参照图13对于声音抽出处理608进行说明。设备控制部分18在显示器12上显示登录开始的指示或者使用扬声器11通过声音进行指示(步骤51)。
用户根据指示从麦克风14输入声音。设备控制部分18压缩输入的声音(步骤52)，若在数据存储部分19中有充足的容量，则将压缩后的声音存储到数据存储部分19(步骤53)。采用公开密钥密码将声音信息612与登录所必要的个人信息、登录要求受理ID同时进行加密(步骤54)并且发送到登录用服务器301(步骤55)。然而，若在数据存储部分19没有足够的存储容量时，则不进行存储处理。
登录用服务器301将声音记录到脸部图像/声音数据库302并且将声音接收应答613发送到移动电话1002。另一方面，对于发送了接收应答的登录用服务器301，系统管理部分202将登录画像ID传递到声音登录/更新部分303。接收了登录画像ID的声音登录/更新部分303从脸部图像/声音数据库302读出登录声音并且进行声音研究处理609。
声音研究处理609的流程图如图14所示。首先，作成从脸部图像/声音数据库302读出的登录声音的声纹曲线(步骤101)。所谓声纹曲线是指将声音的时间序列数据分解成频率成分并将其排列成时间序列后的向量。从预先准备的内容中由用户选择使用于登录声音的话语。将声纹曲线与实施例1相同地进行KL展开，作为研究完成函数A求得由固有向量形成的变换矩阵(步骤102)。
其次，将本人的登录声音的向量xs作为ys＝Atxs，生成本人的登录声音特征向量ys。将在该固有空间进行变换的研究完成函数A作为研究结果(步骤103)。
当声音研究处理609结束时，声音登录/更新部分303将研究结果与用于判定的阈值传递给系统管理部分202。系统管理部分202将研究结果ID赋与研究结果与用于判定的阈值，并且存储在脸部图像/声音数据库302。再者，系统管理部分202通过数据输入输出部分205将研究结果与用于判定的阈值作为登录结束应答614发送给移动电话1002。
在移动电话1002中，当设备控制部分18接收到来自登录用服务器301的声音接收应答613时，消去已经记录在数据存储部分19上的声音。又，当接收登录完成应答614时，数据处理部分17将接收的研究结果与用于判定的阈值记录到研究完成函数存储部分25。设备控制部分18通过扬声器11或者显示器12传达用户完成了登录的情况。设备控制部分18完成登录处理并且恢复到预置状态。所谓预置状态是指与接入移动电话1002电源时的初期状态相同的状态。
又，登录用服务器301从存储在脸部图像/声音数据库302中的声音中抽出一个(一个单词)本人的声音，将登录声音或者登录声音的特征向量写入IC卡50。此时，登录声音之外的个人信息也写入IC卡。将IC卡50交送给本人。此时，当存在已经登录的脸部图像时，根据用户要求，也可以将登录画像与登录声音同时写入一枚IC卡50。
其次，参照图15对于认证动作进行说明。通过操作移动电话1002的按钮，设备控制部分18从数据存储部分19读出识别用程序并且实行(步骤153)。又，用户将记录了登录画像或者登录声音的IC卡50插入IC卡接口51。用户能够选择采用哪种认证(步骤151)。在读出识别用程序之前进行选择。
当认证成功时，设备控制部分18使得移动电话1002的程序全部有效(步骤154)。当认证失败时，进行判断是否继续处理(步骤155)。当继续时返回步骤151。使用脸部图像的认证动作由于在受理1中已经说明，故这里说明话者认证的动作。
话者识别处理的流程图如图16所示。
首先，与登录同样地进行声音抽出处理608(步骤201)。其次，进行话者识别处理。设备控制部分18向话者认证部分23指示开始认证处理(步骤202)。在该开始指示中包含抽出的声音的存放位置。认证部分24生成抽出的声音曲线的向量(步骤203)。同样地，设备控制部分18从IC卡50中读出登录声音，生成登录声音的向量(步骤204)。然而，预先生成登录声音的特征向量并且记录在IC卡50中的情况下，不需要该处理。
设备控制部分18从研究完成函数存储部分25中读出研究完成函数A与用于判定的阈值，从登录声音的向量与抽出声音的向量采用研究完成函数A求出登录声音的特征向量与抽出声音的特征向量(步骤205)。采用求出的登录声音的特征向量与抽出声音的特征向量计算类似度，根据类似度大于或者小于阈值来判定是否为本人。类似度的计算例如采用输出结果的欧几里得距离的倒数。认证部分24将判定结果发送到设备控制部分18(步骤206)。
又，如本实施例那样，通过使得相关于脸部图像识别、话者识别的算法通用化，能够降低成本。
实施例3
参照图17对于本发明实施例3的构造进行说明。
与实施例1的构造不同之处在于，认证功能存在于登录·认证服务器401。
在图17中，在构造上通过网络连接了移动电话1003、登录·认证服务器401。登录·认证服务器401由管理登录·认证服务器401全体的系统管理部分402、进行脸部图像的登录研究与认证的登录·认证部分403、存储用户的脸部图像的脸部图像数据库404构成，系统管理部分402由通过人手实施脸部图像认证的个人认证支持部分405、包含登录用户的地址、姓名、电话号码、登录日期的个人信息存储部分406、包含认证时间、认证判定的认证记录存储部分407、显示器408构成，登录·认证部分403由进行个人认证的个人认证部分409与进行脸部图像的研究处理的脸部图像登录部分410构成。
移动电话1003的功能构造如图4所示。
移动电话1003由扬声器11、显示器12、用于获取脸部图像的摄像机13、麦克风14、天线15、按钮16、IC卡读取接口51、数据处理部分17构成，数据处理部分17由设备控制部分18与数据存储部分19构成。
其次，对于本发明实施例3的动作进行说明。登录动作大致与实施例1大致相同，登录·认证服务器401具备登录用服务器201的全部功能。这里，仅对于登录动作与实施例1不同之处进行说明。
在实施例1中，将登录画像记录到IC卡50，而在实施例3并不进行该动作。而且，在实施例1中，当设备控制部分18接收到登录结束应答时，数据处理部分17将接收到的研究结果与用于判定的阈值记录到研究完成函数存储部分22，而在实施例3中并不进行该动作。
其次，参照图18对于认证动作进行说明。通过操作移动电话1001的按钮16，设备控制部分18从数据存储部分19读出识别用程序并实行。首先，与登录时同样地进行脸部图像抽出处理1801。其次，设备控制部分18将认证要求180发送给登录·认证服务器401。在认证要求1802中包含抽出的脸部图像。
登录认证服务器401中的脸部图像识别处理1804的流程图如图19所示。系统管理部分402向登录·认证部分403输出接收到的脸部图像并且指示开始认证处理1804(步骤301)。个人认证部分409生成抽出的脸部图像的向量(步骤302)。又，个人认证部分409从脸部图像数据库404中读出登录画像并且生成登录画像的向量(步骤303)。然而，预先生成登录画像的特征向量并且记录在脸部图像数据库404的情况下，不需要该处理。
个人认证部分409从脸部图像登录部分410中读出研究完成函数A与用于判定的阈值，登录用画像的向量与抽出画像的向量采用研究完成函数A求出登录画像的特征向量与抽出画像的特征向量(步骤304)。采用求得的登录用画像的特征向量与抽出画像的特征向量计算类似度，根据类似度大于或小于阈值来判定是否为本人(步骤305)。类似度的计算例如采用输出结果的欧几里得距离的倒数。
当结束该脸部图像识别处理1804时，登录·认证服务器401将该结果作为识别应答1803发送给移动电话1001。
当该认证获得成功时，移动电话1001的设备控制部分18使得移动电话1001的程序全部有效。又，当认证失败时，用户能够进行3种选择。其一是再次进行脸部图像抽出1801并进行认证，其二是向登录·认证服务器401发送认证支持要求，其三是停止脸部图像认证1804并切换成根据输入ID进行的认证。脸部图像认证1804中由于照明条件或脸的方向可能会导致认证失败，故通过改变照明条件再次进行认证，可能获得认证成功。又，通过提出认证支持要求，虽然存在应答时间的延迟，然而通过认证服务器401侧的第三者进行可靠认证，安全性较高。通过切换成根据输入ID的认证，虽然需要花费用户的工夫，而能够进行可靠的认证。
这里，对于提出认证支持要求时的动作进行说明。在认证支持要求中包含移动电话ID、认证记录、紧急程度等的信息。登录·认证服务器401当接收认证支持要求时，附加到个人认证支持部分405的密钥中。个人认证支持部分405紧急程度从密钥中读出认证支持要求。个人认证支持部分405采用认证记录在显示器408上显示登录画像与输入画像。个人认证支持负责人通过目视确认显示于显示器408上的画像，判定结果利用移动电话ID发送到移动电话1003。
实施例4
参照图20对于本发明实施例4的构造进行说明。
本实施例的特征仅在于移动电话1004的构造。
在图20中，移动电话1004由扬声器11、显示器12、用于获取脸部图像的摄像机13、麦克风14、天线15、按钮16、数据处理部分17、脸认证部分20构成，数据处理部分17由设备控制部分18与数据存储部分19构成。设备控制部分18不仅利用各种程序处理数据而且也进行移动电话1004的设备控制。
数据存储部分19能够存储由设备控制部分18利用各种程序以及从摄像机13、麦克风14、按钮16输入的数据以及由设备控制部分18进行处理的结果数据。脸认证部分20由利用从存储用于认证的研究函数的研究完成函数存储部分22、采用从数据存储部分19读出的登录画像与从研究完成函数存储部分22读出的研究结果对于从摄像机13获得的脸部图像进行认证的认证部分21构成。
其次，对于本发明实施例4的动作进行说明。
首先，对于研究完成函数进行说明。对于研究完成函数，在出厂时预先将预置的函数记录到研究完成函数存储部分22。在该研究完成函数的研究中没有使用本人的脸部图像，故识别能力较低。
其次，参照图21对于脸部图像的登录动作进行说明。用户通过操作按钮16，设备控制部分18从数据存储部分19读出登录用程序并实行。然而，为了避免本人以外的操作，只有当输入仅本人存储的号码时才读出登录用程序。
设备控制部分18切换显示器12的显示(从当前的显示切换到摄像机输入显示)(步骤401)。在显示器12上显示用于决定眼睛位置的矩形范围等的指标(步骤402)，并且输出表示从摄像机13输入的登录者的脸完全在画面矩形范围内的指示(步骤403)。指示的方法可以是将指示显示在显示器12上或者使用扬声器11以声音进行指示。指示内容除此之外，也包含眨眼、改变脸的方向、上下移动脸、改变身体方向、移动位置等。设备控制部分18将输入的脸部图像显示在显示器12上，使得用户能够进行确认(步骤404)。当通过用户操作按钮进行确认处理时，设备控制部分18压缩脸部图像(步骤405)并且存储在数据存储部分19中(步骤406)。
认证动作与实施例1相同。
通过组合本发明实施例1与实施例4，能够两个阶段地设定服务内容。其一是仅通过移动电话可进行认证的服务，其二是可仅更新登录画像。再者，希望提高识别率的用户在实施例1的构造下进行采用本人画像的研究并且能够接受进行认证的服务。
如上所述，根据本发明，当输入脸部图像时，通过给出下述指示，即显示用于决定脸或眼睛位置的范围或二点等的指标、改变脸的方向、眨眼、上下移动脸、改变身体方向、移动位置，由于照明条件或者脸的方向发生了改变，提高了抽出脸部图像的精度。而且，例如即使在通过使用照片以他人来冒充本人时，也能够容易地区分照片与人体。

Claims (10)

1.一种信息终端装置，其特征在于，
具备显示输入的用户的人体信息的显示手段和根据所述人体信息对于预先登录的用户进行个人认证用的认证手段，
所述显示手段显示用于指定所述人体信息的大小以及位置的指标。
2.如权利要求1所述的信息终端装置，其特征在于，
所述人体信息为用户的脸部图像、以及用户的脸部图像与声音中的任意之一。
3.如权利要求1所述的信息终端装置，其特征在于，
所述指标规定脸部的外形、以及两眼位置中的任意之一。
4.如权利要求1～3任意一项所述的信息终端装置，其特征在于，
还具备在输入人体信息时向用户发出指示的指示手段。
5.如权利要求4所述的信息终端装置，其特征在于，
所述指示手段发出下述任意一种指示，即眨眼的指示、改变身体方向的指示、将脸部上下或左右移动的指示或移动位置的指示。
6.如权利要求2所述的信息终端装置，其特征在于，
将所述脸部图像变换成镜像进行显示。
7.如权利要求1～6任意一项所述的信息终端装置，其特征在于，
所述信息终端装置是具备通信手段的移动信息终端、便携型个人计算机、以及移动电话中的任意之一。
8.一种认证系统，其特征在于这，具备
(a)权利要求1～7中任意一项所述的信息终端装置；以及
(b)登录用服务器，
所述登录用服务器(b)具有：将通过通信网络从所述信息终端装置输入的所述人体信息登记到数据库，并且从所述人体信息与已经登录的数据库中的各人体信息中研究各人的识别函数的研究手段(b1)；管理所述人体信息、所述识别函数及ID的系统管理手段(b2)。
9.如权利要求8所述的认证系统，其特征在于，定期更新个人的所述人体信息。
10.如权利要求9所述的认证系统，其特征在于，所述登录用服务器促使各信息终端装置定期更新个人的所述人体信息。
CN02103387A 2001-02-02 2002-02-01 信息终端装置以及认证系统 Pending CN1369858A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2001026438A JP2002229955A (ja) 2001-02-02 2001-02-02 情報端末装置及び認証システム
JP026438/01 2001-02-02

Publications (1)

Publication Number Publication Date
CN1369858A true CN1369858A (zh) 2002-09-18

Family

ID=18891256

Family Applications (1)

Application Number Title Priority Date Filing Date
CN02103387A Pending CN1369858A (zh) 2001-02-02 2002-02-01 信息终端装置以及认证系统

Country Status (4)

Country Link
US (1) US20020152390A1 (zh)
EP (1) EP1229496A3 (zh)
JP (1) JP2002229955A (zh)
CN (1) CN1369858A (zh)

Cited By (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1333374C (zh) * 2003-08-22 2007-08-22 松下电器产业株式会社 图象输入装置及使用它的认证装置
CN100489901C (zh) * 2004-04-09 2009-05-20 冲电气工业株式会社 基于面部认证的本人确认系统、自动交易装置、面部认证服务器
CN102646174A (zh) * 2012-02-23 2012-08-22 江苏华丽网络工程有限公司 具有多媒体认证加密保护功能的移动电子设备
CN103400082A (zh) * 2013-08-16 2013-11-20 中科创达软件股份有限公司 一种文件加密方法、解密方法及系统
CN103477342A (zh) * 2011-03-21 2013-12-25 苹果公司 使用话音验证的装置存取
CN104734858A (zh) * 2015-04-17 2015-06-24 黑龙江中医药大学 对数据进行识别的防锁死的usb身份认证系统及方法
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9535906B2 (en) 2008-07-31 2017-01-03 Apple Inc. Mobile device having human language translation capability with positional feedback
US9548050B2 (en) 2010-01-18 2017-01-17 Apple Inc. Intelligent automated assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
US9620104B2 (en) 2013-06-07 2017-04-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9626955B2 (en) 2008-04-05 2017-04-18 Apple Inc. Intelligent text-to-speech conversion
US9633674B2 (en) 2013-06-07 2017-04-25 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9633660B2 (en) 2010-02-25 2017-04-25 Apple Inc. User profiling for voice input processing
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9646614B2 (en) 2000-03-16 2017-05-09 Apple Inc. Fast, language-independent method for user authentication by voice
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9798393B2 (en) 2011-08-29 2017-10-24 Apple Inc. Text correction processing
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9953088B2 (en) 2012-05-14 2018-04-24 Apple Inc. Crowd sourcing information to fulfill user requests
US9966068B2 (en) 2013-06-08 2018-05-08 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
CN108399655A (zh) * 2017-02-08 2018-08-14 罗伯特·博世有限公司 用于实施电子付款来支付停车费的方法和设备
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10079014B2 (en) 2012-06-08 2018-09-18 Apple Inc. Name recognition system
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10089072B2 (en) 2016-06-11 2018-10-02 Apple Inc. Intelligent device arbitration and control
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10169329B2 (en) 2014-05-30 2019-01-01 Apple Inc. Exemplar-based natural language processing
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10185542B2 (en) 2013-06-09 2019-01-22 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10269345B2 (en) 2016-06-11 2019-04-23 Apple Inc. Intelligent task discovery
US10283110B2 (en) 2009-07-02 2019-05-07 Apple Inc. Methods and apparatuses for automatic speech recognition
US10297253B2 (en) 2016-06-11 2019-05-21 Apple Inc. Application integration with a digital assistant
US10318871B2 (en) 2005-09-08 2019-06-11 Apple Inc. Method and apparatus for building an intelligent automated assistant
US10354011B2 (en) 2016-06-09 2019-07-16 Apple Inc. Intelligent automated assistant in a home environment
US10356243B2 (en) 2015-06-05 2019-07-16 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US10410637B2 (en) 2017-05-12 2019-09-10 Apple Inc. User-specific acoustic models
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10475446B2 (en) 2009-06-05 2019-11-12 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10482874B2 (en) 2017-05-15 2019-11-19 Apple Inc. Hierarchical belief states for digital assistants
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10521466B2 (en) 2016-06-11 2019-12-31 Apple Inc. Data driven natural language event detection and classification
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10755703B2 (en) 2017-05-11 2020-08-25 Apple Inc. Offline personal assistant
US10791176B2 (en) 2017-05-12 2020-09-29 Apple Inc. Synchronization and task delegation of a digital assistant
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10810274B2 (en) 2017-05-15 2020-10-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US11217255B2 (en) 2017-05-16 2022-01-04 Apple Inc. Far-field extension for digital assistant services
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
CN116883003A (zh) * 2023-07-10 2023-10-13 国家电网有限公司客户服务中心 基于生物探针技术的移动端支付购电反欺诈方法、系统

Families Citing this family (158)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7664296B2 (en) * 2001-01-31 2010-02-16 Fujifilm Corporation Image recording method and system, image transmitting method, and image recording apparatus
US7333798B2 (en) 2002-08-08 2008-02-19 Value Added Communications, Inc. Telecommunication call management and monitoring system
US8509736B2 (en) 2002-08-08 2013-08-13 Global Tel*Link Corp. Telecommunication call management and monitoring system with voiceprint verification
JP2004213087A (ja) * 2002-12-26 2004-07-29 Toshiba Corp 個人認証装置および個人認証方法
US20040136708A1 (en) * 2003-01-15 2004-07-15 Woolf Kevin Reid Transceiver configured to store failure analysis information
WO2005098743A2 (en) * 2004-04-06 2005-10-20 Rf Intelligent Systems, Inc. 2d/3d facial biometric mobile identification
US8156115B1 (en) 2007-07-11 2012-04-10 Ricoh Co. Ltd. Document-based networking with mixed media reality
US8195659B2 (en) 2005-08-23 2012-06-05 Ricoh Co. Ltd. Integration and use of mixed media documents
US8184155B2 (en) 2007-07-11 2012-05-22 Ricoh Co. Ltd. Recognition and tracking using invisible junctions
US8510283B2 (en) 2006-07-31 2013-08-13 Ricoh Co., Ltd. Automatic adaption of an image recognition system to image capture devices
US8005831B2 (en) 2005-08-23 2011-08-23 Ricoh Co., Ltd. System and methods for creation and use of a mixed media environment with geographic location information
US8156116B2 (en) 2006-07-31 2012-04-10 Ricoh Co., Ltd Dynamic presentation of targeted information in a mixed media reality recognition system
US9405751B2 (en) 2005-08-23 2016-08-02 Ricoh Co., Ltd. Database for mixed media document system
US8385589B2 (en) 2008-05-15 2013-02-26 Berna Erol Web-based content detection in images, extraction and recognition
US8369655B2 (en) 2006-07-31 2013-02-05 Ricoh Co., Ltd. Mixed media reality recognition using multiple specialized indexes
US7812986B2 (en) 2005-08-23 2010-10-12 Ricoh Co. Ltd. System and methods for use of voice mail and email in a mixed media environment
US8335789B2 (en) 2004-10-01 2012-12-18 Ricoh Co., Ltd. Method and system for document fingerprint matching in a mixed media environment
US9530050B1 (en) 2007-07-11 2016-12-27 Ricoh Co., Ltd. Document annotation sharing
US8521737B2 (en) 2004-10-01 2013-08-27 Ricoh Co., Ltd. Method and system for multi-tier image matching in a mixed media environment
US8176054B2 (en) 2007-07-12 2012-05-08 Ricoh Co. Ltd Retrieving electronic documents by converting them to synthetic text
US8949287B2 (en) 2005-08-23 2015-02-03 Ricoh Co., Ltd. Embedding hot spots in imaged documents
US7672543B2 (en) 2005-08-23 2010-03-02 Ricoh Co., Ltd. Triggering applications based on a captured text in a mixed media environment
US8600989B2 (en) 2004-10-01 2013-12-03 Ricoh Co., Ltd. Method and system for image matching in a mixed media environment
US7991778B2 (en) 2005-08-23 2011-08-02 Ricoh Co., Ltd. Triggering actions with captured input in a mixed media environment
US7885955B2 (en) 2005-08-23 2011-02-08 Ricoh Co. Ltd. Shared document annotation
US8332401B2 (en) 2004-10-01 2012-12-11 Ricoh Co., Ltd Method and system for position-based image matching in a mixed media environment
US8156427B2 (en) 2005-08-23 2012-04-10 Ricoh Co. Ltd. User interface for mixed media reality
US7917554B2 (en) 2005-08-23 2011-03-29 Ricoh Co. Ltd. Visibly-perceptible hot spots in documents
US7920759B2 (en) 2005-08-23 2011-04-05 Ricoh Co. Ltd. Triggering applications for distributed action execution and use of mixed media recognition as a control input
US8868555B2 (en) 2006-07-31 2014-10-21 Ricoh Co., Ltd. Computation of a recongnizability score (quality predictor) for image retrieval
US7970171B2 (en) 2007-01-18 2011-06-28 Ricoh Co., Ltd. Synthetic image and video generation from ground truth data
US8276088B2 (en) 2007-07-11 2012-09-25 Ricoh Co., Ltd. User interface for three-dimensional navigation
US8838591B2 (en) 2005-08-23 2014-09-16 Ricoh Co., Ltd. Embedding hot spots in electronic documents
US9384619B2 (en) 2006-07-31 2016-07-05 Ricoh Co., Ltd. Searching media content for objects specified using identifiers
US9171202B2 (en) 2005-08-23 2015-10-27 Ricoh Co., Ltd. Data organization and access for mixed media document system
US7551780B2 (en) 2005-08-23 2009-06-23 Ricoh Co., Ltd. System and method for using individualized mixed document
US7669148B2 (en) 2005-08-23 2010-02-23 Ricoh Co., Ltd. System and methods for portable device for mixed media system
US8086038B2 (en) 2007-07-11 2011-12-27 Ricoh Co., Ltd. Invisible junction features for patch recognition
US7702673B2 (en) 2004-10-01 2010-04-20 Ricoh Co., Ltd. System and methods for creation and use of a mixed media environment
US9373029B2 (en) 2007-07-11 2016-06-21 Ricoh Co., Ltd. Invisible junction feature recognition for document security or annotation
US7639387B2 (en) 2005-08-23 2009-12-29 Ricoh Co., Ltd. Authoring tools using a mixed media environment
US8856108B2 (en) 2006-07-31 2014-10-07 Ricoh Co., Ltd. Combining results of image retrieval processes
US8144921B2 (en) 2007-07-11 2012-03-27 Ricoh Co., Ltd. Information retrieval using invisible junctions and geometric constraints
US7587412B2 (en) 2005-08-23 2009-09-08 Ricoh Company, Ltd. Mixed media reality brokerage network and methods of use
US8825682B2 (en) 2006-07-31 2014-09-02 Ricoh Co., Ltd. Architecture for mixed media reality retrieval of locations and registration of images
JP2006113820A (ja) * 2004-10-14 2006-04-27 Sharp Corp 携帯端末を利用した個人認証システム
US20060104483A1 (en) * 2004-11-12 2006-05-18 Eastman Kodak Company Wireless digital image capture device with biometric readers
DE102005003208B4 (de) * 2005-01-24 2015-11-12 Giesecke & Devrient Gmbh Authentisierung eines Benutzers
US7783021B2 (en) 2005-01-28 2010-08-24 Value-Added Communications, Inc. Digital telecommunications call management and monitoring system
JP4696610B2 (ja) * 2005-03-15 2011-06-08 オムロン株式会社 被写体認証装置、顔認証装置、携帯電話、及び被写体認証方法
JP4544026B2 (ja) * 2005-05-11 2010-09-15 オムロン株式会社 撮像装置、携帯端末
JP2007036928A (ja) * 2005-07-29 2007-02-08 Sharp Corp 携帯情報端末装置
US7769772B2 (en) 2005-08-23 2010-08-03 Ricoh Co., Ltd. Mixed media reality brokerage network with layout-independent recognition
JP4859438B2 (ja) * 2005-10-25 2012-01-25 京セラ株式会社 通信端末、実行可能処理制限方法および実行可能処理制限プログラム
JP4793179B2 (ja) * 2005-11-14 2011-10-12 オムロン株式会社 認証装置及び携帯端末
JP4367424B2 (ja) * 2006-02-21 2009-11-18 沖電気工業株式会社 個人識別装置，個人識別方法
WO2008105779A2 (en) * 2006-05-22 2008-09-04 Corestreet, Ltd. Secure id checking
TW200805111A (en) * 2006-07-14 2008-01-16 Asustek Comp Inc Method for controlling the function of application software and computer readable recording medium for storing program thereof
US9176984B2 (en) 2006-07-31 2015-11-03 Ricoh Co., Ltd Mixed media reality retrieval of differentially-weighted links
US9020966B2 (en) 2006-07-31 2015-04-28 Ricoh Co., Ltd. Client device for interacting with a mixed media reality recognition system
US8676810B2 (en) 2006-07-31 2014-03-18 Ricoh Co., Ltd. Multiple index mixed media reality recognition using unequal priority indexes
US8073263B2 (en) 2006-07-31 2011-12-06 Ricoh Co., Ltd. Multi-classifier selection and monitoring for MMR-based image recognition
US8489987B2 (en) 2006-07-31 2013-07-16 Ricoh Co., Ltd. Monitoring and analyzing creation and usage of visual content using image and hotspot interaction
US9063952B2 (en) 2006-07-31 2015-06-23 Ricoh Co., Ltd. Mixed media reality recognition with image tracking
US8201076B2 (en) 2006-07-31 2012-06-12 Ricoh Co., Ltd. Capturing symbolic information from documents upon printing
JP4264663B2 (ja) * 2006-11-21 2009-05-20 ソニー株式会社 撮影装置、画像処理装置、および、これらにおける画像処理方法ならびに当該方法をコンピュータに実行させるプログラム
JP4953850B2 (ja) * 2007-02-09 2012-06-13 シャープ株式会社 コンテンツ出力システム、携帯通信端末およびコンテンツ出力装置
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
JP5043100B2 (ja) 2007-04-23 2012-10-10 シャープ株式会社 撮像装置、その制御プログラムを記録したコンピュータ読取り可能な記録媒体
EP2162866A1 (en) * 2007-06-26 2010-03-17 Gelco S.r.l. Contact less smart card with facial recognition
KR101430522B1 (ko) 2008-06-10 2014-08-19 삼성전자주식회사 휴대 단말기의 화상 정보 활용 방법
US8774767B2 (en) * 2007-07-19 2014-07-08 Samsung Electronics Co., Ltd. Method and apparatus for providing phonebook using image in a portable terminal
EP2023266B1 (en) 2007-08-01 2012-10-03 Ricoh Company, Ltd. Searching media content for objects specified using identifiers
JP5018886B2 (ja) * 2007-08-23 2012-09-05 富士通株式会社 生体認証システムおよび生体認証プログラム
JP5034821B2 (ja) * 2007-09-21 2012-09-26 ソニー株式会社 生体情報記憶装置
KR102136860B1 (ko) * 2007-09-24 2020-07-23 애플 인크. 전자 장치 내의 내장형 인증 시스템들
US8600120B2 (en) 2008-01-03 2013-12-03 Apple Inc. Personal computing device control using face detection and recognition
US8108438B2 (en) * 2008-02-11 2012-01-31 Nir Asher Sochen Finite harmonic oscillator
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20090307140A1 (en) * 2008-06-06 2009-12-10 Upendra Mardikar Mobile device over-the-air (ota) registration and point-of-sale (pos) payment
US9405968B2 (en) * 2008-07-21 2016-08-02 Facefirst, Inc Managed notification system
US9141863B2 (en) * 2008-07-21 2015-09-22 Facefirst, Llc Managed biometric-based notification system and method
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US8385660B2 (en) 2009-06-24 2013-02-26 Ricoh Co., Ltd. Mixed media reality indexing and retrieval for repeated content
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
DE112011100329T5 (de) 2010-01-25 2012-10-31 Andrew Peter Nelson Jerram Vorrichtungen, Verfahren und Systeme für eine Digitalkonversationsmanagementplattform
US20110206244A1 (en) * 2010-02-25 2011-08-25 Carlos Munoz-Bustamante Systems and methods for enhanced biometric security
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
CN103635940A (zh) 2011-05-02 2014-03-12 阿派基公司 用于使用便携式电子装置控制锁定机构的系统和方法
US20120310642A1 (en) 2011-06-03 2012-12-06 Apple Inc. Automatically creating a mapping between text data and audio data
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8638385B2 (en) 2011-06-05 2014-01-28 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
US9058331B2 (en) 2011-07-27 2015-06-16 Ricoh Co., Ltd. Generating a conversation in a social network based on visual search results
US9088661B2 (en) * 2011-08-02 2015-07-21 Genesys Telecommunications Laboratories, Inc. Hands-free voice/video session initiation using face detection
US8862767B2 (en) 2011-09-02 2014-10-14 Ebay Inc. Secure elements broker (SEB) for application communication channel selector optimization
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
TWI523476B (zh) * 2011-10-19 2016-02-21 致伸科技股份有限公司 帳號建立及認證方法
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
BR112015018905B1 (pt) 2013-02-07 2022-02-22 Apple Inc Método de operação de recurso de ativação por voz, mídia de armazenamento legível por computador e dispositivo eletrônico
US10572476B2 (en) 2013-03-14 2020-02-25 Apple Inc. Refining a search based on schedule items
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10642574B2 (en) 2013-03-14 2020-05-05 Apple Inc. Device, method, and graphical user interface for outputting captions
US9977779B2 (en) 2013-03-14 2018-05-22 Apple Inc. Automatic supplementation of word correction dictionaries
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9733821B2 (en) 2013-03-14 2017-08-15 Apple Inc. Voice control to diagnose inadvertent activation of accessibility features
KR101904293B1 (ko) 2013-03-15 2018-10-05 애플 인크. 콘텍스트-민감성 방해 처리
KR101857648B1 (ko) 2013-03-15 2018-05-15 애플 인크. 지능형 디지털 어시스턴트에 의한 사용자 트레이닝
CN105027197B (zh) 2013-03-15 2018-12-14 苹果公司 训练至少部分语音命令系统
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
AU2014278595B2 (en) 2013-06-13 2017-04-06 Apple Inc. System and method for emergency calls initiated by voice command
CN105453026A (zh) 2013-08-06 2016-03-30 苹果公司 基于来自远程设备的活动自动激活智能响应
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
JP5920894B2 (ja) * 2013-11-07 2016-05-18 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および顔識別用データの登録方法
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9483763B2 (en) 2014-05-29 2016-11-01 Apple Inc. User interface for payments
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
CN105590043B (zh) * 2014-10-22 2020-07-07 腾讯科技（深圳）有限公司 身份验证方法、装置及系统
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
JP6467706B2 (ja) * 2015-02-20 2019-02-13 シャープ株式会社 情報処理装置、情報処理システム、情報処理方法および情報処理プログラム
CN105100619A (zh) * 2015-07-30 2015-11-25 努比亚技术有限公司 一种调整拍摄参数的装置和方法
DK179978B1 (en) 2016-09-23 2019-11-27 Apple Inc. Image data for enhanced user interactions
CN106782564B (zh) * 2016-11-18 2018-09-11 百度在线网络技术（北京）有限公司 用于处理语音数据的方法和装置
KR102476756B1 (ko) 2017-06-20 2022-12-09 삼성전자주식회사 사용자 인증을 위한 등록 데이터베이스의 적응적 갱신 방법 및 장치
US11055942B2 (en) 2017-08-01 2021-07-06 The Chamberlain Group, Inc. System and method for facilitating access to a secured area
WO2019028039A1 (en) 2017-08-01 2019-02-07 The Chamberlain Group, Inc. SYSTEM FOR FACILITATING ACCESS TO A SECURE AREA
EP4155988A1 (en) 2017-09-09 2023-03-29 Apple Inc. Implementation of biometric authentication for performing a respective function
KR102185854B1 (ko) 2017-09-09 2020-12-02 애플 인크. 생체측정 인증의 구현
US11507711B2 (en) 2018-05-18 2022-11-22 Dollypup Productions, Llc. Customizable virtual 3-dimensional kitchen components
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
JP2020022054A (ja) * 2018-07-31 2020-02-06 ソニーセミコンダクタソリューションズ株式会社 撮影装置、電子機器及び通知方法
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
JP7238346B2 (ja) 2018-11-02 2023-03-14 日本電気株式会社 情報処理装置、情報処理装置の制御プログラムおよび通信端末
JP7292627B2 (ja) * 2018-11-29 2023-06-19 オーエム金属工業株式会社 自動スラグ除去装置及び自動スラグ除去プログラム
TW202029724A (zh) * 2018-12-07 2020-08-01 日商索尼半導體解決方案公司 固體攝像裝置、固體攝像方法及電子機器
CN112015774B (zh) * 2020-09-25 2023-08-29 北京百度网讯科技有限公司 一种图表推荐方法、装置、电子设备及存储介质
EP4264460B1 (en) 2021-01-25 2025-12-24 Apple Inc. Implementation of biometric authentication
US12210603B2 (en) 2021-03-04 2025-01-28 Apple Inc. User interface for enrolling a biometric feature
US12216754B2 (en) 2021-05-10 2025-02-04 Apple Inc. User interfaces for authenticating to perform secure operations

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5687259A (en) * 1995-03-17 1997-11-11 Virtual Eyes, Incorporated Aesthetic imaging system
US5828773A (en) * 1996-01-26 1998-10-27 Harris Corporation Fingerprint sensing method with finger position indication
US6111517A (en) * 1996-12-30 2000-08-29 Visionics Corporation Continuous video monitoring using face recognition for access control
US6018739A (en) * 1997-05-15 2000-01-25 Raytheon Company Biometric personnel identification system
US6119096A (en) * 1997-07-31 2000-09-12 Eyeticket Corporation System and method for aircraft passenger check-in and boarding using iris recognition
JP2002511968A (ja) * 1997-11-07 2002-04-16 スイスコム モバイル アーゲー 人物の本人確認を行なう方法、システムおよび装置
GB2331613A (en) * 1997-11-20 1999-05-26 Ibm Apparatus for capturing a fingerprint
RU2000102890A (ru) * 1998-05-19 2002-03-27 Сони Компьютер Энтертейнмент Инк. (Jp) Устройство и способ обработки изображений и распространяемый носитель
US6377699B1 (en) * 1998-11-25 2002-04-23 Iridian Technologies, Inc. Iris imaging telephone security module and method
AU1745000A (en) * 1998-11-25 2000-06-19 Iriscan, Inc. Fast focus assessment system and method for imaging
JP2000321652A (ja) * 1999-05-17 2000-11-24 Canon Inc 証明写真撮影可能なカメラシステム
US6299306B1 (en) * 2000-03-31 2001-10-09 Sensar, Inc. Method and apparatus for positioning subjects using a holographic optical element
US6922488B2 (en) * 2001-02-16 2005-07-26 International Business Machines Corporation Method and system for providing application launch by identifying a user via a digital camera, utilizing an edge detection algorithm

Cited By (117)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9646614B2 (en) 2000-03-16 2017-05-09 Apple Inc. Fast, language-independent method for user authentication by voice
CN1333374C (zh) * 2003-08-22 2007-08-22 松下电器产业株式会社 图象输入装置及使用它的认证装置
CN100489901C (zh) * 2004-04-09 2009-05-20 冲电气工业株式会社 基于面部认证的本人确认系统、自动交易装置、面部认证服务器
US10318871B2 (en) 2005-09-08 2019-06-11 Apple Inc. Method and apparatus for building an intelligent automated assistant
US10381016B2 (en) 2008-01-03 2019-08-13 Apple Inc. Methods and apparatus for altering audio output signals
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US9626955B2 (en) 2008-04-05 2017-04-18 Apple Inc. Intelligent text-to-speech conversion
US9865248B2 (en) 2008-04-05 2018-01-09 Apple Inc. Intelligent text-to-speech conversion
US9535906B2 (en) 2008-07-31 2017-01-03 Apple Inc. Mobile device having human language translation capability with positional feedback
US10108612B2 (en) 2008-07-31 2018-10-23 Apple Inc. Mobile device having human language translation capability with positional feedback
US10475446B2 (en) 2009-06-05 2019-11-12 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10795541B2 (en) 2009-06-05 2020-10-06 Apple Inc. Intelligent organization of tasks items
US11080012B2 (en) 2009-06-05 2021-08-03 Apple Inc. Interface for a virtual digital assistant
US10283110B2 (en) 2009-07-02 2019-05-07 Apple Inc. Methods and apparatuses for automatic speech recognition
US9548050B2 (en) 2010-01-18 2017-01-17 Apple Inc. Intelligent automated assistant
US11423886B2 (en) 2010-01-18 2022-08-23 Apple Inc. Task flow identification based on user intent
US10706841B2 (en) 2010-01-18 2020-07-07 Apple Inc. Task flow identification based on user intent
US9633660B2 (en) 2010-02-25 2017-04-25 Apple Inc. User profiling for voice input processing
US10049675B2 (en) 2010-02-25 2018-08-14 Apple Inc. User profiling for voice input processing
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10102359B2 (en) 2011-03-21 2018-10-16 Apple Inc. Device access using voice authentication
US10417405B2 (en) 2011-03-21 2019-09-17 Apple Inc. Device access using voice authentication
CN103477342B (zh) * 2011-03-21 2017-02-15 苹果公司 使用话音验证的装置存取
CN103477342A (zh) * 2011-03-21 2013-12-25 苹果公司 使用话音验证的装置存取
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US11120372B2 (en) 2011-06-03 2021-09-14 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9798393B2 (en) 2011-08-29 2017-10-24 Apple Inc. Text correction processing
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
CN102646174A (zh) * 2012-02-23 2012-08-22 江苏华丽网络工程有限公司 具有多媒体认证加密保护功能的移动电子设备
US9953088B2 (en) 2012-05-14 2018-04-24 Apple Inc. Crowd sourcing information to fulfill user requests
US10079014B2 (en) 2012-06-08 2018-09-18 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9633674B2 (en) 2013-06-07 2017-04-25 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
US9620104B2 (en) 2013-06-07 2017-04-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9966060B2 (en) 2013-06-07 2018-05-08 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US10657961B2 (en) 2013-06-08 2020-05-19 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US9966068B2 (en) 2013-06-08 2018-05-08 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10185542B2 (en) 2013-06-09 2019-01-22 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
CN103400082A (zh) * 2013-08-16 2013-11-20 中科创达软件股份有限公司 一种文件加密方法、解密方法及系统
US11133008B2 (en) 2014-05-30 2021-09-28 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10169329B2 (en) 2014-05-30 2019-01-01 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10904611B2 (en) 2014-06-30 2021-01-26 Apple Inc. Intelligent automated assistant for TV user interactions
US9668024B2 (en) 2014-06-30 2017-05-30 Apple Inc. Intelligent automated assistant for TV user interactions
US10431204B2 (en) 2014-09-11 2019-10-01 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9986419B2 (en) 2014-09-30 2018-05-29 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10311871B2 (en) 2015-03-08 2019-06-04 Apple Inc. Competing devices responding to voice triggers
US11087759B2 (en) 2015-03-08 2021-08-10 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
CN104734858B (zh) * 2015-04-17 2018-01-09 黑龙江中医药大学 对数据进行识别的防锁死的usb身份认证系统及方法
CN104734858A (zh) * 2015-04-17 2015-06-24 黑龙江中医药大学 对数据进行识别的防锁死的usb身份认证系统及方法
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10356243B2 (en) 2015-06-05 2019-07-16 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11500672B2 (en) 2015-09-08 2022-11-15 Apple Inc. Distributed personal assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US11526368B2 (en) 2015-11-06 2022-12-13 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11069347B2 (en) 2016-06-08 2021-07-20 Apple Inc. Intelligent automated assistant for media exploration
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10354011B2 (en) 2016-06-09 2019-07-16 Apple Inc. Intelligent automated assistant in a home environment
US10733993B2 (en) 2016-06-10 2020-08-04 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US11037565B2 (en) 2016-06-10 2021-06-15 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10089072B2 (en) 2016-06-11 2018-10-02 Apple Inc. Intelligent device arbitration and control
US10297253B2 (en) 2016-06-11 2019-05-21 Apple Inc. Application integration with a digital assistant
US10269345B2 (en) 2016-06-11 2019-04-23 Apple Inc. Intelligent task discovery
US11152002B2 (en) 2016-06-11 2021-10-19 Apple Inc. Application integration with a digital assistant
US10521466B2 (en) 2016-06-11 2019-12-31 Apple Inc. Data driven natural language event detection and classification
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10553215B2 (en) 2016-09-23 2020-02-04 Apple Inc. Intelligent automated assistant
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
CN108399655A (zh) * 2017-02-08 2018-08-14 罗伯特·博世有限公司 用于实施电子付款来支付停车费的方法和设备
US10755703B2 (en) 2017-05-11 2020-08-25 Apple Inc. Offline personal assistant
US10791176B2 (en) 2017-05-12 2020-09-29 Apple Inc. Synchronization and task delegation of a digital assistant
US11405466B2 (en) 2017-05-12 2022-08-02 Apple Inc. Synchronization and task delegation of a digital assistant
US10410637B2 (en) 2017-05-12 2019-09-10 Apple Inc. User-specific acoustic models
US10810274B2 (en) 2017-05-15 2020-10-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10482874B2 (en) 2017-05-15 2019-11-19 Apple Inc. Hierarchical belief states for digital assistants
US11217255B2 (en) 2017-05-16 2022-01-04 Apple Inc. Far-field extension for digital assistant services
CN116883003A (zh) * 2023-07-10 2023-10-13 国家电网有限公司客户服务中心 基于生物探针技术的移动端支付购电反欺诈方法、系统

Also Published As

Publication number Publication date
JP2002229955A (ja) 2002-08-16
EP1229496A2 (en) 2002-08-07
US20020152390A1 (en) 2002-10-17
EP1229496A3 (en) 2004-05-26

Similar Documents

Publication Publication Date Title
CN1369858A (zh) 信息终端装置以及认证系统
CN110555359B (zh) 面部识别的自动重试
CN111984956B (zh) 包括路径参数的面部识别认证系统
CN1255960C (zh) 移动终端鉴别方法以及移动终端
CN100476862C (zh) 面部认证装置、控制方法、程序、电子设备及记录介质
CN101039184A (zh) 用户设备、通信设备、认证系统、认证方法、程序及介质
CN1717703A (zh) 眼图像输入装置和认证装置以及图像处理方法
US20130227678A1 (en) Method and system for authenticating user of a mobile device via hybrid biometics information
CN101043336A (zh) 认证装置及其控制方法、电子设备、控制程序和记录介质
CN1328309A (zh) 基于生物测量的身份鉴定装置、身份鉴定系统、身份鉴定卡及身份鉴定方法
JP2003317100A (ja) 情報端末装置、認証システム、及び登録・認証方法
EP1559062A1 (en) System and method for mobile biometric authentication
US12154385B2 (en) Information processing apparatus and method and non-transitory computer readable medium storing information processing program
CN108986245A (zh) 基于人脸识别的考勤方法及终端
KR20160147515A (ko) 사용자 인증 방법 및 이를 지원하는 전자장치
JP2019049978A (ja) 通信端末、通信システム、画像処理方法、及びプログラム
CN111699490A (zh) 用于电子装置的认证方法
CN106446855A (zh) 一种实名认证装置
CN101459515B (zh) 手持行动电子装置身份认证系统及方法
CN111027374A (zh) 一种图像识别方法及电子设备
CN110574031B (zh) 用于电子设备的登记方案
JP2007094535A (ja) 認証システム及び認証方法
KR100608307B1 (ko) 얼굴 인식 방법 및 시스템
JP2020194296A (ja) 情報処理装置、及び情報処理プログラム
CN1846228A (zh) 带有用户验证功能的电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication