CN102163352A - 自动处理装置 - Google Patents
自动处理装置 Download PDFInfo
- Publication number
- CN102163352A CN102163352A CN2011100323926A CN201110032392A CN102163352A CN 102163352 A CN102163352 A CN 102163352A CN 2011100323926 A CN2011100323926 A CN 2011100323926A CN 201110032392 A CN201110032392 A CN 201110032392A CN 102163352 A CN102163352 A CN 102163352A
- Authority
- CN
- China
- Prior art keywords
- mode
- user
- main body
- execution request
- execution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
- Financial Or Insurance-Related Operations Such As Payment And Settlement (AREA)
Abstract
本发明提供一种自动处理装置,该自动处理装置能够充分地抑制装置主体的电力消耗,并且延长装置的寿命。使用者检测单元(10)在检测出位于物体检测部(12)的传感器(12a)的检测范围内的物体时,不是将该物体检测为使用者,而是以该物体为人以及该人的脸部对着ATM(1)主体正面为条件,判断是否为使用者。据此,能够充分防止将通过ATM(1)主体周边的物体或通行者检测为ATM(1)主体的使用者的情形。因而,能够防止由于通过ATM(1)主体周边的物体或通行者而ATM(1)主体从待机模式切换至执行模式的情形,能够充分抑制ATM(1)主体的电力消耗,并且充分延长ATM(1)主体的寿命。
Description
本申请是2009年6月2日提交的申请号为200910141348.1、发明名称为“自动处理装置”的中国专利申请的分案申请。
技术领域
本发明涉及一种自动处理装置,该自动处理装置能够根据有无使用者来将装置主体的模式在执行模式与待机模式之间进行切换,该执行模式对受理了执行请求的处理予以执行,该待机模式对装置主体的一部分的功能停止提供电源。
背景技术
以往,在响应使用者的输入操作来执行处理的自动处理装置中,为了在没有使用者时抑制电力消耗,根据有无使用者,将装置主体的动作模式在执行模式与待机模式之间进行切换。执行模式是对响应了使用者的输入操作的处理予以执行的模式。待机模式是对装置主体的一部分功能停止提供电源,而等待使用者到来的模式。作为该种自动处理装置,有设置在金融机关的店铺或便利店内的自动柜员机(以下称为ATM),以及贩卖商品的自动售货机等。
例如,在专利文献1中,若传感器检测到接近装置的使用者,则将装置主体的动作模式从待机模式切换为执行模式。此外,在专利文献2中,关于无人店铺内设置的交易处理装置,若入室传感器检测到进入该无人店铺的使用者,则接通交易处理装置的电源(切换成执行模式)。
此外,提出了这样的装置,用照相机对使用者进行摄像,在从该摄像图像不能检测出使用者的眼和口的情况下,不执行被请求的交易(参照专利文献3)。在该专利文献3中,将戴着太阳镜的使用者、蒙面的使用者、用帽子掩盖较多的使用者等推定为可疑者,通过限制该可疑者的交易,防止执行非法交易。另外,用传感器检测到使用者之后,直到根据照相机的摄像图像能够检测到该使用者的脸部为止,都不允许使用装置(参照专利文献4)。
专利文献1:日本实开昭59-40947号公报
专利文献2:日本特开平11-272920号公报
专利文献3:日本特开2000-251077号公报
专利文献4:日本特开2005-346174号公报
但是,在专利文献1的结构中,将通过传感器的检测范围的人和/或物体检测为使用者,将装置主体从待机模式切换为执行模式。即,虽然使用者不在,却无用地将装置主体从待机模式切换为执行模式。因此,存在有不能充分抑制装置主体的电力消耗的间题。此外,执行模式和待机模式之间的切换次数的增加,有诱发装置主体的故障,缩短装置的寿命的危险性。
此外,在专利文献2中,以进入店铺的所有使用者是装置的使用者为前提。因而,在设置了装置的店铺是便利店等的情况下,因为有时候进入店铺的使用者的目的是除使用该装置以外的其他目的,所以与专利文献1同样,在执行模式与待机模式之间进行无用的切换。因而,不能充分地抑制装置主体的电力消耗,此外,还有缩短装置的寿命的危险性。
这样,在响应使用者的输入操作来执行处理的以往的自动处理装置中,不能实现抑制电力消耗以及延长寿命。
而且,专利文献3、4以提高安全性为目的,而对于电力消耗的抑制、寿命的延长的结构并没有特别的提案。
发明内容
本发明的目的是提供一种自动处理装置,该自动处理装置能够充分抑制装置主体的电力消耗,并且延长装置主体的寿命。
本发明,为了解决上述课题,达到该目的,具备以下的结构。
执行请求受理机构受理输入操作,该输入操作涉及针对装置主体的处理的执行请求。此外,模式切换机构将装置主体的模式在执行模式与待机模式之间进行切换,该执行模式对上述执行请求受理机构受理了执行请求的处理予以执行,该待机模式对装置主体的一部分功能停止提供电源而等待使用者。脸部方向检测机构读入由摄像机构拍摄的装置主体前方的摄像图像,对该摄像图像中被拍摄的人物的脸部是否对着装置主体正面进行检测。此外,若上述脸部方向检测机构检测到脸部对着装置主体正面的人物,则模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述执行模式。
通常,人将脸部朝向自己的目标方向。因此,为了使用装置主体而接近装置的使用者的脸部,对着装置主体正面的可能性高。一方面,不使用装置主体的通行者的脸部不对着装置主体正面而是对着自己的通行方向的可能性高。模式切换控制机构,若在摄像机构摄像中的装置主体前方的摄像图像中被拍摄的人物的脸部对着装置主体正面,即该人物是为了使用装置主体而接近装置的使用者的可能性极高时,模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述执行模式。另一方面,若在由摄像机构摄像中的装置主体的前方的摄像图像中被摄像的人物的脸部没有对着装置主体正面,即该人物是不使用装置主体的通行者的可能性高时,模式切换控制机构就不指示上述模式切换机构将装置主体的模式切换为上述执行模式。因而,能够防止将装置主体从待机模式无用地切换为执行模式,能够充分地抑制装置主体的电力消耗,并且延长装置主体的寿命。
此外,也可以构成为,设置显示控制机构,该显示控制机构在显示器上显示引导画面,该引导画面引导对装置主体的输入操作。若上述脸部方向检测机构检测到脸部对着装置主体正面的人物,则该显示控制机构开始在上述显示器上显示引导画面。在该情况下,最好在上述执行请求受理机构受理了执行请求之后,上述模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述执行模式。据此,即使在装置周边通行的通行者的脸部暂时对着装置主体正面,也不会将装置主体的模式切换为上述执行模式。
此外,若在从上述待机模式切换为上述执行模式时,上述模式切换机构对与上述执行请求受理机构受理了执行请求的处理的执行无关的功能继续停止提供电源,就能够进一步抑制装置主体的电力消耗。
此外,也可以设置具备物体检测机构,该物体检测机构检测在装置主体正面有无物体,若上述物体检测机构检测到位于装置主体正面的物体,则上述摄像机构开始对装置主体前方进行摄像。如果这样做,就能够抑制上述脸部方向检测机构中的无用的处理(对于没有被摄像的人的摄像图像的处理),并能够进一步抑制装置主体的电力消耗。
此外,也可以在上述物体检测机构持续预定的一定时间没有检测到位于装置主体正面的物体时,上述模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述待机模式;也可以若上述执行请求受理机构受理了执行请求的处理完成,就指示上述模式切换机构将装置主体的模式切换为上述待机模式。
如果这样做,能够在适当的时间,使装置主体从执行模式转移为待机模式。
根据该发明,能够充分抑制装置主体的电力消耗,并且延长装置主体的寿命。
附图说明
图1是表示ATM的外观的概要图。
图2是表示ATM的主要部分的结构的框图。
图3是表示使用者检测单元的主要部分的结构的图。
图4是表示传感器的检测范围及照相机的摄像范围的图。
图5是表示ATM的动作的流程图。
图6是表示显示器的显示画面例的图。
图7是表示使用者检测处理的流程图。
图8是说明对摄像画像设定的注视点及特征点的图。
图9是说明对摄像画像设定的注视点及特征点的图。
图10是说明对摄像画像设定的注视点及特征点的图。
图11是说明对摄像画像设定的注视点及特征点的图。
图12是说明对摄像画像设定的注视点及特征点的图。
图13是表示脸部朝向判断处理的流程图。
图14是示出对是否连续进行交易进行判断的处理的流程图。
图15是示出显示器中的显示画面例的图。
附图标记
1-ATM(自动柜员机)
2-主控制部
3-显示和操作单元
3a-显示器
4-纸币处理单元
5-硬币处理单元
6-卡和清单处理单元
7-存折处理单元
8-通信单元
10-使用者检测单元
11-控制部
12-物体检测部
12a-传感器
13-摄像部
13a-照相机
14-画像处理部
15-电源部
具体实施方式
以下对本发明的实施方式的自动柜员机进行详细说明(以下,称为ATM)。
图1是表示ATM的外观的概要图。图2是表示ATM的主要部分的结构的框图。如图2所示,ATM1具备:主控制部2;显示和操作单元3;纸币处理单元4;硬币处理单元5;卡和清单处理单元6;存折处理单元7;通信单元8;及使用者检测单元10。该ATM1被设置在金融机关的店铺、便利店等内,处理使用者请求的种类的交易(存款交易、取款交易等)。主控制部2控制各单元的动作。
显示和操作单元3具有:设在主体正面的显示器3a;及贴在该显示器3a的画面上的触摸屏3b。显示和操作单元3将针对使用者的操作引导画面显示在显示器3a上。此外,显示和操作单元3通过检测触摸屏3b的按下位置,来受理使用者的输入操作,该使用者的输入操作与密码、交易内容(交易种类、存取款金额等)相关。此外,显示和操作单元3也可以具有生物信息读取部,该生物信息读取部读取使用者的生物信息(指纹、指静脉、掌纹等)。
纸币处理单元4具有纸币传送部(未图示),该纸币传送部沿着纸币传送路径传送纸币,该纸币传送路径形成于纸币出入币口4a与钱种类别的纸币盒(未图示)之间,该纸币出入币口4a设置在主体正面,该钱种类别的纸币盒被收容在主体内部。此外,纸币处理单元4具有对沿着纸币传送路径传送的每张纸币的钱种类、真伪进行鉴别的纸币鉴别部(未图示)。硬币处理单元5具有硬币传送部(未图示),该硬币传送部沿着硬币传送路径传送硬币,该硬币传送路径形成于硬币出入币口5a与钱种类别的硬币盒(未图示)之间,该硬币出入币口5a设置在主体正面,该钱种类别的硬币盒被收容在主体内部。此外,硬币处理单元5具有对沿着硬币传送路径传送的每枚硬币的钱种类、真伪进行鉴别的硬币鉴别部(未图示)
卡和清单处理单元6读取被插入在卡插入口6a中的卡,并执行该卡中所记录的卡信息(金融机关号码、店铺号码、银行帐号等)的读取、卡信息的更新等,该卡插入口6a设置在主体正面。卡和清单处理单元6也可以是处理磁卡的构造,也可以是处理IC卡的构造,也可以是处理两种卡(磁卡、IC卡)的构造。此外,卡和清单处理单元6具有将交易内容打印在清单上的打印部(未图示)。卡和清单处理单元6将打印有交易内容的清单从设置在主体正面的清单放出口6b放出。
存折处理单元7具有打印部(未图示),该打印部读取被插入在存折插入口7a的存折,并对该存折印交易历史,该存折插入口7a设在主体正面。此外,存折处理单元7具有翻页结构、条形码读出器及磁头等,该翻页结构对放入的存折进行翻页,该条形码读出器读取条形码,该条形码表示印刷在存折上的页号码,该磁头读取存折信息(金融机关号码、店铺号码、银行帐号等),该存折信息记录在被贴附在存折上的磁条中。通信单元8,控制与设置在中心的上位装置(未图示)之间的数据通信。
使用者检测单元10检测ATM1主体的使用者。图3是表示该使用者检测单元的主要部分的结构的框图。使用者检测单元10具备:控制部11、物体检测部12、摄像部13、图像处理部14及电源部15。控制部11控制使用者检测单元10的主体各部分的动作,并控制与主控制部2之间的输入输出。物体检测部12具有安装在ATM1主体的正面面板上的传感器12a。该传感器12a为例如反射型的光传感器、超声波传感器。该传感器12a的检测范围,如图4(A)、(B)所示,为ATM1主体正面前方数米(2~3m)的范围,距离地面数十厘米(50-70cm)的高度。
摄像部13具有安装在ATM1主体的顶板上的照相机13a。照相机13a调整为使得其摄像范围是ATM1主体正面前方。照相机13a如图4(A)、(B)所示,对焦在比传感器12a还接近ATM1主体正面的位置(主体正面前方1米左右的位置)。照相机13a最好设置有活动机构,以能够根据ATM1主体的设置环境、ATM1主体的顶板上的安装位置等,调整摄像区域的方向。此外,照相机13a也可以内置于ATM1主体内,通过ATM1主体的正面面板对ATM1主体正面前方进行摄像。
图像处理部14对照相机13a的摄像图像进行处理,检测该摄像图像中被拍摄的人的脸部是否对着ATM1主体正面。关于图像处理部14的图像处理的细节,将在后面叙述。电源部15具有电源电路,该电源电路对使用者检测单元10的各部分提供动作电源。
此外,还具有向上述显示和操作单元3、纸币处理单元4、硬币处理单元5、卡和清单处理单元6、存折处理单元7及通信单元8的各自单元内的各部分提供动作电源的电源电路。主控制部2对每个单元,控制针对该单元的电源电路的一次电源的提供和停止。例如,主控制部2对每个单元进行开关的开闭控制,以切换针对该单元的电源电路的一次电源的供给和停止。如果由主控制部2开始供给一次电源,各单元就开始动作。
该ATM1根据有无使用者,将装置主体的动作模式在执行模式与待机模式之间进行切换。执行模式是处理使用者所请求的存取款交易等的模式。待机模式是在使用者不在时,停止对一部分单元提供一次电源,换言之,只对特定的单元提供一次电源,等待要进行交易的使用者的到来的模式。在使用者不在时,ATM1通过将主体的动作模式设置成待机模式,就能够抑制ATM1主体的电力消耗,并且延长ATM1主体的寿命。
以下,说明该ATM1的动作。
图5是表示ATM的动作的流程图。在使用者不在时,ATM1将动作模式设置成待机模式。在该待机模式中,主控制部2及使用者检测单元10被提供动作电源,并进行动作。另一方面,其他单元则被主控制部2停止提供一次电源,没有被提供动作电源。
ATM1等待使用者检测单元10检测到使用者(s1)。关于使用者检测单元10检测使用者的处理的细节,将在后面叙述。如果使用者检测单元10检测到使用者,ATM1就开始对显示和操作单元提供一次电源(s2)。从而,显示和操作单元3开始动作。在该s2时刻,不开始对纸币处理单元4、硬币处理单元5及存折处理单元7提供一次电源。
另外,在显示和操作单元3执行选择交易类别的输入操作之前受理卡的情况下,如果ATM1判断为选择了取款交易,只要在该s2的时刻对卡和清单处理单元6提供一次电源就可以。换言之,若为在显示和操作单元3中执行选择交易类别的输入操作之前不受理卡的ATM1,则只要在该s2的时刻不对卡和清单处理单元6开始提供一次电源就可以。
在ATM1中,被开始提供动作电源的显示和操作单元3,在显示器3a上显示交易类别的选择画面(参照图6)。ATM1等待由使用者进行交易类别的选择输入(s3),或由使用者检测单元10检测到使用者离去(s4)。在s3中,在显示和操作单元3中执行选择了交易类别的输入操作之前受理卡的情况下,如果ATM1判断为选择取款交易,则即使在显示和操作单元3中不进行选择交易类别的输入操作,也通过卡的受理来受理交易类别(取款交易)的选择输入。在s4中,在物体检测部12中检测到的使用者未被检测到时,判断为该使用者离去。如果检测到使用者离去,ATM1就指示在s2开始提供一次电源的每个单元停止动作,在该单元的停止处理结束之后停止提供一次电源(s5),并退出本处理。如果在s2开始了对卡和清单处理单元6提供一次电源,则在s5停止对卡和清单处理单元6提供一次电源。另一方面,对于主控制部2及使用者检测单元10,继续提供电源而不停止动作。
这样,在使用者检测单元10中检测到的使用者在ATM1中没有进行交易时,不对纸币处理单元4、硬币处理单元5及存折处理单元7开始提供一次电源。因而,能够抑制当使用者检测单元10检测到的使用者在ATM1中没有进行交易时无用的电力消耗。此外,不会无用地进行纸币处理单元4、硬币处理单元5及存折处理单元7的驱动和停止。
若在s3受理使用者的交易类别的选择输入,则ATM1判断与被选择的交易类别的交易处理相关的单元(s6)。具体而言,无论被选择的交易类别的交易内容为何,将不进行任何处理的单元判断为与交易处理无关的单元,无论被选择的交易类别的交易内容为何,将某种进行处理的单元以及根据交易内容进行处理或不进行处理的单元判断为与交易处理相关的单元。例如,如果被选择的交易的类别为存折记入,则将纸币处理单元4、硬币处理单元5、卡和清单处理单元6判断为与交易无关的单元,判断存折处理单元7为与交易相关的单元。此外,如果是存款交易,则判断存折处理单元7为与交易无关的单元,将纸币处理单元4、硬币处理单元5及卡和清单处理单元6判断为与交易相关的单元。
另外,在存款交易的情况下,虽然在实际的交易处理中也会有不处理纸币或硬币的情况,但是关于纸币处理单元4和硬币处理单元5,则判断为与交易相关的单元。
ATM1对被判断为与被选择的交易类别的交易处理相关的单元开始提供一次电源(s7)。据此,有可能与在s3中被选择的交易类别的交易处理有关的单元开始动作。即,ATM1成为能够进行在s3被选择的交易类别的交易处理的状态。该状态相当于本发明中所述的执行模式。ATM1处理使用者请求的交易(s8)。在s8中,受理交易所必要的卡、存折等,也受理存款金额、取款金额等的输入操作。关于ATM1中的交易处理,由于是公知的技术,这里省略详细的说明。
如果使用者请求的交易类别的交易处理已经结束,ATM1就判断该使用者是否继续进行交易(s9)。关于该s9中的处理的细节,将在后面叙述。若在s9判断为使用者继续进行交易,ATM1就使显示和操作单元3将交易类别的选择画面在显示器3a上(s10),并返回s3。另一方面,若在s9判断为使用者不继续进行交易,ATM1就指示已在s2及s7开始了提供一次电源的每个单元停止动作,在每个单元的停止处理结束后停止向其提供一次电源(s11),并退出本处理。在s11中,不对主控制部及使用者检测单元10停止提供电源,使之继续动作。从而ATM1返回待机模式。
这样,该ATM1对于与在s6被选择的交易类别的交易处理无关的单元不提供一次电源,因此能够抑制ATM1主体的无用的电力消耗。在s9进行判断,在使用者接着前面的交易而连续进行新的交易时,由于不从执行模式返回待机模式,所以不会对各单元徒劳地进行驱动和停止。
另外,在上述说明中,ATM1为待机模式时,主控制部2及使用者检测单元10进行动作,但是也可以停止对主控制部2提供电源。在该情况下,只要使用者检测单元10控制对主控制部2的电源供给和停止,当检测到使用者时开始对主控制部2提供电源就可以。此外,关于使用者检测单元10,只要构成为利用电源开关等来进行一次电源的供给和停止就可以。此外,关于其他单元,与上述实施方式同样,也可以由主控制部2控制一次电源的供给和停止,也可以由使用者检测单元10控制一次电源的供给和停止。
接下来,对上述s1中使用者的检测处理进行详细说明。图7是表示使用者检测处理单元的使用者检测处理的流程图。使用者检测单元10用物体检测部12检测有无位于传感器12a的检测范围内的物体。如果检测到位于传感器12a的检测范围内的物体(s21),使用者检测单元10就等待经过预定的第1时间(例如,数100ms~1s)(s22),再次检测物体是否位于传感器12a的检测范围内(s23)。
该s22、s23的处理是为了防止对暂时进入传感器12a的检测范围内的物体执行以下所示的s24以后的处理而设置的处理。如果使用者检测单元10在s23没有检测到位于传感器12a的检测范围内的物体,即在s21检测到的物体为暂时进入检测范围的物体,则返回s21。
使用者检测单元10当在s23检测到位于传感器12a的检测范围内的物体时,就启动摄像部13,开始用照相机13a拍摄ATM1主体正面(s24)。图像处理部14读取照相机13a的摄像图像,判断该摄像图像内被拍摄到的物体(物体检测部12检测到的位于传感器12a的检测范围内的物体)是否是人(s25)。在s25中,检测出被拍摄的物体的轮廓,根据该轮廓判断是否为人。例如,生成差分图像来检测被拍摄的物体的轮廓,该差分图像为物体没有位于照相机13a的摄像区域内时的背景图像与此次由照相机13a拍摄的摄像图像之间的差分图像。而且,对于检测出的物体的轮廓,进行关于人类的脸部、躯体、手、足等的图案匹配,来判断被摄像的物体是否为人。
使用者检测单元10在判断为被拍摄的物体不是人时,就等待物体检测部12检测不到位于传感器12a的检测范围内的物体(s26),或等待经过预定的第2时间(例如1s~2s左右)(s27)。使用者检测单元10在物体检测部12检测不到位于传感器12a的检测范围内的物体时,停止摄像部13(S28),返回s21。另一方面,当在s27判断为经过了预定的第2时间时,返回s25,重复上述处理。
通过进行该s26~s28的处理,能够防止因在该时刻所检测到的不是人的物体而重复进行摄像部13的启动和停止,并且在检测到该不是人的物体之后,能够合理地检测接近ATM1的人。
使用者检测单元10当在s25判断为人正在被拍摄时,判断为该脸部是否对着ATM1主体正面(s29)。关于该s29的处理的细节,将在后面叙述。通常,使用ATM1的使用者是对着ATM1步行走来,所以其脸部对着ATM1主体正面。另一方面,通过ATM1周边的人(通行人),脸部对着自己的步行方向,其脸部不会对着ATM1主体正面。使用者检测单元10当在s29中判断为脸部没有对着ATM1主体正面时,等待物体检测部12检测不到位于传感器12a的检测范围内的物体(s30),或者等待经过预定的第3时间(例如100ms~1s左右)(s31)。使用者检测单元10当物体检测部12检测不到位于传感器12a的检测范围内的物体时,就停止摄像部13(S32),并返回s21。另一方面,若在s31判断为经过了预定的第3时间,则进行上述s25以后的处理。
当在s29判断为脸部对着ATM1主体正面时,使用者检测单元10就等待经过预定的第4时间(例如数100ms)(s33)。而且,再次判断照相机13a的摄像图像中被拍摄的人的脸部是否对着ATM1主体正面(s34)。该s34中的处理也与s29的处理相同。如果在s34判断为脸部没有对着ATM1主体正面,使用者检测单元10就进行上述s30以后的处理。由此,在进行上述s29的处理时,即使在通过ATM1周边的通行者偶尔对着ATM1主体正面的情况下,也能够防止将该通行者作为使用者来检测。
另外,s32及s33是为了可靠防止将通行者作为使用者来检测而设置的。特别的,也可以不设置该s33、s34。
如果在s34判断为脸部对着ATM1主体正面,则使用者检测单元10对主控制部2通知使用者的存在(s35),并退出本处理。主控制部2根据来自该使用者检测单元10的使用者的检测通知,判断为来了ATM1的使用者,并执行上述s2的处理。
这样,使用者检测单元10在检测出位于物体检测部12的传感器12a的检测范围内的物体时,不是将该物体检测为使用者,而是以该人的脸部对着ATM1主体正面为条件,判断是否为使用者。因而,能够充分防止将通过ATM1周边的物体、通行者误检测为使用者。因而,能够抑制ATM1主体由于通过ATM1周边的物体或通行者而从待机模式切换为执行模式的情形,能够充分地抑制ATM1主体的电力消耗,并且延长ATM1主体的寿命。
接下来,说明s29及s34的判断脸部方向的处理(脸部方向判断处理)。该脸部方向判断处理,基于存在于人的脸部的额、眼、鼻、口等脸部器官来判断脸部方向。具体而言,以摄像部13的照相机13a的摄像图像中被拍摄的人的脸部图像中所存在的额、眼、鼻、口等脸部器官所对应的位置(注视点)为基准,抽出预设的多个特征点。而且,根据这些注视点和特征点的配置来判断脸部方向。
在注视点和/或特征点的设定处理中,首先,检测出在照相机13a的摄像图像中被拍摄的人的脸部图像。例如,可通过采用对应于脸部轮廓的基准模板的模板匹配来进行脸部画像的检测,也可以通过其他方法来进行脸部画像的检测。接着,对检测出的脸部图像中的脸部器官进行检测。该脸部器官也可以是通过图案匹配等来检测出额、眼、鼻、口等脸部器官。脸部器官的检测结束,将图像进行灰度化或反差系数校正,并根据检测出的脸部器官的位置来设定注视点及特征点。
这里,以对额、左右眼以及口这四个脸部器官设定注视点的情况为例说明。图8是表示从正面拍摄的脸图像。如图8所示,注视点U1、L1、R1、M1被设定在额中央部、左眼中央部、右眼中央部及唇中央部(额中央部为注视点U1、左眼中央部为注视点L1、右眼中央部为注视点R1及唇中央部为注视点M1)。离开注视点越远越稀疏地设定特征点。特征点(a1~z1、α1~δ1)以脸部图像的中心线L1为对象被设定在包含左右眉毛、眼、口、鼻、颊、颚等的脸的多个位置。设定特征点的位置是预先设定的。
此外,在拍摄了使用者的侧脸的脸部图像的情况下,注视点及特征点的设定如图9所示。在图9中,在注视点及特征点上附加的标记对应于图8。具体而言,表示注视点及特征点的标记同样为(U、L、R、M、a~z、α~δ),在该标记上加上数字“2”。此外,对于从斜方向拍摄使用者的脸的脸部图像,如图10所示设定注视点及特征点。在图10中,在注视点及特征点上附加的标记对应于图8、9。具体而言,表示注视点及特征点的标记同样为(U、L、R、M、a~z、α~δ),在该标记上加上数字“3”。
由于人的脸部是大致左右对称的,所以能够根据所设定的注视点和/或特征点来判断脸部的方向。具体来说,预先存储因脸部方向而不能设定的注视点、特征点。而且,基于对摄像图像不能设定的注视点和/或特征点,以及根据所存储的脸部方向不能设定的注视点和/或特征点,判断相对于照相机13a的脸部方向。即,判断是从正面拍摄的脸部,或者是从右侧还是从左侧方向摄像的脸部。此外,由于照相机13a的摄像方向与ATM1主体正面方向的角度差是已知的,所以能够根据相对于照相机13a的脸部的方向,检测出相对于ATM1主体正面的脸部方向。
此外,如图10所示,在从斜方向拍摄的摄像图像的情况下,与从正面拍摄的摄像图像同样,能够设定注视点及特征点,但脸部图像的中心线L1的右侧或左侧中一侧上设定的特征点的间隔比其他侧上设定的间隔要密。所以,通过对特征点的间隔进行左右比较,能够判断脸部所对着的方向。例如,在图10中,在眉毛上,左右的特征点a3~c3、e3~g3的各间隔中,a3~c3的较短,e3~g3的较长,所以能够判断被拍摄的人物的脸部对着右侧。
此外,通过对成为预定基准的脸部图像的注视点及特征点的间隔进行存储,并比较所取得的脸部图像的注视点及特征点的间隔,就能够对脸部向下还是向上作出判断。
而且,在照相机13a拍摄的使用者戴着太阳镜,或戴着口罩的情况下,由于该使用者的脸部器官的一部分被遮盖,就不能设定被遮盖的脸部器官附近的注视点和/或特征点。图11是从正面拍摄戴着太阳镜的使用者的脸部图像,图12是从正面拍摄戴着口罩的使用者的脸部图像。但是,在没有从正面拍摄使用者的脸部图像的情况下,如上所述,脸部图像的一部分被连续遮盖,但是在戴着太阳镜的情况或者戴着口罩的情况下,只是脸部器官被遮盖。因而在戴着太阳镜的情况下,或者戴着口罩的情况下,只根据能够设定的注视点是不能判断脸部的方向的。但是,能够通过在脸部的左右侧比较对没有被遮盖的脸部器官所能够设定的特征点的间隔,来判断脸部的方向。例如,在图11的戴着太阳镜的例子中,虽然不能设定眼附近的注视点、特征点,但是能够通过在脸部的左右侧比较眉毛、鼻、颊、口(唇)、颚附近的特征点的间隔,来判断脸部的方向。此外,在图12的带了口罩的例子中,能够通过在脸部的左右侧比较眉毛、眼附近的特征点的间隔,来判断脸部的方向。
图13是表示根据摄像图像判断被拍摄的人物的脸的方向的处理的流程图。图像处理部14读取照相机13a的摄像图像,从该摄像图像检测出脸部图像(s41)。在s41中,也可以有s25中读入的摄像图像,也可以在该时刻再次读入照相机13a的摄像图像。图像处理部14对在s41检测出的脸部图像,进行脸部器官(额、眼、鼻、口)的检测(s42)。可以按照上述图案匹配等来进行各脸部器官的检测。
如果在s42中一个脸部器官也没有检出(s43),图像处理部14就认为脸部方向不确定(s44),并结束本处理。
如果在s42中能够检测出任何一个脸部器官,图像处理部14就对这次读入的照相机13a的摄像图像进行灰度化(或反差系数校正)(s45),对于能够检测出的各脸部器官,则在预定的位置设定注视点(s46)。在该注视点的设定中,如果是从正面拍摄的脸部图像,则能够在预定的所有地方设定注视点,但是在脸部对着侧面或上下方向的情况下,则不能够在所有地方设定注视点,缺少一部分注视点。此外,在戴着太阳镜、口罩等的情况下,也缺少一部分注视点。图像处理部14判断预定的注视点是否全部不能设定(s47)。在预定的注视点全部不能设定的情况下(即,没有能够设定的注视点的情况),图像处理部14认定为s44中脸部方向不确定,并退出本处理。在s44中,例如,在照相机13a从后面拍摄了使用者的情况,以及摄像了类似人的轮廓的物体等情况下,脸部方向不确定。
如果能设定任一个注视点,图像处理部14就与能够设定的注视点相对应地设定特征点(s48)。如果脸部右侧的特征点全部不能设定,图像处理部14就判断为拍摄了使用者的左侧侧面的摄像图像,即使用者的脸部相对于照相机13a朝向右侧(s49、s50)。此外,如果脸部左侧的特征点全部不能设定,图像处理部14就判断为拍摄使用者的右侧侧面的摄像图像,即使用者的脸部相对于照相机13a朝向左侧(s51、s52)。
如果在脸部的右侧及左侧的两侧中,任一个特征点都不能设定,则图像处理部14对从设定在脸部图像的中心线L1到能够设定的左右的各特征点的距离进行测定(s53),并基于在此测定的距离来判断脸部方向(s54)。例如,对于左右对应的每两个特征点,比较距中心线L1的距离,若其差为预定长度以下,则判断为大致相同,若判断为大致相同的特征点的比例超过预定比例(例如75%),则判断为判断脸部方向为正面就可以。此外,若脸部的左侧从中心线L1到特征点的距离较长,则判断为脸部相对于照相机13a面向右斜方向,相反地,若脸部的右侧从中心线L1到特征点的距离较长,则判断为脸部相对于照相机13a面向左斜方向。
此外,在s46中,根据在s54判断的脸部方向不能设定对应该被拍摄的脸部器官设定的注视点时,还能够对戴着太阳镜、口罩、甚至眼罩的情况或脸部向上或向下的情况进行判断。例如,在判断为脸部方向为正面的情况下,如果不能设定对两眼的注视点,则能够判断为戴着太阳镜。此外,在判断为脸部方向为正面的情况下,如果对于一侧的眼不能设定注视点,则能够判断为戴着眼罩。而且,在判断为脸部方向为正面的情况下,如果对于口不能设定注视点,则能够判断为戴着口罩或向下。
这样,图像处理部14不只是能够判断脸部方向,还能够判断是否戴着太阳镜或口罩等。
另外,也可以通过其他方法进行上述脸部方向的判断。例如,在戴着眼镜或太阳镜的情况下,通过测定该眼镜或太阳镜的形状、方向,可以假定被遮盖的眼方向。此外,作为判断是否对着正面的基准,在设置了显示画面的装置中,在对着显示画面的情况下,也可以作为对着正面的基准。通过具体地设定对着正面的判断基准,能够更加正确地判断要欲使用装置的人。
进一步,如果检测到虽然面向ATM1主体正面、但是经过了10秒左右也没有进行交易的人,或者在接近ATM1主体正面的状态下看显示器3a以外的地方等情况下,也可以判断为该人为可疑者,进行报警。此外,也可以是这样的结构:根据摄像图像中脸的大小,拍摄的高度,来判断使用者是否是成人,如果是成人,就与脸的朝向无关,不切换到执行模式。此外,也可以将传感器12a的检测高度设定为检测不出儿童和/或幼儿的高度。这样的话,能够防止将儿童和幼儿检测为使用者,从而能够防止使主体无用地切换到执行模式。
接着,对上述s9中判断结束交易的使用者是否继续进行交易的处理进行说明。图14是表示该处理的流程图。ATM1在交易结束后等待经过一定时间(5秒)(s61)。物体检测部12在经过一定时间时,如果传感器12a检测到使用者,则判断为交易继续进行(s62、s63)。相反地,在经过一定时间时,如果传感器12a没有检测到使用者,即进行了交易的使用者离去,则判断为交易不继续进行(s62、s64)。
此外,如果在s61中将一定的时间设为10秒,则能够防止如下情形:在先行进行交易的使用者离去后其他的使用者来时,徒劳地进行待机模式与执行模式之间的切换。
另外,如果在s61中将一定时间设为0秒,则在交易处理结束后,能够将ATM1主体切换为待机模式。
这样,在该ATM1中,能够抑制将在周边通行的行人检测为使用者的情况,所以能够充分地抑制无用的电力消耗。此外,由于不会徒劳地重复各单元的启动和停止,所以能够延长ATM1主体的寿命。
此外,如果传感器12a检测到物体进入ATM1周边的检测范围内,则启动照相机13a等,判断进入检测范围内的物体是否为人,所以照相机13a等没有必要一直启动,此外,也能够抑制对于照相机13a的摄像图像的图像处理负荷。
此外,在检测到使用者时,在显示器3a上显示引导画面,在受理了执行的交易类别的选择输入之后,对于与选择的交易类别无关的单元,不开始提供动作电源,所以能够进一步控制徒劳的电力消耗。
此外,在上述说明中,在s62,根据物体检测部12是否检测到使用者,来维持执行模式或切换为待机模式,但是图像处理部14也可以根据照相机13a的摄像图像,判断是否有人的脸部对着ATM1主体正面,根据该判断结果,来维持执行模式或切换为待机模式。
此外,也可以是没有上述物体检测部12。在该情况下,使用者检测单元10可以在图像处理部14处理照相机13a的摄像图像,并重复进行检测使用者的处理。
此外,可以另外设置用于对ATM1周边进行摄像的摄像机,在该摄像机的摄像图像中拍摄到人的时候,启动照相机13a。
此外,在上述实施方式中,若传感器12a检测到进入检测范围的物体,并在经过一定时间后传感器12a再次检测到物体,则照相机13a开始进行摄像,但是也可以是在传感器12a检测到进入检测范围的物体的时刻,由照相机13a开始进行摄像。如果这样做,则在显示器3a上显示引导画面的时刻提早,就能够消除或缩短到达ATM1主体正面的使用者所等待的时间。因而,能够抑制使用者的便利性降低。
此外,在上述实施方式中,如果在s1中检测到使用者,则在显示器3显示交易种类的选择画面,但是如图15所示,也可以是,将用于受理是否进行交易的确认输入的画面显示在显示器3a,在受理了确认输入的时刻,将交易种类的选择画面显示在显示器3a。此外,也可以是,在从使用者到达ATM主体起直到成为实际进行交易处理的状态为止需要一定时间时,在显示器3a显示广告等。
此外,本发明不仅适用于上述ATM1,也适用于自动售货机等装置。
Claims (8)
1.一种自动处理装置,具备:
执行请求受理机构,受理输入操作,该输入操作涉及对装置主体进行处理的执行请求;
使用者检测机构,检测装置的使用者;
模式切换机构,将装置主体的模式在执行模式与待机模式之间进行切换,该执行模式对上述执行请求受理机构受理了执行请求的处理予以执行,该待机模式是装置主体基于上述使用者检测机构等待使用者的到来的模式;以及
模式切换控制机构,若上述使用者检测机构检测到装置的使用者,则该模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述执行模式,
在从上述待机模式切换为上述执行模式时,上述模式切换机构对规定的功能开始提供电源之后,对与上述执行请求受理机构受理了执行请求的处理的执行有关的功能开始提供电源。
2.一种自动处理装置,具备:
执行请求受理机构,受理输入操作,该输入操作涉及对装置主体进行处理的执行请求;
物体检测机构,检测在装置主体前方有无物体;
使用者检测机构,在上述物体检测机构检测到物体的情况下,判断是否是装置的使用者;
模式切换机构,将装置主体的模式在执行模式与待机模式之间进行切换,该执行模式对上述执行请求受理机构受理了执行请求的处理予以执行,该待机模式是装置主体基于上述使用者检测机构等待使用者的到来的模式;以及
模式切换控制机构,若上述使用者检测机构检测到装置的使用者,则该模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述执行模式,
在从上述待机模式切换为上述执行模式时,上述模式切换机构对规定的功能开始提供电源之后,对与上述执行请求受理机构受理了执行请求的处理的执行有关的功能开始提供电源。
3.如权利要求1所述的自动处理装置,其中,
在上述使用者检测机构持续预定的一定时间没有检测到使用者时,上述模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述待机模式。
4.如权利要求2所述的自动处理装置,其中,
在上述物体检测机构持续预定的一定时间没有检测到位于装置主体正面的物体时,上述模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述待机模式。
5.如权利要求1所述的自动处理装置,其中,
若上述执行请求受理机构受理了执行请求的处理结束,则上述模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述待机模式。
6.如权利要求2所述的自动处理装置,其中,
若上述执行请求受理机构受理了执行请求的处理结束,则上述模式切换控制机构指示上述模式切换机构将装置主体的模式切换为上述待机模式。
7.如权利要求1所述的自动处理装置,其中,
上述执行请求受理机构受理存取款交易处理的执行请求。
8.如权利要求2所述的自动处理装置,其中,
上述执行请求受理机构受理存取款交易处理的执行请求。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008144285A JP4931860B2 (ja) | 2008-06-02 | 2008-06-02 | 自動処理装置 |
| JP144285/2008 | 2008-06-02 |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2009101413481A Division CN101599195B (zh) | 2008-06-02 | 2009-06-02 | 自动处理装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102163352A true CN102163352A (zh) | 2011-08-24 |
| CN102163352B CN102163352B (zh) | 2013-10-02 |
Family
ID=41420626
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2009101413481A Expired - Fee Related CN101599195B (zh) | 2008-06-02 | 2009-06-02 | 自动处理装置 |
| CN201110032392.6A Active CN102163352B (zh) | 2008-06-02 | 2009-06-02 | 自动处理装置 |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2009101413481A Expired - Fee Related CN101599195B (zh) | 2008-06-02 | 2009-06-02 | 自动处理装置 |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP4931860B2 (zh) |
| CN (2) | CN101599195B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104335257A (zh) * | 2012-03-29 | 2015-02-04 | 红牛有限公司 | 具有装载状态设备和用户检测设备的物品存放设备 |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011253311A (ja) * | 2010-06-01 | 2011-12-15 | Pfu Ltd | 情報処理装置、モード制御方法およびモード制御用プログラム |
| CN102594999A (zh) * | 2012-01-30 | 2012-07-18 | 郑凯 | 一种通过人脸识别进行自适应手机节能的方法和系统 |
| JP5970974B2 (ja) * | 2012-06-25 | 2016-08-17 | 沖電気工業株式会社 | 取引装置及びプログラム |
| JP6322150B2 (ja) * | 2015-03-11 | 2018-05-09 | 富士通フロンテック株式会社 | 自動取引装置、画像取得プログラム及び画像取得システム |
| CN105118153A (zh) * | 2015-09-06 | 2015-12-02 | 上海古鳌电子科技股份有限公司 | 一种具有指纹视频识别的纸币处理装置、纸币处理方法 |
| CN105139517A (zh) * | 2015-09-06 | 2015-12-09 | 上海古鳌电子科技股份有限公司 | 一种交易处理装置 |
| CN105389779A (zh) * | 2015-10-15 | 2016-03-09 | 广东欧珀移动通信有限公司 | 一种图像校正方法、装置及移动终端 |
| CN106390316A (zh) * | 2016-08-30 | 2017-02-15 | 宁波保众应急科技有限公司 | 一种气压警示装置工作状态控制方法及装置 |
| CN109272673A (zh) * | 2018-08-22 | 2019-01-25 | 深圳怡化电脑股份有限公司 | 金融自助设备及其工作方法 |
| JP7481398B2 (ja) * | 2022-07-04 | 2024-05-10 | ソフトバンク株式会社 | 判定装置、プログラム、及び判定方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10188103A (ja) * | 1996-12-26 | 1998-07-21 | Toshiba Corp | 自動機器の操作案内装置 |
| JPH10326371A (ja) * | 1997-05-27 | 1998-12-08 | Oki Electric Ind Co Ltd | 自動決済端末 |
| JP2000259894A (ja) * | 1999-03-08 | 2000-09-22 | Oki Electric Ind Co Ltd | 自動取引装置 |
| JP2003150795A (ja) * | 2001-11-16 | 2003-05-23 | Hitachi Ltd | 受付案内装置とシステム |
| CN1841249A (zh) * | 2005-03-29 | 2006-10-04 | 华为技术有限公司 | 多媒体终端及其进行状态转换的方法 |
| JP2008040581A (ja) * | 2006-08-02 | 2008-02-21 | Hitachi Omron Terminal Solutions Corp | 端末装置、およびシステム |
-
2008
- 2008-06-02 JP JP2008144285A patent/JP4931860B2/ja not_active Expired - Fee Related
-
2009
- 2009-06-02 CN CN2009101413481A patent/CN101599195B/zh not_active Expired - Fee Related
- 2009-06-02 CN CN201110032392.6A patent/CN102163352B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10188103A (ja) * | 1996-12-26 | 1998-07-21 | Toshiba Corp | 自動機器の操作案内装置 |
| JPH10326371A (ja) * | 1997-05-27 | 1998-12-08 | Oki Electric Ind Co Ltd | 自動決済端末 |
| JP2000259894A (ja) * | 1999-03-08 | 2000-09-22 | Oki Electric Ind Co Ltd | 自動取引装置 |
| JP2003150795A (ja) * | 2001-11-16 | 2003-05-23 | Hitachi Ltd | 受付案内装置とシステム |
| CN1841249A (zh) * | 2005-03-29 | 2006-10-04 | 华为技术有限公司 | 多媒体终端及其进行状态转换的方法 |
| JP2008040581A (ja) * | 2006-08-02 | 2008-02-21 | Hitachi Omron Terminal Solutions Corp | 端末装置、およびシステム |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104335257A (zh) * | 2012-03-29 | 2015-02-04 | 红牛有限公司 | 具有装载状态设备和用户检测设备的物品存放设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101599195A (zh) | 2009-12-09 |
| JP4931860B2 (ja) | 2012-05-16 |
| JP2009289236A (ja) | 2009-12-10 |
| CN101599195B (zh) | 2011-04-06 |
| CN102163352B (zh) | 2013-10-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102163352B (zh) | 自动处理装置 | |
| US6583864B1 (en) | Self service terminal | |
| JP5335038B2 (ja) | 自動処理装置 | |
| EP3364387A1 (en) | Checkout system | |
| JP5028338B2 (ja) | 顔向き検出ユニット、および顔向き検出方法 | |
| JP2012027641A (ja) | 表示画像制御ユニット、表示画像制御プログラム、および自動取引処理装置 | |
| JP2003255922A (ja) | 表示装置、端末処理装置、及び、端末処理方法 | |
| JP5309783B2 (ja) | 自動取引装置 | |
| JPH11175643A (ja) | 自動取引装置およびその制御方法 | |
| JPH09198545A (ja) | 自動取引装置 | |
| JP5359419B2 (ja) | 自動取引装置 | |
| JP2010224737A (ja) | 監視装置、および自動取引処理システム | |
| JP2011118716A (ja) | 自動取引装置 | |
| JP5228696B2 (ja) | 自動取引装置 | |
| JP2009301098A (ja) | 自動取引装置 | |
| JP4844638B2 (ja) | 自動取引装置 | |
| JP2010086386A (ja) | 自動取引装置 | |
| CN102113029B (zh) | 自动交易装置 | |
| JP6650374B2 (ja) | 読取装置 | |
| JP2010146152A (ja) | 自動取引処理装置 | |
| JP7369065B2 (ja) | 精算システム | |
| JP7709631B2 (ja) | 自動取引装置、人物検知方法及び人物検知プログラム | |
| JP2005301484A (ja) | 自動取引装置 | |
| JP7277406B2 (ja) | 自動取引装置、偽造カード判定方法、及び偽造カード判定プログラム | |
| JPH1021392A (ja) | 虹彩認識システムおよび虹彩認識装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CP01 | Change in the name or title of a patent holder |
Address after: Tokyo, Japan Patentee after: Hitachi Financial Systems Co.,Ltd. Address before: Tokyo, Japan Patentee before: HITACHI-OMRON TERMINAL SOLUTIONS, Corp. |
|
| CP01 | Change in the name or title of a patent holder |