CN101409826A - 信息处理装置和远程指示系统 - Google Patents

Abstract

本发明涉及信息处理装置和远程指示系统。该信息处理装置连接至投影装置和图像拍摄装置，并且包括：获取部、检测部，以及控制器。该获取部获取该图像拍摄装置拍摄的多个图像。该检测部根据这些拍摄图像检测该物体的位置和该信息处理装置的用户的位置。该控制器基于检测出的该物体的位置和该信息处理装置的位置，使该投影装置将指示存储这些拍摄图像中的至少一个拍摄图像的第一指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的线性区域以外的区域上，并且在遮住了投影的该第一指示数据时将这些拍摄图像中的该至少一个拍摄图像存储在存储器中。

Description

信息处理装置和远程指示系统

技术领域

本发明涉及信息处理装置和远程指示系统。

背景技术

存在常规已知的包括连接有照相机和投影仪的服务器(例如，计算机)和经由网络与该服务器远程地连接的客户端(例如，计算机)在内的远程指示系统(例如，参见美国专利申请公报第2004/0070674号和日本专利申请公报第2005-33756号)。

在这种远程指示系统中，与服务器连接的照相机对作为物体的三维体进行拍摄，并且经由网络将拍摄的图像发送至客户端。该客户端在显示装置的显示画面上显示拍摄的图像。在将注释图像写入到了该显示画面中的情况下，客户端将该注释图像经由网络发送至服务器。该服务器将从该客户端接收到的注释图像发送至投影仪。该投影仪将接收到的注释图像投影到包括该三维体的投影区的恰当位置上(具体来说，该位置对应于拍摄图像的范围中的客户端已经写入注释图像的位置)。

在这种远程指示系统中，当作为信息处理装置的服务器自动地存储由照相机以规则的时间间隔拍摄的图像时，对于该服务器来说，需要大容量的存储介质。在这种情况下，因为服务器存储了不需要的拍摄图像，所以客户端或服务器的用户花费时间来寻找需要的拍摄图像。因此，服务器的用户在服务器侧安装新的客户端来存储希望的拍摄图像。

然而，在这种情况下，服务器的用户从物体的位置移动至新客户端的位置，并且服务器的用户需要执行拍摄图像的存储指令。因此，不能按服务器的用户所希望的时刻来存储拍摄的图像。

发明内容

本发明用以解决常规技术的问题，并且提供了一种能够按信息处理装置的用户所希望的时刻来存储拍摄图像的信息处理装置和远程指示系统。

根据本发明的第一方面，提供了一种信息处理装置，该信息处理装置连接至投影装置和图像拍摄装置，该投影装置将从外部终端输入的注释图像投影到包括物体的投影区中，该图像拍摄装置拍摄该投影区，所述信息处理装置包括：获取部，该获取部获取该图像拍摄装置拍摄的多个图像；检测部，该检测部根据该多个图像检测该物体的位置和该信息处理装置的用户的位置；控制器，该控制器基于检测到的该物体的位置和该信息处理装置的用户的位置，使该投影装置将指示存储这些拍摄图像中的至少一个拍摄图像的第一指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的线性区域以外的区域上，并且在遮住了该投影装置投影的该第一指示数据时将这些拍摄图像中的该至少一个拍摄图像存储在存储器中。

根据这种构造，指示存储这些拍摄图像中的至少一个拍摄图像的该第一指示数据被投影到链接该信息处理装置的用户和物体并且在该信息处理装置的用户与该物体之间的线性区域以外的该区域上，并且在遮住了该投影装置投影的该第一指示数据时将这些拍摄图像中的该至少一个拍摄图像存储在存储器中。因此，能够在该信息处理装置的用户所希望的时刻存储该拍摄图像。

优选的是，所述该信息处理装置还包括：输出部，该输出部输出从该外部终端输入的话音；和输入部，该输入部输入该输出的该话音和通过该信息处理装置的用户生成的话音，其中，当遮住了该投影装置投影的该第一指示数据时，该控制器将从该投影装置投影所拍摄的图像起到遮住该第一指示数据的这段时间期间该输入部输入的话音数据与应当被存储在该存储器中的拍摄图像相关联，并将该话音数据和该拍摄图像存储在该存储器中。

根据这种构造，可以以该信息处理装置的该用户所述希望的时刻将从该外部终端输入的该话音或通过该信息处理装置的该用户生成的话音与该拍摄图像相关联，并且存储从该外部终端输入的该话音或该信息处理装置的该用户生成的该话音以及该拍摄图像。

优选的是，该控制器基于检测出的该物体的位置和该信息处理装置的位置，使该投影装置将作为存储以规则的时间间隔顺序地拍摄的多个图像的指示的第二指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的该线性区域以外的该区域上，并且在遮住了该投影装置投影的该第二指示数据时将该图像拍摄装置以规则的时间间隔顺序地拍摄的该多个图像存储在该存储器中。

根据这种构造，可以以该信息处理装置的该用户所述希望的时刻将以规则的时间间隔拍摄的多个图像存储在该存储器中。

更优选的是，当遮住了通过该投影装置投影的该第二指示数据时，该控制器使该投影装置将作为完成存储该多个拍摄图像的指示的第三指示数据代替该第二指示数据地投影到与该第二指示数据相同的位置处，并且当遮住了该投影装置投影的该第三指示数据时，该控制器完成在该存储器中存储该多个拍摄图像。

根据这种构造，可以完成在存储器中存储以规则的时间间隔顺序地拍摄的该多个图像。

优选的是，该控制器基于检测出的该物体的位置和该信息处理装置的位置，使该投影装置将作为在经过预置时间后存储该拍摄图像的指示的第四显示装置投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的该线性区域以外的区域上，并且在遮住了该投影装置投影的该第四显示装置时将该图像拍摄装置在经过该预置时间之后拍摄的该图像存储在该存储器中。

根据这种构造，可以在经过了该预置时间之后存储该拍摄图像。

更优选的是，在该预置时间的经过期间，将剩余时间通知给该信息处理装置的该用户和该外部终端的用户这两者中的至少一个。

根据这种构造，该信息处理装置的用户和该外部终端的用户中的至少一个可以获知该剩余时间。

根据本发明的第二方面，提供了一种远程指示系统，该远程指示系统包括：投影装置，该投影装置将从外部终端输入的注释图像投影到包括物体的投影区中；图像拍摄装置，该图像拍摄装置拍摄该投影区；以及信息处理装置，该信息处理装置包括：获取部，该获取部获取该图像拍摄装置拍摄的多个图像；检测部，该检测部根据该多个图像检测该物体的位置和该信息处理装置的用户的位置；控制器，该控制器基于检测出的该物体的位置和该信息处理装置的位置，使该投影装置将指示存储这些拍摄图像中的至少一个拍摄图像的第一指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的线性区域以外的区域上，并且在遮住了该投影装置投影的该第一指示数据时将这些拍摄图像中的该至少一个拍摄图像存储在存储器中。

根据这种构造，指示存储这些拍摄图像中的至少一个拍摄图像的该第一指示数据被投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的线性区域以外的该区域上，并且在遮住了该投影装置投影的该第一指示数据时将这些拍摄图像中的该至少一个拍摄图像存储在存储器中。因此，能够以该信息处理装置的用户所希望的时刻存储该拍摄图像。

附图说明

基于下面的图对本发明的示例性实施方式进行详细说明，在附图中：

图1是示出了根据本发明第一示例性实施方式的远程指示系统的结构的框图；

图2是示出了PC1和PC2的功能结构的框图；

图3A是示出了PC1的硬件结构的框图；

图3B是示出了PC2的硬件结构的框图；

图4是示出了PC1和PC2执行的处理的流程图；

图5是示出了图4中的步骤S14的第二照相机处理的流程图；

图6是示出了图4中的步骤S7的拍摄图像的存储时刻的检测处理的流程图；

图7是示出了将PC1的用户和物体9链接起来并且排列在PC1的用户与物体9之间的线性区域的实施例的图；

图8是示出了图4中的步骤S9的拍摄图像的存储处理的流程图；

图9A到9C是示出了存储在存储器103中的拍摄图像及其属性信息的实施例的图；

图10是示出了在本发明第二示例性实施方式中PC1的用户用手遮住顺序拍摄按钮11a以使投影顺序拍摄完成按钮11b的状态的图；

图11是示出了PC1和PC2执行的处理的流程图；

图12是示出了图11中的步骤S7a的拍摄图像的顺序存储时刻的检测处理的流程图；

图13是示出了图11中的步骤S9a的拍摄图像的存储处理的流程图；

图14A是示出了其中在显示区15中粘贴具有计时器的存储按钮11c的状态的图；

图14B是示意性示出了计时器的倒计时状态的图；

图15是示出了根据本发明第三示例性实施方式的PC1和PC2执行的处理的流程图；以及

图16是示出了图15中的步骤S7b的拍摄图像的计时器时刻的检测处理的流程图。

具体实施方式

下面，参照附图，对本发明的示例性实施方式进行说明。

(第一示例性实施方式)

图1是示出了根据本发明第一示例性实施方式的远程指示系统的结构的框图。

该远程指示系统设置有充任服务器的个人计算机(PC)1和充任客户端的个人计算机(PC)2。这些组件经由网络3彼此连接。投影仪4(投影装置)、第一照相机5(图像拍摄装置)、第二照相机6(图像拍摄装置)、麦克风(输入部)7以及扬声器8(输出部)连接至PC1。基于来自PC1的控制命令，投影仪4发射光束或将注释图像等投影到放置在台10上的物体9上。应注意到，注释图像包括任何类型的图像，如线、字符、符号、图形、颜色、以及字体。而且，投影仪4基于来自PC1的控制命令将用于在PC1中存储拍摄图像的存储按钮11投影到台10上。

第一照相机5拍摄包括物体9在内的台10的反射图像，并且将拍摄图像输出至PC1。即，第一照相机5拍摄物体9的整个图像。第一照相机5被设置为使第一照相机5的视角和光轴与投影仪4的视角和光轴相同。

第二照相机6由网络照相机、PTZ(全景-俯仰-变焦)照相机或便携式照相机组成。PC1侧的用户可以随意移动第二照相机6。第二照相机6被用于拍摄物体9的不能由第一照相机5拍摄的一部分(例如，从物体9的正面看不见的阴影部分)并且按特写镜头模式(closeup mode)拍摄物体9。即，第二照相机6拍摄物体9的一部分。

麦克风7输入诸如PC1的用户的指示的话音，并且将该话音输出至与PC2连接的扬声器19。扬声器8输出从连接至PC2的麦克风18输入的诸如PC2的用户的指示的话音。

PC1经由网络3向PC2输出第一照相机1和第二照相机6拍摄的图像。PC2连接至显示单元205、麦克风18以及扬声器19。显示单元205显示拍摄图像的显示区15和用户接口(UI)16。应注意到，PC2可以由包括显示单元205的一体化(all-in-one)个人计算机组成。

麦克风18输入诸如PC2的用户的指示的话音，并且将该话音输出至与PC1相连接的扬声器8。扬声器19输出从连接至PC1的麦克风7输入的诸如PC1的用户的指示的话音。PC1侧的用户和PC2侧的用户分别使用麦克风7和扬声器8，以及麦克风18和扬声器19，以通过话音彼此通信。

UI 16包括诸如笔按钮、文本按钮、以及擦除按钮的一组按钮，和用线和颜色定义的图标。第一照相机5和第二照相机6拍摄的图像被显示在显示区15中。在图1中，第一照相机5拍摄的包括物体9和存储按钮11(第一指示数据)在内的台10的图像被显示在显示区15中。另外，第二照相机6拍摄的图像被显示在显示区15的内部的显示框17中。当从后面所述的操作单元204输入使用第二照相机6的命令时，PC2使显示单元205在显示区15内部显示显示框17，并且使显示框17显示第二照相机6拍摄的图像。

例如，当按压UI 16的笔按钮以在显示区15中的物体9上绘制图形等时，从PC2经由PC1向投影仪4输出与该图形有关的信息。投影仪4基于与该图形有关的信息将该图形绘制到物体9上。

PC2向PC1输出控制命令，以控制投影仪4、第一照相机5以及第二照相机6的操作(如第一照相机5拍摄的图像的拍摄角、第一照相机5和第二照相机6拍摄的图像的亮度，以及投影仪4投影的图像的亮度)。

在图1中，客户端的数量仅为1个(PC2)，但该远程指示系统可以包括两个或更多个客户端(PC)。

图2是示出了PC1和PC2的功能结构的框图。

PC1包括：控制投影仪4、第一照相机5、第二照相机6、麦克风7和扬声器8以及整个装置的操作的控制器101(获取部、检测部，以及控制器)；经由网络3向PC2发送/从PC2接收信息和数据的发送和接收单元102；存储控制程序、数据、信息等的存储器103；以及连接至投影仪4、第一照相机5、第二照相机6、麦克风7以及扬声器8的接口(IF)单元104。此外，PC1可以包括用于显示第二照相机6拍摄的图像的显示单元105。控制器101连接至发送和接收单元102、存储器103、IF单元104、以及显示单元105。控制器101还经由IF单元104连接至投影仪4、第一照相机5、第二照相机6、麦克风7以及扬声器8。

PC2包括：控制整个装置的控制器201；经由网络3向PC1发送/从PC1接收信息和数据的发送和接收单元202；存储控制程序、数据、信息等的存储器203；由鼠标器、键盘等形成的操作单元204；显示单元205；以及连接至麦克风18和扬声器19的接口(IF)单元206。控制器201连接至发送和接收单元202、存储器203、操作单元204、显示单元205、以及IF单元206。

图3A是示出了PC1的硬件结构的框图，而图3B是示出了PC2的硬件结构的框图。

PC1包括：控制整个装置的CPU 21；存储控制程序的ROM 22充任工作区的RAM 23；存储各种信息和程序的硬盘驱动器(HDD)24；连接至另一计算机的网络接口26；以及连接至USB装置(未示出)的USB(通用串行总线)接口28。CPU 21经由系统总线29连接至ROM 22、RAM 23、硬盘驱动器(HDD)24、网络接口26以及USB接口28。PC1经由USB接口28连接至投影仪4、第一照相机5、第二照相机6、麦克风7以及扬声器8。应注意到，PC1可以包括键盘和鼠标器25以及显示器27。

控制器101等同于根据控制程序执行各种操作的CPU 21。发送和接收单元102等同于网络接口26，而存储器103等同于硬盘驱动器(HDD)24。显示器105等同于显示器27。

PC2包括：控制整个装置的CPU 31；存储控制程序的ROM 32；充任工作区的RAM 33；存储各种信息和程序的硬盘驱动器(HDD)34；键盘和鼠标器35；连接至另一计算机的网络接口36；由液晶监视器或CRT形成的显示器37；以及连接至USB装置(未示出)的USB(通用串行总线)接口38。CPU 31经由系统总线39连接至ROM 32、RAM 33、硬盘驱动器(HDD)34、键盘和鼠标器35、网络接口36、显示器37以及USB接口38。PC 2经由USB接口38连接至麦克风18和扬声器19。

控制器201等同于根据控制程序执行各种操作的CPU 31。发送和接收单元202等同于网络接口36，而存储器203等同于硬盘驱动器(HDD)34。操作单元204等同于键盘和鼠标器35，而显示器205等同于显示器37。

图4是示出了PC1和PC2执行的处理的流程图。

下面，首先对PC1执行的处理进行说明。PC1的控制器101向投影仪4输出初始投影图像(步骤S1)。该初始投影图像为黑图像。

接下来，控制器101经由发送和接收单元102和网络3向PC2输出第一照相机5和第二照相机6拍摄的图像(步骤S2)。

麦克风7开始录制来自PC1的用户的指示和从扬声器8输出的话音(步骤S3)。接着，控制器101等待，直到该控制器101接收到来自PC2的命令为止(步骤S4)。具体来说，来自PC2的命令是表示注释图像的数据。例如，如果注释图像是圆形，则该命令是文本数据的表示该圆形的中心和半径的信息。

接下来，如果发送和接收单元102接收到来自PC2的命令(步骤S5)，则控制器11根据该命令执行图像的投影处理(步骤S6)。具体来说，如果从PC2接收到表示注释图像的数据，则控制器101向投影仪4输出表示注释图像的该数据。投影仪4基于该数据投影该注释图像。

控制器101执行拍摄图像的存储时刻的检测处理(步骤S7)。在拍摄图像的存储时刻的检测处理中，控制器101检测PC1的用户是否已经遮住了投影的存储按钮11。如果PC1的用户已经遮住了投影的存储按钮11，则将该拍摄图像存储在存储器103中。后面将对拍摄图像的存储时刻的检测处理的细节进行说明。

接下来，控制器101确定是否打开了存储标志(步骤S8)。该存储标志被存储在存储器103中。存储标志的打开/关闭通过上述步骤S7中的拍摄图像的存储时刻的检测处理来设置。

如果针对步骤8的确定的答案为否，则处理返回至步骤S4。另一方面，如果针对步骤S8的确定的答案为是，则控制器101执行拍摄图像的存储处理(步骤S9)。在拍摄图像的存储处理中，控制器101将拍摄图像、其属性信息以及录制数据存储在存储器103中。后面将对拍摄图像的存储处理的细节进行说明。

接下来，控制器101确定是否完成了根据来自PC2的命令要执行的所有处理(步骤S10)。如果针对步骤S10的确定的答案为否，则处理返回至步骤S4。另一方面，如果针对步骤S10的确定的答案为是，则终止PC 1执行的处理。

下面，对PC2执行的处理的进行说明。

如果控制器201接收到从操作单元204输入的命令(步骤S11)，则控制器201确定该命令是否为使用第二照相机6的命令(步骤S12)。

如果针对步骤S12的确定的答案为是，则显示单元205在显示区15内部显示显示框17(步骤S13)。控制器201执行第二照相机处理(步骤S14)。接着，处理进行至步骤S16。

这里，参照图5，对步骤S14中的第二照相机处理进行说明。

在图5的第二照相机处理中，首先，发送和接收单元202接收来自第二照相机6的拍摄图像(步骤S21)，显示单元205在显示区15的内部的显示框17中显示该拍摄图像(步骤S22)。

接下来，控制器201确定该控制器201是否已经接收到来自操作单元204的用于在显示框17中绘制注释图像的画面处理命令(步骤S23)。如果针对步骤S23的确定的答案为是，则控制器201根据该画面处理命令在显示框17中绘制注释图像(步骤S24)。如果针对步骤S23的确定的答案为否，则处理进行至步骤S25。

接下来，控制器201确定该控制器201是否接收到来自操作单元204的用于结束显示框17的显示的命令(步骤S25)。如果针对步骤S25的确定的答案为否，则处理返回至步骤S21。另一方面，如果针对步骤S25的确定的答案为是，则显示单元205结束显示框17的显示，并且同时放映在显示区15中的显示框17中绘制的注释图像(步骤S26)。接着，处理进行至步骤S16。

返回至图4，如果针对步骤S12的确定的答案为否，则控制器201确定该控制器201是否接收到来自操作单元204的用于绘制注释图像的画面处理命令(步骤S15)。

如果针对步骤S15的确定的答案为否，则处理进行至步骤S17。如果针对步骤S15的确定的答案为是，则控制器201根据该画面处理命令在显示区15中绘制注释图像(步骤S16)。

接下来，控制器201经由发送和接收单元202向PC1发送表示注释图像的数据，作为命令(步骤S17)。该向PC1发送的命令在步骤S5的过程中被发送和接收单元102接收。

最后，控制器201确定是否完成了PC2应当执行的所有处理(步骤S18)。如果针对步骤S18的确定的答案为否，则处理返回至步骤S11。另一方面，如果针对步骤S18的确定的答案为是，则终止PC执行的处理。

图6是示出了图4中的步骤S7的拍摄图像的存储时刻的检测处理的流程图。

控制器101在规则的时间间隔(例如，0.1秒钟)接收第一照相机5拍摄的图像，即，拍摄作为静止图像的图像，(步骤S31)。接着，控制器101其中PC1的用户没有出现的图像与连续拍摄的图像依次比较以检测PC1的用户的位置，并且顺序地比较其中物体9没有出现的图像和连续拍摄的图像以检测物体9的位置(步骤S32)。具体来说，控制器101提取其中PC1的用户没有呈现的图像与连续拍摄的图像之间的差别(尤其是，边缘差别)。如果该差别中包括人类特征(例如，大致圆状头部、手等)，则控制器101检测连续拍摄图像中的差别的位置，作为PC1的用户的位置。类似的是，控制器101提取其中物体9没有出现的图像与连续拍摄的图像之间的差别(尤其是，边缘差别)。如果该差别中包括物体9的特征(例如，物体9的形状)，则控制器101检测连续拍摄的图像中的差别的位置，作为物体9的位置。

作为用于检测PC1的用户的位置的方法，PC1的用户准备了能够拍照包括投影仪4、第一照相机5、第二照相机6以及物体9在内的宽泛空间的照相机，从而可以根据由该准备的照相机拍摄的图像来检测PC1的用户的位置。此外，可以利用PC1的用户随身携带的发送器或RFID标签来检测PC1的用户的位置。

控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将存储按钮11投影到该存储按钮11不与物体9交叠并且与PC1的用户相邻的区域中(步骤S33)。具体来说，控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将存储按钮11投影到链接PC1的用户和物体9并且存在于PC1的用户与物体9之间的线性区域以外的区域上。更具体地说，控制器101使投影仪4将存储按钮11投影到PC1的用户的手可到达的预定范围上，例如，离PC1的用户大约30-50厘米的预定范围。该预定范围处于将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域中。图7示出了链接PC1的用户与物体9并且存在于PC1的用户与物体9之间的线性区域的实施例。

存储按钮11的投影位置排除了将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域。这防止了当存储按钮11被存储拍摄图像以外的其它操作遮住而进行PC1的用户不打算进行的存储处理。

接下来，控制器101比较接收到的图像与先前接收到的图像，即，比较拍摄的静止图像和先前拍摄的静止图像，并且确定在存储按钮11的投影范围中是否存在遮蔽(步骤S34)。

如果针对步骤S34的确定的答案为是，则控制器101将存储标志设置成打开(步骤S35)，并且处理进行至图4中的步骤S8。如果针对步骤S34的确定的答案为否，则控制器101将存储标志设置成关闭(步骤S36)，并且消除存储按钮11(步骤S37)，接着处理进行至图4中的步骤S8。

图8是示出了图4中的步骤S9的拍摄图像的存储处理的流程图。

控制器101接收第一照相机5拍摄的图像(步骤S41)，并且确定该拍摄图像是否和先前拍摄图像相同(步骤S42)。

如果针对步骤S42的确定的答案为是，则处理进行至图4中的步骤S10。如果针对步骤S42的确定的答案为否，则控制器101用新录制文件替换录制文件，并且将替换之前的录制文件存储在存储器103中(步骤S43)。接着，控制器101将属性信息添加至先前的拍摄图像，并且将所得图像存储在存储器103中(步骤S44)。接着，处理进行至图4中的步骤S10。拍摄图像的属性信息将拍摄图像与录制的文件相关联。图9A到9C示出了存储在存储器103中的拍摄图像及其属性信息的实施例。在步骤S44中，控制器101可以从先前拍摄的图像中消除存储按钮11的图像，并将所得图像存储在存储器103中。

如上详细所述，根据第一示例性实施方式，控制器101获取通过第一照相机5拍摄的多个图像，根据该多个拍摄图像检测物体9和PC1的用户的位置，基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将存储按钮11投影到将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域上。当遮住了投影仪4投影的存储按钮11时，控制器101将第一照相机5拍摄的图像存储在存储器103中。因此，可以在PC1的用户所希望的时刻存储拍摄图像。

当遮住了投影仪4投影的存储按钮11时，控制器101在从投影仪4投影拍摄图像到遮住存储按钮11的时段期间将通过麦克风7输入的话音数据(即，录制文件)与应当被存储在存储器103中的拍摄图像相关联，并将该录制文件和拍摄图像存储在存储器103中。因此，可以在PC1的用户所希望的时刻将从PC2输入的话音数据和PC1的用户生成的话音数据与拍摄图像相关联，并存储该话音数据和该拍摄图像。此外，可以通过话音再现在将拍摄图像存储在存储器103中时的状态。

(第二示例性实施方式)

在第一示例性实施方式中，每当PC1的用户用手将存储按钮11遮住时，就存储拍摄图像和录制文件。另一方面，在第二示例性实施方式中，当PC1的用户用手遮住顺序拍摄按钮11a(第二指示数据)时，存储与这时相对应的一序列拍摄图像和录制文件。应注意到，以和决定存储按钮11的投影位置相同的方式来决定顺序拍摄按钮11a的投影位置。

在第二示例性实施方式中，当遮住投影到台10上的顺序拍摄按钮11a时，当前模式变换成以规则的时间间隔(例如，0.5秒钟)存储拍摄图像和录制文件的序列捕获模式，并且投影顺序拍摄完成按钮11b(第三指示数据)。当遮住顺序拍摄完成按钮11b时，完成顺序拍摄模式。顺序拍摄完成按钮11b仅在颜色上与顺序拍摄按钮11a不同，而在投影尺寸和投影位置上与顺序拍摄按钮11a相同。例如，顺序拍摄完成按钮11b为红色，而顺序拍摄按钮11a为蓝色。图10示出了其中PC1的用户用手遮住顺序拍摄按钮11a，从而投影了顺序拍摄完成按钮11b的状态。

在第二示例性实施方式中，图11示出了PC1和PC2执行的处理。在图11中的通过PC1和PC2执行的处理中，执行步骤S7a的拍摄图像的顺序存储时刻的检测处理，代替图4中的步骤S7的拍摄图像的存储时刻的检测处理，并且执行步骤S9a的拍摄图像的存储处理，代替图4中的步骤S9的拍摄图像的存储处理。图11中的PC1和PC2执行的处理除了步骤S7a和S9a的过程以外，其余过程和图4中的过程相同，并由此仅对不同过程进行说明。

图12是示出图11中的步骤S7a的拍摄图像的顺序存储时刻的检测处理的流程图。

控制器101确定顺序拍摄标志是否打开(步骤S51)。该顺序拍摄标志被存储在存储器103中，并且该顺序拍摄标志的初始状态为关闭。

如果针对步骤S51的确定的答案为是，则控制器101以规则的时间间隔(例如，0.1秒钟)接收第一照相机5拍摄的图像，即，拍摄作为静止图像的图像(步骤S52)，接着，控制器101顺序地将其中PC1的用户没有出现的图像和连续拍摄的图像相比较以检测PC1的用户的位置，并且顺序地将其中物体9没有出现的图像和连续拍摄图像相比较以检测物体9的位置(步骤S53)。具体来说，控制器101提取其中PC1的用户没有出现的图像与连续拍摄图像之间的差别(尤其是，边缘差别)。如果该差别中包括人类特征(例如，大致圆状的头部、手等)，则控制器101检测连续拍摄图像中的差别的位置，作为PC1的用户的位置。类似的是，控制器101提取其中物体9没有出现的图像与连续拍摄图像之间的差别(尤其是，边缘差别)。如果该差别中包括物体9的特征(例如，物体9的形状)，则控制器101检测连续拍摄图像中的差别的位置，作为物体9的位置。

作为用于检测PC1的用户的位置的方法，PC1的用户准备了拍照包括投影仪4、第一照相机5、第二照相机6以及物体9在内的宽泛空间的照相机，从而可以根据由准备的照相机拍摄的图像来检测PC1的用户的位置。而且，可以利用PC1的用户随身携带的发送器或RFID标签来检测PC1的用户的位置。

控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将顺序拍摄按钮11a投影到该顺序拍摄按钮11a不与物体9交叠并且处于PC1的用户附近的区域中(步骤S54)。具体来说，控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将顺序拍摄按钮11a投影到将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域上。更具体地说，控制器101使投影仪4将顺序拍摄按钮11a投影到PC1的用户的手可到达的预定范围上，例如，离PC1的用户大约30-50厘米的预定范围。该预定范围处于将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域中。

顺序拍摄按钮11a的投影位置在将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外。这防止了在顺序拍摄按钮11a被存储拍摄图像以外的其它操作遮住时执行PC1的用户不打算执行的存储处理。

接下来，控制器101比较接收到的图像与先前接收到的图像，即，比较拍摄的静止图像和先前拍摄的静止图像，并且确定在顺序拍摄按钮11a的投影范围中是否存在遮蔽(步骤S55)。

如果针对步骤S55的确定的答案为是，则控制器101将顺序拍摄标志设置成打开(步骤S56)，并且使投影仪4将顺序拍摄完成按钮11b投影到与顺序拍摄按钮11a相同的位置处(步骤S57)。接着，控制器101将存储标志设置成打开(步骤S58)，并且处理进行至图11中的步骤S8。

如果针对步骤S55的确定的答案为否，则控制器101将存储标志设置成关闭(步骤S59)，并且处理进行至图11中的步骤S8。

如果针对步骤S51的确定的答案为否，则控制器101比较接收到的图像与先前接收到的图像，即，比较拍摄的静止图像和先前拍摄的静止图像，并且确定在顺序拍摄按钮11a的投影范围中是否存在遮蔽(步骤S60)。

如果针对步骤S60的确定的答案为否，则处理进行至图11中的步骤S8。另一方面，如果针对步骤S60的确定的答案为是，则控制器101将顺序拍摄标志设置成关闭(步骤S61)，并且消除了顺序拍摄完成按钮11b(步骤S62)，接着处理进行至图11中的步骤S8。

图13是示出了图11中的步骤S9a的拍摄图像的存储处理的流程图。

控制器101接收第一照相机5拍摄的图像(步骤S71)，并且确定是否经过了预置的规则的时间间隔(例如，0.1秒钟)(步骤S72)。控制器101经由PC 1的键盘和鼠标器25或PC2的键盘和鼠标器35设置用于拍摄作为静止图像的图像的时间间隔。

如果针对步骤S72的确定的答案为否，则处理进行至图11中的步骤S10。另一方面，如果针对步骤S72的确定的答案为是，则控制器101确定拍摄图像是否和先前拍摄图像相同(步骤S73)。

如果针对步骤S73的确定的答案为是，则处理进行至图11中的步骤S10。如果针对步骤S73的确定的答案为否，则控制器101用新录制文件替换录制文件，并且将替换之前的录制文件存储在存储器103中(步骤S74)。接着，控制器101将属性信息添加至先前拍摄的图像，并且将所得图像存储在存储器103中(步骤S75)。接着，处理进行至图11中的步骤S10。拍摄的图像的属性信息将拍摄图像与录制文件相关联。

如上面详细描述的，根据第二示例性实施方式，控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将作为存储按规则的时间间隔顺序地拍摄的多个图像的指示的顺序拍摄按钮11a投影到将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域上。当遮住了投影仪4投影的顺序拍摄按钮11a时，控制器101将第一照相机5以规则的时间间隔顺序地拍摄的多个图像存储在存储器103中。因此，可以按PC1的用户所希望的时刻存储以规则的时间间隔顺序地拍摄的多个图像。

此外，当遮住了投影仪4投影的顺序拍摄按钮11a时，控制器101使投影仪4将作为用于完成存储多个拍摄图像的指示的顺序拍摄完成按钮11b代替顺序拍摄按钮11a地投影到与顺序拍摄按钮11a相同的位置处。当遮住了投影仪4投影的顺序拍摄完成按钮11b时，控制器101完成将多个拍摄图像存储到存储器103中。因此，可以完成存储以规则的时间间隔顺序地拍摄的多个图像。

(第三示例性实施方式)

在第一示例性实施方式中，每当PC1的用户用手将存储按钮11遮住时，就存储拍摄的图像和录制文件。另一方面，在第三示例性实施方式，准备了自拍器(self-timer)模式。当PC1的用户用手遮住具有计时器的存储按钮11c(第四显示数据)时，开始计时器的倒计时，并且存储在经过了利用计时器指定的时间时的拍摄图像和录制文件。

通过PC2的用户执行将具有计时器的存储按钮11c投影到台10上。具体来说，PC2的用户按压显示在图14A所示显示单元205中的用户接口上的模式按钮(未示出)，选择具有计时器的存储按钮11c，并且将具有计时器的存储按钮11c粘贴在显示区15的合适位置上。除了具有计时器的存储按钮11c以外，还显示了经由操作单元204设置的时间。当PC1的用户用手遮住具有计时器的存储按钮11c时，开始如图14B所示的计时器的倒计时。

当PC2的用户选择具有计时器的存储按钮11c并将该具有计时器的存储按钮11c粘贴在显示区15的合适位置上时，将该具有计时器的存储按钮11c投影到台10上作为注释图像。因此，PC1的用户看到台10上的具有计时器的存储按钮11c，由此获知自拍器模式和倒计时的剩余时间。PC2的用户看到显示区15中的具有计时器的存储按钮11c，由此获知自拍器模式和倒计时的剩余时间。应注意到，倒计时的剩余时间可以经由扬声器8和19用话音输出。

在第三示例性实施方式中，图15示出了PC1和PC2执行的处理。在图15中的PC1和PC2执行的处理中，执行步骤S7b的拍摄图像的计时器时刻的检测处理，代替图4中的步骤S7的拍摄图像的存储时刻的检测处理。图15中的PC1和PC2执行的处理除了步骤S7b的过程以外其余过程和图4中的过程相同，并由此仅对不同过程进行说明。

图16是示出了图15中的步骤S7b的拍摄图像的计时器时刻的检测处理的流程图。

控制器101将存储标志设置成关闭(步骤S81)。接着，控制器101确定计时器标志是否打开(步骤S82)。该计时器标志被存储在存储器103中，并且该计时器标志的初始状态为关闭。

如果针对步骤S82的确定的答案为是，则控制器101接收第一照相机5以规则的时间间隔(例如，0.1秒钟)拍摄的图像，即，拍摄作为静止图像的图像(步骤S83)，接着，控制器101顺序地将其中PC1的用户没有出现的图像和连续拍摄图像比较以检测PC1的用户的位置，并且顺序地比较其中物体9没有出现的图像和连续拍摄图像以检测物体9的位置(步骤S84)。具体来说，控制器101提取其中PC1的用户没有出现的图像与连续拍摄图像之间的差别(尤其是，边缘差别)。如果该差别中包括人类特征(例如，大致圆状的头部、手等)，则控制器101检测连续拍摄图像中的差别的位置，作为PC1的用户的位置。类似的是，控制器101提取其中物体9没有出现的图像与连续拍摄图像之间的差别(尤其是，边缘差别)。如果该差别中包括物体9的特征(例如，物体9的形状)，则控制器101检测连续拍摄图像中的差别的位置，作为物体9的位置。

作为用于检测PC1的用户的位置的方法，PC1的用户准备了包括拍照投影仪4、第一照相机5、第二照相机6以及物体9在内的宽泛空间的照相机，从而可以根据由准备的照相机拍摄的图像来检测PC1的用户的位置。而且，PC1的用户的位置可以利用PC1的用户随身携带的发送器或RFID标签来检测。

控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将具有计时器的存储按钮11c投影到该具有计时器的存储按钮11c不与物体9交叠并且处于PC1的用户附近的区域中(步骤S85)。具体来说，控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将具有计时器的存储按钮11c投影到将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域上。更具体地说，控制器101使投影仪4将具有计时器的存储按钮11c投影到PC 1的用户的手可到达的预定范围上，例如，离PC1的用户大约30-50厘米的预定范围。该预定范围处于将PC1的用户与物体9相链接并且在PC1的用户与物体9之间的线性区域以外的区域中。

具有计时器的存储按钮11c的投影位置在将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域之外。这防止了具有计时器的存储按钮11c被存储拍摄图像以外的其它操作遮住而进行PC1的用户不打算执行的存储处理。

接下来，控制器101比较接收到的图像与先前接收到的图像，即，比较拍摄的静止图像和先前拍摄的静止图像，并且确定在具有计时器的存储按钮11c的投影范围中是否存在遮蔽(步骤S86)。

如果针对步骤S86的确定的答案为是，则控制器101将计时器标志设置成打开并且将初始值(例如，5秒钟)作为剩余时间(步骤S87)。该初始值可以利用操作单元204随意设置。控制器101使投影仪4在具有计时器的存储按钮11c旁边投影达剩余时间(步骤S88)。这时，小数点下面的剩余时间被舍去。接着，控制器101从剩余时间中减去经过的时段(步骤S89)，并且处理进行至图4中的步骤S8。如果针对步骤S86的确定的答案为否，则处理进行至步骤S88。

如果针对步骤S82的确定的答案为否，则控制器101确定剩余时间是否等于或小于0秒钟(步骤S90)。如果针对步骤S90的确定的答案为否，则处理进行至步骤S88。如果针对步骤S90的确定的答案为是，则控制器101将存储标志设置成打开(步骤S91)，并且消除显示具有计时器的存储按钮11c和剩余时间(步骤S92)，接着处理进行至图4中的步骤S8。

如上面详细描述的，根据第三示例性实施方式，控制器101基于检测出的PC1的用户的位置和检测出的物体9的位置，使投影仪4将作为在经过了预置时间之后存储拍摄的图像的指示的具有计时器的存储按钮11c投影到将PC1的用户与物体9相链接并且存在于PC1的用户与物体9之间的线性区域以外的区域上。当遮住了投影仪4投影的具有计时器的存储按钮11c时，控制器101将在经过了预置时间之后由第一照相机5拍摄的图像存储在存储器103中。因此，可以在经过了预置时间之后存储拍摄图像。

因为在预置时间的经过期间，将剩余时间投影到具有计时器的存储按钮11c旁边或者通过话音从扬声器8输出，所以PC1的用户可以获知剩余时间。而且，因为在预置时间的经过期间，将剩余时间显示在UI 16的显示区15中的具有计时器的存储按钮11c旁边或者通过话音从扬声器19输出，所以PC2的用户可以获知剩余时间。

尽管在上述第一到第三示例性实施方式中，存储了由第一照相机5拍摄的图像，但可以将上面对第一到第三示例性实施方式的描述应用于存储第二照相机6拍摄的图像或第一照相机5和第二照相机6两者拍摄的图像。

尽管在上述第一到第三示例性实施方式中，控制器101检测存储按钮11、顺序拍摄按钮11a、顺序拍摄完成按钮11b或具有计时器的存储按钮11c的位置，但PC2的用户可以在UI 16上决定存储按钮11、顺序拍摄按钮11a、顺序拍摄完成按钮11b或具有计时器的存储按钮11c的位置。在这种情况下，控制器101接收PC2决定的存储按钮11、顺序拍摄按钮11a、顺序拍摄完成按钮11b或具有计时器的存储按钮11c的位置的坐标信息，以及按钮的类型的信息。然后，控制器101基于这些信息使投影仪4投影对应按钮。

在上述第一到第三示例性实施方式中，当控制器101将拍摄图像、其属性信息以及录制文件存储在存储器103中时，对于PC1的每一个用户来说，可以将存储器103的一个存储区用其另一存储区替换。

可以向每一个PC提供其上记录有用于实现PC1和PC2的功能的软件程序的记录介质，并且每一个PC的CPU都可以读取并执行记录在该记录介质上的程序。按这种方式，可以实现和上述第一到第三示例性实施方式的效果相同的效果。用于提供该程序的记录介质例如可以是CD-ROM、DVD、SD卡。

另选的是，每一个PC的CPU都可以执行用于实现各PC的功能的软件程序，以使实现和上述第一到第三示例性实施方式的效果相同的效果。

应注意到，本发明不限于这些示例性实施方式，并且在不脱离本发明的范围的情况下，可以对本发明进行多种修改。

Claims (7)

1、一种信息处理装置，该信息处理装置连接至投影装置和图像拍摄装置，该投影装置将从外部终端输入的注释图像投影到包括物体的投影区中，该图像拍摄装置拍摄该投影区，所述信息处理装置包括：

获取部，该获取部获取该图像拍摄装置拍摄的多个图像；

检测部，该检测部根据该多个图像检测该物体的位置和该信息处理装置的用户的位置；

控制器，该控制器基于检测出的该物体的位置和该信息处理装置的用户的位置，使该投影装置将指示存储这些拍摄图像中的至少一个拍摄图像的第一指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的用户与该物体之间的线性区域以外的区域上，并且在遮住了该投影装置投影的该第一指示数据时将这些拍摄图像中的所述至少一个拍摄图像存储在存储器中。

2、根据权利要求1所述的信息处理装置，所述该信息处理装置还包括：输出部，该输出部输出从该外部终端输入的话音；和输入部，该输入部输入被输出的该话音和该信息处理装置的用户生成的话音，

其中，当遮住了该投影装置投影的该第一指示数据时，该控制器将在从该投影装置投影所拍摄的图像起到遮住该第一指示数据的这段时间期间由该输入部输入的话音数据与应当被存储在所述存储器中的所述拍摄图像相关联，并将所述话音数据和所述拍摄图像存储在所述存储器中。

3、根据权利要求1所述的信息处理装置，其中，该控制器基于检测出的该物体的位置和该信息处理装置的位置，使该投影装置将作为存储以规则时间间隔顺序地拍摄的多个图像的指示的第二指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的该用户与该物体之间的线性区域以外的所述区域上，并且在遮住了该投影装置投影的该第二指示数据时将该图像拍摄装置以规则的时间间隔顺序地拍摄的所述多个图像存储在所述存储器中。

4、根据权利要求3所述的信息处理装置，其中，当遮住了该投影装置投影的该第二指示数据时，该控制器使该投影装置将作为完成存储所述多个拍摄图像的指示的第三指示数据代替所述第二指示数据，投影到与所述第二指示数据相同的位置处，并且当遮住了该投影装置投影的该第三指示数据时，该控制器完成在所述存储器中存储所述多个拍摄图像。

5、根据权利要求1到4中的任一项所述的信息处理装置，其中，该控制器基于检测出的该物体的位置和该信息处理装置的位置，使该投影装置将作为在经过预置时间后存储拍摄图像的指示的第四显示装置投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的用户与该物体之间的线性区域以外的区域上，并且在遮住了该投影装置投影的该第四显示装置时将该图像拍摄装置在经过该预置时间后拍摄的图像存储在所述存储器中。

6、根据权利要求5所述的信息处理装置，其中，在该预置时间的经过期间，将剩余时间通知给该信息处理装置的用户和该外部终端的用户这两者中的至少一个。

7、一种远程指示系统，该远程指示系统包括：

投影装置，该投影装置将从外部终端输入的注释图像投影到包括物体的投影区中；

图像拍摄装置，该图像拍摄装置拍摄该投影区；以及

信息处理装置，该信息处理装置包括：

获取部，该获取部获取该图像拍摄装置拍摄的多个图像；

检测部，该检测部根据该多个图像检测该物体的位置和该信息处理装置的用户的位置；

控制器，该控制器基于检测出的该物体的位置和该信息处理装置的该用户的位置，使该投影装置将指示存储这些拍摄图像中的至少一个拍摄图像的第一指示数据投影到将该信息处理装置的用户与该物体相链接并且在该信息处理装置的用户与该物体之间的线性区域以外的区域上，并且在遮住了该投影装置投影的该第一指示数据时将这些拍摄图像中的所述至少一个拍摄图像存储在存储器中。

Images