CN104737104A - 信息处理装置、信息终端、信息处理系统及校准方法 - Google Patents

Abstract

本发明包括：利用由视频通信部(11)接收到的移动终端(2)的画面信息、将移动终端(2)的画面显示于触摸屏显示器(13)的显示控制部(12)；对显示有移动终端(2)的画面的触摸屏显示器(13)的画面进行图像分析、获取用于确定与移动终端(2)的画面相对应的触摸操作区域的操作区域信息的操作区域获取部(14)；检测出对触摸屏显示器(13)的触摸操作、基于操作区域信息来获取所检测出的触摸操作的位置信息的触摸操作信息获取部(16)；及基于操作区域信息、将触摸操作信息获取部(16)获取的触摸操作的位置信息变换为与移动终端(2)的画面相对应的位置信息的坐标变换部(17)，操作/控制信息通信部(18)将变换后的位置信息作为远程操作信息发送到移动终端(2)，从而对移动终端(2)进行远程操作。

Description

信息处理装置、信息终端、信息处理系统及校准方法

技术领域

本发明涉及信息处理装置、信息处理系统及触摸操作区域的校准方法，在包括具有触摸屏功能的显示器(以下称为触摸屏显示器)的信息处理装置对信息终端进行远程操作的情况下，设定用于将输入到信息处理装置的触摸屏显示器的用户操作变换为对信息终端的操作的校准信息。

背景技术

以往，提出有一种技术，将包括车载导航装置等的触摸屏显示器的信息处理装置、和包括移动电话等的触摸屏显示器的信息终端用WiFi或USB等进行连接，将信息终端的画面信息显示在信息处理装置的触摸屏显示器上，将经由该触摸屏显示器输入的操作信息发送到信息终端，从而信息处理装置对信息终端进行远程操作。

在以往的远程操作技术中，信息处理装置的触摸屏显示器与信息终端的触摸屏显示器的分辨率或纵横比不一定一致，因此，需要将信息处理装置的触摸屏显示器上的触摸位置坐标变换为信息终端的触摸屏显示器上的位置坐标的处理。

然而，在从信息终端向信息处理装置以数字方式输出画面信息的情况下，与信息终端和信息处理装置双方均能应对的分辨率相匹配，信息终端对输出的画面信息附加黑带等周边区域(以下称为黑带区域)。因此，在对附加有黑带区域的画面信息进行显示的信息处理装置中，会显示有显示区域根据信息终端的每一设备种类而不同的画面信息。因此，为了将信息处理装置的触摸屏显示器上的触摸位置坐标变换为信息终端的触摸屏显示器上的位置坐标，需要将信息终端的可操作区域预先设定于车载导航装置。

作为其对策，专利文献1中公开了如下结构：信息处理装置包括对信息终端的显示部的显示画面进行拍摄并生成图像数据的拍摄部，对拍摄部的拍摄范围、放大率进行调整以使得信息终端的显示画面落入表示输入到信息处理装置的触摸操作的检测范围的指标范围内，并将信息终端的触摸操作区域预先设定于信息处理装置。此外，专利文献1中公开了如下操作方法：在固定壳体内存放信息终端，利用安装在该固定壳体的盖部分的拍摄部对信息终端的显示画面进行拍摄，从而使信息终端的显示画面与信息处理装置的指标范围内一致。

现有技术文献

专利文献

专利文献1：日本专利特开2012-3374号公报

发明内容

发明所要解决的技术问题

然而，在上述专利文献1公开的技术中，用户需要一边操作拍摄部，一边以使得信息终端的显示画面落入信息处理装置的指标范围内的方式进行拍摄，存在无法正确地且在短时间内将信息终端的触摸操作区域设定于信息处理装置的问题。此外，在利用固定壳体的方法中，由于终端尺寸根据每一信息终端而不同，因此，需要与各信息终端相匹配地进行拍摄部的设定，存在缺乏通用性的问题。

本发明是为了解决上述问题而完成的，其目的在于正确且容易地获取在信息处理装置的触摸屏显示器上以数字方式输出的信息终端的输出画面信息(对画面信息附加了黑带区域的信息)中的触摸操作区域。

解决技术问题的技术方案

本发明所涉及的信息处理装置包括：显示控制部，该显示控制部利用由通信部接收到的信息终端的画面信息，将信息终端的画面显示于显示器；操作区域获取部，该操作区域获取部对显示有信息终端的画面的显示器的画面进行图像分析，获取用于确定与信息终端的画面相对应的触摸操作区域的操作区域信息；触摸操作获取部，该触摸操作获取部检测出对触摸屏的触摸操作，基于操作区域信息，获取所检测出的触摸操作的位置信息；及触摸坐标变换部，该触摸坐标变换部基于操作区域信息，将触摸操作获取部获取的触摸操作的位置信息变换为与信息终端的画面相对应的位置信息，通信部将由触摸坐标变换部进行变换后的位置信息作为远程操作信息发送到信息终端，从而对信息终端进行远程操作。

发明效果

根据本发明，能正确且容易地获取在信息处理装置的触摸屏显示器上以数字方式输出的信息终端的输出画面信息中的触摸操作区域，可容易生成、设定用于将输入到信息处理装置的触摸屏显示器的触摸操作变换为对信息终端的操作的信息。

附图说明

图1是表示实施方式1的信息处理系统的结构的框图。

图2是表示实施方式1的信息处理系统的显示处理的一个示例的图。

图3是表示实施方式1的信息处理系统的操作区域获取部所进行的图像分析处理的一个示例的图。

图4是表示实施方式1的信息处理系统的坐标变换部所进行的坐标变换处理的图。

图5是表示实施方式1的信息处理系统的校准处理的流程图。

图6是表示发明的实施方式1的信息处理系统的坐标变换处理的流程图。

图7是表示实施方式1的信息处理系统的其它结构的框图。

图8是表示实施方式2的信息处理系统的结构的框图。

图9是表示实施方式2的信息处理系统的校准处理的一个示例的图。

图10是表示实施方式2的信息处理系统的校准处理的一个示例的图。

图11是表示实施方式2的信息处理系统的校准处理的流程图。

图12是表示实施方式3的信息处理系统的结构的框图。

图13是表示实施方式3的信息处理系统的画面朝向检测处理的流程图。

图14是表示实施方式3的信息处理系统的校准处理的流程图。

图15是表示实施方式4的信息处理系统的结构的框图。

图16是表示实施方式4的信息处理系统的显示例的图。

图17是表示实施方式4的信息处理系统的校准处理的流程图。

图18是表示实施方式5的信息处理系统的结构的框图。

图19是表示实施方式5的信息处理系统的校准处理的流程图。

图20是表示实施方式5的信息处理系统的其它结构的框图。

图21是表示实施方式6的信息处理系统的结构的框图。

图22是表示实施方式6的信息处理系统的操作区域信息的储存及检索处理的流程图。

具体实施方式

以下，为了更详细地对本发明进行说明，根据附图对用于实施本发明的方式进行说明。

实施方式1

图1是表示本发明实施方式1的信息处理系统的结构的框图。

图1的示例中，利用作为信息处理装置的车载装置1及作为信息终端的移动终端2来构成信息处理系统。

车载装置1是具有触摸屏显示器的车载电子设备，例如车载导航系统、显示器音频及车载显示器等。移动终端2是具有能与车载装置1通信的功能、且具有触摸屏显示器的电子设备，例如智能手机、移动电话、PHS、PDA、便携式媒体播放器、数码相机和数码摄像机等。

接着，对车载装置1及移动终端2的各结构的详细情况进行说明。

车载装置1包括视频通信部11、显示控制部12、触摸屏显示器13、操作区域获取部14、操作区域信息存储部15、触摸操作信息获取部(触摸操作获取部)16、坐标变换部(触摸坐标变换部)17及操作/控制信息通信部18。移动终端2包括终端显示部21、视频通信部22、操作/控制信息通信部23及操作信息处理部24。

车载装置1的视频通信部11与移动终端2的视频通信部22之间经由USB(Universal Serial Bus：通用串行总线)、无线LAN、HDMI(High DefinitionMultimedia Interface：高清多媒体接口)、MHL(Mobile High-Definition Link：移动高清链接技术)等进行数据通信，获取移动终端2的输出画面信息。此处，输出画面信息是指对移动终端2的画面信息附加明度与画面信息不同的周边区域(以下称为黑带区域)。另外，详细情况将在后文阐述。

显示控制部12进行使视频通信部11获取的输出画面信息显示于触摸屏显示器13的显示控制。触摸屏显示器13基于显示控制部12的显示控制，将移动终端2的输出画面信息显示于显示器上。此外，还接受对显示于显示器上的移动终端2的输出画面信息进行输入的用户操作。

此处，参照图2，说明在触摸屏显示器13的显示画面上显示移动终端2的画面信息时的显示处理。

在移动终端2的终端显示部21上，具有尺寸根据每一设备种类而不同的画面200a、画面200b。对构成该画面200a或画面200b的操作画面显示区域201a、201b附加作为黑带区域的操作画面显示区域外的区域202a、202b，作为输出画面信息203a、203b经由视频通信部22发送到车载装置1侧。所附加的操作画面显示区域外的区域202a、202b也根据每一终端而不同，图2(a)的示例中，操作画面显示区域外的区域202a配置于矩形的操作画面显示区域201a的长边侧，图2(b)的示例中，操作画面显示区域外的区域202b配置于矩形的操作画面显示区域201b的短边侧。

将车载装置1的视频通信部11所接收到的输出画面信息203a、203b输入到显示控制部12，基于显示控制部12的显示控制，将所述输出画面信息203a、203b作为移动终端输出画面100a、100b显示于触摸屏显示器13上。移动终端输出画面100a、100b由显示有移动终端2的显示画面的触摸操作区域101a、101b、及与显示有黑带区域的触摸区域相邻的触摸操作区域外的区域102a、102b构成。

接下来，操作区域获取部14对显示于触摸屏显示器13上的移动终端输出画面100a、100b进行图像分析。参照图3，说明操作区域获取部14所进行的图像分析处理的一个示例。

操作区域获取部14对移动终端输出画面100b进行二值化处理，获取二值化图像。触摸操作区域101b和触摸操作区域外的区域102b为明度不同的区域，因此，例如基于二值化图像，将触摸操作区域101b表示为白色，将触摸操作区域外的区域102b表示为黑色，能检测出触摸操作区域101b与触摸操作区域外的区域102b的边界。基于检测出的边界来确定触摸操作区域101b，获取所确定的触摸操作区域101b的起点位置P(0，0)、及由触摸操作区域101b的横宽W和纵宽H所示的尺寸信息。起点位置P及尺寸信息是将经由车载装置1的触摸屏显示器13而输入的触摸操作变换为移动终端2侧的触摸坐标时所需的信息。所获取的触摸操作区域101b的起点位置P及尺寸信息作为操作区域信息存储于操作区域信息存储部15。

触摸操作信息获取部16获取用户对于触摸屏显示器13的触摸状态及触摸位置坐标。坐标变换部17基于存储于操作区域信息存储部15的操作区域信息，将触摸操作信息获取部16获取的触摸位置坐标变换为用于求出移动终端2侧的位置坐标的坐标。该坐标变换处理的详细情况将在后文中阐述。操作/控制信息通信部18将由坐标变换部17进行变换后的坐标作为操作信息发送到移动终端2。操作/控制信息通信部18与移动终端2的操作/控制信息通信部23之间经由USB、无线LAN、HDMI、MHL、Bluetooth(蓝牙)(注册商标，以下省略记载)等进行数据通信。

车载装置1的视频通信部11及操作/控制信息通信部18在车载装置1启动时的定时对车载装置1及移动终端2发送连接请求，进行双方的设备的连接。由此，在车载装置1启动时，能使车载装置1和移动终端2自动连接。在车载装置1和移动终端2建立连接后，在车载装置1中获取移动终端输出画面的操作区域信息。另外，例如在HDMI等有线连接的情况下，还可考虑用户手动进行的连接操作，因此，车载装置1和移动终端2的连接方法可适当进行选择。另外，图1中示出了设置视频通信部11和操作/控制信息通信部18的结构，但也可构成为由一个通信部进行视频、操作信息及控制信息的通信。

接着，对移动终端2的结构进行说明。

终端显示部21显示移动终端2启动的应用程序的画面。视频通信部22将显示于终端显示部21的应用程序画面的画面信息输出到车载装置1侧。操作/控制信息通信部23经由操作/控制信息通信部18接受由车载装置1的坐标变换部17得到的操作信息，并通知到操作信息处理部24。操作信息处理部24从所通知的操作信息中获取坐标值，并将其变换成与终端显示部21的显示画面相对应的坐标。基于变换后的坐标值，进行应用程序的控制。

这样，将对车载装置1的触摸屏显示器13输入的触摸操作变换为对移动终端2的画面信息的操作指示，基于变换后的操作指示，进行应用程序控制，将作为控制结果的应用程序画面显示于终端显示部21。

接下来，参照4说明坐标变换处理。

在用户对车载装置1的触摸屏显示器13进行操作输入A时，触摸操作信息获取部16检测该操作输入A，基于存储于操作区域信息存储部15的操作区域信息的起点位置P，获取操作输入A的触摸位置坐标Q(X，Y)。坐标变换部17利用触摸操作信息获取部16获取的触摸位置坐标(X，Y)、和存储于操作区域信息存储部15的操作区域信息的尺寸信息(触摸操作区域的横宽W及纵宽H)，进行标准坐标变换，获取标准坐标(X′，Y′)。

标准坐标变换由下式(1)表示。

$\begin{array}{c}{X}^{\′}=\left(\frac{X}{W}\right)\\ Y^{\′}=\left(\frac{Y}{H}\right)\end{array}...\left(1\right)$

将坐标变换部17获取的标准坐标(X′，Y′)作为操作信息经由操作/控制信息通信部18发送到移动终端2侧。移动终端2的操作信息处理部24进行以下处理：即，将经由操作/控制信息通信部23而接收到的操作信息即标准坐标(X′，Y′)变换为与终端显示部21的显示尺寸(横宽：Wide[px]、纵宽：Height[px])相对应的坐标(X″，Y″)。向与终端显示部21的显示尺寸相对应的坐标的变换由下式(2)表示。

X”＝X'×Wide

             …(2)

Y”＝Y’×Height

变换后的坐标(X″，Y″)成为移动终端2的画面信息中的触摸操作区域R。

接下来，对信息处理系统的动作进行说明。

另外，以下，以将车载装置1的视频通信部11和移动终端2的视频通信部22用HDMI进行连接、将车载装置1的操作/控制信息通信部18和移动终端2的操作/控制信息通信部23用蓝牙进行连接的情况为例进行说明。此外，将信息处理系统的动作说明分为获取并储存操作区域信息的校准处理、和将对触摸屏显示器13进行输入的触摸操作变换成移动终端2的终端显示部21的坐标的坐标变换处理来进行说明。

首先，对校准处理进行说明。

图5是表示本发明实施方式1的信息处理系统的校准处理的流程图。

将车载装置1和移动终端2用HDMI及蓝牙进行连接(步骤ST1)。另外，蓝牙的连接处理在车载装置1启动时进行。移动终端2的视频通信部22利用HDMI将终端显示部21的输出画面信息输出到车载装置1侧(步骤ST2)。车载装置1中，显示控制部12经由视频通信部11接收步骤ST2中输出的输出画面信息，并将该输出画面信息显示于触摸屏显示器13的显示画面上(步骤ST3)。

操作区域获取部14对于显示于触摸屏显示器13的显示画面上的输出画面信息进行二值化处理，根据获取的二值化图像，检测画面信息和黑带区域的边界(步骤ST4)。操作区域获取部14基于所检测出的边界，确定触摸操作区域，获取所确定的触摸操作区域的起点位置及尺寸信息(步骤ST5)。将所获取的起点位置及尺寸信息作为操作区域信息存储于操作区域信息存储部15(步骤ST6)，结束校准处理。

另外，也可构成为在启动了车载装置1时在与检测出能进行通信的移动终端2之间开始进行通信连接，并执行校准处理。由此，在车载装置1及移动终端2中，无需由用户侧进行连接设定及校准设定。此外，也可以构成为从检测出能进行通信连接的移动终端中，由用户选择所希望的移动终端并建立通信连接，之后执行校准处理。

接下来，说明坐标变换处理。

图6是表示本发明实施方式1的信息处理系统的坐标变换处理的流程图。另外，图6的示例中，设车载装置1与移动终端2已建立通信来进行说明。

移动终端2的视频通信部22利用HDMI将终端显示部21的输出画面信息输出到车载装置1侧(步骤ST11)。在车载装置1中，显示控制部12经由视频通信部11接收步骤ST11中输出的输出画面信息，并将该输出画面信息显示于触摸屏显示器13的显示画面上(步骤ST12)。若在触摸屏显示器13上显示输出画面信息，则触摸操作信息获取部16及坐标变换部17获取存储于操作区域信息存储部15的操作区域信息(步骤ST13)。

触摸操作信息获取部16还判定是否对触摸屏显示器13进行了操作输入(步骤ST14)。在未进行操作输入的情况下(步骤ST14：否)，返回至步骤ST14的判定处理。另一方面，在进行了操作输入的情况下(步骤ST14：是)，触摸操作信息获取部16参照步骤ST13中获取的操作区域信息，获取与操作输入相对应的触摸位置坐标(步骤ST15)。坐标变换部17参照步骤ST13中获取的操作区域信息，对步骤ST15中获取的触摸位置坐标进行标准坐标变换，获取标准坐标(步骤ST16)。

操作/控制信息通信部18将步骤ST16中获取的标准坐标作为操作信息发送到移动终端2侧(步骤ST17)。移动终端2的操作信息处理部24经由移动终端2的操作/控制信息通信部23获取步骤ST17中发送来的操作信息，将作为该操作信息的与操作输入相对应的标准坐标变换为与移动终端2的画面信息相对应的坐标(步骤ST18)。操作信息处理部24还基于步骤ST18中进行变换后的坐标的坐标值，进行移动终端2的应用程序的控制，将基于该控制的应用程序画面显示于终端显示部21(步骤ST19)。之后，流程返回到步骤ST11的处理，并重复上述的处理。

接着，关于实施方式1的信息处理系统的坐标变换处理，示出不同结构。

在上述坐标变换处理中，获取车载装置1对触摸位置坐标进行标准坐标变换而得到的标准坐标，将其作为操作信息输出到移动终端2，在移动终端2侧进行将标准坐标变换成与显示画面相对应的坐标的处理。与此相对，也可构成为在车载装置1侧进行将标准坐标变换成与移动终端2的画面信息相对应的坐标的处理。

图7是表示本发明实施方式1的信息处理系统的其它结构的框图。

图7中，追加了从移动终端2的操作/控制信息通信部23向车载装置1的操作/控制信息通信部18的箭头、以及从车载装置1的操作/控制信息通信部18向坐标变换部17的箭头。这表示预先将移动终端2的显示画面的尺寸信息(横宽：Wide[px]、纵宽：Height[px])经由移动终端2的操作/控制信息通信部23输出到车载装置1侧的情况。输入到车载装置1侧的显示画面的尺寸信息经由车载装置1的操作/控制信息通信部18输入到坐标变换部17，并存储于坐标变换部17的存放区域(未图示)等。

作为坐标变换处理的处理动作，坐标变换部17将对触摸屏显示器13的操作输入的触摸位置坐标变换为标准坐标之后，利用预先存储的移动终端2的显示画面的尺寸信息，将该标准坐标变换为与显示画面相对应的坐标。将变换后的与显示画面相对应的坐标作为操作信息输出到移动终端2侧。在移动终端2的操作信息处理部24中，基于所通知的操作信息所示的坐标值，控制移动终端2的应用程序。

另外，在车载装置1侧将标准坐标变换为与移动终端2的终端显示部21的显示画面相对应的坐标的情况下，也进行上述操作区域获取部14所进行的校准处理。

如上所述，根据本实施方式1，将具有分辨率、显示尺寸不同的触摸屏显示器的车载装置1与移动终端2相连接，并在车载装置1侧对移动终端2进行远程操作，在这种情况下，构成为具有操作区域获取部14，该操作区域获取部14进行校准处理，在所述校准处理中，判别移动终端2的输出画面信息内的触摸操作区域，获取并存储所判别出的触摸操作区域的操作区域信息，因此，即使在移动终端输出画面的尺寸根据移动终端的每一设备种类而不同的情况下，也能容易地将输入到车载装置的触摸屏显示器的用户操作的触摸位置坐标变换为与移动终端的显示画面相对应的坐标。由此，在利用车载装置对移动终端进行远程操作时，能容易判别触摸操作区域而不用劳烦用户动手。进一步地，还能容易将输入到信息处理装置的触摸屏显示器的用户操作变换为对移动终端的控制指示。

此外，根据本实施方式1，由于采用以下结构：即，通过将与车载装置1和移动终端2中能应对的分辨率相匹配地附加了黑带区域的输出画面信息输入到车载装置1侧，操作区域获取部14对输出画面信息进行二值化处理，获取二值化图像，并检测出画面信息与黑带区域的边界，确定触摸操作区域，因此，能容易判别触摸操作区域。

此外，根据本实施方式1，在车载装置1与移动终端2的通信已建立时，构成为将移动终端2的输出画面显示于车载装置1的触摸屏显示器13的显示画面上以确定触摸操作区域，并进行获取操作区域信息的校准处理，因此，能以通信的建立为契机来进行校准处理，具有用户无需特意进行校准操作的优点。此外，能在进行控制移动终端的应用程序的操作之前，自动进行校准处理。

此外，根据本实施方式1，构成为在启动了车载装置1时检索能进行通信连接的移动终端2，在检测出相符的移动终端2的情况下，开始与该移动终端2进行通信连接，并进行校准处理，因此，用户能不进行车载装置及移动终端这两个设备的连接设定，而通过乘坐车辆来立即执行校准处理，经由车载装置执行移动终端的远程操作。

另外，图7所示的信息处理系统的其它结构不仅可适用于实施方式1，还可适用于后述的实施方式2至实施方式6。

实施方式2

本实施方式2中，对如下结构进行说明：基于从车载装置1输出的校准请求，在移动终端2的输出画面及车载装置1的触摸屏显示器13上显示校准画面。

图8是表示本发明实施方式2的信息处理系统的结构的框图。对图1所示的实施方式1的信息处理系统的车载装置1追加设置校准画面设定请求部19，对移动终端2追加设置校准画面存储部25。另外，以下对与实施方式1的信息处理系统的构成要素相同或相当的部分标注与实施方式1中所使用的标号相同的标号，并省略或简化说明。

设置于车载装置1的校准画面设定请求部19监视车载装置1与移动终端2的通信连接状态、即视频通信部11及操作/控制信息通信部18的通信连接状态，在通信连接已建立时，向移动终端2输出校准画面设定请求。此处，校准画面设定请求是指请求显示在进行实施方式1所示的校准处理时所参照的校准专用画面。输出的校准画面设定请求经由车载装置1的操作/控制信息通信部18输入到移动终端2侧。在移动终端2侧，操作信息处理部24根据所输入的校准画面设定请求，读取校准画面存储部25中存储的校准画面，并进行将该校准画面显示于终端显示部21的控制。

接下来，参照图9及图10，说明在移动终端2的显示画面上显示校准画面的处理及利用校准画面的校准处理的一个示例。

在车载装置1与移动终端2的通信已通过蓝牙来建立的状态下，如图9(a)所示，在移动终端2上显示画面200，在车载装置1的触摸屏显示器13上显示移动终端输出画面100。在该显示状态下，若车载装置1的校准画面设定请求部19向移动终端2侧输出校准画面设定请求，则移动终端2的操作信息处理部24从校准画面存储部25读取校准画面，并将其显示于终端显示部21(参照图9(b))。校准画面通过在画面200上配置背景204和按钮205来构成。对图9(b)所示的画面200附加作为黑带区域的操作画面显示区域外的区域，将其作为输出画面信息发送到车载装置1侧。

在图10(a)中示出输出将画面信息显示在车载装置1的触摸屏显示器13上、以构成移动终端输出画面100的示例。移动终端输出画面100由表示构成画面200的操作画面显示区域的触摸操作区域103、及显示有所附加的黑带区域即操作画面显示区域外的区域的触摸操作区域外的区域102′构成。如图10(a)所示，触摸操作区域103显示由与黑带区域的对比度明确的颜色、例如白色等构成的背景、及位于中央的校准处理确认用的按钮104。

操作区域获取部14与实施方式1同样，对移动终端输出画面100进行二值化处理，获取二值化图像。基于所获取的二值化图像，检测触摸操作区域外的区域102′与触摸操作区域103的边界，基于所检测出的边界，确定触摸操作区域103。此外，获取所确定的触摸操作区域103的起点位置P′(0，0)、及由触摸操作区域103的横宽W′和纵宽H′所示的尺寸信息。所获取的触摸操作区域103的起点位置P′及尺寸信息作为操作区域信息存储于操作区域信息存储部15。

若输入按下因获取操作区域信息而变得有效的按钮104的用户操作，则对该用户操作进行与实施方式1同样的坐标变换处理，获取操作信息。将所获取的操作信息输出到移动终端2侧。移动终端2的操作信息处理部24基于所输入的操作信息，进行按下背景204内的按钮205的控制。即，基于对车载装置1的触摸屏显示器13的操作输入，间接按下在移动终端2的终端显示部21上显示的按钮205，从而确认校准处理结束，显示图9(a)所示的正常画面。

接下来，参照图11的流程图对实施方式2的信息处理系统的校准处理进行说明。另外，以下，对于与实施方式1所涉及的信息处理系统相同的步骤标注与图5使用的标号相同的标号，并省略或者简化说明。

将车载装置1与移动终端2用HDMI及蓝牙进行连接(步骤ST1，参照图9(a))。车载装置1的校准画面设定请求部19经由操作/控制信息通信部18对移动终端2输出校准画面设定请求(步骤ST21)。在移动终端2中，操作信息处理部24经由操作/控制信息通信部23接收步骤ST21中输出的校准画面设定请求，并从校准画面存储部25读取校准画面，将其显示于终端显示部21(步骤ST22，参照图9(b))。

移动终端2的视频通信部22将步骤ST22中显示的终端显示部21的校准画面信息输出到车载装置1侧(步骤ST23)。在车载装置1中，显示控制部12经由视频通信部11接收步骤ST23中输出的校准画面信息，并将该校准画面信息显示于触摸屏显示器13的显示画面上(步骤ST24，参照图10(a))。操作区域获取部14对于显示于触摸屏显示器13的显示画面上的校准画面信息进行二值化处理，根据获取的二值化图像，检测操作画面显示区域和操作画面显示区域外的区域的边界(步骤ST25)。操作区域获取部14基于检测出的边界，确定操作画面显示区域，获取所确定的操作画面显示区域的起点位置及尺寸信息(步骤ST26)。将所获取的起点位置及尺寸信息作为校准区域信息存储于操作区域信息存储部15(步骤ST27)。

若获取校准区域信息，则触摸操作信息的发送变得有效，成为用户操作的输入等待状态(步骤ST28)。触摸操作信息获取部16监视触摸屏显示器13的触摸状态，在未按下按钮显示部分的情况下(步骤ST28：否)，返回至步骤ST28的输入等待状态。另一方面，在按下了按钮显示部分的情况下(步骤ST28：是)，触摸操作信息获取部16参照步骤ST27中存储的操作区域信息，获取与按钮的按下操作相对应的触摸位置坐标(步骤ST29)。坐标变换部17参照步骤ST27中存储的操作区域信息，对步骤ST29中获取的触摸位置坐标进行标准坐标变换，获取标准坐标(步骤ST30)。

操作/控制信息通信部18将步骤ST30中获取的标准坐标作为操作信息发送到移动终端2侧(步骤ST31)。移动终端2的操作信息处理部24经由移动终端2的操作/控制信息通信部23获取步骤ST31中发送来的操作信息，将作为该操作信息的与操作输入相对应的标准坐标变换为与终端显示部21的显示画面相对应的坐标(步骤ST32)。操作信息处理部24还基于步骤ST32中进行变换后的坐标的坐标值，进行按下显示画面上显示的按钮的控制(步骤ST33，参照图10(b))。若进行步骤ST33的处理，则操作信息处理部24判断为正常进行了校准，在终端显示部21上显示正常的画面(步骤ST34)，结束校准处理。

如上所述，根据本实施方式2，构成为移动终端2包括存储校准画面的校准画面存储部25，车载装置1包括对该移动终端2输出校准画面设定请求的校准画面设定请求部19，操作区域获取部14参照显示在车载装置1的触摸屏显示器13的显示画面上的校准画面，获取触摸操作区域，因此，操作画面显示区域与操作画面显示区域以外的区域的差异变明确，能容易且正确地确定触摸操作区域。

由此，例如在移动终端2中启动画面背景接近黑色的应用程序的情况下，也显示与黑带区域的差异明确的校准画面，因此，能容易且正确地确定触摸操作区域。即，在车载装置1侧难以确定操作画面显示区域与操作画面显示区域以外的区域的情况下，也能容易且正确地确定触摸操作区域。

此外，根据本实施方式2，构成为对移动终端2的显示画面上所显示的校准画面设置在获取操作区域信息后能按下的按钮，将经由车载装置1的触摸屏显示器13而输入的该按钮显示位置的按下动作变换为对移动终端2的按钮的按下动作，间接按下该移动终端2的按钮，因此，能确认在移动终端2侧是否正确地执行了校准处理。

实施方式3

本实施方式3中，说明考虑移动终端的画面朝向是否被变更而在车载装置侧进行校准处理的结构。

图12是表示本发明实施方式3的信息处理系统的结构的框图。对图1所示的实施方式1的信息处理系统的移动终端2追加设置画面朝向检测部26。另外，以下对与实施方式1的信息处理系统的构成要素相同或相当的部分标注与实施方式1中所使用的标号相同的标号，并省略或简化说明。

画面朝向检测部26由检测移动终端2的终端显示部21的朝向、旋转的传感器等构成。此外，画面朝向检测部26也可以通过移动终端2本身的朝向、旋转，来检测终端显示部21的朝向、旋转。具体而言，采用具有检测终端显示部21或移动终端2的朝向的加速度传感器(重力传感器)等方向检测机构、检测终端显示部21或移动终端2的旋转的旋转检测机构等机构中的至少一种检测机构的结构。画面朝向检测部26在参照检测结果检测到终端显示部21的朝向已被变更的情况下，经由移动终端2的操作/控制信息通信部23向车载装置1侧输出触摸操作区域的再获取请求。

输入到车载装置1侧的再获取请求经由操作/控制信息通信部18输入到操作区域获取部14，该操作区域获取部14基于所输入的再获取请求，对当前显示在触摸屏显示器13上的移动终端输出画面进行图像分析，判别触摸操作区域，获取所判别出的触摸操作区域的操作区域信息。所获取的操作区域信息存储于操作区域信息存储部15。

接下来，参照图13及图14，对实施方式3的信息处理系统的校准处理进行说明。

首先，说明移动终端2的动作。

图13是表示本发明实施方式3的信息处理系统的移动终端的画面朝向检测处理的流程图。此外，在图13的流程图中，以画面朝向检测部26检测终端显示部21的朝向、旋转的情况为例进行说明。

在车载装置1与移动终端2通过HDMI及蓝牙来进行连接的状态下，移动终端2的画面朝向检测部26获取终端显示部21的朝向(步骤ST41)，根据上次的检测结果，判定终端显示部21的朝向是否被变更(步骤ST42)。在终端显示部21的朝向未被变更的情况下(步骤ST42：否)，返回到步骤ST41的处理，并重复上述的处理。另一方面，在终端显示部21的朝向被变更的情况下(步骤ST42：是)，画面朝向检测部26将触摸操作区域的再获取请求输出到车载装置1侧(步骤ST43)。之后，返回到步骤ST41的处理，并重复上述的处理。

接下来，对车载装置1的动作进行说明。

图14是表示本发明实施方式3的信息处理系统的车载装置的校准处理的流程图。

此外，车载装置1的校准处理中，对与图5所示的校准处理相同的步骤标注与图5中使用的标号相同的标号，并省略或简化说明。

若步骤ST1中车载装置1与移动终端2通过HDMI及蓝牙进行连接，则在车载装置1侧进行与步骤ST2至步骤ST6相同的处理，获取、存储操作区域信息。操作区域获取部14还判定是否从移动终端2侧输入触摸操作区域的再获取请求(步骤ST51)。

在输入有触摸操作区域的再获取请求的情况下(步骤ST51：是)，返回至步骤ST4的处理，对当前显示于触摸屏显示器13的图像进行二值化处理，进行步骤ST5及步骤ST6的处理。另一方面，在未输入操作区域的再获取请求的情况下(步骤ST51：否)，返回至步骤ST51的判定处理，并进行待机。

另外，设移动终端2的输出画面信息始终被更新，通过图14的流程图的步骤ST2及步骤ST3的处理，在车载装置1的触摸屏显示器13上实时显示移动终端2的画面信息。

如上所述，根据本实施方式3，构成为包括：画面朝向检测部26，该画面朝向检测部26在检测到移动终端2的终端显示部21的朝向已被变更的情况下，向车载装置1侧输出触摸操作区域的再获取请求；及操作区域获取部14，该操作区域获取部14基于所输入的触摸操作区域的再获取请求，再次获取显示在触摸屏显示器13上的移动终端输出画面的触摸操作区域，因此，即使在连接有画面朝向能变更的移动终端的情况下，也能与该画面朝向相匹配地再次获取触摸操作区域。由此，对于希望变更画面朝向的应用程序，也能与画面朝向相匹配地再次获取触摸操作区域，能构建通用性较高的信息处理系统。

实施方式4

本实施方式4中，说明基于用户的操作输入来设定触摸操作区域的结构。

图15是表示本发明实施方式4的信息处理系统的结构的框图。对图1所示的实施方式1的信息处理系统的车载装置1追加设置用户操作部31及可变框显示控制部32。另外，以下对与实施方式1的信息处理系统的构成要素相同或相当的部分标注与实施方式1中所使用的标号相同的标号，并省略或简化说明。

用户操作部31由GUI和遥控器按钮等用户界面构成，所述GUI对显示在触摸屏显示器13上的可变框进行操作，将可变框内的区域设定作为操作区域，所述遥控器按钮对触摸屏显示器13上显示的可变框进行远程操作，将可变框内的区域设定作为操作区域的。可变框显示控制部32将可由用户操作部31操作的可变框显示在触摸屏显示器13上。此外，进行显示控制，使得跟随经由用户操作部31输入的用户操作而使可变框扩大缩小。此外，通过进行操作区域的设定操作，将可变框内设定作为触摸操作区域。

操作区域获取部14基于用户操作部31的设定操作，在可变框显示控制部32所显示的可变框的内外设定触摸操作区域，并获取操作区域信息。

图16是表示本发明实施方式4的信息处理系统的显示例的图。

与上述实施方式1同样，移动终端2的画面200由操作画面显示区域201构成，车载装置1的触摸屏显示器13由移动终端输出画面100构成。可变框显示控制部32将用于设定触摸操作区域101的可变框105重叠显示于移动终端输出画面100。用户通过操作用户操作部31，使可变框105扩大或缩小，使触摸操作区域101与触摸操作区域外的区域102的边界看起来与可变框105一致，将可变框105内的区域作为触摸操作区域，获取起点位置P、及表示触摸操作区域的横宽W和纵宽H的尺寸信息。

作为使可变框105扩大或缩小的手段，图16中示出使可变框105的长边移动的GUI106、使可变框105的短边移动的GUI107作为示例。通过选择GUI106及GUI107的“+”区域，可变框105以框内的中心点(未图示)为基点而扩大，通过选择“-”区域，可变框105以框内的中心点为基点而缩小。通过按下表示画面右下方的设定按钮的GUI108，将可变框的内部设定作为操作区域。此外，图16中，还示出有使可变框105扩大或缩小的遥控器按钮109的箭头键和将可变框设定作为操作区域的设定按钮110。

接下来，参照图17的流程图对实施方式4的信息处理系统的校准处理进行说明。另外，以下，对于与实施方式1的信息处理系统相同的步骤标注与图5使用的标号相同的标号，并省略或者简化说明。

将车载装置1与移动终端2用HDMI及蓝牙进行连接(步骤ST1)。移动终端2的视频通信部22利用HDMI将终端显示部21的输出画面信息输出到车载装置1侧(步骤ST2)。车载装置1中，显示控制部12经由视频通信部11接收步骤ST2中所输出的输出画面信息，并将该输出画面信息显示于触摸屏显示器13的显示画面上(步骤ST3)。

可变框显示控制部32将可变框重叠显示在步骤ST3中显示有输出画面信息的触摸屏显示器13上(步骤ST61)。经由用户操作部31，接受对步骤ST61中进行重叠显示的可变框的操作输入(步骤ST62)。用户判定移动终端输出画面信息的触摸操作区域与触摸操作区域外的区域的边界是否与可变框相一致(步骤ST63)。在触摸操作区域与触摸操作区域外的区域的边界与可变框不一致的情况下(步骤ST63：否)，返回至步骤ST62的处理，继续接受对可变框的操作输入。另一方面，在判断为触摸操作区域与触摸操作区域外的区域的边界与可变框相一致的情况下(步骤ST63：是)，通过用户操作部31的设定操作，操作区域获取部14获取与可变框相一致的区域的起点位置及尺寸信息(步骤ST64)。将所获取的起点位置及尺寸信息作为操作区域信息存储于操作区域信息存储部15(步骤ST6)，结束校准处理。

如上所述，根据本实施方式4，构成为包括：可变框显示控制部32，该可变框显示控制部32将可变框重叠显示在显示有移动终端2的画面信息的车载装置1的触摸屏显示器13的显示画面上；及用户操作部31，该用户操作部31接受所显示的可变框的扩大缩小操作，在可变框与移动终端输出画面的触摸操作区域与触摸操作区域外的区域的边界相一致的情况下，将一致的区域作为触摸操作区域，获取操作区域信息，因此，能通过触摸操作、遥控器操作来使可变框扩大缩小，用户能一边通过目视来进行确认，一边设定触摸操作区域。由此，在移动终端输出画面的触摸操作区域接近黑色的应用程序的情况下，也能一边通过目视来进行确认，一边正确地设定触摸操作区域。

实施方式5

本实施方式5中，说明从信息处理系统的外部获取操作区域信息的结构。

图18是表示本发明实施方式5的信息处理系统的结构的框图。代替图1所示的实施方式1的信息处理系统的车载装置所包括的操作区域获取部14，移动终端2包括能与外部服务器进行连接的通信处理部27。另外，以下对与实施方式1的信息处理系统的构成要素相同或相当的部分标注与实施方式1中所使用的标号相同的标号，并省略或简化说明。

外部服务器40例如由Web服务等服务器构成。设外部服务器40保存有由移动终端2和车载装置1的各设备种类的组合来决定的操作区域信息、及由移动终端2的设备种类来决定的显示画面的尺寸信息。

通信处理部27利用无线LAN或3G线路等通信方式与外部服务器40进行通信，访问该外部服务器40，从而获取彼此通信连接的移动终端2与车载装置1间的操作区域信息、及移动终端2的显示画面的尺寸信息(横宽：Wide[px]、纵宽：Height[px])。此处，与实施方式1同样，操作区域信息是指表示在触摸屏显示器13上显示有移动终端输出画面时的触摸操作区域的起点位置和尺寸信息的信息。具体而言，通信处理部27对外部服务器40输入移动终端2及车载装置1的识别ID，从而能获取与该识别ID相对应的设备种类的移动终端2与车载装置1的组合所对应的操作区域信息、及与识别ID相对应的设备种类的移动终端2的显示画面的尺寸信息。操作/控制信息通信部23在与操作/控制信息通信部18进行通信时获取识别ID，并将其提供给通信处理部27。

通信处理部27所获取的操作区域信息经由移动终端2的操作/控制信息通信部23输出到车载装置1侧，并经由车载装置1的操作/控制信息通信部18存储于操作区域信息存储部15。触摸操作信息获取部16及坐标变换部17参照存储于操作区域信息存储部15的操作区域信息，进行坐标变换处理。

另一方面，通信处理部27所获取的移动终端2的显示画面的尺寸信息经由操作/控制信息通信部23输出到操作信息处理部24，并存储于存放区域(未图示)等。操作信息处理部24在从由车载装置1侧进行通知的操作信息中获取坐标信息、并将其变换成与终端显示部21的显示画面相对应的坐标时，参照所存储的显示画面的尺寸信息。

接下来，参照图19的流程图对实施方式5的信息处理系统的校准处理进行说明。另外，以下，对于与实施方式1的信息处理系统相同的步骤标注与图5使用的标号相同的标号，并省略或者简化说明。

将车载装置1与移动终端2用HDMI及蓝牙进行连接(步骤ST1)。移动终端2的通信处理部27访问外部服务器40(步骤ST71)，将移动终端2及车载装置1的识别ID作为关键字，获取对应的操作区域信息及移动终端2的显示画面的尺寸信息(步骤ST72)。将步骤ST72中获取的操作区域信息输出到车载装置1侧，并存储于车载装置1的操作区域信息存储部15(步骤ST73)。另一方面，将步骤ST72中获取的显示画面的尺寸信息输出到操作信息处理部24(步骤ST74)，结束处理。

另外，对外部服务器40的访问并不限于图18的框图所示的结构，也可如图20的框图所示，构成为车载装置1包括通信处理部27′，对外部服务器40进行访问。

如上所述，根据本实施方式5，构成为包括通信处理部27、27′，该通信处理部27、27′对外部服务器40进行访问，获取与移动终端2及车载装置1相对应的操作区域信息，因此，无需对车载装置或移动终端设置用于计算操作区域信息的计算负荷较高的功能。由此，在限定功能的车载装置及移动终端间，也能获取正确的操作区域信息，能进行顺畅的远程操作。

实施方式6

本实施方式6中，对如下结构进行说明：预先将利用车载装置的校准处理而获取的操作区域信息与移动终端的识别信息相关联地进行存储，在下次之后将车载装置与移动终端进行连接时，利用所存储的操作区域信息。

图21是表示本发明实施方式6的信息处理系统的结构的框图。对图1所示的实施方式1的信息处理系统的车载装置1追加设置操作区域信息储存部33、存储信息处理部34及储存信息检索部35。另外，以下对与实施方式1的信息处理系统的构成要素相同或相当的部分标注与实施方式1中所使用的标号相同的标号，并省略或简化说明。

操作区域获取部14将所获取的操作区域信息与移动终端2的终端名等识别名称相关联地存储于操作区域信息存储部15。

操作区域信息存储部15是例如由RAM等构成的易失性存储器，将操作区域获取部14所获取的操作区域信息和识别名称暂时进行存放。

操作区域信息储存部33是例如由SD卡等构成的非易失性存储器，在车载装置1的电源断开时，将存储于操作区域信息存储部15的操作区域信息和识别名称经由后述的储存信息处理部34进行写入。

存储信息处理部34在检测到车载装置1的电源断开操作时，进行以下处理：读取操作区域信息存储部15中所存储的操作区域信息和识别名称，并将其写入到操作区域信息储存部33。例如，在车载装置1从启动到电源断开期间与多个移动终端2进行了连接的情况下，在电源断开时，将多台移动终端2的量的操作区域信息和识别名称写入到操作区域信息储存部33。另外，对操作区域信息储存部33的写入定时可以是车载装置1的电源断开操作时，也可以构成为在操作区域获取部33获取了操作区域时进行写入。以下，设为在车载装置1的电源断开操作时进行写入，并进行阐述。

储存信息检索部35在车载装置1下次启动时，检索与该车载装置1相连接的移动终端2的操作区域信息是否储存在操作区域信息储存部33中。在所连接的移动终端2的操作区域信息存在的情况下，进行以下处理：读取该移动终端2的操作区域信息和识别名称，并将其写入到操作区域信息存储部15。此外，在车载装置1的下次启动时以外的情况下，或与新的移动终端2进行了连接时，也进行操作区域信息储存部33的检索，并进行以下处理：读取相符的操作区域信息和识别名称，并将其写入到操作区域信息存储部15。

另外，在下次启动时或启动过程中，参照从视频通信部11输入的信息，来判断是否与新的移动终端2相连接并获取所连接的终端的识别名称。

接下来，参照图22的流程图对实施方式6的信息处理系统的动作进行说明。

图22是表示本发明实施方式6的信息处理系统的操作区域信息的储存及检索处理的流程图。

在将电源断开指示输入到车载装置1时(步骤ST81)，存储信息处理部34读取操作区域信息存储部15中存储的操作区域信息和识别名称，并将其写入到操作区域信息储存部33(步骤ST82)。之后，将车载装置1的电源断开(步骤ST83)。

接着，在车载装置1启动、车载装置1与移动终端2连接时(步骤ST84)，储存信息检索部35获取步骤ST84中进行连接的移动终端2的识别名称(步骤ST85)。储存信息检索部35检索操作区域信息储存部33的储存数据，判定是否储存有与步骤ST85中获取的识别名称相对应的操作区域信息(步骤ST86)。在储存有操作区域信息的情况下(步骤ST86：是)，储存信息检索部35从操作区域信息储存部33读取所对应的操作区域信息及识别名称，将其写入到操作区域信息存储部15(步骤ST87)，并结束处理。另一方面，在未储存有操作区域信息的情况下(步骤ST86：否)，储存信息检索部35对操作区域获取部14指示执行校准处理(步骤ST88)，并结束处理。

步骤ST88中被指示执行校准处理的操作区域获取部14进行实施方式1所示的校准处理(参照图5的流程图)。

另外，在上述流程图中，虽然示出了获取在车载装置1启动时进行连接的移动终端2的识别名称的结构，但并不限定于启动时，也可以构成为始终监视车载装置1与移动终端2的通信状态，在与新的移动终端2相连接的情况下，进行步骤ST86以后的处理。

如上所述，根据本实施方式6，构成为包括：存储信息处理部34，该存储信息处理部34将车载装置1的电源断开时存储于操作区域信息存储部15的操作区域信息写入到作为非易失性存储器的操作区域信息储存部33中；及储存信息检索部35，该储存信息检索部35在下次启动时检索与所连接的移动终端2相对应的操作区域信息是否储存在操作区域信息储存部33中，因此，能省略对已获取操作区域信息的移动终端的校准处理。此外，能在车载装置1侧判断是否进行校准处理，可构建通用性较高的信息处理系统，而不依赖于移动终端2的功能。

此外，上述实施方式2中，示出了对实施方式1追加结构的示例，这也可适用于实施方式3-6。此外，实施方式3至实施方式6中也同样。这样，本申请发明在其发明范围内可以进行各实施方式的自由组合，或者对各实施方式的任意构成要素进行变形，或者在各实施方式中省略任意构成要素。

工业上的实用性

如上所述，本发明所涉及的信息处理系统能进行在另一个设备侧容易且正确地获取所通信连接的一个设备的显示画面的触摸操作区域的校准处理，因此，适用于在显示器的分辨率、纵横比不同的设备间进行远程操作的信息处理系统。

标号说明

1           车载装置

2   移动终端

11、22  视频通信部

12  显示控制部

13  触摸屏显示器

14  操作区域获取部

15  操作区域信息存储部

16  触摸操作信息获取部

17  坐标变换部

18，23  操作/控制信息通信部

19  校准画面设定请求部

21  终端显示部

24  操作信息处理部

25  校准画面存储部

26  画面朝向检测部

27，27′  通信处理部

31  用户操作部

32  可变框显示控制部

33  操作区域信息储存部

34  存储信息处理部

35  储存信息检索部

40  外部服务器

100 移动终端输出画面

101，103 触摸操作区域

102，102′ 触摸操作区域外的区域

104 按钮

105 可变框

106，107，108  GUI

109 遥控器按钮

110 设定按钮

200 画面

201 操作画面显示区域

202 操作画面显示区域外的区域

203 输出画面信息

204 背景

205 按钮

Claims (15)

1.一种信息处理装置，该信息处理装置包括与信息终端进行通信连接的通信部、及配置有触摸屏的显示器，将对所述触摸屏的触摸操作变换为远程操作信息，利用所述通信部将所述远程操作信息发送到所述信息终端，从而对该信息终端进行远程操作，所述信息处理装置的特征在于，包括：

显示控制部，该显示控制部利用由所述通信部接收到的所述信息终端的画面信息，将所述信息终端的画面显示于所述显示器；

操作区域获取部，该操作区域获取部对显示有所述信息终端的画面的所述显示器的画面进行图像分析，获取用于确定与所述信息终端的画面相对应的触摸操作区域的操作区域信息；

触摸操作获取部，该触摸操作获取部检测出对所述触摸屏的触摸操作，基于所述操作区域信息，获取所检测出的触摸操作的位置信息；及

触摸坐标变换部，该触摸坐标变换部基于所述操作区域信息，将所述触摸操作获取部获取的触摸操作的位置信息变换为与所述信息终端的画面相对应的位置信息，

所述通信部将由所述触摸坐标变换部进行变换后的位置信息作为所述远程操作信息发送到所述信息终端。

2.如权利要求1所述的信息处理装置，其特征在于，

所述显示控制部获取显示有校准画面的所述信息终端的画面信息，并将所述信息终端的校准画面显示于所述显示器，所述校准画面由显示有操作对象的画面的操作画面显示区域、和与该操作画面显示区域相邻的操作画面显示区域外的区域构成，

所述操作区域获取部对显示在所述显示器上的校准画面进行图像分析，确定所述操作画面显示区域与操作画面显示区域外的区域的边界，获取与该操作画面显示区域相对应的触摸操作区域的起点位置及区域尺寸，以作为所述操作区域信息。

3.如权利要求1所述的信息处理装置，其特征在于，

所述显示控制部获取显示有信息终端的画面的所述信息终端的画面信息，并将所述信息终端的画面显示于所述显示器，所述信息终端的画面由显示有操作对象的画面的操作画面显示区域、和与该操作画面显示区域相邻的操作画面显示区域外的区域构成，

所述操作区域获取部在对所述显示器的画面内的像素值进行二值化处理之后，确定所述操作画面显示区域与所述操作画面显示区域外的区域的边界，获取与所述操作画面显示区域相对应的触摸操作区域的起点位置及区域尺寸，以作为所述操作区域信息。

4.如权利要求2所述的信息处理装置，其特征在于，

所述操作区域获取部在对所述显示器的画面内的像素值进行二值化处理之后，确定所述操作画面显示区域与操作画面显示区域外的区域的边界。

5.如权利要求2所述的信息处理装置，其特征在于，

包括校准画面设定请求部，该校准画面设定请求部向所述信息终端请求显示所述校准画面。

6.如权利要求3所述的信息处理装置，其特征在于，

包括可变框显示控制部，该可变框显示控制部将能根据用户操作变更框尺寸的可变框重叠显示于显示有所述信息终端的画面的所述显示器的画面，

所述操作区域获取部利用以和所述操作画面显示区域与所述操作画面显示区域外的区域的边界相一致的方式进行重叠显示的所述可变框，在用户侧指定所述操作画面显示区域与所述操作画面显示区域外的区域的边界。

7.如权利要求1所述的信息处理装置，其特征在于，

在由所述通信部从所述信息终端通知了画面的显示方向的变更的情况下，所述操作区域获取部对显示有变更后的显示方向的画面的所述显示器的画面进行图像分析，获取用于确定与所述信息终端的画面相对应的触摸操作区域的操作区域信息。

8.如权利要求1所述的信息处理装置，其特征在于，

所述操作区域获取部以所述通信部与所述信息终端的通信连接已建立为契机，开始所述操作区域信息的获取处理。

9.如权利要求1所述的信息处理装置，其特征在于，

所述通信部在信息处理装置启动时，检索能进行通信连接的信息终端，并与检索到的信息终端进行通信连接。

10.如权利要求2所述的信息处理装置，其特征在于，

所述显示控制部将在所述信息终端的画面上进行显示的用于确认校准的成败的用户界面部显示于所述操作画面显示区域，

所述操作区域获取部获取与包含所述用户界面部的所述操作画面显示区域相对应的触摸操作区域的操作区域信息，

所述触摸操作获取部检测出对所述触摸屏上显示的所述用户界面部的用户操作，基于所述操作区域信息，获取检测出的对所述用户界面部的用户操作的触摸位置信息及触摸操作种类，

所述触摸坐标变换部基于所述操作区域信息，将对用户界面部的用户操作的触摸位置信息变换为与所述信息终端的画面相对应的位置信息，

利用所述通信部将由所述触摸变换部进行变换后的位置信息和所述触摸操作种类作为所述远程操作信息来发送到所述信息终端。

11.如权利要求1所述的信息处理装置，其特征在于，包括：

操作区域信息存储部，该操作区域信息存储部将所述操作区域获取部获取的操作区域信息与所对应的信息终端的识别信息相关联地进行储存，所述触摸操作获取部及所述触摸坐标变换部能读取所述操作区域信息；

存储信息处理部，该存储信息处理部在信息处理装置的电源断开时，获取所述操作区域信息存储部中存储的操作区域信息和相关联的信息终端的识别信息；

非易失性存储器，该非易失性存储器储存所述存储信息处理部获取的操作区域信息和相关联的信息终端的识别信息；及

储存信息检索部，该储存信息检索部在所述通信部与所述信息终端进行了通信连接时，参照所述非易失性存储器，在储存有与通信连接的信息终端相关的操作区域信息的情况下，获取相符的操作区域信息和信息终端的识别信息并存放于所述操作区域信息存储部，在未储存有与通信连接的信息终端相关的操作区域信息的情况下，向所述操作区域获取部指示与该信息终端相关的操作区域信息的获取处理。

12.一种信息处理装置，该信息处理装置包括与信息终端及外部服务器进行通信连接的通信部、及配置有触摸屏的显示器，将对所述触摸屏的触摸操作变换为远程操作信息，利用所述通信部将所述远程操作信息发送到所述信息终端，从而对该信息终端进行远程操作，所述信息处理装置的特征在于，包括：

显示控制部，该显示控制部利用由所述通信部接收到的所述信息终端的画面信息，将所述信息终端的画面显示于所述显示器；

触摸操作获取部，该触摸操作获取部检测出输入到所述触摸屏的触摸操作，基于利用所述通信部从所述信息终端或所述外部服务器接收到的操作区域信息，获取所检测出的触摸操作的位置信息；及

触摸坐标变换部，该触摸坐标变换部基于从所述信息终端或所述外部服务器接收到的操作区域信息，将所述触摸操作获取部获取的触摸操作的位置信息变换为与所述信息终端的画面相对应的位置信息，

所述通信部将由所述触摸坐标变换部进行变换后的位置信息作为所述远程操作信息发送到所述信息终端。

13.一种信息终端，该信息终端由信息处理装置进行远程操作，所述信息处理装置包括与信息终端进行通信连接的通信部、及配置有触摸屏的显示器，所述信息处理装置获取输入到所述触摸屏的触摸操作的位置信息，利用所述通信部将对所获取的位置信息进行标准化而得到的标准化位置信息作为远程操作信息进行发送，所述信息终端的特征在于，包括：

终端侧通信部，该终端侧通信部与所述信息处理装置进行通信连接；

终端显示部，该终端显示部进行画面显示；及

操作信息处理部，该操作信息处理部将由所述终端侧通信部接收到的标准化位置信息变换为与所述终端显示部的画面显示尺寸相匹配的坐标，并进行以下处理，即，将变换后的坐标对应为对所述终端显示部的画面的操作。

14.一种信息处理系统，该信息处理系统包括信息终端、及对信息终端进行远程操作的信息处理装置，其特征在于，

所述信息处理装置包括：

装置侧通信部，该装置侧通信部与所述信息终端进行通信连接；

显示器，该显示器配置有触摸屏；

显示控制部，该显示控制部利用由所述装置侧通信部接收到的所述信息终端的画面信息，将所述信息终端的画面显示于所述显示器；

操作区域获取部，该操作区域获取部对显示有所述信息终端的画面的所述显示器的画面进行图像分析，获取用于确定与所述信息终端的画面相对应的触摸操作区域的操作区域信息；

触摸操作获取部，该触摸操作获取部检测出输入到所述触摸屏的触摸操作，基于所述操作区域信息，获取所检测出的触摸操作的位置信息；及

触摸坐标变换部，该触摸坐标变换部基于所述操作区域信息，将所述触摸操作获取部获取的触摸操作的位置信息变换为与所述信息终端的画面相对应的位置信息，

所述信息终端包括：

终端侧通信部，该终端侧通信部与所述信息处理装置进行通信连接；

终端显示部，该终端显示部进行画面显示；及

操作信息处理部，该操作信息处理部进行以下处理，即，将由所述终端侧通信部从所述信息处理装置接收到的、由所述触摸坐标变换部进行变换后的所述位置信息对应为对所述终端显示部的画面的操作。

15.一种校准方法，该校准方法是信息处理装置确定触摸操作区域的校准方法，所述信息处理装置包括配置有触摸屏的显示器，并与信息终端进行通信连接，所述触摸操作区域与所述显示器上所显示的所述信息终端的画面相对应，所述校准方法的特征在于，包括以下步骤：

所述信息处理装置利用从所述信息终端接收到的画面信息，将该信息终端的画面显示于所述显示器；及

所述信息处理装置对显示有所述信息终端的画面的所述显示器的画面进行图像分析，获取用于确定与该信息终端的画面相对应的触摸操作区域的操作区域信息。