[go: up one dir, main page]

JP2019184774A - Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor - Google Patents

Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor Download PDF

Info

Publication number
JP2019184774A
JP2019184774A JP2018074254A JP2018074254A JP2019184774A JP 2019184774 A JP2019184774 A JP 2019184774A JP 2018074254 A JP2018074254 A JP 2018074254A JP 2018074254 A JP2018074254 A JP 2018074254A JP 2019184774 A JP2019184774 A JP 2019184774A
Authority
JP
Japan
Prior art keywords
sound
data
motion
base
moving image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018074254A
Other languages
Japanese (ja)
Inventor
勝志 松林
Shoji Matsubayashi
勝志 松林
山下 晃弘
Akihiro Yamashita
晃弘 山下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nishikawa Seiki Seisakusho Co Ltd
Institute of National Colleges of Technologies Japan
Original Assignee
Nishikawa Seiki Seisakusho Co Ltd
Institute of National Colleges of Technologies Japan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nishikawa Seiki Seisakusho Co Ltd, Institute of National Colleges of Technologies Japan filed Critical Nishikawa Seiki Seisakusho Co Ltd
Priority to JP2018074254A priority Critical patent/JP2019184774A/en
Publication of JP2019184774A publication Critical patent/JP2019184774A/en
Pending legal-status Critical Current

Links

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

【課題】軽量、コンパクト、低価格のモーションシミュレータを提供する。【解決手段】モーションベースは、中空の正六角柱形状の基底部1111と、基底部1111の内側面上に取り付けられた連結ベース1114−1〜1114−3を備える。例えば、連結ベース1114−1には上下方向に貫通するネジ受け孔が設けられ、ボールネジ1116−1を受容し、無端ベルト1117−1を介してモータ1115−1により駆動されるボールネジ1116−1の回転に伴い上下方向に移動する。連結ベース1114−1には、アクチュエータ1113−1が水平方向の軸周りに回転可能に連結されており、連結ベース1114−1の移動に伴いアクチュエータ1113−1が移動する。【選択図】図9An object of the present invention is to provide a lightweight, compact, and low-cost motion simulator. The motion base includes a hollow regular hexagonal prism-shaped base portion 1111 and connection bases 1114-1 to 1114-3 mounted on inner surfaces of the base portion 1111. For example, the connection base 1114-1 is provided with a screw receiving hole that penetrates in the vertical direction, receives the ball screw 1116-1, and receives the ball screw 1116-1 driven by the motor 1115-1 via the endless belt 1117-1. It moves up and down with rotation. An actuator 1113-1 is connected to the connection base 1114-1 so as to be rotatable around a horizontal axis, and the actuator 1113-1 moves with the movement of the connection base 1114-1. [Selection diagram] FIG.

Description

本発明は、モーションシミュレータに関する。   The present invention relates to a motion simulator.

モーションシミュレータ(モーションチェア、モーションテーブル等を含む)に関する特許文献として、カーレースゲーム等の動きと映像のデータの通信に関するもの(例えば、特許文献1)、6自由度パラレルリンクを天井に取り付け下にチェアを取り付けたもの(例えば、特許文献2)、2自由度でゴンドラの様にチェアをぶら下げたもの(例えば、特許文献3)、4自由度モーションシミュレータで、5自由度相当の動きを実現しようとしたもの(例えば、特許文献4)、モーションシミュレータの安定性を増すための緩衝部を設けたもの(例えば、特許文献5)、3自由度をすべて回転運動としたモーションシミュレータ(例えば、特許文献6)等がある。   Patent documents related to motion simulators (including motion chairs, motion tables, etc.) are related to communication of motion and video data such as car racing games (for example, Patent Document 1), with a 6-DOF parallel link attached to the ceiling. A chair attached (for example, Patent Document 2), a chair suspended like a gondola with 2 degrees of freedom (for example, Patent Document 3), and a 4-degree-of-freedom motion simulator will realize a motion equivalent to 5 degrees of freedom. (For example, Patent Document 4), provided with a buffer for increasing the stability of the motion simulator (for example, Patent Document 5), and a motion simulator having all three degrees of freedom for rotational motion (for example, Patent Document) 6) etc.

特開2017−64537号公報JP 2017-64537 A 特表2003−502686号公報Special table 2003-502686 gazette 特表2005−510764号公報Japanese translation of PCT publication No. 2005-510964 特表2015−513123号公報Special table 2015-513123 gazette 特表2016−512980号公報JP-T-2016-512980 特開2004−340718号公報JP 2004-340718 A

モーションシミュレータのアクチュエータには、ユーザの体重及びユーザがその上に座る座具の重量が荷重としてかかる。その荷重に抗ってアクチュエータの座具に対する作用点を移動させるためには、アクチュエータを大きな力で駆動する必要がある。そのため、従来のモーションシミュレータは、アクチュエータを駆動するために大型の油圧シリンダやモータ等の駆動装置を備える必要があり、重量、サイズが大きく、価格も高い場合が多い。   The weight of the user and the weight of the sitting tool on which the user sits are applied to the actuator of the motion simulator as loads. In order to move the operating point of the actuator against the seat against the load, it is necessary to drive the actuator with a large force. Therefore, the conventional motion simulator needs to be provided with a driving device such as a large hydraulic cylinder or a motor in order to drive the actuator, and is often heavy and large in size and expensive.

上記の事情に鑑み、本発明の一実施形態は、従来のモーションシミュレータと比較し、軽量、コンパクト、低価格の少なくとも1つを実現するモーションシミュレータを提供する。   In view of the above circumstances, an embodiment of the present invention provides a motion simulator that realizes at least one of light weight, compactness, and low price as compared with a conventional motion simulator.

また、モーションシミュレーション用のデータは、一般に、経時変化するユーザのモーションを示すモーションデータと、経時変化するユーザの外界の風景を表す動画データと、経時変化するユーザの外界の音を表す音データとを含む。これらのデータは同期されている、すなわち、時間軸上で正しく対応付けられている必要がある。ただし、モーションデータと動画データが異なる装置により生成される場合、これらのデータを同期させることは容易ではない。   In addition, the data for motion simulation generally includes motion data indicating the user's motion changing with time, moving image data indicating the user's external environment changing with time, and sound data expressing the user's external sound changing with time. including. These data must be synchronized, that is, correctly associated on the time axis. However, when motion data and moving image data are generated by different devices, it is not easy to synchronize these data.

上記の事情に鑑み、本発明の一実施形態は、異なる装置により生成されたモーションデータと動画データとを同期させてモーションシミュレータ用のデータを生成する手段を提供する。   In view of the above circumstances, an embodiment of the present invention provides means for generating motion simulator data by synchronizing motion data and moving image data generated by different devices.

本発明は、モーションベースのアクチュエータが連結される連結ベースと、前記連結ベースの所定方向における移動をガイドするガイド部材と、前記アクチュエータに外部から与えられる所定量の荷重に抗する力を前記連結ベースに加えるように配置された弾性部材と、前記連結ベースを前記所定方向に搬送する搬送機構とを備えるモーションベースのアクチュエータの駆動ユニットを第1の態様として提供する。   The present invention relates to a connection base to which a motion-based actuator is connected, a guide member that guides movement of the connection base in a predetermined direction, and a force that resists a predetermined amount of load applied to the actuator from the outside. A motion-based actuator drive unit comprising an elastic member arranged so as to be added and a transport mechanism for transporting the connection base in the predetermined direction is provided as a first aspect.

第1の態様に係る駆動ユニットによれば、モーションシミュレータの座具にユーザが座った状態でアクチュエータに与えられる所定量の荷重を弾性部材によりキャンセルすることができるため、アクチュエータの座具に対する作用点の上方向への移動に要する力が小さい。そのため、従って、例えば小型のモータ等の軽量、コンパクト、低価格な駆動装置によって動作するモーションシミュレータが実現される。   According to the drive unit according to the first aspect, since the predetermined amount of load applied to the actuator can be canceled by the elastic member while the user is sitting on the motion simulator seat, the operating point of the actuator on the seat The force required to move upward is small. Therefore, a motion simulator that is operated by a light, compact, and low-cost drive device such as a small motor is realized.

第1の態様に係る駆動ユニットにおいて、
前記連結ベースは、前記所定方向に貫通するように設けられたネジ受け孔を有し、前記搬送機構は、モータと、前記モータにより軸周りに回転され、前記ネジ受け孔に受容されたボールネジを有する、という構成が第2の態様として採用されてもよい。
In the drive unit according to the first aspect,
The connection base has a screw receiving hole provided so as to penetrate in the predetermined direction, and the transport mechanism has a motor and a ball screw that is rotated around the axis by the motor and received in the screw receiving hole. The configuration of having may be adopted as the second aspect.

第2の態様に係る駆動ユニットによれば、例えばボールベアリングを有さないネジや搬送ベルト等を用いる搬送機構を有する駆動ユニットと比較し、アクチュエータの作用点を正確に移動させることができ、また、動作時に生じる騒音が小さいモーションシミュレータが実現される。   According to the drive unit according to the second aspect, the operating point of the actuator can be accurately moved as compared with, for example, a drive unit having a transport mechanism using a screw or a transport belt that does not have a ball bearing. A motion simulator with low noise generated during operation is realized.

また、本発明は、第1又は第2の態様に係る駆動ユニットを3以上と、前記3以上の駆動ユニットの各々に連結された3以上のアクチュエータと、前記3以上の駆動ユニットの各々の前記搬送機構の搬送を制御する制御ユニットと、床の上に乗せ置かれ、外縁の形状が前記駆動ユニットの個数の自然数倍の辺を持つ多角形である底面を有し、前記3以上の駆動ユニットを支持する基底部とを備えるモーションベースを第3の態様として提供する。   Further, the present invention provides three or more drive units according to the first or second aspect, three or more actuators connected to each of the three or more drive units, and each of the three or more drive units. A control unit for controlling the conveyance of the conveyance mechanism, and a bottom surface that is placed on the floor and whose outer edge is a polygon having a side that is a natural number multiple of the number of the drive units, and the three or more drives A motion base including a base portion supporting the unit is provided as a third aspect.

第3の態様に係るモーションベースによれば、外縁の形状が円形である底面を有する基底部を備えるモーションベースによる場合と比較し、加工が容易で低価格なモーションシミュレータが実現される。また、第3の態様に係るモーションベースによれば、外縁の形状が駆動ユニットの個数の自然数倍でない辺を持つ多角形である底面を有する基底部を備えるモーションベースによる場合と比較し、占有面積が小さいモーションシミュレータが実現される。   According to the motion base according to the third aspect, it is possible to realize a motion simulator that is easy to process and inexpensive as compared with a motion base that includes a base portion having a bottom surface with a circular outer edge. Further, according to the motion base according to the third aspect, compared with the case of the motion base having a base portion having a bottom surface which is a polygon having a side whose outer edge shape is not a natural number multiple of the number of drive units. A motion simulator with a small area is realized.

第3の態様に係るモーションベースにおいて、前記駆動ユニットの数が3である、という構成が第4の態様として採用されてもよい。   In the motion base according to the third aspect, a configuration in which the number of the drive units is three may be adopted as the fourth aspect.

第4の態様に係るモーションベースによれば、駆動ユニットの数が4以上であるモーションベースによる場合と比較し、軽量、コンパクト、低価格なモーションシミュレータが実現される。   According to the motion base according to the fourth aspect, a light, compact, and low-priced motion simulator is realized as compared with the case of the motion base having four or more drive units.

また、本発明は、第3又は第4の態様に係るモーションベースと、前記モーションベースの前記3以上のアクチュエータにより下方から支持され、ユーザが身体の少なくとも一部を出し入れするための開口部が設けられ、ユーザの身体の少なくとも一部を収容する中空の球形又は卵形の収容部を有する座具と、前記収容部に収容されるスピーカとを備えるモーションシミュレータを第5の態様として提供する。   The present invention also provides a motion base according to the third or fourth aspect and an opening that is supported from below by the three or more actuators of the motion base and allows a user to put in and out at least a part of the body. A motion simulator comprising a hollow spherical or egg-shaped accommodation part that accommodates at least a part of the user's body and a speaker accommodated in the accommodation part is provided as a fifth aspect.

第5の態様に係るモーションシミュレータによれば、ユーザの耳に届く騒音が球形又は卵形の収容部により低減されるため、ユーザはスピーカから発音される音を快適に聴くことができ、ヘッドホンを装着する必要がない。   According to the motion simulator according to the fifth aspect, since the noise reaching the user's ear is reduced by the spherical or egg-shaped storage unit, the user can comfortably listen to the sound generated from the speaker, and the headphones. There is no need to wear it.

また、本発明は、ユーザの外界の風景を継続的に撮影して得られる動画データと、当該撮影と同時に当該ユーザの外界の音を継続的に録音して得られる第1の音データとを含み、前記動画データと前記第1の音データを時間軸上で対応付けたデータである音付き動画データと、当該ユーザのモーションを継続的に計測して得られるモーションデータと、当該計測と同時に当該ユーザの外界の音を継続的に録音して得られる第2の音データとを含み、前記モーションデータと前記第2の音データを時間軸上で対応付けたデータである音付きモーションデータとを取得する取得手段と、前記音付き動画データに含まれる前記第1の音データと、前記音付きモーションデータに含まれる前記第2の音データの相互相関関数の値に基づき、前記音付き動画データと前記音付きモーションデータの時間軸上の対応付けを行う同期処理手段とを備えるモーションシミュレータ用のデータの生成装置を第6の態様として提供する。   The present invention also provides moving image data obtained by continuously photographing a user's external landscape, and first sound data obtained by continuously recording the user's external sound simultaneously with the photographing. Including moving image data with sound, which is data in which the moving image data and the first sound data are associated on the time axis, motion data obtained by continuously measuring the user's motion, and the measurement simultaneously Second sound data obtained by continuously recording sounds of the user's outside world, and motion data with sound that is data in which the motion data and the second sound data are associated on the time axis; On the basis of a value of a cross-correlation function between the first sound data included in the moving image data with sound and the second sound data included in the motion data with sound. Providing apparatus for generating data for the motion simulator and a synchronization processing unit for the image data to associate on the time axis of the audio-motion data as the sixth aspect.

第6の態様に係る生成装置によれば、異なる装置により生成された動画データとモーションデータが正確に同期されたモーションシミュレータ用のデータが生成される。   According to the generating apparatus which concerns on a 6th aspect, the data for motion simulators which the moving image data and motion data which were produced | generated by the different apparatus were correctly synchronized are produced | generated.

また、本発明は、コンピュータに、ユーザの外界の風景を継続的に撮影して得られる動画データと、当該撮影と同時に当該ユーザの外界の音を継続的に録音して得られる第1の音データとを含み、前記動画データと前記第1の音データを時間軸上で対応付けたデータである音付き動画データと、当該ユーザのモーションを継続的に計測して得られるモーションデータと、当該計測と同時に当該ユーザの外界の音を継続的に録音して得られる第2の音データとを含み、前記モーションデータと前記第2の音データを時間軸上で対応付けたデータである音付きモーションデータとを取得する処理と、前記音付き動画データに含まれる前記第1の音データと、前記音付きモーションデータに含まれる前記第2の音データの相互相関関数の値に基づき、前記音付き動画データと前記音付きモーションデータの時間軸上の対応付けを行う処理とを実行させるためのプログラムを第7の態様として提供する。   In addition, the present invention provides moving image data obtained by continuously photographing a user's external landscape on a computer, and first sound obtained by continuously recording the user's external sound simultaneously with the photographing. Video data with sound, which is data in which the video data and the first sound data are associated on the time axis, motion data obtained by continuously measuring the user's motion, Including second sound data obtained by continuously recording the sound of the user's external world simultaneously with the measurement, and with sound that is data in which the motion data and the second sound data are associated on the time axis Based on the value of the cross-correlation function of the processing for obtaining the motion data, the first sound data included in the moving image data with sound, and the second sound data included in the motion data with sound. It provides a program for executing the processing for associating on the time axis of the motion data with the audio-video data and the sound as a seventh aspect.

第7の態様に係るプログラムによれば、コンピュータによって、異なる装置により生成された動画データとモーションデータが正確に同期されたモーションシミュレータ用のデータが生成される。   According to the program according to the seventh aspect, motion simulator data in which moving image data and motion data generated by different devices are accurately synchronized is generated by a computer.

本発明の一実施形態によれば、従来のモーションシミュレータと比較し、軽量、コンパクト、低価格の少なくとも1つを実現するモーションシミュレータが提供される。   According to an embodiment of the present invention, a motion simulator is provided that realizes at least one of light weight, compactness, and low price as compared with a conventional motion simulator.

また、本発明の一実施形態によれば、異なる装置により生成されたモーションデータと動画データが同期されたモーションシミュレータ用のデータが生成される。   According to an embodiment of the present invention, motion simulator data in which motion data generated by different devices and moving image data are synchronized is generated.

一実施形態に係る仮想体験システムの全体構成を示した図。The figure which showed the whole structure of the virtual experience system which concerns on one Embodiment. 一実施形態に係るサーバ装置の機能構成を示した図。The figure which showed the function structure of the server apparatus which concerns on one Embodiment. 一実施形態に係る仮想体験システムにおいて用いられる音付きモーションデータの構成を模式的に示した図。The figure which showed typically the structure of the motion data with a sound used in the virtual experience system which concerns on one Embodiment. 一実施形態に係る仮想体験システムにおいて用いられる音付き動画データの構成を模式的に示した図。The figure which showed typically the structure of the moving image data with a sound used in the virtual experience system which concerns on one Embodiment. 一実施形態に係る仮想体験システムにおいて用いられるコンテンツデータの構成を模式的に示した図。The figure which showed typically the structure of the content data used in the virtual experience system which concerns on one Embodiment. 一実施形態に係るモーションシミュレータの制御ユニットの機能構成を示した図。The figure which showed the function structure of the control unit of the motion simulator which concerns on one Embodiment. 一実施形態に係るモーションシミュレータの外観を示した図。The figure which showed the external appearance of the motion simulator which concerns on one Embodiment. 一実施形態に係るモーションベースの平面図。The top view of the motion base which concerns on one Embodiment. 一実施形態に係るモーションベースを斜め上から見た図。The figure which looked at the motion base which concerns on one Embodiment from diagonally upward. 一実施形態に係るモーションベースを斜め上から見た図。The figure which looked at the motion base which concerns on one Embodiment from diagonally upward. 一実施形態に係るモーションベースが備える連結ベースの1つとその周辺の部材を示した図。The figure which showed one of the connection bases with which the motion base which concerns on one Embodiment is provided, and its peripheral member. 一実施形態に係るモーションベースが備える連結ベースの1つとその周辺の部材を示した図。The figure which showed one of the connection bases with which the motion base which concerns on one Embodiment is provided, and its peripheral member.

以下に本発明の一実施形態に係る仮想体験システム1を説明する。仮想体験システム1は、実際に身体を動かす実体験者の体験を、仮想体験者が仮想的に追体験することを可能とするシステムである。   Hereinafter, a virtual experience system 1 according to an embodiment of the present invention will be described. The virtual experience system 1 is a system that allows a virtual experience person to relive the experience of a real experience person who actually moves the body.

図1は、仮想体験システム1の全体構成を示した図である。仮想体験システム1は、仮想体験者に追体験を与えるための装置であるモーションシミュレータ11と、モーションシミュレータ11において用いられる音付きモーションデータ(後述)を生成するスマートフォン12と、モーションシミュレータ11において用いられる音付き動画データ(後述)を生成するカメラ13と、スマートフォン12及びカメラ13により生成されたデータを同期させたコンテンツデータ(後述)を生成し、モーションシミュレータ11にコンテンツデータをストリーミング配信するサーバ装置14を備える。   FIG. 1 is a diagram showing the overall configuration of the virtual experience system 1. The virtual experience system 1 is used in a motion simulator 11 that is a device for giving a virtual experience to a virtual experience, a smartphone 12 that generates motion data with sound (described later) used in the motion simulator 11, and the motion simulator 11. Server 13 that generates camera 13 that generates moving image data with sound (described later) and content data (described later) that synchronizes data generated by smartphone 12 and camera 13, and distributes the content data to motion simulator 11 in a streaming manner. Is provided.

サーバ装置14はモーションシミュレータ11、スマートフォン12及びカメラ13とインターネット9を介してデータ通信を行うことができる。なお、スマートフォン12とカメラ13は、移動通信網(図示略)を介してインターネット9に接続可能である。   The server device 14 can perform data communication with the motion simulator 11, the smartphone 12, and the camera 13 via the Internet 9. The smartphone 12 and the camera 13 can be connected to the Internet 9 via a mobile communication network (not shown).

スマートフォン12は自装置が生成した音付きモーションデータをサーバ装置14に送信する。   The smartphone 12 transmits the motion data with sound generated by the own device to the server device 14.

スマートフォン12は、例えば3軸加速度センサ等のモーションセンサ(動きのベクトルを検知するセンサ)を備え、モーションセンサにより継続的に検知された経時変化するモーション(動きのベクトル)を示すモーションデータを生成する。また、スマートフォン12はマイクを備え、外界の音を録音して得られる音データを生成する。スマートフォン12は、モーションデータと音データを含み、それらが生成されたタイミングにより時間軸上で互いに対応付けられたデータである音付きモーションデータを生成する。   The smartphone 12 includes, for example, a motion sensor (a sensor that detects a motion vector) such as a three-axis acceleration sensor, and generates motion data indicating a time-varying motion (motion vector) continuously detected by the motion sensor. . The smartphone 12 includes a microphone, and generates sound data obtained by recording sounds from the outside world. The smartphone 12 includes motion data and sound data, and generates motion data with sound, which is data associated with each other on the time axis at the timing at which they are generated.

カメラ13はマイクを備え、外界の風景を継続的に撮影して得られる動画を表す動画データと、外界の音を録音して得られる音データとを含み、それらが生成されたタイミングにより時間軸上で互いに対応付けられたデータである音付き動画データを生成する。また、カメラ13の撮像部は、360度の全方向を同時に撮影する全天球型カメラである。   The camera 13 includes a microphone, and includes moving image data representing moving images obtained by continuously photographing the scenery of the outside world and sound data obtained by recording sounds of the outside world. The moving image data with sound, which is the data associated with each other above, is generated. The imaging unit of the camera 13 is an omnidirectional camera that simultaneously captures 360 degrees in all directions.

カメラ13は、ストリーミングサーバ装置の機能を備え、移動体通信網を介してインターネット9に接続可能であり、生成した音付き動画データをサーバ装置14に送信する。   The camera 13 has a function of a streaming server device, can be connected to the Internet 9 via a mobile communication network, and transmits the generated moving image data with sound to the server device 14.

サーバ装置14のハードウェアはプログラムに従いデータを処理するプロセッサ、プロセッサにより用いられるプログラム及びデータを記憶するメモリ、外部の装置とデータの送受信を行う通信インタフェースを備えるコンピュータである。   The hardware of the server device 14 is a computer that includes a processor that processes data according to a program, a memory that stores a program and data used by the processor, and a communication interface that transmits and receives data to and from an external device.

図2は、サーバ装置14の機能構成を示した図である。すなわち、コンピュータが本実施形態に係るサーバ装置用のプログラムに従う処理を行うことにより、図2に示す構成部を備えるサーバ装置14が実現される。以下にサーバ装置14が備える機能構成を説明する。   FIG. 2 is a diagram illustrating a functional configuration of the server device 14. That is, the server device 14 including the components illustrated in FIG. 2 is realized by the computer performing processing according to the server device program according to the present embodiment. The functional configuration provided in the server device 14 will be described below.

記憶部140は、各種データを記憶する。受信部141は、スマートフォン12から音付きモーションデータと音付き動画データを受信する。同期処理部142は、受信部141により受信され記憶部140に記憶される音付きモーションデータと音付き動画データを同期させたてコンテンツデータを生成する。送信部143は、同期処理部142により生成され記憶部140に記憶されるコンテンツデータをモーションシミュレータ11に送信する。   The storage unit 140 stores various data. The receiving unit 141 receives motion data with sound and moving image data with sound from the smartphone 12. The synchronization processing unit 142 generates content data by synchronizing the motion data with sound and the moving image data with sound received by the receiving unit 141 and stored in the storage unit 140. The transmission unit 143 transmits the content data generated by the synchronization processing unit 142 and stored in the storage unit 140 to the motion simulator 11.

図3は、受信部141がスマートフォン12から受信する音付きモーションデータの構成を模式的に示した図である。音付きモーションデータは、コンテンツIDにより識別されるコンテンツ毎に受信され、記憶される。音付きモーションデータは、経時変化する実体験者のモーションを示すモーションデータと、実体験者を取り巻く外界の音を示す音データを含み、それらが時間軸上で対応付けられているデータである。   FIG. 3 is a diagram schematically illustrating a configuration of motion data with sound that the reception unit 141 receives from the smartphone 12. The motion data with sound is received and stored for each content identified by the content ID. The motion-added motion data is data in which motion data indicating the motion of the real experience person changing with time and sound data indicating the sound of the outside world surrounding the real experience person are associated with each other on the time axis.

音付きモーションデータは、実体験者の身体又は実体験者の動きと連動する器具(例えば、実体験者がカヌーで川下りを実体験する場合におけるカヌー)に取り付けられたスマートフォン12により、実体験者が身体の動きを伴う何らかの体験(カヌー等)をしている間に生成される。   The motion data with sound is obtained by the smartphone 12 attached to the physical body of the actual experience person or a device (for example, the canoe in the case where the actual experience person experiences the downstream by canoe). It is generated while a person has some experience (such as canoeing) with body movement.

図4は、受信部141がスマートフォン12から受信する音付き動画データの構成を模式的に示した図である。音付き動画データは、コンテンツIDにより識別されるコンテンツ毎に受信され、記憶される。音付き動画データは、経時変化する実体験者を取り巻く外界の風景を表す動画データと、実体験者を取り巻く外界の音を示す音データを含み、それらが時間軸上で対応付けられているデータである。   FIG. 4 is a diagram schematically illustrating a configuration of moving image data with sound that the reception unit 141 receives from the smartphone 12. The moving image data with sound is received and stored for each content identified by the content ID. The video data with sound includes video data representing the scenery of the outside world surrounding the real experience person changing over time, and sound data indicating the sound of the outside world surrounding the real experience person, and these are correlated on the time axis It is.

音付き動画データは、実体験者の身体又は実体験者の動きと連動する器具(例えば、実体験者がカヌーで川下りを実体験する場合におけるカヌー)に取り付けられたカメラ13により、実体験者が身体の動きを伴う何らかの体験(カヌー等)をしている間に生成される。   The video data with sound is recorded by the camera 13 attached to a device linked to the body of the actual experience person or the movement of the actual experience person (for example, a canoe in the case where the real experience person actually experiences going downstream by canoe). It is generated while a person has some experience (such as canoeing) with body movement.

音付きモーションデータと音付き動画データには時刻データが伴う場合がある。ただし、スマートフォン12とカメラ13の内部時計は同期していないので、時刻データに基づき音付きモーションデータと音付き動画データを同期することはできない。また、音付きモーションデータと音付き動画データに伴う時刻データが、例えば記録開始時刻を基準とする相対的な時刻を示す場合も、時刻データに基づき音付きモーションデータと音付き動画データを同期することはできない。   Time data may accompany sound data with sound and moving image data with sound. However, since the internal clock of the smartphone 12 and the camera 13 is not synchronized, the motion data with sound and the moving image data with sound cannot be synchronized based on the time data. Further, even when the time data accompanying the motion data with sound and the moving image data with sound indicates a relative time based on the recording start time, for example, the motion data with sound and the moving image data with sound are synchronized based on the time data. It is not possible.

同期処理部142は、同じコンテンツIDの音付きモーションデータと音付き動画データを記憶部140から読み出し、それらのデータに含まれる音データの相互相関関数の値に基づき、音付きモーションデータに含まれるモーションデータと音付き動画データに含まれる動画データを同期させて、コンテンツデータを生成する。より具体的には、同期処理部142は、一方の音データに対し他方の音データを時間軸上で単位時間ずつずらしては、重なり合う部分について相互相関関数の値を算出し、その値が最大値を取る場合に、それら2つの音データが同期された、と判定する。図5は、同期処理部142により生成されるコンテンツデータの構成を模式的に示した図である。   The synchronization processing unit 142 reads out the motion data with sound and the moving image data with sound of the same content ID from the storage unit 140, and is included in the motion data with sound based on the value of the cross-correlation function of the sound data included in those data. The content data is generated by synchronizing the motion data and the moving image data included in the moving image data with sound. More specifically, the synchronization processing unit 142 calculates the value of the cross-correlation function for the overlapping portion by shifting the other sound data by one unit time on the time axis with respect to one sound data, and the value is the maximum. If the value is taken, it is determined that the two sound data are synchronized. FIG. 5 is a diagram schematically illustrating a configuration of content data generated by the synchronization processing unit 142.

モーションシミュレータ11(図1参照)は、床面上に乗せ置かれるモーションベース111と、モーションベース111の上に乗せ置かれる座具112と、座具112の中に収容されるように配置されたスピーカ113と、仮想体験者が頭部に装着するヘッドマウントディスプレイ114と、ヘッドマウントディスプレイ114が自装置の方向を計測するために用いられる赤外線を発光する発光ユニット115と、仮想体験者(又はその補助者)がモーションシミュレータ11に対し各種指示(コンテンツデータの選択指示等)を与えるための操作装置116と、モーションシミュレータ11の動作を制御する制御ユニット117を備える。   The motion simulator 11 (see FIG. 1) is arranged to be housed in the motion base 111 placed on the floor, the sitting tool 112 placed on the motion base 111, and the sitting tool 112. A speaker 113, a head-mounted display 114 worn by the virtual experience person on the head, a light-emitting unit 115 that emits infrared rays used by the head-mounted display 114 to measure the direction of the own apparatus, and the virtual experience person An assistant device) includes an operation device 116 for giving various instructions (content data selection instruction or the like) to the motion simulator 11, and a control unit 117 for controlling the operation of the motion simulator 11.

座具112は、開口部が設けられた中空の球形又は卵形の収容部を有する。収容部の開口部は、仮想体験者が身体の少なくとも一部を出し入れするために用いられる。通常、仮想体験者は、脚部を除く全身が座具112の収容部に覆われた状態で座具112の上に座って、モーションシミュレータ11による仮想体験を行う。   The sitting tool 112 has a hollow spherical or egg-shaped receiving portion provided with an opening. The opening part of the accommodating part is used for the virtual experience person to put in and out at least a part of the body. Usually, the virtual experience person sits on the sitting tool 112 in a state where the whole body except the leg part is covered with the housing part of the sitting tool 112 and performs the virtual experience by the motion simulator 11.

座具112が有する収容部は、球形又は卵形をしているため、座具112に座った仮想体験者の耳に届く外部の騒音を大幅に低減することができる。そのため、モーションシミュレータ11においては、仮想体験者はヘッドホンを装着する必要がなく、座具112の収容部の中に配置されたスピーカ113から発せされる音を聴くことで、仮想体験を行うことができる。   Since the housing portion of the sitting tool 112 has a spherical shape or an egg shape, external noise reaching the ear of the virtual experience person sitting on the sitting tool 112 can be greatly reduced. Therefore, in the motion simulator 11, the virtual experience person does not need to wear headphones, and can perform a virtual experience by listening to the sound emitted from the speaker 113 arranged in the housing portion of the sitting tool 112. it can.

ヘッドマウントディスプレイ114は前面に、複数の受光部を有する。これらの発光部は各々、発光ユニット115から発光された赤外線を受光する。ヘッドマウントディスプレイ114は、複数の受光部の各々の赤外線の受光状態に基づき、発光ユニット115を基準位置とする自装置の方向を計測し、計測した方向を示す方向データを制御ユニット117に送信する。発光ユニット115は、ヘッドマウントディスプレイ114に向けて赤外線を発光する。   The head mounted display 114 has a plurality of light receiving portions on the front surface. Each of these light emitting units receives infrared light emitted from the light emitting unit 115. The head mounted display 114 measures the direction of its own apparatus with the light emitting unit 115 as a reference position based on the infrared light receiving state of each of the plurality of light receiving units, and transmits direction data indicating the measured direction to the control unit 117. . The light emitting unit 115 emits infrared light toward the head mounted display 114.

制御ユニット117のハードウェアはプログラムに従いデータを処理するプロセッサ、プロセッサにより用いられるプログラム及びデータを記憶するメモリ、外部の装置とデータの送受信を行う通信インタフェースを備えるコンピュータである。   The hardware of the control unit 117 is a computer including a processor that processes data according to a program, a memory that stores a program and data used by the processor, and a communication interface that transmits and receives data to and from an external device.

図6は、制御ユニット117の機能構成を示した図である。すなわち、コンピュータが本実施形態に係る制御ユニット用のプログラムに従う処理を行うことにより、図6に示す構成部を備える制御ユニット117が実現される。以下に制御ユニット117が備える機能構成を説明する。   FIG. 6 is a diagram illustrating a functional configuration of the control unit 117. That is, when the computer performs processing according to the program for the control unit according to the present embodiment, the control unit 117 including the components illustrated in FIG. 6 is realized. A functional configuration provided in the control unit 117 will be described below.

記憶部1170は、各種データを記憶する。受信部1171は、サーバ装置14からコンテンツデータを受信する。受信部1172は、ヘッドマウントディスプレイ114からヘッドマウントディスプレイ114の方向を示す方向データを受信する。   The storage unit 1170 stores various data. The receiving unit 1171 receives content data from the server device 14. The receiving unit 1172 receives direction data indicating the direction of the head mounted display 114 from the head mounted display 114.

制御データ生成部1173は、受信部1171により受信され記憶部1170に記憶されるコンテンツデータに含まれるモーションデータに基づき、モーションベース111が備える3つのアクチュエータ(後述)の各々の搬送方向及び搬送量を示す制御データを生成し、生成した制御データをモーションベース111に出力する。   Based on the motion data included in the content data received by the reception unit 1171 and stored in the storage unit 1170, the control data generation unit 1173 determines the conveyance direction and conveyance amount of each of three actuators (described later) included in the motion base 111. Control data to be generated is generated, and the generated control data is output to the motion base 111.

音再生部1174は、受信部1171により受信され記憶部1170に記憶されるコンテンツデータに含まれる音データをスピーカ113に出力する。スピーカ113は音再生部1174から入力される音データが表す音を発音する。   The sound reproducing unit 1174 outputs sound data included in content data received by the receiving unit 1171 and stored in the storage unit 1170 to the speaker 113. The speaker 113 generates a sound represented by the sound data input from the sound reproduction unit 1174.

動画再生部1175は、受信部1171により受信され記憶部1170に記憶されるコンテンツデータに含まれる動画データのうち、受信部1172により受信され記憶部1170に記憶される方向データが示す方向に応じた領域の画像データを、ヘッドマウントディスプレイ114に出力する。ヘッドマウントディスプレイ114は、動画再生部1175から入力される動画データが表す画像を表示する。   The moving image reproduction unit 1175 corresponds to the direction indicated by the direction data received by the receiving unit 1172 and stored in the storage unit 1170 among the moving image data included in the content data received by the receiving unit 1171 and stored in the storage unit 1170. The image data of the area is output to the head mounted display 114. The head mounted display 114 displays an image represented by the moving image data input from the moving image playback unit 1175.

図7は、モーションシミュレータ11が備えるモーションベース111及び座具112の外観を示した図である。モーションベース111は、外部から容易に見える構成部として、基底部1111と、基底部1111に取り付けられた3個のアクチュエータに取り付けられて、座具112と連動して3次元方向に移動するフットレスト1112を備える。フットレスト1112は、座具112に座った仮想体験者が脚をその上に載せるための部材である。   FIG. 7 is a diagram showing the appearance of the motion base 111 and the sitting tool 112 provided in the motion simulator 11. The motion base 111 is a footrest 1112 that is attached to a base part 1111 and three actuators attached to the base part 1111 as a constituent part that can be easily seen from the outside, and moves in a three-dimensional direction in conjunction with the sitting tool 112. Is provided. The footrest 1112 is a member for a virtual experience person sitting on the sitting tool 112 to place a leg thereon.

図8は、フットレスト1112を取り除いた状態のモーションベース111の平面図である。図9及び図10は、フットレスト1112を取り除いた状態のモーションベース111を斜め上から見た図である。以下に、モーションベース111の主要な構成部(図8〜図10において符号の付されたもの)を説明する。   FIG. 8 is a plan view of the motion base 111 with the footrest 1112 removed. 9 and 10 are views of the motion base 111 in a state where the footrest 1112 is removed, as viewed obliquely from above. The main components of the motion base 111 (denoted by reference numerals in FIGS. 8 to 10) will be described below.

基底部1111は、床の上に乗せ置かれ、モーションベース111の基底を構成する箱体又はフレームである。基底部1111の底面の外縁の形状は正六角形である。この正六角形という形状は、基底部1111に取り付けられ、基底部1111が支持する駆動ユニットの数(3個)の2倍の辺を持つ正多角形であり、3個の駆動ユニットをバランスよく配置でき、同じ面積の他の多角形よりもモーションベース111に高い安定性をもたらす。また、同じ面積の円形又は楕円形よりも加工が容易である。   The base portion 1111 is a box or frame that is placed on the floor and forms the base of the motion base 111. The shape of the outer edge of the bottom surface of the base portion 1111 is a regular hexagon. This regular hexagonal shape is a regular polygon that is attached to the base 1111 and has a side that is twice the number of drive units (three) supported by the base 1111. The three drive units are arranged in a balanced manner. The motion base 111 is more stable than other polygons of the same area. Further, the processing is easier than the circular or elliptical shape having the same area.

アクチュエータ1113−1〜1113−3(以下、これらのアクチュエータを「アクチュエータ1113」と総称する)は、座具112を下方から3点で支持し、座具112に対する作用点の位置を個別に変化させることで、座具112を3次元方向に揺り動かす部材である。   Actuators 1113-1 to 1113-3 (hereinafter, these actuators are collectively referred to as “actuators 1113”) support the sitting tool 112 at three points from below, and individually change the position of the action point with respect to the sitting tool 112. This is a member that swings the sitting tool 112 in a three-dimensional direction.

連結ベース1114−1〜1114−3(以下、これらの連結ベースを「連結ベース1114」と総称する)は上下方向(図8の紙面に垂直な方向)に移動する部材であり、それらにアクチュエータ1113−1〜1113−3が連結されている。連結ベース1114の移動に伴い、アクチュエータ1113が上下方向に駆動される。なお、連結ベース1114はアクチュエータ1113に対し、水平方向の軸周りに回転可能に連結されている。   The connection bases 1114-1 to 1114-3 (hereinafter, these connection bases are collectively referred to as “connection base 1114”) are members that move in the vertical direction (direction perpendicular to the paper surface of FIG. 8), and are connected to the actuator 1113. -1 to 1113-3 are connected. As the connection base 1114 moves, the actuator 1113 is driven in the vertical direction. The connection base 1114 is connected to the actuator 1113 so as to be rotatable around a horizontal axis.

モータ1115−1〜1115−3(以下、これらのモータを「モータ1115」と総称する)は、連結ベース1114−1〜1114−3の各々に応じて設けられ、対応する連結ベース1114を上下方向に移動させる駆動力の発生源の役割を果たす。   Motors 115-1 to 1115-3 (hereinafter, these motors are collectively referred to as “motors 1115”) are provided according to each of the connection bases 1114-1 to 1114-3, and the corresponding connection bases 1114 are moved in the vertical direction. Acts as a source of driving force to move

ボールネジ1116−1〜1116−3(以下、これらのボールネジを「ボールネジ1116」と総称する)は、連結ベース1114−1〜1114−3の各々に応じて設けられ、対応する連結ベース1114に上下方向(連結ベース1114の移動方向)に貫通するように設けられたネジ受け孔に受容された状態で回転し、対応する連結ベース1114を上下方向に移動させる。   Ball screws 1116-1 to 1116-3 (hereinafter, these ball screws are collectively referred to as “ball screws 1116”) are provided according to each of the connection bases 1114-1 to 1114-3, and the corresponding connection bases 1114 are vertically moved. It rotates in a state of being received in a screw receiving hole provided so as to penetrate through (the moving direction of the connecting base 1114), and the corresponding connecting base 1114 is moved in the vertical direction.

無端ベルト1117−1〜1117−3(以下、これらの無端ベルトを「無端ベルト1117」と総称する)は、連結ベース1114−1〜1114−3の各々に応じて設けられ、対応する連結ベース1114にモータ1115の駆動力を伝達する役割を果たす。   Endless belts 1117-1 to 1117-3 (hereinafter, these endless belts are collectively referred to as “endless belts 1117”) are provided according to each of the connection bases 1114-1 to 1114-3, and the corresponding connection bases 1114. It plays the role of transmitting the driving force of the motor 1115.

モータ1115、ボールネジ1116、無端ベルト1117は対応する連結ベース1114を上下方向に搬送する搬送機構を構成する。   The motor 1115, the ball screw 1116, and the endless belt 1117 constitute a transport mechanism that transports the corresponding connection base 1114 in the vertical direction.

ガイド部材1118−1〜1118−3(以下、これらのガイド部材を「ガイド部材1118」と総称する)は、連結ベース1114−1〜1114−3の各々に応じて設けられ、対応する連結ベース1114の上下方向における移動をガイドする役割を果たす2本のリニアガイドである。なお、図9及び図10において、ガイド部材1118−2及び1118−3は見えないため、それらの符号は記載されていない。ガイド部材1118を構成する2本のリニアガイドは、対応する連結ベース1114に取り付けられたスライドユニットに受容されている。   Guide members 1118-1 to 1118-3 (hereinafter, these guide members are collectively referred to as “guide members 1118”) are provided according to each of the connection bases 1114-1 to 1114-3, and the corresponding connection bases 1114. These are two linear guides that play a role of guiding the movement in the vertical direction. In addition, in FIG.9 and FIG.10, since the guide members 1118-2 and 1118-3 are not visible, those codes | symbols are not described. Two linear guides constituting the guide member 1118 are received by a slide unit attached to the corresponding connection base 1114.

弾性部材1119−1〜1119−3(以下、これらの弾性部材を「弾性部材1119」と総称する)は、連結ベース1114−1〜1114−3の各々に応じて設けられ、対応する連結ベース1114に連結されたアクチュエータ1113に外部から与えられる所定量の荷重に抗する力を連結ベース1114に加える役割を果たす2本の弦巻バネである。ここで、所定量の荷重とは、座具112に平均的な体重の仮想体験者が座った状態でアクチュエータ1113が受ける荷重を意味する。なお、図8において、弾性部材1119−1〜1119−3は見えないため、それらの符号は記載されていない。また、図9及び図10において、弾性部材1119−2及び1119−3は見えないため、それらの符号は記載されていない。弾性部材1119を構成する2本の弦巻バネは、支持棒を内側に受容した状態で、連結ベース1114と基底部1111の底面との間に配置されている。   Elastic members 1119-1 to 1119-3 (hereinafter, these elastic members are collectively referred to as “elastic members 1119”) are provided according to each of the connection bases 1114-1 to 1114-3, and the corresponding connection bases 1114. The two coiled springs play a role of applying a force against a predetermined amount of load applied from the outside to the actuator 1113 connected to the connection base 1114. Here, the predetermined amount of load means a load received by the actuator 1113 in a state where a virtual experience person having an average weight is sitting on the sitting tool 112. In addition, in FIG. 8, since the elastic members 1119-1 to 1119-3 are not visible, those symbols are not described. Moreover, in FIG.9 and FIG.10, since the elastic members 1119-2 and 1119-3 are not visible, those codes | symbols are not described. The two string springs constituting the elastic member 1119 are disposed between the connection base 1114 and the bottom surface of the base portion 1111 in a state where the support rod is received inside.

図9は、アクチュエータ1113−1〜1113−3が概ね最高位置に達した状態を示し、図10は、アクチュエータ1113−1〜1113−3が概ね最低位置に達した状態を示している。なお、モーションシミュレータ11の運転が行われる間、アクチュエータ1113−1〜1113−3は各々、個別に移動するため、アクチュエータ1113−1〜1113−3の高さ方向の位置は必ずしも一致しない。   FIG. 9 shows a state where the actuators 1113-1 to 1113-3 have almost reached the highest position, and FIG. 10 shows a state where the actuators 1113-1 to 1113-3 have almost reached the lowest position. In addition, since the actuators 1113-1 to 1113-3 move individually while the operation of the motion simulator 11 is performed, the positions of the actuators 1113-1 to 1113-3 do not necessarily match.

図11及び図12は、3つの連結ベース1114の1つとその周辺の部材を示した図である。図11は図9に対応し、図12は図10に対応している。   11 and 12 are views showing one of the three connection bases 1114 and its peripheral members. 11 corresponds to FIG. 9, and FIG. 12 corresponds to FIG.

モータ1115−1〜1115−3の各々は、制御ユニット117の制御データ生成部1173から出力される制御データに従い駆動軸を回転する。モータ1115−1〜1115−3の各々の駆動軸が回転すると、その駆動力が無端ベルト1117−1〜1117−3によりボールネジ1116−1〜1116−3に伝達され、それらのボールネジ1116が回転する。ボールネジ1116−1〜1116−3が回転すると、連結ベース1114−1〜1114−3が上下方向に移動する。連結ベース1114−1〜1114−3の上下方向の移動に伴い、アクチュエータ1113−1〜1113−3が上下方向に移動する。その結果、座具112が揺り動かされ、座具112に座っている仮想体験者は、実体験者が体験した重力の変化等を追体験することができる。   Each of the motors 115-1 to 1115-3 rotates the drive shaft in accordance with control data output from the control data generation unit 1173 of the control unit 117. When the driving shafts of the motors 115-1 to 1115-3 rotate, the driving force is transmitted to the ball screws 1116-1 to 1116-3 by the endless belts 1117-1 to 1117-3, and the ball screws 1116 rotate. . When the ball screws 1116-1 to 1116-3 rotate, the connection bases 1114-1 to 1114-3 move in the vertical direction. As the coupling bases 1114-1 to 1114-3 move in the vertical direction, the actuators 1113-1 to 1113-3 move in the vertical direction. As a result, the sitting tool 112 is swung, and the virtual experience person sitting on the sitting tool 112 can relive the gravity change experienced by the real experience person.

仮想体験システム1によれば、実体験者の体験を、仮想体験者が追体験することができる。また、サーバ装置14が、スマートフォン12及びカメラ13からサーバ装置14へ音付きモーションデータ及び音付き動画データを受信すると速やかにそれらの同期処理を行ってコンテンツデータを生成し、生成したコンテンツデータを速やかにモーションシミュレータ11へ送信すれば、仮想体験者は実体験者の体験を実質的にリアルタイムに追体験することができる。   According to the virtual experience system 1, the virtual experience person can relive the experience of the real experience person. Further, when the server device 14 receives the motion data with sound and the moving image data with sound from the smartphone 12 and the camera 13 to the server device 14, the server device 14 immediately performs synchronization processing to generate content data, and the generated content data is quickly If transmitted to the motion simulator 11, the virtual experience person can relive the experience of the real experience person substantially in real time.

[変形例]
上述した仮想体験システム1は本発明の技術的思想の範囲内で様々に変形され得る。以下にそれらの変形の例を示す。以下に示す複数の変形例の2以上が適宜、組み合わされてもよい。
[Modification]
The virtual experience system 1 described above can be variously modified within the scope of the technical idea of the present invention. Examples of these modifications are shown below. Two or more of the following modified examples may be combined as appropriate.

(1)仮想体験システム1が、ヘッドマウントディスプレイ114に表示される画像又はその一部を同時に表示するディスプレイを備えてもよい。この場合、仮想体験者以外の人が、仮想体験者が見ている画像又はその一部を同時に見ることができる。 (1) The virtual experience system 1 may include a display that simultaneously displays an image displayed on the head mounted display 114 or a part thereof. In this case, a person other than the virtual experiencer can simultaneously view the image or part of the image viewed by the virtual experiencer.

(2)カメラ13の画角は広い方が望ましいが、必ずしも360度の全天球方向に限られない。 (2) Although it is desirable that the angle of view of the camera 13 is wide, it is not necessarily limited to the 360-degree omnidirectional direction.

(3)スマートフォン12とカメラ13が1つの装置に統合されていてもよい。例えば、スマートフォン12が備えるカメラがカメラ13として用いられてもよい。 (3) The smartphone 12 and the camera 13 may be integrated into one device. For example, a camera included in the smartphone 12 may be used as the camera 13.

(4)音付きモーションデータと音付き動画データを同期させてコンテンツデータを生成する処理は、必ずしもサーバ装置14において行われなくてもよい。例えば、サーバ装置14の同期処理部142が行うものとした処理が、スマートフォン12又はモーションシミュレータ11の制御ユニット117において行われてもよい。 (4) The process of generating content data by synchronizing motion data with sound and moving image data with sound does not necessarily have to be performed in the server device 14. For example, the processing performed by the synchronization processing unit 142 of the server device 14 may be performed in the control unit 117 of the smartphone 12 or the motion simulator 11.

(5)スマートフォン12とカメラ13の内部時計を同期させておき、同期処理部142が、音付きモーションデータと音付き動画データに伴う時刻データに基づきそれらのデータを同期させて、コンテンツデータを生成してもよい。 (5) The smartphone 12 and the internal clock of the camera 13 are synchronized, and the synchronization processing unit 142 synchronizes the data based on the time data associated with the motion data with sound and the moving image data with sound to generate content data. May be.

(6)スマートフォン12からサーバ装置14への音付きモーションデータの送信に要する平均的な時間と、カメラ13からサーバ装置14への音付き動画データの送信に要する平均的な時間の差だけ、いずれかの装置からサーバ装置14へのデータの送信を遅延させることにより、サーバ装置14が音付きモーションデータと音付き動画データを受信するタイミングを概ね同期させてもよい。インターネット9の通信状態が安定していれば、サーバ装置14がそれらのデータを受信したタイミングによって、それらのデータを同期させることができる。 (6) Only the difference between the average time required to transmit motion data with sound from the smartphone 12 to the server device 14 and the average time required to transmit moving image data with sound from the camera 13 to the server device 14 By delaying the transmission of data from such a device to the server device 14, the timing at which the server device 14 receives the motion data with sound and the moving image data with sound may be substantially synchronized. If the communication state of the Internet 9 is stable, the data can be synchronized according to the timing at which the server device 14 receives the data.

(7)スマートフォン12とカメラ13が連動し、音と動画とモーションを同時に記録して、コンテンツデータを生成する構成が採用されてもよい。この場合、音付きモーションデータと音付き動画データを同期させてコンテンツデータを生成する処理は不要である。 (7) A configuration may be employed in which the smartphone 12 and the camera 13 work together to record sound, a moving image, and motion at the same time to generate content data. In this case, processing for generating content data by synchronizing motion data with sound and moving image data with sound is unnecessary.

(8)コンテンツデータに含まれる音データが、3チャンネル以上のサラウンド音を示し、サラウンド音の再生が可能なスピーカ113を用いることにより、ヘッドマウントディスプレイ114の方向の変化に伴い、スピーカ113により再生される音の方向を変化させてもよい。この場合、音再生部1174が、方向データに基づき、スピーカ113に出力する音データの調整を行う。 (8) The sound data included in the content data indicates surround sound of 3 channels or more, and the speaker 113 capable of reproducing the surround sound is used, so that the sound is reproduced by the speaker 113 as the direction of the head mounted display 114 changes. The direction of the sound to be played may be changed. In this case, the sound reproduction unit 1174 adjusts the sound data output to the speaker 113 based on the direction data.

(9)スピーカ113に代えて、仮想体験者が装着するヘッドホンが用いられてもよい。 (9) Instead of the speaker 113, headphones worn by the virtual experience person may be used.

(10)座具112の形状は球形又は卵形に限られない。 (10) The shape of the sitting tool 112 is not limited to a spherical shape or an oval shape.

(11)ヘッドマウントディスプレイ114の方向を計測する方式は上述したものに限られない。例えば、ヘッドマウントディスプレイ114に取り付けられた慣性航法装置がヘッドマウントディスプレイ114の方向を計測してもよい。 (11) The method of measuring the direction of the head mounted display 114 is not limited to the one described above. For example, an inertial navigation device attached to the head mounted display 114 may measure the direction of the head mounted display 114.

(12)モーションベース111が備えるアクチュエータ1113の数は3個に限られず、4以上のいずれの数でもよい。 (12) The number of actuators 1113 included in the motion base 111 is not limited to three, and may be any number of four or more.

(13)基底部1111の底面の外縁の形状は、アクチュエータ1113の数の2倍の辺を持つ正多角形に限られない。例えば、アクチュエータ1113の数の3倍の辺を持つ正多角形であってもよい。 (13) The shape of the outer edge of the bottom surface of the base portion 1111 is not limited to a regular polygon having a side twice the number of actuators 1113. For example, a regular polygon having three times the number of actuators 1113 may be used.

(14)モーションベース111が備える搬送機構は、ボールネジ1116を用いるものに限られない。例えば、モータ1115により駆動される搬送ベルトやギアにより連結ベース1114を移動させる搬送機構が採用されてもよい。 (14) The transport mechanism included in the motion base 111 is not limited to the one using the ball screw 1116. For example, a transport mechanism that moves the coupling base 1114 by a transport belt or gear driven by the motor 1115 may be employed.

(15)弾性部材1119は弦巻バネに限られず、他の種類のバネや、ゴム製の部材等が弾性部材1119として採用されてもよい。 (15) The elastic member 1119 is not limited to the string spring, and other types of springs, rubber members, or the like may be employed as the elastic member 1119.

(16)モータ1115に代えて、油圧シリンダ等の他の種類の駆動源が用いられてもよい。 (16) Instead of the motor 1115, another type of drive source such as a hydraulic cylinder may be used.

(17)ガイド部材1118はリニアガイドに限られない。例えば、連結ベース1114の外側面上に上下方向に延伸するように設けられた溝と噛み合うように、基底部1111の内側面上に上下方向に延伸するように設けられたレール形状の部材(ベアリングを備えない)が、ガイド部材1118として採用されてもよい。 (17) The guide member 1118 is not limited to a linear guide. For example, a rail-shaped member (bearing) provided so as to extend vertically on the inner surface of the base portion 1111 so as to engage with a groove provided so as to extend vertically on the outer surface of the coupling base 1114. May be employed as the guide member 1118.

(18)図7〜図11に示したモーションシミュレータ11の形状は例示であって、その形状は様々に変更されてよい。 (18) The shape of the motion simulator 11 shown in FIGS. 7 to 11 is an example, and the shape may be variously changed.

(19)カメラ13はストリーミングサーバ装置の機能を内蔵するものとしたが、カメラ13により生成される音付き動画データをサーバ装置14に送信するストリーミングサーバ装置がカメラ13と異なる装置として提供されてもよい。また、スマートフォン12がカメラ13から音付き動画データを受信し、サーバ装置14に転送してもよい。 (19) Although the camera 13 includes the function of the streaming server device, the streaming server device that transmits the moving image data with sound generated by the camera 13 to the server device 14 may be provided as a device different from the camera 13. Good. Alternatively, the smartphone 12 may receive the moving image data with sound from the camera 13 and transfer it to the server device 14.

(20)仮想体験システム1がサーバ装置14を備えず、制御ユニット117がサーバ装置14の機能を備えてもよい。 (20) The virtual experience system 1 may not include the server device 14, and the control unit 117 may include the function of the server device 14.

1…仮想体験システム、9…インターネット、11…モーションシミュレータ、12…スマートフォン、13…カメラ、14…サーバ装置、111…モーションベース、112…座具、113…スピーカ、114…ヘッドマウントディスプレイ、115…発光ユニット、116…操作装置、117…制御ユニット、140…記憶部、141…受信部、142…同期処理部、143…送信部、1111…基底部、1112…フットレスト、1113…アクチュエータ、1114…連結ベース、1115…モータ、1116…ボールネジ、1117…無端ベルト、1118…ガイド部材、1119…弾性部材、1170…記憶部、1171…受信部、1172…受信部、1173…制御データ生成部、1174…音再生部、1175…動画再生部。   DESCRIPTION OF SYMBOLS 1 ... Virtual experience system, 9 ... Internet, 11 ... Motion simulator, 12 ... Smartphone, 13 ... Camera, 14 ... Server apparatus, 111 ... Motion base, 112 ... Seating tool, 113 ... Speaker, 114 ... Head mounted display, 115 ... Light-emitting unit 116 ... Operating device 117 ... Control unit 140 ... Storage unit 141 ... Receiving unit 142 ... Synchronization processing unit 143 ... Transmission unit 1111 ... Base unit 1112 ... Footrest 1113 ... Actuator 1114 ... Connection Base, 1115 ... motor, 1116 ... ball screw, 1117 ... endless belt, 1118 ... guide member, 1119 ... elastic member, 1170 ... storage unit, 1171 ... receiving unit, 1172 ... receiving unit, 1173 ... control data generating unit, 1174 ... sound Playback unit, 1175 ... Movie playback unit

Claims (7)

モーションベースのアクチュエータが連結される連結ベースと、
前記連結ベースの所定方向における移動をガイドするガイド部材と、
前記アクチュエータに外部から与えられる所定量の荷重に抗する力を前記連結ベースに加えるように配置された弾性部材と、
前記連結ベースを前記所定方向に搬送する搬送機構と
を備えるモーションベースのアクチュエータの駆動ユニット。
A connection base to which a motion-based actuator is connected;
A guide member for guiding movement of the connection base in a predetermined direction;
An elastic member arranged to apply a force against the connection base to a predetermined amount of load applied to the actuator from the outside;
A motion-based actuator drive unit comprising: a transport mechanism that transports the connection base in the predetermined direction.
前記連結ベースは、前記所定方向に貫通するように設けられたネジ受け孔を有し、
前記搬送機構は、モータと、前記モータにより軸周りに回転され、前記ネジ受け孔に受容されたボールネジを有する
請求項1に記載の駆動ユニット。
The connection base has a screw receiving hole provided so as to penetrate in the predetermined direction,
The drive unit according to claim 1, wherein the transport mechanism includes a motor and a ball screw that is rotated around an axis by the motor and received in the screw receiving hole.
請求項1又は2に記載の駆動ユニットを3以上と、
前記3以上の駆動ユニットの各々に連結された3以上のアクチュエータと、
前記3以上の駆動ユニットの各々の前記搬送機構の搬送を制御する制御ユニットと、
床の上に乗せ置かれ、外縁の形状が前記駆動ユニットの個数の自然数倍の辺を持つ多角形である底面を有し、前記3以上の駆動ユニットを支持する基底部と
を備えるモーションベース。
3 or more drive units according to claim 1 or 2,
Three or more actuators coupled to each of the three or more drive units;
A control unit for controlling conveyance of the conveyance mechanism of each of the three or more drive units;
A motion base comprising: a base that is placed on the floor and has a bottom surface whose outer edge is a polygon having sides that are a natural number multiple of the number of the drive units; and a base that supports the three or more drive units. .
前記駆動ユニットの数が3である
請求項3に記載のモーションベース。
The motion base according to claim 3, wherein the number of drive units is three.
請求項3又は4に記載のモーションベースと、
前記モーションベースの前記3以上のアクチュエータにより下方から支持され、ユーザが身体の少なくとも一部を出し入れするための開口部が設けられ、ユーザの身体の少なくとも一部を収容する中空の球形又は卵形の収容部を有する座具と、
前記収容部に収容されるスピーカと
を備えるモーションシミュレータ。
The motion base according to claim 3 or 4,
A hollow spherical or oval shape that is supported from below by the three or more actuators of the motion base and that is provided with an opening for a user to put in and out at least a part of the body and accommodates at least a part of the user's body A sitting tool having a receiving portion;
A motion simulator comprising: a speaker housed in the housing portion.
ユーザの外界の風景を継続的に撮影して得られる動画データと、当該撮影と同時に当該ユーザの外界の音を継続的に録音して得られる第1の音データとを含み、前記動画データと前記第1の音データを時間軸上で対応付けたデータである音付き動画データと、当該ユーザのモーションを継続的に計測して得られるモーションデータと、当該計測と同時に当該ユーザの外界の音を継続的に録音して得られる第2の音データとを含み、前記モーションデータと前記第2の音データを時間軸上で対応付けたデータである音付きモーションデータとを取得する取得手段と、
前記音付き動画データに含まれる前記第1の音データと、前記音付きモーションデータに含まれる前記第2の音データの相互相関関数の値に基づき、前記音付き動画データと前記音付きモーションデータの時間軸上の対応付けを行う同期処理手段と
を備えるモーションシミュレータ用のデータの生成装置。
Moving image data obtained by continuously photographing a user's external landscape, and first sound data obtained by continuously recording the user's external sound simultaneously with the photographing, Sound-added moving image data that is data in which the first sound data is associated on the time axis, motion data obtained by continuously measuring the user's motion, and sound of the user's external environment simultaneously with the measurement Second sound data obtained by continuously recording the sound data, and obtaining means for obtaining motion data with sound, which is data in which the motion data and the second sound data are associated on the time axis; ,
Based on the value of the cross-correlation function of the first sound data included in the moving image data with sound and the second sound data included in the motion data with sound, the moving image data with sound and the motion data with sound A data generation device for a motion simulator, comprising: synchronization processing means for performing association on the time axis.
コンピュータに、
ユーザの外界の風景を継続的に撮影して得られる動画データと、当該撮影と同時に当該ユーザの外界の音を継続的に録音して得られる第1の音データとを含み、前記動画データと前記第1の音データを時間軸上で対応付けたデータである音付き動画データと、当該ユーザのモーションを継続的に計測して得られるモーションデータと、当該計測と同時に当該ユーザの外界の音を継続的に録音して得られる第2の音データとを含み、前記モーションデータと前記第2の音データを時間軸上で対応付けたデータである音付きモーションデータとを取得する処理と、
前記音付き動画データに含まれる前記第1の音データと、前記音付きモーションデータに含まれる前記第2の音データの相互相関関数の値に基づき、前記音付き動画データと前記音付きモーションデータの時間軸上の対応付けを行う処理と
を実行させるためのプログラム。
On the computer,
Moving image data obtained by continuously photographing a user's external landscape, and first sound data obtained by continuously recording the user's external sound simultaneously with the photographing, Sound-added moving image data, which is data in which the first sound data is associated on the time axis, motion data obtained by continuously measuring the user's motion, and sound of the user's external environment simultaneously with the measurement A second sound data obtained by continuously recording the sound data, and a process of obtaining motion data with sound, which is data in which the motion data and the second sound data are associated on the time axis,
Based on the value of the cross-correlation function of the first sound data included in the moving image data with sound and the second sound data included in the motion data with sound, the moving image data with sound and the motion data with sound A program for executing the process of associating on the time axis.
JP2018074254A 2018-04-06 2018-04-06 Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor Pending JP2019184774A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018074254A JP2019184774A (en) 2018-04-06 2018-04-06 Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018074254A JP2019184774A (en) 2018-04-06 2018-04-06 Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor

Publications (1)

Publication Number Publication Date
JP2019184774A true JP2019184774A (en) 2019-10-24

Family

ID=68340942

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018074254A Pending JP2019184774A (en) 2018-04-06 2018-04-06 Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor

Country Status (1)

Country Link
JP (1) JP2019184774A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220105513A (en) * 2021-01-20 2022-07-27 동명대학교산학협력단 Simulation system for voyage and method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07199788A (en) * 1993-12-28 1995-08-04 Hitachi Denshi Ltd Simulator swing device
JP2004024299A (en) * 2002-06-21 2004-01-29 Kawada Kogyo Kk Motion base
JP2008191065A (en) * 2007-02-07 2008-08-21 Kyoei Seisakusho:Kk Motion base
US9916011B1 (en) * 2015-08-22 2018-03-13 Bertec Corporation Force measurement system that includes a force measurement assembly, a visual display device, and one or more data processing devices

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07199788A (en) * 1993-12-28 1995-08-04 Hitachi Denshi Ltd Simulator swing device
JP2004024299A (en) * 2002-06-21 2004-01-29 Kawada Kogyo Kk Motion base
JP2008191065A (en) * 2007-02-07 2008-08-21 Kyoei Seisakusho:Kk Motion base
US9916011B1 (en) * 2015-08-22 2018-03-13 Bertec Corporation Force measurement system that includes a force measurement assembly, a visual display device, and one or more data processing devices

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220105513A (en) * 2021-01-20 2022-07-27 동명대학교산학협력단 Simulation system for voyage and method thereof
KR102594364B1 (en) * 2021-01-20 2023-10-25 동명대학교산학협력단 Simulation system for voyage and method thereof

Similar Documents

Publication Publication Date Title
AU2021250896B2 (en) Mixed reality system with spatialized audio
US20240078770A1 (en) Immersive virtual display
CN106029190B (en) Methods of operating devices, especially amusement rides, vehicles, fitness equipment, etc.
EP4691825A2 (en) Immersive virtual display
US20180104578A1 (en) Controlled dynamic multi-axis virtual reality system
US20180247453A1 (en) Information processing method and apparatus, and program for executing the information processing method on computer
CN109997097A (en) Information processing unit, information processing method and computer program
JP6613429B2 (en) Audiovisual playback device
JP6712423B2 (en) Simulation system
JPWO2017022635A1 (en) Figures and figure systems
US20190353298A1 (en) Actuator apparatus
CN112106020B (en) Method and apparatus for sound processing of synthetic reality scenes
US20220139050A1 (en) Augmented Reality Platform Systems, Methods, and Apparatus
JP2019184774A (en) Drive unit, motion base, motion simulator, device for generating data for motion simulator and program therefor
KR101922677B1 (en) Experience apparatus
US11168768B1 (en) Collaborative shear display
JP2018129692A (en) Head mounted display device and simulation system
JP2019202061A (en) Simulation system and program
JP2021174253A (en) Pseudo experience system
JP2017188827A (en) Simulation system
JP6944921B2 (en) Structures that change appearance in real time
KR20170011210A (en) Smartphone Federated virtual experience system and method which has a bearing structure of a six-axis rotating body
Okun et al. VR/AR (Virtual Reality/Augmented Reality)
NZ750048B2 (en) Mixed reality system with spatialized audio
WO2018002969A1 (en) Vr amusement apparatus

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180411

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190410

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190410

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190423

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190507

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20191029