CN106338828A - 车载增强现实系统、方法和设备 - Google Patents
车载增强现实系统、方法和设备 Download PDFInfo
- Publication number
- CN106338828A CN106338828A CN201610795113.4A CN201610795113A CN106338828A CN 106338828 A CN106338828 A CN 106338828A CN 201610795113 A CN201610795113 A CN 201610795113A CN 106338828 A CN106338828 A CN 106338828A
- Authority
- CN
- China
- Prior art keywords
- information
- module
- vehicle
- glasses device
- glasses
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B30/00—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
- G02B30/20—Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
- G02B30/34—Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
-
- G—PHYSICS
- G02—OPTICS
- G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
- G02C11/00—Non-optical adjuncts; Attachment thereof
- G02C11/10—Electronic devices other than hearing aids
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
- G02B2027/0134—Head-up displays characterised by optical features comprising binocular systems of stereoscopic type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0181—Adaptation to the pilot/driver
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G02—OPTICS
- G02F—OPTICAL DEVICES OR ARRANGEMENTS FOR THE CONTROL OF LIGHT BY MODIFICATION OF THE OPTICAL PROPERTIES OF THE MEDIA OF THE ELEMENTS INVOLVED THEREIN; NON-LINEAR OPTICS; FREQUENCY-CHANGING OF LIGHT; OPTICAL LOGIC ELEMENTS; OPTICAL ANALOGUE/DIGITAL CONVERTERS
- G02F1/00—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics
- G02F1/01—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour
- G02F1/13—Devices or arrangements for the control of the intensity, colour, phase, polarisation or direction of light arriving from an independent light source, e.g. switching, gating or modulating; Non-linear optics for the control of the intensity, phase, polarisation or colour based on liquid crystals, e.g. single liquid crystal display cells
- G02F1/133—Constructional arrangements; Operation of liquid crystal cells; Circuit arrangements
- G02F1/136—Liquid crystal cells structurally associated with a semi-conducting layer or substrate, e.g. cells forming part of an integrated circuit
- G02F1/1362—Active matrix addressed cells
- G02F1/136277—Active matrix addressed cells formed on a semiconductor substrate, e.g. of silicon
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Ophthalmology & Optometry (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Acoustics & Sound (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
公开了一种车载增强现实系统、方法和设备。该系统包括供用户佩戴的眼镜设备和安装在车辆上的车体设备。眼镜设备包括接收模块和投影显示模块。接收模块用于从车体设备接收信息,投影显示模块用于对从车体设备接收的信息进行投影或显示以使用户观看该信息。车体设备包括运动跟踪模块、信息采集模块、处理模块和通信模块,其中运动跟踪模块确定眼镜设备的方位,信息采集模块采集与车辆有关的信息,处理模块根据眼镜设备的方位从信息采集模块采集的信息中确定需要向眼镜设备提供的信息,通信模块向眼镜设备发送所确定的信息。本公开的系统、方法和设备可以实现如下至少一个技术效果:节省空间、没有可视区域限制、轻量化、提供透视的显示效果。
Description
技术领域
本公开的实施例涉及信息技术,更具体地涉及车载增强现实系统、方法和设备。
背景技术
近年来,随着电子技术和图像处理技术的飞速发展,视觉系统广泛地应用于各种行业。例如,在交通行业中,抬头显示器可以为驾驶员提供更加丰富的信息以保障驾驶安全,但也具有明显的缺点:例如,抬头显示装置占据大量的车内空间,必将以牺牲乘员空间为代价;抬头显示装置相对车体固定,可视区域固定,且在车辆颠簸状态下,相对于观察者而言,图像将产生明显的抖动;抬头显示装置的前装设备需要与挡风玻璃匹配,工程难度大,抬头显示装置的后装设备受限于空间显示,显示区域较小,人机工效较差等。
消费市场的增强现实眼镜的显示系统相对成熟,但受到穿戴式小型设备的计算能力、运动捕捉能力等的限制,应用场景有限;同时,受到耗电量与电池电量的制约,续航时间与电源体积难以平衡。一般而言,增强现实眼镜作为便携式设备仍较为笨重,个人使用体验不佳,并且也不适用于车载环境。
因此,需要一种改进的车载增强现实解决方案。
发明内容
根据本公开的一个方面,公开了一种车载增强现实系统。所述车载增强现实系统包括供用户佩戴的眼镜设备和安装在车辆上的车体设备,其中眼镜设备包括接收模块和投影显示模块,其中所述接收模块用于从车体设备接收信息,所述投影显示模块用于对从车体设备接收的信息进行投影或显示以使用户观看所述信息;车体设备包括运动跟踪模块、信息采集模块、处理模块和通信模块,其中运动跟踪模块用于确定所述眼镜设备的方位,信息采集模块用于采集与车辆有关的信息,处理模块用于根据所述眼镜设备的方位从所述信息采集模块采集的信息中确定需要向所述眼镜设备提供的信息,通信模块用于向所述眼镜设备发送所确定的信息。
在一个实施例中,所述眼镜设备的左眼部分和/或右眼部分具有所述投影显示模块。
在一个实施例中,所述投影显示模块包括微型LCoS显示装置以及虚像投影镜头,在所述眼镜设备的左眼部分和右眼部分都具有所述投影显示模块的情况下,所述眼镜设备能够向用户提供立体图像。
在一个实施例中,所述眼镜设备还包括以下至少之一:图像采集模块,其用于采集图像以供所述车体设备使用;运动侦测模块,其用于侦测所述眼镜设备的运动信息以供所述车体设备使用。
在一个实施例中,所述车体设备向所述眼镜设备供电。
在一个实施例中,所述信息采集模块包括以下至少之一:图像捕获模块,用于获取图像,运行数据采集装置,用于采集与车辆运行有关的数据,其中所述信息采集模块还通过所述通信模块从网络获取与车辆有关的信息。
在一个实施例中,所述图像捕获模块能够捕获车辆外部图像,当所述眼镜设备面向遮挡区域时,所述处理模块确定与所述眼镜设备的方位相对应的车辆外部图像,作为需要向所述眼镜设备提供的信息。
在一个实施例中,所述处理模块基于所述眼镜设备的图像采集模块采集的图像、和/或所述眼镜设备的运动侦测模块侦测的运动信息,来确定与所述眼镜设备的方位相对应的车辆外部图像。
在一个实施例中,所述运动跟踪模块通过以下之一来确定所述眼镜设备的方位:所述运动跟踪模块基于从所述图像捕获模块获取的所述眼镜设备的图像,确定所述眼镜设备的方位;所述运动跟踪模块基于从所述眼镜设备接收的所述眼镜设备的运动信息来确定所述眼镜设备的方位;或所述运动跟踪模块基于从所述眼镜设备接收的所述眼镜设备的运动信息和从所述图像捕获模块获取的所述眼镜设备的图像来确定所述眼镜设备的方位。
在一个实施例中,所述信息处理模块基于所述用户的指令向所述眼镜设备提供与所述指令相关的信息。
在一个实施例中,所述信息包括以下信息中的一个或多个信息:车辆状态信息、周围环境信息、路况信息、路径规划信息、推荐信息、提示信息。
本公开的第二方面提供了一种车载增强现实方法。所述方法包括:在用户佩戴的眼镜设备处,从车体设备接收与所述眼镜设备的方位相关联的信息;在用户佩戴的眼镜设备处,向所述用户显示/投影所述信息。
本公开的第三方面提供了一种车载增强现实的眼镜设备。所述眼镜设备包括投影显示模块,用于对从车体设备接收的信息进行投影或显示以使用户观看所述信息;其中所述眼镜设备还包括:接收模块,其用于从车体设备接收与所述眼镜设备的方位相关联的信息,所述投影显示模块还用于向所述用户显示/投影所述与眼镜设备的方位相关联的信息。
本公开的第四方面提供了一种车载增强现实方法。所述方法包括:在车体设备处,确定眼镜设备的方位,采集与车辆有关的信息,根据所述眼镜设备的方位从所述采集的信息中确定需要向所述眼镜设备提供的信息,以及向所述眼镜设备发送所确定的信息。
本公开的第五方面提供了一种车载增强现实的车体设备。所述车体设备包括运动跟踪模块、信息采集模块、处理模块和通信模块,其中所述运动跟踪模块用于确定所述眼镜设备的方位,所述信息采集模块用于采集与车辆有关的信息,所述处理模块用于根据所述眼镜设备的方位从所述信息采集模块采集的信息中确定需要向所述眼镜设备提供的信息,所述通信模块用于向所述眼镜设备发送所确定的信息。
以上所述的系统、方法和设备的一些实施例可以实现如下技术效果:节省空间、没有可视区域限制、轻量化。以上所述的系统、方法和设备的另一些实施例还可以提供透视的显示效果。
附图说明
现在参照附图,附图仅是示例性的并且未必按比例绘制,其中:
图1示意性地示出了根据本公开的示例实施例的车载增强现实系统的框图。
图2示意性地示出了根据本公开的实施例的眼镜设备的框图。
图3示意性地示出了根据本公开的实施例的眼镜设备的框图。
图4示意性地示出了根据本公开的实施例的车体设备的框图。
图5示出了根据本公开的实施例的车载增强现实方法的流程图。
图6示出了根据本公开的实施例的车载增强现实方法的流程图。
在附图中,为便于理解,已经使用相同或相似的标记指代基本上具有相同或类似结构和/或相同或类似功能的元件。
具体实施方式
下面参照附图描述本公开的实施例。在下面的描述中,阐述了许多具体细节以便使所属技术领域的技术人员更全面地了解和实现本公开。但是,对所属技术领域的技术人员明显的是,可以在不具有这些具体细节中的一些具体细节的情况下来实现本公开的实施例。此外,应当理解的是,本公开并不局限于所介绍的特定实施例。相反,可以考虑用下面所述的特征和要素的任意组合来实施本公开的实施例。因此,下面的方面、特征、实施例和优点仅作说明之用,而不应看作是权利要求的要素或限定,除非在权利要求中明确提出。
在全文中,相同的标记指相同的元素。如本文所使用的,词语“数据”、“内容”、“信息”以及类似的词语可交换地使用,以指依照本公开的实施例能够被传送、接收和/或存储的数据。因此,任何此类词语的使用不应当被认为是限制本公开的实施例的精神和范围。
另外,如本文所使用的,词语‘电路’指:(a)仅硬件电路实现方式(例如,在模拟电路和/或数字电路中的实现方式);(b)电路和计算机程序产品(多个)的组合,所述计算机程序产品(多个)包括:存储在一个或多个计算机可读存储器上的软件和/或固件指令,所述组合一起工作以使得装置执行本文描述的一个或多个功能;以及(c)要求用于运行的软件或固件的电路(诸如例如,微处理器(多个)或微处理器(多个)的一部分),即使所述软件或固件不是物理呈现的。‘电路’的这种定义应用于本文中(包括在任何权利要求中)的这个词语的所有使用。作为进一步示例,如本文所使用的,词语‘电路’还包含:包括一个或多个处理器和/或其部分(多个)并且伴随有软件和/或固件的实现方式。
需要注意的是,如本文中使用的词语“车载”并不仅限于汽车,而是可以涵盖可以使用本公开的实施例的任何系统和产品。例如,本公开的实施例可以应用于任何可以适用的机动车和/或非机动车,或其它应用环境等。
图1示意性地示出了根据本公开的实施例的车载增强现实系统100的框图。车载增强现实系统100可以包括供用户佩戴的眼镜设备110和安装在车辆上的车体设备120。眼镜设备110和车体设备120可以通过网络130通信。网络130可以是任何有线网络、无线网络或其组合。无线网络可以包括任何短距无线通信网络,例如车载无线网、WLAN、蓝牙网络等。有线网络可以包含但不限于:以太网、车辆有线网络,例如CAN总线或k_Line总线的车辆总线等。
眼镜设备110可以具有任何合适的形状和尺寸,并且可以以任何合适的方式来佩戴它。眼镜设备110可以具有两个透明或不完全透明的镜片。例如,眼镜的镜片可以与现有的、正在开发的或将来开发的常规眼镜的镜片相同,例如,眼镜的镜片可以是由玻璃、树脂等材料制成的。此外,眼镜镜片也可以被制作成显示器以用于向用户显示信息。此外,取决于应用场景或需求,两个镜片的结构或功能可以是相同的或不同的。作为示例,一个镜片可以是普通的镜片,而另一个镜片可以用作显示器或安装有显示器或投影器。作为另一个示例,两个镜片都可以用作显示器或安装有显示器或投影器,在这种情况下,眼镜设备110可以向用户提供立体图像。
图2示意性地示出了根据本公开的实施例的眼镜设备110的框图。参照图2,在一个实施例中,眼镜设备110包括接收模块180和投影显示模块112,其中接收模块180从车体设备接收信息,投影显示模块120对从车体设备接收的信息进行投影或显示以使用户观看所述信息。接收模块可以是能够从车体设备120接收信息的任何现有的、正在开发的或将来开发的接收装置。例如,可以使用任何可以适用的有线技术和/或无线技术来实现接收模块。眼镜设备的左眼部分(例如,左镜片)和/或右眼部分(例如,右镜片)可以具有投影显示模块。作为示例,投影显示模块可以安装在眼镜设备110的一个或两个镜片上,并且可以是微型显示器或微型投影机。例如,在投影显示模块112是显示器的情况下,它可以是独立的设备并且被安装在镜片上,或它可以与镜片集成在一起,例如,镜片的一部分或全部是显示器。作为另一个示例,在投影显示模块112是投影机的情况下,可以将它安装在一个或两个镜片上。在将投影显示模块112安装在两个镜片上的情况下,它可以包括两个独立的投影显示模块112。
投影显示模块112可以使用任何现有的、正在开发的或将来开发的任何可以适用的投影技术或显示技术以对信息进行投影和显示。
从车体设备接收的信息可以包括任何合适的信息。在一个实施例中,从车体设备接收的信息可以是以下信息中的一个或多个信息:车辆状态信息、周围环境信息、路况信息、路径规划信息、推荐信息、提示信息。例如,车辆状态信息可以包括车辆的速度、方向、加速度、油量、发动机工况、车体倾角等。周围环境信息可以包括周围车辆/行人分布情况、环境信息(例如,天气情况等)等。路况信息可以包括车辆自己采集的路况信息和/或从各种路况信息平台/系统获得的路况信息等。路径规划信息可以用于包括来自各种路况规划应用的路况规划信息。推荐信息可以是基于用户的偏好、位置、天气、环境、气候等而推荐的信息。推荐信息可以来自车辆自身的系统,或通过网络来获得推荐信息。提示信息可以包括各种合适的提示信息,例如危险提示、超速提示、速度过慢提示、交通违章提示、当前时间/天气提示、基于各种条件(例如,位置)的提示信息等。提示信息可以是来自车辆自身和/或网络的系统/应用的提示信息。
在其它实施例中,例如,取决于眼镜设备的应用场景和用户需求等,从车体设备接收的信息可以不同的。
在一个实施例中,投影显示模块112可以包括微型LCoS(Liquid Crystal onSilicon)显示装置以及虚像投影镜头,它们可以将从车体设备120接收的信息进行投影以使用户观看所述信息,例如将该信息投射到驾驶者前方一定距离的虚像。微型LCoS显示装置和虚像投影镜头可以是现有的、正在开发的或将来开发的任何合适的微型LCoS显示装置和虚像投影镜头。
在一个实施例中,在眼镜设备110的左眼部分和右眼部分都具有投影显示模块112的情况下,眼镜设备110能够向用户提供立体图像。例如,左眼部分的投影显示模块112和右眼部分的投影显示模块112可以分别显示/投射具有一定视差的图像以形成立体图像。
在一个实施例中,接收模块180可以从车体设备120接收与眼镜设备110的方位相关联的信息,投影显示模块112可以向用户显示/投影与眼镜设备110的方位相关联的信息。
在参照图1和图2所描述的实施例中,眼镜设备110可以仅具有投影显示模块112以及其它必要的元件,在这种情况下,可以减少眼镜设备110的元件的数量,使得它具有更好的便携性。
图3示意性地示出了根据本公开的实施例的眼镜设备110’的框图。参照图3,在一个实施例中,眼镜设备110’除了包括投影显示模块112和接收模块180之外,还包括以下至少之一:图像采集模块114,其采集图像以供车体设备120使用;运动侦测模块114,其侦测眼镜设备110’的运动信息以供车体设备120使用。
图像采集模块114可以是能够采集/获取图像的任何合适的设备,例如,它可以是图像传感器。图像采集模块114可以被放置在眼镜设备110’的任何合适的位置处。例如,图像采集模块114可以被放置在镜框、镜腿上,被放置在两个镜框的连接处,以及其它任何合适的位置。取决于应用场景和用户需求等,图像采集模块114可以采集任何合适的图像,例如眼镜设备前方、后方、侧方、上方、下方的图像。此外,图像采集模块114可以是一个或多个图像采集模块114。在一个实施例中,图像采集模块114可以采集眼镜设备110’的前方的图像以供车体设备120使用,例如车体设备120可以使用该图像确定眼镜设备120的视野/方位等。
运动侦测模块114可以包括任何合适的运动传感器,例如距离传感器、角度传感器、加速度计、微型陀螺仪、以及能够侦测运动信息的任何其它合适的传感器。眼镜设备的运动信息可以包括眼镜设备的至各参考物的距离、倾角、加速度等。运动侦测模块114可以将所获取的原始信息或处理后的信息提供给车体设备120。
此外,眼镜设备110’还可以包括通信装置(未示出),其与车体设备或其它设备通信。例如,图像采集模块所采集的图像和运动侦测模块所侦测的眼镜设备的运动信息可以通过通信装置传送给车体设备120或其它设备。另外,通信装置可以接收从车体设备或其它设备传送的信息,在这种情况下,通信装置可以包括接收模块180。
在参照图1和图3所描述的实施例中,眼镜设备110’除了具有投影显示模块112和接收模块180外,还可以具有图像采集模块114和运动侦测模块116。在这种情况下,与图2的实施例相比,虽然增加了眼镜设备110’的元件的数量,但是图像采集模块114和运动侦测模块116一般都可以做成微型元件,对眼镜设备110’的整体重量增加并不大,因此可以在不显著增加眼镜设备110’的重量的情况下,提供附加的功能。
在一个实施例中,眼镜设备110或110’可以没有电池设备,在这种情况下,车体设备可以向眼镜设备110或110’供电。在这个实施例中,可以进一步减少眼镜设备110或110’的元件的数量,使得它具有更好的便携性。然而,在其它实施例中,例如在车体设备120不便于向眼镜设备110或110’提供电力的情况下,眼镜设备110或110’也可以具有电池设备。
再次参照图1,车载增强现实系统110还可包括车体设备120。车体设备120一般可以设置在车辆或其它任何合适的设备上。作为示例,车体设备120可以设置在汽车上或与汽车上的任何合适的一个或多个设备集成。
图4示意性地示出了根据本公开的实施例的车体设备120的框图。参照图4,车体设备120可以包括运动跟踪模块122、信息采集模块124、处理模块126和通信模块128,其中运动跟踪模块122用于确定眼镜设备110的方位,信息采集模块124用于采集与车辆有关的信息,处理模块126用于根据眼镜设备110的方位从信息采集模块124采集的信息中确定需要向眼镜设备110提供的信息,通信模块128用于向眼镜设备110发送所确定的信息。
在一个实施例中,运动跟踪模块122可以根据现有的、正在开发的或将来开发的任何合适的运动跟踪技术来确定眼镜设备110的方位。例如,运动跟踪模块122可以根据眼镜设备110的图像采集模块传送的图像信息和/或运动侦测模块所侦测的眼镜设备110的运动信息,来确定眼镜设备的方位。此外,运动跟踪模块122也可以包括能够确定眼镜设备110的方位的运动传感器,例如距离传感器、图像传感器等来确定眼镜设备110的方位。在一个实施例中,运动跟踪模块122可以通过以下之一来确定眼镜设备110的方位:
1)运动跟踪模块122基于从车体设备的图像捕获模块获取的眼镜设备的图像,确定眼镜设备的方位。例如,运动跟踪模块122可以使用任何可以使用的图像处理技术,对所获取的例如来自不同角度和/或位置的图像进行处理来确定眼镜设备的方位,在这种情况下,眼镜设备可以没有运动传感器,从而降低成本并且改进眼镜设备的便携性;
2)运动跟踪模块122基于从眼镜设备接收的眼镜设备的运动信息来确定所述眼镜设备的方位。例如,如上所述,眼镜设备的运动侦测模块可以侦测眼镜设备的运动信息,从而运动跟踪模块122可以基于从眼镜设备接收的眼镜设备的运动信息来确定眼镜设备的方位,在这种情况下,运动跟踪模块122可以没有运动传感器,从而降低成本;
3)运动跟踪模块122基于从眼镜设备接收的眼镜设备的运动信息和从图像捕获模块获取的眼镜设备的图像来确定眼镜设备的方位,在这种情况下,可以提高确定眼镜设备的方位的准确性。
取决于不同的应用场景和用户需求等,运动跟踪模块122可以采取上述方式中的任何一种方式来确定眼镜设备的方位。在其它实施例中,运动跟踪模块122也可以使用其它方式来确定眼镜设备的方位。
信息采集模块124可以从任何合适的设备(诸如车辆传感器或其它信息采集系统)来采集与车辆有关的信息。例如,信息采集模块124可以从车辆的电子控制单元(ECU)获取车辆的运行信息,从车轮传感器获取车速信息,从角度传感器获取车辆的倾角信息,以及诸如此类等。此外,信息采集模块124也可以从网络来获取与车辆有关的信息。如上所述,与车辆有关的信息可以包括:车辆状态信息、周围环境信息、路况信息、路径规划信息、推荐信息、提示信息。在其它实施例中,与车辆有关的信息也可以包括其它任何合适的信息。
在一个实施例中,信息采集模块124可以包括以下至少之一:图像捕获模块和运行数据采集装置,其中图像捕获模块用于获取图像,运行数据采集装置用于采集与车辆运行有关的数据。图像捕获模块可以是图像传感器,并且可以获取车辆内部和/或外部的图像。例如,在获取车辆外部的图像的情况下,图像捕获模块可以被部署在期望的位置处,例如在车辆的前面、后面、侧面等。图像捕获模块可以是能够获取全向图像或某一方向的图像的图像传感器。图像捕获模块所获取的图像可以提供给处理模块126以便进行处理或选择,进而在适当的情况下可以提供给眼镜设备110以用于向用户显示。
运行数据采集装置可以与车辆的各种数据采集系统或模块(例如,ECU、车辆传感器等)连接,以便采集与车辆运行有关的数据。
此外,信息采集模块还可以通过通信模块128从网络(例如互联网)获取与车辆有关的信息。
参照图4,处理模块126可以包括诸如电路的构件,该构件可以实现音频、视频、通信、导航、逻辑功能、和/或诸如此类,以及用于实现本公开的实施例,其包括例如本文中描述的功能中的一个或多个功能。例如,处理模块126可以包括用于执行各种功能(其包括例如本文中描述的一个或多个功能)的构件,诸如数字信号处理器、微处理器、各种模拟至数字转换器、数字至模拟转换器、处理电路和其它支持电路。此外,处理模块126可以操作一个或多个软件程序,该软件程序可被存储在存储器中,以及该软件程序可以使得处理模块126实现至少一个实施例,例如本文中描述的功能中的一个或多个功能。在一个实施例中,处理模块126可以根据眼镜设备的方位从信息采集模块采集的信息中确定需要向眼镜设备提供的信息。例如,处理模块126可以从运动跟踪模块122获取眼镜设备110的方位,并且根据眼镜设备的方位,从信息采集模块采集的信息中确定需要向眼镜设备提供的信息。作为示例,假设眼镜设备110的方位为面向行驶方向的方向,则处理模块126可以确定需要向眼镜设备提供车辆行驶信息(例如,速度、转速、档位等)、路况信息和/或路径规划信息等,并将所确定的信息提供给眼镜设备110。作为示例,假设眼镜设备110的方位为面向车辆的侧面的建筑物,并且这时车辆处于停止驾驶的状态,则处理模块126可以确定此时不需要向眼镜设备提供车辆行驶信息,而是提供与车辆所处位置相关的推荐信息,例如饭店、商场、游乐场等,并将所确定的信息提供给眼镜设备110。作为示例,假设眼镜设备110的方位为面向驾驶员的腿部的方向并且在短时间内出现多次,则处理模块126可以确定驾驶员可能处于疲劳驾驶的情况,此时可以向眼镜设备提供与疲劳驾驶有关的提示信息。
在一个实施例中,车体设备的图像捕获模块能够捕获车辆外部图像,当眼镜设备面向遮挡区域时,处理模块126可以确定与眼镜设备的方位相对应的车辆外部图像,作为需要向眼镜设备提供的信息。例如,当眼镜设备110面向A/B柱、机舱盖、车门、车尾等车身遮挡区域时,处理模块126可以根据运动跟踪模块所确定的眼镜设备的方位,确定存在遮挡区域,进而确定被遮挡区域遮挡的外部图像,从车辆外部图像中选择被遮挡的图像并将被遮挡的图像传送给眼镜设备,眼镜设备显示被遮挡的图像使得用户能够在遮挡区域看到被遮挡的图像以产生透视的效果。在这个实施例中,可以扩大用户的可视角度,从而例如可以潜在地避免危险的情况发生。
在一个实施例中,处理模块126可以基于眼镜设备的图像采集模块采集的图像、和/或眼镜设备的运动侦测模块侦测的运动信息,来确定与眼镜设备的方位相对应的车辆外部图像。作为示例,处理模块126可以通过图像识别以识别出图像采集模块所采集的图像中的遮挡对象,并且根据运动侦测模块侦测的运动信息确定眼镜设备的方位,从而可以确定眼镜设备(或用户)的视野,确定与眼镜设备的方位相对应的车辆外部图像,例如确定从车辆外部图像应当提取的与被遮挡对象相对应的图像区域。
在一个实施例中,信息处理模块126可以基于用户的指令向眼镜设备提供与该指令相关的信息。例如,用户可以通过各种输入方式,例如语音输入、按钮输入、触摸输入、手势输入、目光输入等,来输入对应的指令。例如,如果用户希望看到车辆后面的路况信息,用户可以通过语音指令以指示信息处理模块126提供车辆后面的路况信息。在这种情况下,车体设备120还可以包括语音识别模块以用于识别语音指令,并且将识别的语音指令提供给信息处理模块126。在信息处理模块126接收到语音指令后,它可以提供相对应的信息。
参照图4,车体设备120还可以包括通信模块128,其可以向眼镜设备110发送所确定的信息。在其它实施例中,通信模块128还可以从眼镜设备110接收信息,例如,采集的图像和/或眼镜设备的运动信息等。此外,在其它实施例中,通信模块128也可以与网络交换信息。
在至少一个示例实施例中,通信模块128可以包括:天线(或多个天线)、有线连接器、和/或诸如此类,它们与传送器和/或接收器操作地通信。在至少一个示例实施例中,处理模块126可以提供信号给传送器和/或从接收器接收信号。信号可以包括:根据通信接口标准的信令信息、用户语音、接收的数据、和/或诸如此类。通信模块128可以使用一个或多个接口标准、通信协议、调制类型、和接入类型进行操作。作为说明,通信模块128可以根据以下协议进行操作:蜂窝网络通信协议,无线局域网协议(诸如802.11),短距无线协议(诸如蓝牙)和/或诸如此类。通信模块128可以依照有线协议进行操作,诸如以太网、车联网、诸如此类。
此外,车体设备120还可以包括:用于提供输出和/或接收输入的用户接口。车体设备120可以包括输出设备(未示出)。输出设备可以包括:音频输出设备,诸如耳机、扬声器、和/或诸如此类。输出设备可以包括:可视化输出设备,诸如显示器、指示灯、和/或诸如此类。车体设备120可以包括:输入设备(未示出)。输入设备可以包括:麦克风、触摸传感器、按钮、小键盘、和/或诸如此类。在包括触摸显示器的实施例中,触摸显示器可以被配置为接收来自单点触摸、多点触摸和/或诸如此类的输入。
基于与上述眼镜设备110或110’相同的发明构思,本公开还提供了一种车载增强现实方法。该方法可以由眼镜设备110或110’来执行。针对与前述实施例相同的部分,适当地省略它们的描述。
图5示出了根据本公开的实施例的车载增强现实方法500的流程图。方法500包括:在框501处,在用户佩戴的眼镜设备处,从车体设备接收与眼镜设备的方位相关联的信息;在框503处,在用户佩戴的眼镜设备处,向用户显示/投影所述信息。
在一个实施例中,眼镜设备的左眼部分和/或右眼部分具有投影显示模块。
在一个实施例中,投影显示模块包括微型LCoS显示装置以及虚像投影镜头,在眼镜设备的左眼部分和右眼部分都具有投影显示模块的情况下,方法500还包括:向用户提供立体图像。
在一个实施例中,方法500还包括:采集图像以供车体设备使用;侦测眼镜设备的运动信息以供车体设备使用。
在一个实施例中,车体设备可以向眼镜设备供电。
在一个实施例中,与眼镜设备的方位相关联的信息包括以下信息中的一个或多个信息:车辆状态信息;周围环境信息;路况信息;路径规划信息;推荐信息;提示信息。
基于与上述车体设备120相同的发明构思,本公开还提供了一种车载增强现实方法。该方法可以由车体设备120来执行。针对与前述实施例相同的部分,适当地省略它们的描述。
图6示出了根据本公开的实施例的车载增强现实方法600的流程图。方法600包括:在框601处,确定眼镜设备的方位;在框603处,采集与车辆有关的信息;在框605处,根据所述眼镜设备的方位从所述采集的信息中确定需要向所述眼镜设备提供的信息;在框607处,向所述眼镜设备发送所确定的信息。
在一个实施例中,车体设备可以向眼镜设备供电。
在一个实施例中,采集与车辆有关的信息包括:获取图像;采集与车辆运行有关的数据;从网络获取与车辆有关的信息。
在一个实施例中,所获取的图像包括车辆外部图像,方法600还包括:当眼镜设备面向遮挡区域时,确定与眼镜设备的方位相对应的车辆外部图像,作为需要向眼镜设备提供的信息。
在一个实施例中,确定与眼镜设备的方位相对应的车辆外部图像包括:基于眼镜设备的图像采集模块采集的图像、和/或眼镜设备的运动侦测模块侦测的运动信息,来确定与眼镜设备的方位相对应的车辆外部图像。
在一个实施例中,确定眼镜设备的方位包括:基于获取的眼镜设备的图像,确定眼镜设备的方位;基于获取的眼镜设备的运动信息来确定眼镜设备的方位;或基于获取的眼镜设备的运动信息和获取的眼镜设备的图像来确定眼镜设备的方位。
在一个实施例中,方法600还包括:基于用户的指令向眼镜设备提供与该指令相关的信息。
在一个实施例中,向眼镜设备提供的信息包括以下信息中的一个或多个信息:车辆状态信息、周围环境信息、路况信息、路径规划信息、推荐信息、提示信息。
注意的是,以上描述的装置的组件中的任何组件可以被实现为硬件、软件模块或其组合。在软件模块的情况下,可以将它们包含在有形的计算机可读可记录存储介质上。所有软件模块(或其任何子集)可以在相同的介质上,或每个软件模块可以在不同的介质上。软件模块可以运行在硬件处理器上。使用运行在硬件处理器上的不同的软件模块来执行方法步骤。
另外,本公开的一个方面可以使用在计算装置上运行的软件。此类实现方式可以使用例如处理器、存储器和输入/输出接口。如本文中使用的词语“处理器”旨在包含任何处理设备,处理器可以包含CPU(中央处理器)和/或其它形式的处理电路。此外,词语“处理器”可以指不只一个处理器。词语“存储器”旨在包含与处理器或CPU相关联的存储器,诸如RAM(随机访问存储器)、ROM(只读存储器)、固定存储器(例如,硬盘)、可移动存储设备(例如,磁盘)、闪速存储器等。处理器、存储器和输入/输出接口(诸如显示器和键盘)可以例如经由总线互连。
因此,计算机软件(其包含用于执行如本文所描述的本公开方法的指令和代码)可以存储在相关联的存储器设备中的一个或多个相关联的存储器设备中,并且当准备好被使用时,被部分地或全部地加载(例如加载到RAM中)并由CPU执行。此类软件可以包括但不限于固件、驻留软件、微码、以及诸如此类。计算机软件可以是使用任何编程语言编写而成的计算机软件,以及可以是以源代码、目标代码或在源代码和目标代码之间的中间代码的形式,诸如以部分编译的形式,或以任何其它期望的形式。
本公开的实施例可以采用包含在计算机可读介质中的计算机程序产品的形式,该计算机可读介质具有在其上包含的计算机可读程序代码。此外,可以使用任何组合的计算机可读介质。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是但不限于电、磁、电磁、光或其它存储介质,以及可以是可移动的介质或被固定地安装在装置和设备中的介质。此类计算机可读介质的非限制性示例是RAM、ROM、硬盘、光盘、光纤等。计算机可读介质可以例如是有形的介质,例如,有形的存储介质。
本文所使用的词语仅是出于描述特定实施例的目的,并且不是意在限制实施例。如本文所使用的,单数形式“一个”、“一种”和“所述”意味着也包含复数形式,除非上下文中清楚地另外指明。还应当理解的是,当在本文使用时,词语“包括”、“具有”、“包含”和/或“含有”指存在所阐明的特征、数字、步骤、操作、元素和/或组件,但是不排除存在或附加一个或多个其它特征、数字、步骤、操作、元素、组件和/或其组合。
还应当注意的是,在一些可替代实现方式中,所阐明的功能/动作可以不按附图中所阐明的顺序发生。如果需要,可以以不同的顺序和/或彼此并发地执行本公开中所描述的不同功能。此外,如果需要,上述功能中的一个或多个功能可以是非必须的或可以被组合。
尽管以上参照附图描述了本公开的实施例,但是本领域的技术人员可以理解以上描述仅为示例,而不是对本公开的限制。可以对本公开的实施例进行各种修改和变型,而仍落入本公开的精神和范围之内,本公开的范围仅由所附权利要求书确定。
Claims (15)
1.一种车载增强现实系统,其特征在于:包括供用户佩戴的眼镜设备和安装在车辆上的车体设备,其中
眼镜设备包括接收模块和投影显示模块,其中所述接收模块用于从车体设备接收信息,所述投影显示模块用于对从车体设备接收的信息进行投影或显示以使用户观看所述信息;
车体设备包括运动跟踪模块、信息采集模块、处理模块和通信模块,其中运动跟踪模块用于确定所述眼镜设备的方位,信息采集模块用于采集与车辆有关的信息,处理模块用于根据所述眼镜设备的方位从所述信息采集模块采集的信息中确定需要向所述眼镜设备提供的信息,通信模块用于向所述眼镜设备发送所确定的信息。
2.根据权利要求1所述的车载增强现实系统,其特征在于:所述眼镜设备的左眼部分和/或右眼部分具有所述投影显示模块。
3.根据权利要求2所述的车载增强现实系统,其特征在于:所述投影显示模块包括微型LCoS显示装置以及虚像投影镜头,在所述眼镜设备的左眼部分和右眼部分都具有所述投影显示模块的情况下,所述眼镜设备能够向用户提供立体图像。
4.根据权利要求1-3任一所述的车载增强现实系统,其特征在于:所述眼镜设备还包括以下至少之一:
图像采集模块,其用于采集图像以供所述车体设备使用;
运动侦测模块,其用于侦测所述眼镜设备的运动信息以供所述车体设备使用。
5.根据权利要求1-3任一所述的车载增强现实系统,其特征在于:所述车体设备向所述眼镜设备供电。
6.根据权利要求1-3任一所述的车载增强现实系统,其特征在于:所述信息采集模块包括以下至少之一:
图像捕获模块,用于获取图像,
运行数据采集装置,用于采集与车辆运行有关的数据,
其中所述信息采集模块还通过所述通信模块从网络获取与车辆有关的信息。
7.根据权利要求6所述的车载增强现实系统,其特征在于:所述图像捕获模块能够捕获车辆外部图像,当所述眼镜设备面向遮挡区域时,所述处理模块确定与所述眼镜设备的方位相对应的车辆外部图像,作为需要向所述眼镜设备提供的信息。
8.根据权利要求7所述的车载增强现实系统,其特征在于:所述处理模块基于所述眼镜设备的图像采集模块采集的图像、和/或所述眼镜设备的运动侦测模块侦测的运动信息,来确定与所述眼镜设备的方位相对应的车辆外部图像。
9.根据权利要求1-3、7、8任一所述的车载增强现实系统,其特征在于:所述运动跟踪模块通过以下之一来确定所述眼镜设备的方位:
所述运动跟踪模块基于从所述图像捕获模块获取的所述眼镜设备的图像,确定所述眼镜设备的方位;或
所述运动跟踪模块基于从所述眼镜设备接收的所述眼镜设备的运动信息来确定所述眼镜设备的方位;或
所述运动跟踪模块基于从所述眼镜设备接收的所述眼镜设备的运动信息和从所述图像捕获模块获取的所述眼镜设备的图像来确定所述眼镜设备的方位。
10.根据权利要求1-3、7、8任一所述的车载增强现实系统,其特征在于:所述信息处理模块基于所述用户的指令向所述眼镜设备提供与所述指令相关的信息。
11.根据权利要求1-3、7、8任一所述的车载增强现实系统,其特征在于:所述信息包括以下信息中的一个或多个信息:
车辆状态信息;
周围环境信息;
路况信息;
路径规划信息;
推荐信息;
提示信息。
12.一种车载增强现实方法,其特征在于:
在用户佩戴的眼镜设备处,从车体设备接收与所述眼镜设备的方位相关联的信息;
在用户佩戴的眼镜设备处,向所述用户显示/投影所述信息。
13.一种车载增强现实的眼镜设备,其特征在于:
所述眼镜设备包括投影显示模块,其用于对从车体设备接收的信息进行投影或显示以使用户观看所述信息;
其中所述眼镜设备还包括:
接收模块,其用于从车体设备接收与所述眼镜设备的方位相关联的信息,
所述投影显示模块还用于向所述用户显示/投影所述与眼镜设备的方位相关联的信息。
14.一种车载增强现实方法,其特征在于:在车体设备处,
确定眼镜设备的方位,
采集与车辆有关的信息,
根据所述眼镜设备的方位从所述采集的信息中确定需要向所述眼镜设备提供的信息,以及
向所述眼镜设备发送所确定的信息。
15.一种车载增强现实的车体设备,其特征在于:所述车体设备包括运动跟踪模块、信息采集模块、处理模块和通信模块,其中
所述运动跟踪模块用于确定眼镜设备的方位,
所述信息采集模块用于采集与车辆有关的信息,
所述处理模块用于根据所述眼镜设备的方位从所述信息采集模块采集的信息中确定需要向所述眼镜设备提供的信息,
所述通信模块用于向所述眼镜设备发送所确定的信息。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610795113.4A CN106338828A (zh) | 2016-08-31 | 2016-08-31 | 车载增强现实系统、方法和设备 |
| US15/656,049 US20180056861A1 (en) | 2016-08-31 | 2017-07-21 | Vehicle-mounted augmented reality systems, methods, and devices |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610795113.4A CN106338828A (zh) | 2016-08-31 | 2016-08-31 | 车载增强现实系统、方法和设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106338828A true CN106338828A (zh) | 2017-01-18 |
Family
ID=57823689
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610795113.4A Pending CN106338828A (zh) | 2016-08-31 | 2016-08-31 | 车载增强现实系统、方法和设备 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US20180056861A1 (zh) |
| CN (1) | CN106338828A (zh) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108322705A (zh) * | 2018-02-06 | 2018-07-24 | 南京理工大学 | 基于视角显示的特种车辆舱外观察系统及视频处理方法 |
| CN109427220A (zh) * | 2017-08-29 | 2019-03-05 | 深圳市掌网科技股份有限公司 | 一种基于虚拟现实的展示方法和系统 |
| CN109427199A (zh) * | 2017-08-24 | 2019-03-05 | 北京三星通信技术研究有限公司 | 用于辅助驾驶的增强现实的方法及装置 |
| CN109814719A (zh) * | 2018-07-26 | 2019-05-28 | 亮风台(上海)信息科技有限公司 | 一种基于穿戴眼镜的显示信息的方法与设备 |
| CN110001518A (zh) * | 2017-12-13 | 2019-07-12 | 虚拟现实软件 | 实时增强人对采矿工地上的采矿车的视野的方法和装置 |
| CN110021187A (zh) * | 2019-04-19 | 2019-07-16 | 青岛智慧城市产业发展有限公司 | 一种基于ar眼镜、5g网络和智慧停车场的快速停取车辆的方法 |
| CN110297325A (zh) * | 2018-03-22 | 2019-10-01 | 蔚来汽车有限公司 | 增强现实眼镜和系统及增强现实眼镜显示车上信息的方法 |
| CN111201477A (zh) * | 2017-10-13 | 2020-05-26 | 奥迪股份公司 | 用于在车辆中使用电子数据眼镜时减少由模拟器综合症引起的不适的便携式设备 |
| CN111343449A (zh) * | 2020-03-06 | 2020-06-26 | 杭州融梦智能科技有限公司 | 基于增强现实的显示方法及智能穿戴设备 |
| CN111332317A (zh) * | 2020-02-17 | 2020-06-26 | 吉利汽车研究院(宁波)有限公司 | 一种基于增强现实技术的行车提醒方法、系统和装置 |
| CN111417885A (zh) * | 2017-11-07 | 2020-07-14 | 大众汽车有限公司 | 用于确定增强现实眼镜的姿态的系统和方法、用于校准增强现实眼镜的系统和方法、用于支持增强现实眼镜的姿态确定的方法以及适用于该方法的机动车 |
| CN114429630A (zh) * | 2020-10-14 | 2022-05-03 | 宝马股份公司 | 用于检测可穿戴设备的空间方位的系统和方法 |
| CN115988247A (zh) * | 2022-12-08 | 2023-04-18 | 小象智能(深圳)有限公司 | 一种xr车载观影系统及方法 |
| CN116774435A (zh) * | 2023-05-16 | 2023-09-19 | 珠海小熙科技有限公司 | 一种车用抬头显示系统 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109448314A (zh) * | 2018-10-18 | 2019-03-08 | 北京长城华冠汽车技术开发有限公司 | 车内生命特征识别处理方法和装置 |
| CN115474178B (zh) * | 2022-03-03 | 2025-08-29 | 北京罗克维尔斯科技有限公司 | 车载vr设备的无线通信方法、系统、装置及电子设备 |
| DE102024202425A1 (de) * | 2024-03-14 | 2025-09-18 | Fca Us Llc | Induktionsgestützte Positionsbestimmung einer VR-Brille im Fahrzeug |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130249942A1 (en) * | 2012-03-21 | 2013-09-26 | Gm Global Technology Operations Llc. | System and apparatus for augmented reality display and controls |
| US20140192092A1 (en) * | 2013-01-07 | 2014-07-10 | Seiko Epson Corporation | Display device and control method thereof |
| CN104590167A (zh) * | 2014-12-30 | 2015-05-06 | 延锋伟世通电子科技(上海)有限公司 | 机动车辅助驾驶系统 |
| CN104977717A (zh) * | 2014-04-14 | 2015-10-14 | 哈曼国际工业有限公司 | 头戴式显示器呈现调节 |
| CN105564309A (zh) * | 2014-10-14 | 2016-05-11 | 中兴通讯股份有限公司 | 一种实现可透视视线盲区的方法和驾驶辅助眼镜 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7720436B2 (en) * | 2006-01-09 | 2010-05-18 | Nokia Corporation | Displaying network objects in mobile devices based on geolocation |
| IL189251A0 (en) * | 2008-02-05 | 2008-11-03 | Ehud Gal | A manned mobile platforms interactive virtual window vision system |
| US20110291918A1 (en) * | 2010-06-01 | 2011-12-01 | Raytheon Company | Enhancing Vision Using An Array Of Sensor Modules |
| US8941723B2 (en) * | 2010-08-26 | 2015-01-27 | Blast Motion Inc. | Portable wireless mobile device motion capture and analysis system and method |
| FR2973343B1 (fr) * | 2011-04-01 | 2013-11-29 | Latecoere | Aeronef pourvu d'un systeme d'observation d'un environnement de cet aeronef |
| US9146728B2 (en) * | 2011-08-03 | 2015-09-29 | Cinemotion, Llc | Mobile application creation platform |
-
2016
- 2016-08-31 CN CN201610795113.4A patent/CN106338828A/zh active Pending
-
2017
- 2017-07-21 US US15/656,049 patent/US20180056861A1/en not_active Abandoned
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130249942A1 (en) * | 2012-03-21 | 2013-09-26 | Gm Global Technology Operations Llc. | System and apparatus for augmented reality display and controls |
| US20140192092A1 (en) * | 2013-01-07 | 2014-07-10 | Seiko Epson Corporation | Display device and control method thereof |
| CN104977717A (zh) * | 2014-04-14 | 2015-10-14 | 哈曼国际工业有限公司 | 头戴式显示器呈现调节 |
| CN105564309A (zh) * | 2014-10-14 | 2016-05-11 | 中兴通讯股份有限公司 | 一种实现可透视视线盲区的方法和驾驶辅助眼镜 |
| CN104590167A (zh) * | 2014-12-30 | 2015-05-06 | 延锋伟世通电子科技(上海)有限公司 | 机动车辅助驾驶系统 |
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109427199A (zh) * | 2017-08-24 | 2019-03-05 | 北京三星通信技术研究有限公司 | 用于辅助驾驶的增强现实的方法及装置 |
| CN109427220A (zh) * | 2017-08-29 | 2019-03-05 | 深圳市掌网科技股份有限公司 | 一种基于虚拟现实的展示方法和系统 |
| CN109427220B (zh) * | 2017-08-29 | 2021-11-30 | 深圳市掌网科技股份有限公司 | 一种基于虚拟现实的展示方法和系统 |
| US12124754B2 (en) | 2017-10-13 | 2024-10-22 | Audi Ag | Portable device for reducing simulator sickness-induced impairments during the use of electronic augmented reality glasses in a vehicle |
| US11687305B2 (en) | 2017-10-13 | 2023-06-27 | Audi Ag | Portable device for reducing simulator sickness-induced impairments during the use of electronic augmented reality glasses in a vehicle |
| CN111201477A (zh) * | 2017-10-13 | 2020-05-26 | 奥迪股份公司 | 用于在车辆中使用电子数据眼镜时减少由模拟器综合症引起的不适的便携式设备 |
| CN111417885A (zh) * | 2017-11-07 | 2020-07-14 | 大众汽车有限公司 | 用于确定增强现实眼镜的姿态的系统和方法、用于校准增强现实眼镜的系统和方法、用于支持增强现实眼镜的姿态确定的方法以及适用于该方法的机动车 |
| CN110001518A (zh) * | 2017-12-13 | 2019-07-12 | 虚拟现实软件 | 实时增强人对采矿工地上的采矿车的视野的方法和装置 |
| CN110001518B (zh) * | 2017-12-13 | 2022-08-12 | 虚拟现实软件 | 实时增强人对采矿工地上的采矿车的视野的方法和装置 |
| CN108322705A (zh) * | 2018-02-06 | 2018-07-24 | 南京理工大学 | 基于视角显示的特种车辆舱外观察系统及视频处理方法 |
| CN110297325B (zh) * | 2018-03-22 | 2023-01-13 | 蔚来控股有限公司 | 增强现实眼镜和系统及增强现实眼镜显示车上信息的方法 |
| CN110297325A (zh) * | 2018-03-22 | 2019-10-01 | 蔚来汽车有限公司 | 增强现实眼镜和系统及增强现实眼镜显示车上信息的方法 |
| CN109814719B (zh) * | 2018-07-26 | 2024-04-26 | 亮风台(上海)信息科技有限公司 | 一种基于穿戴眼镜的显示信息的方法与设备 |
| CN109814719A (zh) * | 2018-07-26 | 2019-05-28 | 亮风台(上海)信息科技有限公司 | 一种基于穿戴眼镜的显示信息的方法与设备 |
| CN110021187A (zh) * | 2019-04-19 | 2019-07-16 | 青岛智慧城市产业发展有限公司 | 一种基于ar眼镜、5g网络和智慧停车场的快速停取车辆的方法 |
| CN111332317A (zh) * | 2020-02-17 | 2020-06-26 | 吉利汽车研究院(宁波)有限公司 | 一种基于增强现实技术的行车提醒方法、系统和装置 |
| CN111343449B (zh) * | 2020-03-06 | 2022-06-07 | 杭州融梦智能科技有限公司 | 基于增强现实的显示方法及智能穿戴设备 |
| CN111343449A (zh) * | 2020-03-06 | 2020-06-26 | 杭州融梦智能科技有限公司 | 基于增强现实的显示方法及智能穿戴设备 |
| CN114429630A (zh) * | 2020-10-14 | 2022-05-03 | 宝马股份公司 | 用于检测可穿戴设备的空间方位的系统和方法 |
| CN115988247A (zh) * | 2022-12-08 | 2023-04-18 | 小象智能(深圳)有限公司 | 一种xr车载观影系统及方法 |
| CN115988247B (zh) * | 2022-12-08 | 2023-10-20 | 小象智能(深圳)有限公司 | 一种xr车载观影系统及方法 |
| CN116774435A (zh) * | 2023-05-16 | 2023-09-19 | 珠海小熙科技有限公司 | 一种车用抬头显示系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20180056861A1 (en) | 2018-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106338828A (zh) | 车载增强现实系统、方法和设备 | |
| KR102770751B1 (ko) | 주행 가이드 정보를 제공하는 전자 장치 및 그 방법 | |
| US11127373B2 (en) | Augmented reality wearable system for vehicle occupants | |
| EP2857886B1 (en) | Display control apparatus, computer-implemented method, storage medium, and projection apparatus | |
| US9952665B2 (en) | Eye vergence detection on a display | |
| JP6524422B2 (ja) | 表示制御装置、表示装置、表示制御プログラム、及び表示制御方法 | |
| US10843686B2 (en) | Augmented reality (AR) visualization of advanced driver-assistance system | |
| US20140002357A1 (en) | Enabling and Disabling Features of a Headset Computer Based on Real-Time Image Analysis | |
| US11626028B2 (en) | System and method for providing vehicle function guidance and virtual test-driving experience based on augmented reality content | |
| US10162409B2 (en) | Locating a head mounted display in a vehicle | |
| US20140098008A1 (en) | Method and apparatus for vehicle enabled visual augmentation | |
| CN110696613A (zh) | 用于车辆的乘客抬头显示器 | |
| WO2016067574A1 (ja) | 表示制御装置及び表示制御プログラム | |
| CN110244461B (zh) | 增强现实显示系统及其显示方法 | |
| KR20160142167A (ko) | 차량용 디스플레이 장치 및 이를 구비한 차량 | |
| JP6620977B2 (ja) | 表示制御装置、投影装置、および表示制御プログラム | |
| CN104890570B (zh) | 佩戴式车辆信息指示器以及使用其指示车辆信息的方法 | |
| JP2014234139A (ja) | 車載表示装置およびプログラム | |
| JP7390436B2 (ja) | ナビゲーション方法、装置、電子機器、コンピュータ読取可能な記憶媒体及びコンピュータプログラム | |
| CN117882075A (zh) | 一种显示方法及装置 | |
| WO2017024458A1 (en) | System, method and apparatus for vehicle and computer readable medium | |
| CN113449646A (zh) | 一种具有安全距离提示的抬头显示系统 | |
| JP7135052B2 (ja) | 制御装置、プログラム、及び制御方法 | |
| JP7655202B2 (ja) | 画像表示装置 | |
| JP2014154125A (ja) | 走行支援システム、走行支援方法及びコンピュータプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170118 |
|
| RJ01 | Rejection of invention patent application after publication |