[go: up one dir, main page]

CN106502422A - 智能眼镜及其控制方法、控制装置 - Google Patents

智能眼镜及其控制方法、控制装置 Download PDF

Info

Publication number
CN106502422A
CN106502422A CN201611037145.4A CN201611037145A CN106502422A CN 106502422 A CN106502422 A CN 106502422A CN 201611037145 A CN201611037145 A CN 201611037145A CN 106502422 A CN106502422 A CN 106502422A
Authority
CN
China
Prior art keywords
identification information
user
attentively
storage device
intelligent glasses
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611037145.4A
Other languages
English (en)
Inventor
张义荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qinggan Intelligent Technology Co Ltd
Original Assignee
Shanghai Qinggan Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qinggan Intelligent Technology Co Ltd filed Critical Shanghai Qinggan Intelligent Technology Co Ltd
Priority to CN201611037145.4A priority Critical patent/CN106502422A/zh
Publication of CN106502422A publication Critical patent/CN106502422A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Eyeglasses (AREA)

Abstract

一种智能眼镜及其控制方法、控制装置,所述控制方法包括:获取用户注视对象的标识信息;根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息;将所述用户注视对象的属性信息输出。采用上述方案,可以便捷地对物品进行管理。

Description

智能眼镜及其控制方法、控制装置
技术领域
本发明涉及智能穿戴技术领域,尤其涉及一种智能眼镜及其控制方法、控制装置。
背景技术
在日常生活中,物品在流转过程中,人们通常凭自身记忆或物品属性信息清单对物品进行管理,管理过程比较繁琐混乱,常会发生因记忆不清或物品属性信息清单未及时更新而出现差错。
但是,目前还没有其他更加可靠有效的处理方式。
发明内容
本发明解决的技术问题是如何便捷地对物品进行管理。
为解决上述技术问题,本发明实施例提供一种智能眼镜的控制方法,包括:获取用户注视对象的标识信息;根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息;将所述用户注视对象的属性信息输出。
可选地,获取所述用户注视对象的属性信息之后,还包括:根据所述用户注视对象的属性信息,将所述用户注视对象的标识信息进行分类保存。
可选地,所述控制方法,还包括:获取所述用户注视对象对应的存储装置的标识信息并保存;建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
可选地,所述建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系,包括:接收用户输入的建立关联控制指令;根据接收到的所述建立关联控制指令,建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
可选地,在建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系之后,还包括:接收用户输入的解除关联控制指令;根据接收到的所述解除关联控制指令,获取用户注视对象的标识信息,并从已保存的标识信息中,获取与所述用户注视对象所对应的存储装置的标识信息;解除所述用户注视对象的标识信息与对应的存储装置的标识信息之间的关联关系;将所述用户注视对象的标识信息从已保存的标识信息中删除。
可选地,所述建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系,包括:与所述存储装置进行通信,获取所述存储装置内存储的对象的变化情况;当获知所述存储装置内存储的对象增加且所增加对象为所述用户注视对象时,建立所述用户注视对象的标识信息与所述存储装置的标识信息的关联关系。
可选地,在建立所述用户注视对象的标识信息与所述存储装置的标识信息的关联关系之后,还包括:当获知所述存储装置内存储的对象减少且所减少的对象为所述用户注视对象时,解除所述用户注视对象的标识信息与所述存储装置的标识信息之间的关联关系;将所述用户注视对象的标识信息从已保存的标识信息中删除。
可选地,所述控制方法,还包括:获取同一存储装置所关联的所有对象的属性信息;按照所述同一存储装置所关联的所有对象的属性信息分类汇总,并输出。
可选地,所述属性信息包括:对象名称、生产日期及保质期。
可选地,所述属性信息还包括以下至少一种:产地、使用方法、配料、生产厂商、营养成分、贮存条件及所处位置区域信息。
可选地,在建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系之后,还包括:计算所述存储装置内所存储的各对象的存储时长;当某一对象的所述保质期对应的时长与所述存储时长的差值小于预设时长时,发出提醒信息。
可选地,所述计算所述存储装置内所存储的各对象的存储时长,包括:从各对象对应的属性信息中,获取所述各对象的生产日期;根据当前日期及所述各对象的生产日期,计算所述各对象的存储时长。
可选地,所述计算所述存储装置内所存储的各对象的存储时长,包括:获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;根据当前日期及首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期,计算该对象的存储时长。
可选地,采用以下任一种方式获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期:从本地存储器中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;从云端服务器中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;从关联的其他智能眼镜中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期。
可选地,所述获取用户注视对象的标识信息,包括:当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;获取所述用户视角对应的所述对象的标识信息。
本发明实施例还提供一种智能眼镜控制装置,包括:标识信息获取单元,适于获取用户注视对象的标识信息;属性信息获取单元,适于根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息;输出单元,适于将所述用户注视对象的属性信息输出。
本发明实施例还提供一种智能眼镜,包括:智能眼镜本体、控制器、内侧摄像头及外侧摄像头,其中:所述内侧摄像头,设置在所述智能眼镜本体上,与所述控制器耦接,适于检测用户的眼睛的注视方向;所述外侧摄像头,设置在所述智能眼镜本体上,与所述控制器耦接,适于接收到控制信号后开始工作,并根据所述控制信号采集所述用户的视角所对应的图像;所述控制器,适于当所述内侧摄像头检测到所述用户的眼睛的注视同一方向的时长超过预设时长时,计算所述用户的视角,并生成所述控制信号发送至所述外侧摄像头,获取所述外侧摄像头采集的图像,提取所述获取到的图像中的标识信息,以及根据所述标识信息获取所述用户注视对象的属性信息并输出。
可选地,所述智能眼镜还包括以下至少一种:投影装置,适于将所述用户注视对象的属性信息通过投影方式输出;音频输出装置,适于将所述用户注视对象的属性信息通过音频方式输出。
与现有技术相比,本发明实施例的技术方案具有以下有益效果:
在对物品进行管理时,可以根据获取到的用户所注视对象的标识信息,自动获取所述对象对应的属性信息并输出,从而使得用户可以很便捷地获取到各对象的属性信息,并根据获取到的各对象的属性信息对相应的对象进行管理,无须用户人工查找各对象的属性信息,从而可以实现便捷地对物品进行管理。
进一步地,获取用户注视对象对应的存储装置的标识信息,并将用户注视对象的标识信息与存储装置的标识信息进行关联,从而可以方便地获知各对象放置在哪一个存储装置内,可以提高对物品管理的便捷性。
进一步地,可以根据接收到的用户输入的解除关联控制指令,解除用户注视对象与对应的存储装置的关联关系,并将用户注视对象的标识信息从已保存的标识信息中删除。当用户从存储装置内取出某一对象后,及时更新该存储装置内存储对象的信息。
进一步地,通过与关联的存储装置进行通信,可以获取存储装置内所存储对象的变化情况,当获知存储装置内存储的对象的增加且增加对象为用户注视对象时,及时建立增加的对象与存储装置的关联关系;当获知存储装置内存储的对象的减少且减少对象为用户注视对象时,及时解除用户注视对象与存储装置的关联关系,从而可以根据存储装置内所存储对象的变化情况,及时对存储装置所关联的对象进行更新。
进一步地,当某对象的保质期对应的保质期时长与存储时长的差值小于预设时长时,发出提醒信息,从而可以提醒用户及时处理将要过期的物品。
此外,属性信息中包括有位置区域信息,可以根据输出的属性信息将位置发生变化的物品放置到原有位置。比如,在超市商品整理时,超市工作人员不需要记忆各商品所处的位置或者根据清单寻找各商品所处的位置,提高了对物品管理的便捷性。
附图说明
图1是本发明实施例中一种智能眼镜的控制方法的流程图;
图2是本发明实施例中一种智能眼镜的控制装置的结构示意图;
图3是本发明实施例中一种智能眼镜的结构示意图。
具体实施方式
在日常生活中,物品在流转过程中,人们通常凭自身记忆或物品属性信息清单对物品进行管理,管理过程比较繁琐混乱,常会发生因记忆不清或物品属性信息清单未及时更新而出现差错。但是,目前还没有其他更加可靠有效的处理方式。
在本发明实施例中,在对物品进行管理时,可以根据获取到的用户所注视对象的标识信息,自动获取所述对象对应的属性信息并输出,从而使得用户可以很便捷地获取到各对象的属性信息,并根据获取到的各对象的属性信息对相应的对象进行管理,无须用户人工查找各对象的属性信息,从而可以实现便捷地对物品进行管理。
为使本发明的上述目的、特征和有益效果能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
参照图1,给出了本发明实施例中一种智能眼镜的控制方法的流程图,以下通过具体步骤进行详细说明。
在具体实施中,智能眼镜中可以设置有内侧摄像头、外侧摄像头以及控制器。在本发明一实施例中,内侧摄像头设置在智能眼镜本体的右侧支架上,镜头面向用户眼睛,工作时可以对用户的眼睛的运动进行实时追踪。外侧摄像头可以设置在智能眼镜本体的右侧支架上,镜头面向外界,工作时可以实时采集外界的图像。控制器可以接收内侧摄像头及外侧摄像头采集的图像,并可以对内侧摄像头及外侧摄像头进行控制。
在具体实施中,内侧摄像头也可以设置在智能眼镜的左侧支架上,外侧摄像头也可以设置在智能眼镜的左侧支架上。内侧摄像头与外侧摄像头还可以分别设置在两侧支架上。例如,内侧摄像头设置在智能眼镜的左侧支架上,外侧摄像头设置在智能眼镜的右侧支架上。
步骤S11,获取用户注视对象的标识信息。
在具体实施中,在获取用户注视对象的标识信息之前,用户可以开启智能眼镜的信息获取功能。智能眼镜也可以根据外侧摄像头采集到的对象情况,自动开启信息获取功能。
在具体实施中,用户可以通过多种方式开启智能眼镜的信息获取功能。
例如,用户可以通过语音方式开启智能眼镜的信息获取功能。用户通过语音“开启信息获取功能”,来开启智能眼镜的信息获取功能。
又如,用户可以通过预设动作触发开启智能眼镜的信息获取功能。如通过画圈的动作,开启智能眼镜的信息获取功能;或者通过连续眨眼动作,连续眨眼两次,开启智能眼镜的信息获取功能。
在具体实施中,获取用户注视对象的标识信息的方法有多种,下面对获取用户注视对象的标识信息的方法进行说明:
例如,当智能眼镜的信息获取功能开启后,内侧摄像头可以对用户的眼睛的运动进行实时追踪,对用户的眼睛的运动信息进行捕捉,并且可以将捕捉到的用户的眼睛的运动信息发送至控制器。
控制器接收内侧摄像头发送的用户的眼睛的运动信息后,可以根据接收到的用户的眼睛的运动信息,来获知用户的眼睛的注视方向。当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算用户的视角。
人的眼睛近似球形,位于眼眶内。眼球包括眼球壁、眼内腔和内容物、神经、血管等组织。眼球壁主要分为外层、中层及内层。眼球壁外层由角膜、巩膜组成。眼球壁外层的前1/6为透明的角膜,俗称“眼珠”,其余5/6为白色的巩膜,俗称“眼白”。
在实际应用中,智能眼镜中可以设置有眼睛运动信息采集传感器,通过预设的眼睛运动信息采集传感器来采集用户的眼睛参数,并将采集到的用户的眼睛参数发送至控制器。在本发明实施例中,用户的眼睛参数可以包括:瞳孔的中心位置、上/下眼白长度及左侧/右侧眼白长度。
控制器可以根据眼睛运动信息采集传感器发送的用户的眼睛参数:瞳孔的中心位置、上眼白长度以及左侧眼白长度,结合预存储的用户正视时对应的眼睛参数,计算用户的视角。控制器也可以根据瞳孔的中心位置、上眼白长度以及右侧眼白长度,结合预存储的用户正视时对应的眼睛参数,计算用户的视角。控制器还可以根据瞳孔的中心位置、上眼白长度、下眼白长度、左侧眼白长度以及右侧眼白长度,结合预存储的用户正视时对应的眼睛参数,计算用户的视角。需要说明的是,控制器可以根据瞳孔中心的位置,上眼白长度与下眼白长度中的至少一个、以及左侧眼白与右侧眼白中的至少一个,计算用户的视角。
当计算得到用户的视角之后,智能眼镜中的控制器可以控制外侧摄像头开始工作,并控制外侧摄像头的取景方向为用户的视角对应的方向。
控制器获取到用户的视角后,可以生成用于控制外侧摄像头开始工作的控制信号,并发送至外侧摄像头。外侧摄像头接收到控制信号后开始工作,采集用户的视角对应方向上的图像,并将采集到的图像发送至控制器。控制器根据从接收到的图像中获取用户注视对象的标识信息。
当计算得到用户的视角之后,智能眼镜中的控制器可以控制外侧摄像头开启,并通过自身安装的标识信息获取软件,通过外侧摄像头获取用户注视对象的标识信息。
又如,用户发出用于控制外侧摄像头的语音指令,当控制器接收到语音控制指令后,控制外侧摄像头拍摄用户注视对象的图像,然后发送至控制器。控制器接收到外侧摄像头发送的图像后,采用已安装的标识信息识别软件,获取所述对象的标识信息。
在具体实施中,标识信息可以为二维码、条形码等。
例如,用户买回来一批牛奶、果汁、零食及蔬菜等,在放入冰箱时,用户可以戴上智能眼镜,并注视待放入冰箱内的物品的条形码,当智能眼镜检测到用户注视牛奶的时长超过2秒时,开启外侧摄像头,并启动自身安装的扫码软件,通过外侧摄像头扫描用户注视的牛奶对应的条形码,即可获取到用户注视的牛奶的标识信息。
又如,超市工作人员在对超市内的物品进行整理时,当超市工作人员需要获知某一商品的详细信息时,可以将商品上带有标识信息的一面对着智能眼镜的外侧摄像头,并注视该商品。智能眼镜内侧摄像头实施追踪超市工作人员的眼睛的运动,并将采集的超市工作人员的眼睛的运动信息发送至控制器,当智能眼镜中的控制器检测到超市工作人员注视某一物品达到预设时长后,计算超市工作人员的视角,并控制外侧摄像头拍摄超市工作人员的视角对应的商品的图像。外侧摄像头拍摄到超市工作人员的视角对应的商品的图像后,发送至控制器。控制器根据接收到的所述商品的图像,获取该商品对应的标识信息。
在实际应用中,预设时长可以为1秒,也可以为2秒,还可以为其他设定值。用户可以根据自身需要及实际的应用场景,来设定预设时长,在此对预设时长的具体数值不做限定。
步骤S12,根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息。
在具体实施中,当获取到用户注视对应的标识信息后,可以根据获取到的标识信息,获取与所述标识信息对应的属性信息。属性信息可以包括:对象名称、生产日期及保质期。根据具体对象的不同特点,属性信息还可以包括以下至少一种:产地、使用方法、配料、生产厂商、营养成分、贮存条件及所处位置区域信息等,具体可以根据产品包装上的信息以及用户的设定生成。
在具体实施中,根据获取到的标识信息,获取与所述标识信息对应的属性信息的方法有可以多种。
例如,智能眼镜可以根据获取到的用户注视对象的标识信息,从预设的本地数据库中获取所述标识信息对应的属性信息。
又如,在智能眼镜接入互联网时,将获取到的用户注视对象的标识信息发送至云端服务器。云端服务器根据接收到的用户注视对象的标识信息,获取与所述标识信息对应的属性信息,并反馈至智能眼镜。智能眼镜接收云端服务器反馈的与用户注视对象所对应的属性信息。
在本发明一实施例中,智能眼镜中的控制器获取到用户注视的牛奶的标识信息后,根据牛奶的标识信息,获取牛奶的属性信息。获取到的牛奶的属性信息为:牛奶、生产日期为2016年09日20、保质期45天、产地上海及贮存条件为:阴凉、避免光照、2℃~10℃。
在本发明另一实施例中,在对超市内的商品整理进行整理时,根据商品M的标识信息获取到的商品M对应的属性信息包括:商品M放置在第二区域、第5货架上的26位置处。
步骤S13,将所述用户注视对象的属性信息输出。
在具体实施中,在获取到用户注视对象的属性信息后,可以将获取到的属性信息输出。
在具体实施中,可以采用多种方式输出所述属性信息。例如,可以采用图像方式输出所述属性信息,也可以采用音频方式输出所述属性信息,还可以其他方式输出所述属性信息。在采用音频方式输出所述属性信息时,可以将所述用户注视对象的属性信息转换成对应的音频数据输出。
将用户注视对象对应的属性信息输出后,用户可以获知输出的所注视对象的属性信息,并根据获取到的属性信息执行相应的操作。
例如,可以根据获取到的牛奶的贮存条件,将牛奶放置到冰箱相应的位置。又如,超市工作人员可以根据获取到的商品的所处位置区域信息,将商品放回原有位置。
由此可见,在对物品进行管理时,可以根据获取到的用户所注视对象的标识信息,自动获取所述对象对应的属性信息并输出,从而使得用户可以很便捷地获取到各对象的属性信息,并根据获取到的各对象的属性信息对相应的对象进行管理,无须用户人工查找各对象的属性信息,从而可以实现便捷地对物品进行管理。
在具体实施中,在智能眼镜中可以设置有投影装置。投影装置与控制器耦接,设置在智能眼镜的一侧支架上,可以根据控制器发送的输出信号,将获取到的用户注视对象对应的属性信息进行投影。用户可以在镜片的对应位置处看到投影装置投影的属性信息。投影装置可以将属性信息以文本方式进行投影显示,也可以将属性信息以图片的方式进行投影显示。
在具体实施中,获取用户的视角对应的对象与所述用户的距离,并根据所述用户的视角所对应的对象的距离,得到获取所述用户的视角所对应的图像时的焦距。采用图像方式将所述属性信息以相同的焦距输出。
在本发明一实施例中,当获取到用户的视角之后,获取至少两张用户的视角对应对象的图像,且每张图像的景深不同。根据获取到的同一对象的不同景深的图像,可以获取到用户与该对象的距离。根据用户距离该对象的距离以及采集到的图像,可以得到采集该对象时的焦距。将获取到的用户注视对象的属性信息以图像方式,且采用与获取该对象时相同的焦距输出。根据用户的视角,将输出的图像显示在预设的区域内,以避免输出的属性信息对应的图片距离采集到的物体距离过远或者重合。用户注视对象的属性信息以图像方式经投影装置投影输出后,用户注视的对象与显示屏显示的属性信息处于同一平面,便于用户查看,使得用户看到的效果,就像是在注视对象旁边设置有一个显示屏一样,从而提高用户体验。
在具体实施中,当获取到用户注视对象的属性信息之后,可以根据用户注视对象的属性信息,将所述用户注视对象的标识信息进行分类保存。例如,获取用户注视的牛奶、苹果及猪肉的属性信息,根据获取到的各对象的属性信息,将牛奶划分至奶制品类别,苹果划分至水果类别,将猪肉划分至肉制品类别。完成对用户注视对象的标识信息进行分类之后,将各对象对应的标识信息进行保存。可以理解的是,也可以先对用户注视对象的标识信息进行保存后,再进行分类。
在具体实施中,在获取用户注视对象对应的标识信息之前,还可以获取所述用户注视对象对应的存储装置的标识信息并保存,建立用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
例如,存储装置为冰箱,通过智能眼镜扫描与冰箱对应的二维码,然后从二维码中获取冰箱的标识信息。
在具体实施中,可以有多种方式建立用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
在本发明一实施例中,智能眼镜可以接收用户输入的建立关联控制指令,并根据接收到的建立关联控制指令,建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
例如,在获取到存储装置的标识信息后,将获取到的存储装置的标识信息作为当前的存储装置,当接收到用户输入的建立关联控制指令后,可以将后续获取到的对象的标识信息与当前的存储装置的标识信息之间建立关联关系。建立关联控制指令可以为用户通过智能眼镜的操作界面输入的文字控制指令,也可以为用户输入的语音控制指令。
可以理解的是,也可以先获取牛奶的标识信息,然后通过对智能眼镜进行操作,从已保存的各冰箱的标识信息中,选中冰箱A的标识信息,然后将获取到的牛奶的标识信息与冰箱A建立关联关系,即将牛奶的标识信息归放到冰箱A的标识信息下。
在本发明另一实施例中,与所述存储装置进行通信,从所述存储装置中获取所存储的对象的变化情况,当获知到所述存储装置内存储的对象增加且所增加对象为所述用户注视对象时,建立所述用户注视对象的标识信息与所述存储装置的标识信息的关联关系。
例如,智能冰箱可以自动检测所存储的物品的数量变化情况。将智能眼镜与智能冰箱进行关联,并授权智能眼镜获取智能冰箱的信息。当智能眼镜与智能冰箱之间成功关联后,当智能冰箱内所存储的物品发送变化时,可以将物品变化情况发送至智能眼镜,从而智能眼镜可以及时获知到智能冰箱内的物品变化情况。当用户向智能冰箱内放入一瓶牛奶后,可以通过智能眼镜获取到该牛奶的标识信息。当牛奶放置到智能冰箱后,智能冰箱将检测到所存储的物品多了一个,智能冰箱也可以获取到新放入的牛奶的标识信息。智能冰箱可以将牛奶增加情况及牛奶的标识信息发送至智能眼镜,智能眼镜根据获取到的智能冰箱提供的所存储的物品的变化情况,并检测到用户注视的牛奶的标识信息与智能冰箱中新增的牛奶的标识信息相同时,自动建立牛奶的标识信息与智能冰箱的标识信息之间的关联关系。
在具体实施中,放置在存储装置内的物品可能会发生移动。例如,用户可能会食用放置在冰箱内的食物,为了能及时更新智能眼镜中保存的物品对应的标识信息,在本发明实施例中,在获取到用户注视对象的标识信息之后,还可以从已保存的标识信息中,获取用户注视对象的标识信息以及对应的存储装置的标识信息,解除用户注视对象的标识信息与对应的存储装置的标识信息之间的关联关系,并可以将用户注视对象的标识信息从已保存的标识信息中删除。
在具体实施中,可以根据实际的应用场景或者用户的操作习惯,通过如下方式解除用户注视对象与存储装置之间的关联关系:
在本发明一实施例中,接收用户输入的解除关联控制指令,根据接收到的解除关联控制指令,获取用户注视对象的标识信息,并从已保存的标识信息中,获取与所述用户注视对象的标识信息对应的存储装置的标识信息。获取到用户注视对象的标识信息及对应的存储装置的标识信息之后,解除用户注视对象的标识信息与对应的存储装置的标识信息之间的关联关系。
例如,当用户从冰箱内取出一盒牛奶准备喝掉,可以向智能眼镜输入解除关联关系的语音控制指令,然后通过扫描牛奶盒上的条形码,获取待食用的牛奶的标识信息。智能眼镜获取到待食用牛奶的标识信息后,从已保存的标识信息中获取存储该牛奶的冰箱的标识信息,解除该牛奶的标识信息与冰箱的标识信息之间的关联关系,并将该牛奶的标识信息从已保存的标识信息中删除。
在本发明另一实施例中,智能眼镜可以获取存储装置内所存储的物品的数量,当获取所述存储装置内所存储的物品减少且所减少的对象为所述用户注视对象时,解除用户注视对象的标识信息与对应的存储装置的标识信息之间的关联关系,将用户注视对象的标识信息从已保存的标识信息中删除。
例如,用户从智能冰箱中取出一瓶牛奶准备喝掉,智能冰箱检测到所存储的物品减少一个,并将物品数量减少一个的信息发送至智能眼镜。用户通过智能眼镜获取到待食用的牛奶的标识信息,获取待食用牛奶的标识信息对应的冰箱的标识信息,解除待食用牛奶的标识信息与对应的智能冰箱的标识信息之间的关联关系,并将待食用牛奶的标识信息从已保存的标识信息中删除。
在具体实施中,为了便于用户获知某一存储装置内所放置的对象,智能眼镜可以获取某一存储装置所关联的所有对象的属性信息,按照同一装置所关联的所有对象的属性信息进行分类汇总,并输出。
例如,智能眼镜将冰箱A关联的所有存储对象的属性信息按照对象名称进行汇总后为:牛奶4瓶、可乐3瓶、肉制品1件及薯片2包。智能眼镜可以将汇总后的信息输出,供用户查看。
在具体实施中,在对用户注视对象进行分类时,可以根据对象的名称进行分类,也可以根据对象的存储期限进行分类,还可以根据其他的分类方法对获取到的对象进行分类。
在实际应用中,可食用的物品通常都具有保质期,当某一存储装置内放置有多个物品时,用户可能需要人工的去查看并计算某些物品的保质期,当用户未及时获知物品的保质期时,某一些物品可能未在有效期内及时食用,从而造成物品变质,带来浪费。
为解决上述问题,在本发明实施例中,可以计算所述存储装置内各对象的存储时长;当某一对象的所述保质期对应的时长与所述存储时长的差值小于预设时长时,发出提醒信息。
在具体实施中,可以通过多种方式计算存储装置内各对象的存储时长:
在本发明一实施例中,从各对象对应的属性信息中,获取所述各对象的生产日期;根据当前日期及获取到的对象的生产日期,计算所述各对象的存储时长。
在具体实施中,可以从本地存储器获取各对象的属性信息,也可以从云端服务器获取各对象的属性信息,还可以从关联的其他职能眼镜中获取各对象的属性信息。可以理解的是,还可以根据需要,采用其他方式获取各对象的属性信息。
在实际应用中,从菜场购买的蔬菜,从水果店购买的水果,有些是没有生产日期的,因此在对这些物品进行管理时也带来了一些困扰。为解决上述问题,在发明另一实施例中,当未获取某对象的生产日期时,获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;根据当前日期及首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期,计算该对象的存储时长。
在具体实施中,获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期的方法有多种。
例如,从本地存储器中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期。
又如,从云端服务器中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期。在实际应用中,在大型超市中,可能存在多台待管理存储装置以及多副智能眼镜的情况,可以为每个存储装置建立一个账户,并将建立的账户放置到云端服务器。当每副智能眼镜获取到一个对象的标识信息以及对应的存储装置的标识信息后,将建立对象与对应的存储装置之间的关联关系的日期上传至云端服务器,其他具有查看权限的智能眼镜可以从云端服务器上调取相关的信息。
再如,从关联的其他智能眼镜中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期。当多台智能眼镜对同一存储装置内的物品进行管理时,各智能眼镜之间可以进行相互关联,实现信息共享,避免多副智能眼镜对同一存储装置进行管理所带来的管理混乱,提高对各对象进行管理的准确度及便捷性。
可以理解的是,可以根据需要,采用其他的方式获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期,还可以根据需要,通过其他的方式计算用户注视对象的存储时长。
参照图2,给出了本发明实施例中一种智能眼镜控制装置的结构示意图。智能眼镜的控制装置20包括:
标识信息获取单元21,适于获取用户注视对象的标识信息;
属性信息获取单元22,适于根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息;
输出单元23,适于将所述用户注视对象的属性信息输出。
参照图3,给出了本发明实施例中一种智能眼镜的结构示意图。智能眼镜30包括:智能眼镜本体31、控制器(未示出)、内侧摄像头(未示出)及外侧摄像头32,其中:
所述内侧摄像头,设置在所述智能眼镜本体31上,与所述控制器耦接,适于检测用户的眼睛的注视方向;
在本发明一实施例中,内侧摄像头设置在智能眼镜本体31的右侧支架上,镜头朝向用户的眼睛,可以实时跟踪用户的眼睛的运动,以检测用户的眼睛的注视方向。
所述外侧摄像头32,设置在所述智能眼镜本体31上,与所述控制器耦接,适于接收到控制信号后开始工作,并根据所述控制信号采集所述用户的视角所对应的图像。
在本发明一实施例中,外侧摄像头32设置在智能眼镜本体31上的右侧支架上,外侧摄像头32的镜头朝向外界,可以采集外界的图像。
所述控制器,适于当所述内侧摄像头检测到所述用户的眼睛的注视同一方向的时长超过预设时长时,计算所述用户的视角,并生成所述控制信号发送至所述外侧摄像头32,获取所述外侧摄像头32采集的图像,提取所述获取到的图像中的标识信息,以及根据所述标识信息获取所述用户注视对象的属性信息;
在具体实施中,智能眼镜30中还可以设置有投影装置33。投影装置33与所述控制器耦接,适于通过投影输出所述属性信息;所述控制器,还适于控制所述投影装置33将所述属性信息投影输出。
在具体实施中,所述控制器,还适于获取所述外侧摄像头32采集所述用户的视角所对应的图像时的焦距;所述投影装置33,适于将所述属性信息以相同的焦距输出。
在本发明一实施例中,投影装置33设置在智能眼镜本体31的右侧支架上,可以将属性信息投影输出。投影装置33可以包括:照明灯、光导管、偏振光束分离器及硅上液晶面板。控制器将属性信息对应的图像输出至硅上液晶面板。在照明灯照射下,硅上液晶面板上显示的属性信息对应的图像产生的光经光导管传输到偏振光束分离器,用户在观看区域即可以看到输出的属性信息。
在具体实施中,智能眼镜30中还可以设置有音频输出装置(未示出)。音频输出装置与所述控制器耦接,适于通过音频方式输出所述属性信息;所述控制器,还适于当接收到音频输出控制指令时,控制所述音频输出装置以音频方式将所述属性信息输出。
在实际应用中,音频输出装置可以为扬声器、音响、耳机或者其他可以将音频进行输出的装置。
例如,音频输出装置为蓝牙耳机,蓝牙耳机与智能眼镜上均包括蓝牙通信单元,二者之间通过蓝牙通信单元进行通信。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:ROM、RAM、磁盘或光盘等。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (18)

1.一种智能眼镜的控制方法,其特征在于,包括:
获取用户注视对象的标识信息;
根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息;
将所述用户注视对象的属性信息输出。
2.根据权利要求1所述的智能眼镜的控制方法,其特征在于,获取所述用户注视对象的属性信息之后,还包括:
根据所述用户注视对象的属性信息,将所述用户注视对象的标识信息进行分类保存。
3.根据权利要求1所述的智能眼镜的控制方法,其特征在于,还包括:
获取所述用户注视对象对应的存储装置的标识信息并保存;
建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
4.根据权利要求3所述的智能眼镜的控制方法,其特征在于,所述建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系,包括:
接收用户输入的建立关联控制指令;
根据接收到的所述建立关联控制指令,建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系。
5.根据权利要求4所述的智能眼镜的控制方法,其特征在于,在建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系之后,还包括:
接收用户输入的解除关联控制指令;
根据接收到的所述解除关联控制指令,获取用户注视对象的标识信息,并从已保存的标识信息中,获取与所述用户注视对象所对应的存储装置的标识信息;
解除所述用户注视对象的标识信息与对应的存储装置的标识信息之间的关联关系;
将所述用户注视对象的标识信息从已保存的标识信息中删除。
6.根据权利要求3所述的智能眼镜的控制方法,其特征在于,所述建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系,包括:
与所述存储装置进行通信,获取所述存储装置内存储的对象的变化情况;
当获知所述存储装置内存储的对象增加且所增加对象为所述用户注视对象时,建立所述用户注视对象的标识信息与所述存储装置的标识信息的关联关系。
7.根据权利要求6所述的智能眼镜的控制方法,其特征在于,在建立所述用户注视对象的标识信息与所述存储装置的标识信息的关联关系之后,还包括:
当获知所述存储装置内存储的对象减少且所减少的对象为所述用户注视对象时,解除所述用户注视对象的标识信息与所述存储装置的标识信息之间的关联关系;
将所述用户注视对象的标识信息从已保存的标识信息中删除。
8.根据权利要求5或7所述的智能眼镜的控制方法,其特征在于,还包括:
获取同一存储装置所关联的所有对象的属性信息;
按照所述同一存储装置所关联的所有对象的属性信息分类汇总,并输出。
9.根据权利要求3所述的智能眼镜的控制方法,其特征在于,所述属性信息包括:对象名称、生产日期及保质期。
10.根据权利要求9所述的智能眼镜的控制方法,其特征在于,所述属性信息还包括以下至少一种:产地、使用方法、配料、生产厂商、营养成分、贮存条件及所处位置区域信息。
11.根据权利要求9所述的智能眼镜的控制方法,其特征在于,在建立所述用户注视对象的标识信息与对应的存储装置的标识信息的关联关系之后,还包括:
计算所述存储装置内所存储的各对象的存储时长;
当某一对象的所述保质期对应的时长与所述存储时长的差值小于预设时长时,发出提醒信息。
12.根据权利要求11所述的智能眼镜的控制方法,其特征在于,所述计算所述存储装置内所存储的各对象的存储时长,包括:
从各对象对应的属性信息中,获取所述各对象的生产日期;
根据当前日期及所述各对象的生产日期,计算所述各对象的存储时长。
13.根据权利要求11所述的智能眼镜的控制方法,其特征在于,所述计算所述存储装置内所存储的各对象的存储时长,包括:
获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;
根据当前日期及首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期,计算该对象的存储时长。
14.根据权利要求13所述的智能眼镜的控制方法,其特征在于,采用以下任一种方式获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期:
从本地存储器中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;
从云端服务器中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期;
从关联的其他智能眼镜中获取首次建立该对象的标识信息与对应的存储装置的标识信息的关联关系的日期。
15.根据权利要求1所述的智能眼镜的控制方法,其特征在于,所述获取用户注视对象的标识信息,包括:
当检测到用户的眼睛注视同一方向的时长超过预设时长时,计算所述用户的视角;
获取所述用户视角对应的所述对象的标识信息。
16.一种智能眼镜控制装置,其特征在于,包括:
标识信息获取单元,适于获取用户注视对象的标识信息;
属性信息获取单元,适于根据所述用户注视对象的标识信息,获取所述用户注视对象的属性信息;
输出单元,适于将所述用户注视对象的属性信息输出。
17.一种智能眼镜,其特征在于,包括:智能眼镜本体、控制器、内侧摄像头及外侧摄像头,其中:
所述内侧摄像头,设置在所述智能眼镜本体上,与所述控制器耦接,适于检测用户的眼睛的注视方向;
所述外侧摄像头,设置在所述智能眼镜本体上,与所述控制器耦接,适于接收到控制信号后开始工作,并根据所述控制信号采集所述用户的视角所对应的图像;
所述控制器,适于当所述内侧摄像头检测到所述用户的眼睛的注视同一方向的时长超过预设时长时,计算所述用户的视角,并生成所述控制信号发送至所述外侧摄像头,获取所述外侧摄像头采集的图像,提取所述获取到的图像中的标识信息,以及根据所述标识信息获取所述用户注视对象的属性信息并输出。
18.根据权利要求17所述的智能眼镜,其特征在于,还包括以下至少一种:
投影装置,适于将所述用户注视对象的属性信息通过投影方式输出;
音频输出装置,适于将所述用户注视对象的属性信息通过音频方式输出。
CN201611037145.4A 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置 Pending CN106502422A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611037145.4A CN106502422A (zh) 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611037145.4A CN106502422A (zh) 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置

Publications (1)

Publication Number Publication Date
CN106502422A true CN106502422A (zh) 2017-03-15

Family

ID=58327647

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611037145.4A Pending CN106502422A (zh) 2016-11-23 2016-11-23 智能眼镜及其控制方法、控制装置

Country Status (1)

Country Link
CN (1) CN106502422A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108489507A (zh) * 2018-03-20 2018-09-04 京东方科技集团股份有限公司 导航装置及其工作方法、计算机可读存储介质
CN109145010A (zh) * 2018-08-30 2019-01-04 Oppo广东移动通信有限公司 信息查询方法、装置、存储介质及穿戴式设备
WO2019041795A1 (zh) * 2017-09-01 2019-03-07 广景视睿科技(深圳)有限公司 一种动向投影物体展示系统及其方法
WO2019214672A1 (en) * 2018-05-09 2019-11-14 Quatius Technology (China) Limited Method and device for human-computer interaction with storage apparatus, storage apparatus and storage medium
CN110617856A (zh) * 2019-10-30 2019-12-27 国网山西省电力公司忻州供电公司 智能运检系统
CN111274870A (zh) * 2020-01-07 2020-06-12 北京小米移动软件有限公司 智能眼镜控制方法、智能眼镜控制装置及存储介质
CN111352507A (zh) * 2020-02-27 2020-06-30 维沃移动通信有限公司 信息提示方法及电子设备
WO2021004386A1 (zh) * 2019-07-11 2021-01-14 上海肇观电子科技有限公司 信息播报方法、电路、播报设备、存储介质、智能眼镜
CN112348990A (zh) * 2020-10-23 2021-02-09 广东电网有限责任公司 电力设备巡视系统
CN113641238A (zh) * 2020-04-27 2021-11-12 北京七鑫易维信息技术有限公司 一种控制方法、装置、终端设备、受控设备及存储介质
CN115586833A (zh) * 2022-10-14 2023-01-10 中科创达(重庆)汽车科技有限公司 信息处理方法、装置、系统、电子设备及介质

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019041795A1 (zh) * 2017-09-01 2019-03-07 广景视睿科技(深圳)有限公司 一种动向投影物体展示系统及其方法
CN108489507A (zh) * 2018-03-20 2018-09-04 京东方科技集团股份有限公司 导航装置及其工作方法、计算机可读存储介质
WO2019214672A1 (en) * 2018-05-09 2019-11-14 Quatius Technology (China) Limited Method and device for human-computer interaction with storage apparatus, storage apparatus and storage medium
CN109145010A (zh) * 2018-08-30 2019-01-04 Oppo广东移动通信有限公司 信息查询方法、装置、存储介质及穿戴式设备
CN109145010B (zh) * 2018-08-30 2020-09-29 Oppo广东移动通信有限公司 信息查询方法、装置、存储介质及穿戴式设备
WO2021004386A1 (zh) * 2019-07-11 2021-01-14 上海肇观电子科技有限公司 信息播报方法、电路、播报设备、存储介质、智能眼镜
CN110617856A (zh) * 2019-10-30 2019-12-27 国网山西省电力公司忻州供电公司 智能运检系统
CN111274870A (zh) * 2020-01-07 2020-06-12 北京小米移动软件有限公司 智能眼镜控制方法、智能眼镜控制装置及存储介质
CN111352507A (zh) * 2020-02-27 2020-06-30 维沃移动通信有限公司 信息提示方法及电子设备
CN113641238A (zh) * 2020-04-27 2021-11-12 北京七鑫易维信息技术有限公司 一种控制方法、装置、终端设备、受控设备及存储介质
CN112348990A (zh) * 2020-10-23 2021-02-09 广东电网有限责任公司 电力设备巡视系统
CN115586833A (zh) * 2022-10-14 2023-01-10 中科创达(重庆)汽车科技有限公司 信息处理方法、装置、系统、电子设备及介质

Similar Documents

Publication Publication Date Title
CN106502422A (zh) 智能眼镜及其控制方法、控制装置
US11691073B2 (en) Extended reality AR/VR system
US20220404626A1 (en) Augmented reality spectroscopy
US9053483B2 (en) Personal audio/visual system providing allergy awareness
CN105446474B (zh) 可穿戴智能设备及其交互的方法、可穿戴智能设备系统
US9784497B2 (en) Smart refrigerator
US10685488B1 (en) Systems and methods for computer assisted operation
US20180232689A1 (en) Computer Vision Based Food System And Method
EP4003164A1 (de) System zur erfassung von bewegungsabläufen und/oder vitalparametern einer person
Bindemann et al. Face, body, and center of gravity mediate person detection in natural scenes.
US20230335253A1 (en) Devices, Systems, and Methods, including Augmented Reality (AR) Eyewear, for Estimating Food Consumption and Providing Nutritional Coaching
US20200211285A1 (en) Augmented reality feedback of inventory for an appliance
US10825031B2 (en) System for observing and analyzing customer opinion
WO2014081740A1 (en) Machine to control hardware in an environment
CN108766529A (zh) 一种智能食谱推荐方法及系统
KR20190033414A (ko) 접이식 가상현실 장비
CN106647503A (zh) 一种智能贮存系统及其贮存方法
US20180330224A1 (en) Diet information recommendation system and diet information recommendation method
CN205942608U (zh) 一种用于眼球追踪和虹膜识别的一体化镜杯
KR20200107395A (ko) 접이식 가상현실 장비
CN106774836A (zh) 智能眼镜及其控制方法、控制装置
CN106557166A (zh) 智能眼镜及其控制方法、控制装置
CN109255314B (zh) 信息提示方法、装置、智能眼镜及存储介质
US12406388B2 (en) Home appliance having interior space for accommodating tray at various heights and method of obtaining image by home appliance
JP2021165622A (ja) 食材貯蔵システム、嗜好情報取得方法および嗜好情報取得装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170315