[go: up one dir, main page]

CN110815235B - 一种基于数据匹配的智能购物服务方法及其系统 - Google Patents

一种基于数据匹配的智能购物服务方法及其系统 Download PDF

Info

Publication number
CN110815235B
CN110815235B CN201910901250.5A CN201910901250A CN110815235B CN 110815235 B CN110815235 B CN 110815235B CN 201910901250 A CN201910901250 A CN 201910901250A CN 110815235 B CN110815235 B CN 110815235B
Authority
CN
China
Prior art keywords
information
article information
article
image
controlling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910901250.5A
Other languages
English (en)
Other versions
CN110815235A (zh
Inventor
徐建红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Lianzhong Interactive Technology Co.,Ltd.
Original Assignee
Shenzhen Lianzhong Interactive Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Lianzhong Interactive Technology Co ltd filed Critical Shenzhen Lianzhong Interactive Technology Co ltd
Priority to CN201910901250.5A priority Critical patent/CN110815235B/zh
Publication of CN110815235A publication Critical patent/CN110815235A/zh
Application granted granted Critical
Publication of CN110815235B publication Critical patent/CN110815235B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00Manipulators not otherwise provided for
    • B25J11/008Manipulators for service tasks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1602Programme controls characterised by the control system, structure, architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/12Target-seeking control

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Manipulator (AREA)

Abstract

一种基于数据匹配的智能购物服务方法及其系统,包括:接收用户终端发送的信息并分析是否为包含食材咨询请求的信息,若是则控制识别机器人启动并控制第一摄像头启动实时摄取第一影像,控制识别机器人移动至所在房屋规划的冰箱区域并控制抓取机械臂开启冰箱的冷藏门体以及冷冻门体,控制第二摄像头启动实时摄取第二影像并提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息,提取用户终端发送的信息包含的购物车物品影像并提取购物车物品影像包含的第三物品信息,将第三物品信息分别与第一物品信息以及第二物品信息比对实时分析是否有匹配的物品存在,若有则将分析出的匹配物品信息传输给用户终端。

Description

一种基于数据匹配的智能购物服务方法及其系统
技术领域
本发明涉及超市购物领域,特别涉及一种基于数据匹配的智能购物服务方法及其系统。
背景技术
很多人在生活中都会有过在这样的经历,下班回到家里打开冰箱准备做饭时,却发现食材都已经用光了,逛超市的时候,也不知道家里还剩多少食材,到底要不要再买点回去。
因此,如何将大数据、物品识别以及机器人相结合,在超市购物时,忘记家中冰箱内的食材、厨房内的食材时,如何控制机器人开启冰箱获取对应的冷藏、冷冻食材信息并获取厨房的柜子内以及抽屉内的食材信息,然后将获取的食材与用户购物手推车的食材比对剔除重复的食材是目前急需解决的问题。
发明内容
发明目的:为了克服背景技术中的缺点,本发明实施例提供了一种基于数据匹配的智能购物服务方法及其系统,能够有效解决上述背景技术中涉及的问题。
技术方案:
一种基于数据匹配的智能购物服务方法,所述方法包括以下步骤:
S1、实时接收保持长连接关系的用户终端发送的信息并根据所述用户终端发送的信息分析是否为包含食材咨询请求的信息;
S2、若是则控制设置于房屋内部位置的识别机器人启动并控制设置于所述识别机器人外部位置的第一摄像头启动实时摄取第一影像;
S3、根据第一影像控制所述识别机器人移动至所在房屋规划的冰箱区域并根据第一影像控制设置于所述识别机器人外部位置的抓取机械臂开启冰箱的冷藏门体以及冷冻门体;
S4、控制设置于所述识别机器人外部的第二摄像头启动实时摄取第二影像并根据所述第二影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息;
S5、提取接收到的所述用户终端发送的信息包含的购物车物品影像并提取所述购物车物品影像包含的第三物品信息;
S6、将提取的第三物品信息分别与第一物品信息以及第二物品信息比对实时分析是否有匹配的物品存在;
S7、若有则将分析出的匹配物品信息传输给所述用户终端。
作为本发明的一种优选方式,所述方法还包括以下步骤:
S8、提取接收到的用户终端发送的信息包含的购物车编号并与提取的所述购物车编号一致编号的超市购物车建立连接关系;
S9、控制设置于建立连接的所述超市购物车推手位置的第三摄像头启动,实时摄取第三影像并控制设置于所述超市购物车推手位置的激光标识器启动;
S10、根据第三影像以及分析出的匹配物品信息实时控制所述激光标识器将所述超市购物车内部的与匹配物品信息匹配的物品进行激光标识。
作为本发明的一种优选方式,在S5后,所述方法还包括以下步骤:
S50、根据第一影像控制所述识别机器人移动至所在房屋规划的厨房区域并根据第一影像控制所述抓取机械臂开启所述厨房区域的柜门以及抽屉;
S51、根据第一影像控制所述识别机器人在所述厨房区域巡逻预设圈数并提取所述第一影像中包含的第四物品信息;
S52、将提取的第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对分析是否有匹配的物品存在;
S53、若有则将分析出的匹配物品信息传输给所述用户终端。
作为本发明的一种优选方式,在S51后,所述方法还包括以下步骤:
S510、将提取的第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至连接的食谱数据库内进行食谱查询并实时提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱;
S511、将所有提取出的食谱信息传输给所述用户终端并实时接收所述用户终端反馈的食谱信息;
S512、将用户终端反馈的食谱信息与所述第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取所述食谱信息剩余所需的物品信息并将获取的述食谱信息剩余所需的物品信息传输给所述用户终端。
作为本发明的一种优选方式,所述方法还包括以下步骤:
S100、在提取第一物品信息完成后,根据第一影像控制所述抓取机械臂将冰箱开启的冷藏门体关闭;
S101、在提取第二物品信息完成后,根据第一影像控制所述抓取机械臂将冰箱开启的冷冻门体关闭;
S101、在提取第四物品信息完成后,根据第一影像控制所述抓取机械臂将厨房区域开启的柜门以及抽屉关闭。
一种基于数据匹配的智能购物服务系统,使用一种基于数据匹配的智能购物服务方法,包括识别机器人、超市购物车以及云控中心,所述识别机器人设置有第一摄像头、第二摄像头以及抓取机械臂,所述第一摄像头设置于所述识别机器人上方外部位置,用于摄取识别机器人外部的环境影像;所述第二摄像头分别设置于所述识别机器人外部的上方及下方位置并与房屋内部的冰箱冷藏区域以及冷冻区域对应,且设置有上下调节功能,用于分别摄取冰箱冷藏区域以及冷冻区域的环境影像;所述抓取机械臂设置于识别机器人外部位置,用于开关冰箱门体、厨房柜门以及厨房抽屉;
所述超市购物车设置有扫描壳体、第三摄像头以及激光标识器,所述扫描壳体设置于所述超市购物车的推手中间位置;所述第三摄像头设置于所述扫描壳体面向购物篮的表面位置,用于摄取所述超市购物车放置的物品信息;所述激光标识器设置于所述扫描壳体面向购物篮的表面位置,用于标识物品;
所述云控中心包括:
无线模块,用于分别与第一摄像头、第二摄像头、抓取机械臂、扫描壳体、第三摄像头、激光标识器、用户终端以及超市管理部门外部设备无线连接;
信息接收模块,用于接收信息和/或请求和/或指令;
信息分析模块,用于根据指定信息进行信息的处理及分析;
机器人控制模块,用于控制识别机器人按照设定的步骤执行设定的操作;
第一摄取模块,用于控制第一摄像头启动或关闭;
机械臂控制模块,用于控制机械臂按照设定的步骤执行设定的操作;
第二摄取模块,用于控制第二摄像头启动或关闭;
冰箱提取模块,用于根据第二摄像头摄取的影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息;
影像提取模块,用于提取用户终端发送的信息包含的购物车物品影像;
购物提取模块,用于提取购物车物品影像包含的第三物品信息;
第一比对模块,用于将第三物品信息分别与第一物品信息以及第二物品信息比对并获取比对结果;
信息传输模块,用于将指定信息传输给指定对象。
作为本发明的一种优选方式,所述云控中心还包括:
编号提取模块,用于提取用户终端发送的信息包含的购物车编号;
连接建立模块,用于与提取的购物车编号一致编号的超市购物车建立连接关系;
第三摄取模块,用于控制第三摄像头启动或关闭;
激光标识模块,用于控制激光标识器为超市购物车内的指定物品进行激光管标识。
作为本发明的一种优选方式,所述云控中心还包括:
厨房提取模块,用于提取第一影像中包含的第四物品信息;
第二比对模块,用于将第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对并获取比对结果。
作为本发明的一种优选方式,所述云控中心还包括:
食谱数据库,用于存储食谱信息;
食谱查询模块,用于将第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至食谱数据库内进行食谱查询;
食谱提取模块,用于提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱;
第三比对模块,用于将用户终端反馈的食谱信息与第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取食谱信息剩余所需的物品信息。
本发明实现以下有益效果:
1.智能购物服务系统启动后,实时获取用户发送的食材咨询请求并在获取到后,控制识别机器人前往冰箱区域识别冰箱冷藏区域以及冷冻区域的物品信息并识别用户的购物车内部的物品信息,然后根据购物车内的物品信息与冰箱冷藏区域以及冷冻区域的物品信息进行比对识别超市购物车内存在的匹配物品,并将存在的匹配物品传输给用户终端进行提示。
2.在将存在的匹配物品传输给用户终端进行提示后,通过超市购物车的第三摄像头识别超市购物车内部的物品与房屋内部存在的物品重复信息,然后通过超市购物车的激光标识器将与房屋内部重复的物品进行激光标识。
3.在提取房屋内部的冰箱冷藏区域以及冷冻区域的物品信息后,控制识别机器人在厨房内部进行巡逻并利用抓取机械臂开启厨房的柜门以及抽屉,然后扫描厨房内部存在的物品信息,然后根据购物车内的物品信息与冰箱冷藏区域、冷冻区域的物品信息以及厨房内部的物品信息进行比对识别超市购物车内存在的匹配物品,并将存在的匹配物品传输给用户终端进行提示。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并于说明书一起用于解释本公开的原理。
图1为本发明其中一个示例提供的智能购物服务方法的流程图;
图2为本发明其中一个示例提供的激光标识方法的流程图;
图3为本发明其中一个示例提供的厨房物品识别方法的流程图;
图4为本发明其中一个示例提供的食谱选取方法的流程图;
图5为本发明其中一个示例提供的物品识别完成处理方法的流程图;
图6为本发明其中一个示例提供的智能购物服务系统的连接关系图;
图7为本发明其中一个示例提供识别机器人的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
实施例一
参考图1,图6-7所示。
具体的,本实施例提供一种基于数据匹配的智能购物服务方法,其特征在于,所述方法包括以下步骤:
S1、实时接收保持长连接关系的用户终端发送的信息并根据所述用户终端发送的信息分析是否为包含食材咨询请求的信息;
S2、若是则控制设置于房屋内部位置的识别机器人1启动并控制设置于所述识别机器人1外部位置的第一摄像头10启动实时摄取第一影像;
S3、根据第一影像控制所述识别机器人1移动至所在房屋规划的冰箱区域并根据第一影像控制设置于所述识别机器人1外部位置的抓取机械臂12开启冰箱的冷藏门体以及冷冻门体;
S4、控制设置于所述识别机器人1外部的第二摄像头11启动实时摄取第二影像并根据所述第二影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息;
S5、提取接收到的所述用户终端发送的信息包含的购物车物品影像并提取所述购物车物品影像包含的第三物品信息;
S6、将提取的第三物品信息分别与第一物品信息以及第二物品信息比对实时分析是否有匹配的物品存在;
S7、若有则将分析出的匹配物品信息传输给所述用户终端。
在S1中,具体在云控中心3启动后,云控中心3包含的信息接收模块31实时接收保持长连接关系的用户终端发送的信息并将接收到的信息发送给信息分析模块32,所述云控中心3信息分析模块32接收到所述用户终端发送的信息后,所述信息分析模块32根据所述用户终端发送的信息分析是否为包含食材咨询请求的信息,即分析用户是否忘记家中的食材信息。
在S2中,具体在信息分析模块32分析出所述用户终端发送的信息为包含食材咨询请求的信息后,所述云控中心3包含的机器人控制模块33控制设置于房屋内部的位置的识别机器人1启动,在识别机器人1启动完成后,所述云控中心3包含的第一摄取模块34控制设置于所述识别机器人1外部位置的第一摄像头10启动实时摄取第一影像,所述第一影像是指识别机器人1周围的环境影像。
在S3中,具体在第一摄像头10启动完成后,所述云控中心3包含的机器人控制模块33根据第一影像控制所述识别机器人1移动至所在房屋规划的冰箱区域,且机器人的第二摄像头11面向所述冰箱区域的冰箱,在识别机器人1移动完成后,所述云控中心3包含的机械臂控制模块35根据第一影像控制设置于所述识别机器人1外部位置的抓取机械臂12伸出抓取冰箱的冷藏门体以及冷冻门体,然后控制所述抓取机械臂12收缩开启冰箱的冷藏区域以及冷冻区域。
具体的,在冰箱的冷藏门体以及冷冻门体开启完成后,所述云控中心3包含的第二摄取模块36控制设置于所述识别机器人1外部的第二摄像头11启动实时摄取第二影像并将所述第二影像传输给冰箱提取模块37,所述云控中心3包含的冰箱提取模块37接收到所述第二影像后,所述冰箱提取模块37根据所述第二影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息并将提取的第一物品信息以及第二物品信息传输给第一比对模块40;其中,所述第二影像是指第二摄像头11摄取到的冰箱冷藏区域以及冷冻区域的影像。
在S5中,具体在所述冰箱提取模块37提取完成第一物品信息以及第二物品信息后,所述云控中心3包含的影像提取模块38提取信息接收模块31接收到的所述用户终端发送的信息包含的购物车物品影像并将提取的购物车物品影像传输给购物提取模块39,所述云控中心3包含的购物提取模块39接收到所述购物车物品影像后,所述购物提取模块39提取所述购物车物品影像包含的第三物品信息并将提取的所述第三物品信息传输给第一比对模块40。
在S6中,具体在所述云控中心3包含的第一比对模块40接收到所述第一物品信息、第二物品信息以及第三物品信息后,所述第一比对模块40将所述第三物品信息分别与第一物品信息以及第二物品信息比对并获取比对结果,且将获取的比对结果传输给信息分析模块32,所述信息分析模块32根据所述比对结果实时分析是否有匹配的物品存在,即分析用户对应的超市购物车内的物品在家中是否有一样的物品存在。
在S7中,具体在信息分析模块32分析出用户对应的超市购物车内的物品在家中有一样的物品存在后,所述云控中心3包含的信息传输模块41将分析出的匹配物品信息传输给所述用户终端,以提醒用户家中存在购物车内物品一致的物品,注意查看,防止买的无用的重复食材或调味料。
其中,所述物品信息包括食材信息以及调味料信息,所述食材信息包括食材的名称、种类,所述调味料信息包括调味料的名称以及种类;第一物品信息是指冰箱冷藏区域内的物品信息,第二物品信息是指冰箱冷冻区域的物品信息,所述第三物品信息是指超市购物车的购物篮内的物品信息。
实施例二
参考图2,图6-7所示。
具体的,本实施例与实施例一基本上一致,区别之处在于,本实施例中,所述方法还包括以下步骤:
S8、提取接收到的用户终端发送的信息包含的购物车编号并与提取的所述购物车编号一致编号的超市购物车建立连接关系。
具体的,当提醒用户超市购物车内的物品在家中有一样的物品存在后,所述云控中心3包含的编号提取模块42提取接收到的用户终端发送的信息包含的购物车编号并将提取的购物车编号传输给连接建立模块43,所述云控中心3包含的连接建立模块43接收到所述购物车编号后,与提取的所述购物车编号一致编号的超市购物车建立连接关系,所述超市购物车是与运控中心保持长连接关系。
S9、控制设置于建立连接的所述超市购物车推手位置的第三摄像头21启动,实时摄取第三影像并控制设置于所述超市购物车推手位置的激光标识器22启动。
具体的,在连接建立模块43与所述超市购物车建立连接关系后,所述云控中心3包含的第三摄取模块44控制设置于建立连接的所述超市购物车推手位置的第三摄像头21启动实时摄取第三影像,所述第三影像是指第三摄像头21摄取的超市购物车的购物篮内的环境影像,同时所述云控中心3包含的激光标识模块45控制设置于所述超市购物车推手位置的激光标识器22启动。
S10、根据第三影像以及分析出的匹配物品信息实时控制所述激光标识器22将所述超市购物车内部的与匹配物品信息匹配的物品进行激光标识。
具体的,在第三摄像头21启动且激光标识器22启动完成后,所述激光标识模块45根据第三影像以及分析出的匹配物品信息实时控制所述激光标识器22将所述超市购物车内部的与匹配物品信息匹配的物品进行激光标识,即发出安全激光柱将与家中物品重复的超市购物车内的物品进行标识。
实施例三
参考图3-7所示。
具体的,本实施例与实施例一基本上一致,区别之处在于,本实施例中,在S5后,所述方法还包括以下步骤:
S50、根据第一影像控制所述识别机器人1移动至所在房屋规划的厨房区域并根据第一影像控制所述抓取机械臂12开启所述厨房区域的柜门以及抽屉。
具体的,在购物提取模块39提取完成第三物品信息后,所述机器人控制模块33根据第一影像控制所述识别机器人1移动至所在房屋规划的厨房区域,在所述识别机器人1移动到达所述厨房区域后,所述机械臂控制模块35根据第一影像控制所述抓取机械臂12开启所述厨房区域所有的柜门以及抽屉,在开启柜门以及抽屉时,所述机器人控制模块33与机械臂控制模块35配合工作,即机器人控制模块33控制所述识别机器人1移动至未开启的柜子或抽屉处,然后机械臂控制模块35控制抓取机械臂12将所述柜子或抽屉开启,以此类推,直至所有的柜子和抽屉均开启为止。
S51、根据第一影像控制所述识别机器人1在所述厨房区域巡逻预设圈数并提取所述第一影像中包含的第四物品信息。
其中,所述预设圈数可以是1-10圈,在本实施例中优选为3圈;所述第四物品信息是指厨房内部的物品信息。
具体的,在厨房区域内的柜子以及抽屉开启完成后,所述机器人控制模块33根据第一影像控制所述识别机器人1在所述厨房区域巡逻预设圈数,在机器人移动巡逻时,所述云控中心3包含的厨房提取模块46提取所述第一影像中包含的第四物品信息并将提取的第四物品信息传输给第二比对模块47,厨房内的每个物品的信息均只提取一次。
S52、将提取的第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对分析是否有匹配的物品存在。
具体的,所述云控中心3包含的第二比对模块47接收到所述第四物品信息后,所述第二比对模块47将提取的第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对并获取比对结果,且将获取的比对结果传输给信息分析模块32,所述信息分析模块32根据所述比对结果实时分析是否有匹配的物品存在,即分析用户对应的超市购物车内的物品在家中是否有一样的物品存在。
S53、若有则将分析出的匹配物品信息传输给所述用户终端。
具体在信息分析模块32分析出用户对应的超市购物车内的物品在家中有一样的物品存在后,所述信息传输模块41将分析出的匹配物品信息传输给所述用户终端,以提醒用户家中存在购物车内物品一致的物品,注意查看,防止买的无用的重复食材或调味料。
作为本发明的一种优选方式,在S51后,所述方法还包括以下步骤:
S510、将提取的第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至连接的食谱数据库48内进行食谱查询并实时提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱。
具体的,在厨房提取模块46提取第四物品信息完成后,所述云控中心3包含的食谱查询模块49将提取的第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至连接的食谱数据库48内进行食谱查询,即查询包含有第一物品信息、第二物品信息、第三物品信息以及第四物品信息任意一种或多种的食谱信息并将查询到的食谱信息传输给食谱提取模块50,所述云控中心3包含的食谱提取模块50接收到食谱信息后,所述食谱提取模块50实时提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱并将提取的食谱传输给信息传输模块41。
S511、将所有提取出的食谱信息传输给所述用户终端并实时接收所述用户终端反馈的食谱信息。
具体的,在信息传输模块41接收到所述食谱后,所述信息传输模块41将所有接收到的食谱信息传输给所述用户终端,同时所述信息接收模块31实时接收所述用户终端反馈的食谱信息。
S512、将用户终端反馈的食谱信息与所述第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取所述食谱信息剩余所需的物品信息并将获取的述食谱信息剩余所需的物品信息传输给所述用户终端。
具体的,若信息接收模块31接收到所述用户终端反馈的食谱信息后,将所述食谱信息传输给第三比对模块51,所述云控中心3包含的第三比对模块51将用户终端反馈的食谱信息与所述第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取所述食谱信息剩余所需的物品信息,即获取食谱记录的用户购物车和家中均未有的食材和/或调味料,在获取到所述食谱信息剩余所需的物品信息后,信息传输模块41将所述食谱信息剩余所需的物品信息传输给所述用户终端。,以提醒用户进行购买。
作为本发明的一种优选方式,所述方法还包括以下步骤:
S100、在提取第一物品信息完成后,根据第一影像控制所述抓取机械臂12将冰箱开启的冷藏门体关闭。
具体的,在获取到冰箱冷藏区域所有的物品信息后,机械臂控制模块35根据第一影像控制所述抓取机械臂12将冰箱开启的冷藏门体关闭。
S101、在提取第二物品信息完成后,根据第一影像控制所述抓取机械臂12将冰箱开启的冷冻门体关闭。
具体的,在获取到冰箱冷冻区域所有的物品信息后,机械臂控制模块35根据第一影像控制所述抓取机械臂12将冰箱开启的冷冻门体关闭。
S101、在提取第四物品信息完成后,根据第一影像控制所述抓取机械臂12将厨房区域开启的柜门以及抽屉关闭。
具体的,在获取到厨房区域所有的物品信息后,机械臂控制模块35根据第一影像控制所述抓取机械臂12将厨房内开启的柜门或抽屉关闭,机器人控制模块33根据第一影像控制所述识别机器人1配合,即机器人控制模块33控制所述识别机器人1移动至开启的柜子或抽屉处,然后机械臂控制模块35控制抓取机械臂12将所述柜子或抽屉关闭,以此类推,直至所有的柜子和抽屉均关闭为止。
实施例四
参考图6-7所示。
具体的,本实施例提供一种基于数据匹配的智能购物服务系统,使用一种基于数据匹配的智能购物服务方法,包括识别机器人1、超市购物车以及云控中心3,所述识别机器人1设置有第一摄像头10、第二摄像头11以及抓取机械臂12,所述第一摄像头10设置于所述识别机器人1上方外部位置,用于摄取识别机器人1外部的环境影像;所述第二摄像头11分别设置于所述识别机器人1外部的上方及下方位置并与房屋内部的冰箱冷藏区域以及冷冻区域对应,且设置有上下调节功能,用于分别摄取冰箱冷藏区域以及冷冻区域的环境影像;所述抓取机械臂12设置于识别机器人1外部位置,用于开关冰箱门体、厨房柜门以及厨房抽屉;
所述超市购物车设置有扫描壳体20、第三摄像头21以及激光标识器22,所述扫描壳体20设置于所述超市购物车的推手中间位置;所述第三摄像头21设置于所述扫描壳体20面向购物篮的表面位置,用于摄取所述超市购物车放置的物品信息;所述激光标识器22设置于所述扫描壳体20面向购物篮的表面位置,用于标识物品;
所述云控中心3包括:
无线模块30,用于分别与第一摄像头10、第二摄像头11、抓取机械臂12、扫描壳体20、第三摄像头21、激光标识器22、用户终端以及超市管理部门外部设备无线连接;
信息接收模块31,用于接收信息和/或请求和/或指令;
信息分析模块32,用于根据指定信息进行信息的处理及分析;
机器人控制模块33,用于控制识别机器人1按照设定的步骤执行设定的操作;
第一摄取模块34,用于控制第一摄像头10启动或关闭;
机械臂控制模块35,用于控制机械臂按照设定的步骤执行设定的操作;
第二摄取模块36,用于控制第二摄像头11启动或关闭;
冰箱提取模块37,用于根据第二摄像头11摄取的影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息;
影像提取模块38,用于提取用户终端发送的信息包含的购物车物品影像;
购物提取模块39,用于提取购物车物品影像包含的第三物品信息;
第一比对模块40,用于将第三物品信息分别与第一物品信息以及第二物品信息比对并获取比对结果;
信息传输模块41,用于将指定信息传输给指定对象。
作为本发明的一种优选方式,所述云控中心3还包括:
编号提取模块42,用于提取用户终端发送的信息包含的购物车编号;
连接建立模块43,用于与提取的购物车编号一致编号的超市购物车建立连接关系;
第三摄取模块44,用于控制第三摄像头21启动或关闭;
激光标识模块45,用于控制激光标识器22为超市购物车内的指定物品进行激光管标识。
作为本发明的一种优选方式,所述云控中心3还包括:
厨房提取模块46,用于提取第一影像中包含的第四物品信息;
第二比对模块47,用于将第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对并获取比对结果。
作为本发明的一种优选方式,所述云控中心3还包括:
食谱数据库48,用于存储食谱信息;
食谱查询模块49,用于将第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至食谱数据库48内进行食谱查询;
食谱提取模块50,用于提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱;
第三比对模块51,用于将用户终端反馈的食谱信息与第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取食谱信息剩余所需的物品信息。
应理解,在实施例四中,上述各个模块的具体实现过程可与上述方法实施例(实施例一至实施例三)的描述相对应,此处不再详细描述。
上述实施例四所提供的系统,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上诉功能分配由不同的功能模块完成,即将系统的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
上述实施例只为说明本发明的技术构思及特点,其目的是让熟悉该技术领域的技术人员能够了解本发明的内容并据以实施,并不能以此来限制本发明的保护范围。凡根据本发明精神实质所作出的等同变换或修饰,都应涵盖在本发明的保护范围之内。

Claims (9)

1.一种基于数据匹配的智能购物服务方法,其特征在于,所述方法包括以下步骤:
S1、实时接收保持长连接关系的用户终端发送的信息并根据所述用户终端发送的信息分析是否为包含食材咨询请求的信息;
S2、若是则控制设置于房屋内部位置的识别机器人启动并控制设置于所述识别机器人外部位置的第一摄像头启动实时摄取第一影像;
S3、根据第一影像控制所述识别机器人移动至所在房屋规划的冰箱区域并根据第一影像控制设置于所述识别机器人外部位置的抓取机械臂开启冰箱的冷藏门体以及冷冻门体;
S4、控制设置于所述识别机器人外部的第二摄像头启动实时摄取第二影像并根据所述第二影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息;
S5、提取接收到的所述用户终端发送的信息包含的购物车物品影像并提取所述购物车物品影像包含的第三物品信息;
S6、将提取的第三物品信息分别与第一物品信息以及第二物品信息比对实时分析是否有匹配的物品存在;
S7、若有则将分析出的匹配物品信息传输给所述用户终端。
2.根据权利要求1所述的一种基于数据匹配的智能购物服务方法,其特征在于,所述方法还包括以下步骤:
S8、提取接收到的用户终端发送的信息包含的购物车编号并与提取的所述购物车编号一致编号的超市购物车建立连接关系;
S9、控制设置于建立连接的所述超市购物车推手位置的第三摄像头启动,实时摄取第三影像并控制设置于所述超市购物车推手位置的激光标识器启动;
S10、根据第三影像以及分析出的匹配物品信息实时控制所述激光标识器将所述超市购物车内部的与匹配物品信息匹配的物品进行激光标识。
3.根据权利要求1所述的一种基于数据匹配的智能购物服务方法,其特征在于,在S5后,所述方法还包括以下步骤:
S50、根据第一影像控制所述识别机器人移动至所在房屋规划的厨房区域并根据第一影像控制所述抓取机械臂开启所述厨房区域的柜门以及抽屉;
S51、根据第一影像控制所述识别机器人在所述厨房区域巡逻预设圈数并提取所述第一影像中包含的第四物品信息;
S52、将提取的第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对分析是否有匹配的物品存在;
S53、若有则将分析出的匹配物品信息传输给所述用户终端。
4.根据权利要求3所述的一种基于数据匹配的智能购物服务方法,其特征在于,在S51后,所述方法还包括以下步骤:
S510、将提取的第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至连接的食谱数据库内进行食谱查询并实时提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱;
S511、将所有提取出的食谱信息传输给所述用户终端并实时接收所述用户终端反馈的食谱信息;
S512、将用户终端反馈的食谱信息与所述第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取所述食谱信息剩余所需的物品信息并将获取的述食谱信息剩余所需的物品信息传输给所述用户终端。
5.根据权利要求3所述的一种基于数据匹配的智能购物服务方法,其特征在于,所述方法还包括以下步骤:
S100、在提取第一物品信息完成后,根据第一影像控制所述抓取机械臂将冰箱开启的冷藏门体关闭;
S101、在提取第二物品信息完成后,根据第一影像控制所述抓取机械臂将冰箱开启的冷冻门体关闭;
S101、在提取第四物品信息完成后,根据第一影像控制所述抓取机械臂将厨房区域开启的柜门以及抽屉关闭。
6.一种基于数据匹配的智能购物服务系统,使用权利要求1-5任一项所述的一种基于数据匹配的智能购物服务方法,包括识别机器人、超市购物车以及云控中心,其特征在于,所述识别机器人设置有第一摄像头、第二摄像头以及抓取机械臂,所述第一摄像头设置于所述识别机器人上方外部位置,用于摄取识别机器人外部的环境影像;所述第二摄像头分别设置于所述识别机器人外部的上方及下方位置并与房屋内部的冰箱冷藏区域以及冷冻区域对应,且设置有上下调节功能,用于分别摄取冰箱冷藏区域以及冷冻区域的环境影像;所述抓取机械臂设置于识别机器人外部位置,用于开关冰箱门体、厨房柜门以及厨房抽屉;
所述超市购物车设置有扫描壳体、第三摄像头以及激光标识器,所述扫描壳体设置于所述超市购物车的推手中间位置;所述第三摄像头设置于所述扫描壳体面向购物篮的表面位置,用于摄取所述超市购物车放置的物品信息;所述激光标识器设置于所述扫描壳体面向购物篮的表面位置,用于标识物品;
所述云控中心包括:
无线模块,用于分别与第一摄像头、第二摄像头、抓取机械臂、扫描壳体、第三摄像头、激光标识器、用户终端以及超市管理部门外部设备无线连接;
信息接收模块,用于接收信息和/或请求和/或指令;
信息分析模块,用于根据指定信息进行信息的处理及分析;
机器人控制模块,用于控制识别机器人按照设定的步骤执行设定的操作;
第一摄取模块,用于控制第一摄像头启动或关闭;
机械臂控制模块,用于控制机械臂按照设定的步骤执行设定的操作;
第二摄取模块,用于控制第二摄像头启动或关闭;
冰箱提取模块,用于根据第二摄像头摄取的影像提取冰箱冷藏空间内部的第一物品信息以及冰箱冷冻空间内部的第二物品信息;
影像提取模块,用于提取用户终端发送的信息包含的购物车物品影像;
购物提取模块,用于提取购物车物品影像包含的第三物品信息;
第一比对模块,用于将第三物品信息分别与第一物品信息以及第二物品信息比对并获取比对结果;
信息传输模块,用于将指定信息传输给指定对象。
7.根据权利要求6所述的一种基于数据匹配的智能购物服务系统,其特征在于,所述云控中心还包括:
编号提取模块,用于提取用户终端发送的信息包含的购物车编号;
连接建立模块,用于与提取的购物车编号一致编号的超市购物车建立连接关系;
第三摄取模块,用于控制第三摄像头启动或关闭;
激光标识模块,用于控制激光标识器为超市购物车内的指定物品进行激光管标识。
8.根据权利要求6所述的一种基于数据匹配的智能购物服务系统,其特征在于,所述云控中心还包括:
厨房提取模块,用于提取第一影像中包含的第四物品信息;
第二比对模块,用于将第三物品信息分别与第一物品信息、第二物品信息以及第四物品信息进行比对并获取比对结果。
9.根据权利要求6所述的一种基于数据匹配的智能购物服务系统,其特征在于,所述云控中心还包括:
食谱数据库,用于存储食谱信息;
食谱查询模块,用于将第一物品信息、第二物品信息、第三物品信息以及第四物品信息输入至食谱数据库内进行食谱查询;
食谱提取模块,用于提取包含第一物品信息和/或第二物品信息和/或第三物品信息和/或第四物品信息的食谱;
第三比对模块,用于将用户终端反馈的食谱信息与第一物品信息、第二物品信息、第三物品信息以及第四物品信息进行匹配获取食谱信息剩余所需的物品信息。
CN201910901250.5A 2019-09-23 2019-09-23 一种基于数据匹配的智能购物服务方法及其系统 Active CN110815235B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910901250.5A CN110815235B (zh) 2019-09-23 2019-09-23 一种基于数据匹配的智能购物服务方法及其系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910901250.5A CN110815235B (zh) 2019-09-23 2019-09-23 一种基于数据匹配的智能购物服务方法及其系统

Publications (2)

Publication Number Publication Date
CN110815235A CN110815235A (zh) 2020-02-21
CN110815235B true CN110815235B (zh) 2021-05-18

Family

ID=69548192

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910901250.5A Active CN110815235B (zh) 2019-09-23 2019-09-23 一种基于数据匹配的智能购物服务方法及其系统

Country Status (1)

Country Link
CN (1) CN110815235B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112068576B (zh) * 2020-07-21 2022-07-12 华中科技大学 一种基于任务分级时序优化的水下无人艇-双机械臂协同控制方法
CN113494745B (zh) * 2021-02-27 2022-10-11 北京威势优创科技有限公司 一种智能移动式空调及其控制方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE521047C2 (sv) * 1999-02-19 2003-09-23 Rutger Roseen Anordning och förfarande för att ge information om innehållet i ett skåp
CN108418734B (zh) * 2013-09-27 2021-06-01 夏普株式会社 控制装置、控制方法、控制系统以及报知设备
CN103822431B (zh) * 2014-02-25 2016-02-10 四川长虹电器股份有限公司 一种冰箱
CN204893945U (zh) * 2015-09-11 2015-12-23 哈尔滨理工大学 仿人类手臂关节的家政机器人
KR20170076992A (ko) * 2015-12-26 2017-07-05 삼성전자주식회사 냉장고
CN105897886A (zh) * 2016-04-07 2016-08-24 美的集团股份有限公司 食材购买提醒方法、设备、智能终端、云服务器及汽车
CN109416809B (zh) * 2016-07-13 2022-03-18 索尼公司 代理机器人控制系统、代理机器人系统、代理机器人控制方法和存储介质
CN108775764A (zh) * 2018-06-12 2018-11-09 芜湖乐创电子科技有限公司 一种基于监测分析传输的冰箱储物分析机器人控制系统

Also Published As

Publication number Publication date
CN110815235A (zh) 2020-02-21

Similar Documents

Publication Publication Date Title
US9741014B2 (en) Automated asset management system with multiple sensing technologies
KR102510066B1 (ko) 매장 내의 단말기를 통하여 주문 받는 시스템
US10621543B2 (en) System and method to enable delivery and pick up of packages using pods and unmanned vehicles
US9741010B1 (en) System and method for securely delivering packages to different delivery recipients with a single vehicle
CN108416901A (zh) 智能货柜内货品识别方法及装置、智能货柜
US20190292030A1 (en) Systems, devices and methods of controlling motorized transport units in a retail shopping facility
CN110815235B (zh) 一种基于数据匹配的智能购物服务方法及其系统
EP3330908A1 (en) System and method for securely delivering packages to different delivery recipients with a single vehicle
CN106846750A (zh) 一种自动布防撤防系统及方法
US10438033B1 (en) Object tracking system having first and second RFID readers with display
CN108257320A (zh) 基于储货柜的取货方法和销售系统
EP3255596A1 (en) Method and apparatus for collection of items from a store
JP7030092B2 (ja) 情報生成方法及び装置並びにヒューマンコンピュータインタラクションのための装置
WO2018099930A1 (en) System and method for securely delivering packages to different delivery recipients with a single vehicle
CN105575009A (zh) 一种智能柜的柜门打开方法及装置
CN107977816A (zh) 快件投递方法及服务器
US9836936B1 (en) Object tracking system
CN110852410A (zh) 一种智能工器具管理系统及方法
US20180137495A1 (en) Layaway system
CN113700414B (zh) 一种贵重物品安全管理系统
US10936835B2 (en) System and a method for detecting information of assets stored in communication tags
CA2959641A1 (en) Shopping facility discarded item sorting systems, devices, and methods
JP2019023131A (ja) ストッカ、ストッカ管理装置および情報管理方法
CN113053036B (zh) 交易以及物品存取方法、设备、存储介质和系统
CN111951486A (zh) 配送柜体的告警方法和装置、存储介质和电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210427

Address after: 518000 unit 01-02, 7 / F, Changhong science and technology building, South 12 Keji Road, high tech Zone, Yuehai street, Nanshan District, Shenzhen City, Guangdong Province

Applicant after: Shenzhen Lianzhong Interactive Technology Co.,Ltd.

Address before: Room 1307, Building 168, East Shanghai Road, Loudong Street, Taicang City, Suzhou City, Jiangsu Province

Applicant before: SUZHOU SHANGXINBAO INFORMATION TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: A Data Matching Based Intelligent Shopping Service Method and System

Effective date of registration: 20231129

Granted publication date: 20210518

Pledgee: Shenzhen Rural Commercial Bank Co.,Ltd. Nanshan Sub branch

Pledgor: Shenzhen Lianzhong Interactive Technology Co.,Ltd.

Registration number: Y2023980068411

PC01 Cancellation of the registration of the contract for pledge of patent right
PC01 Cancellation of the registration of the contract for pledge of patent right

Granted publication date: 20210518

Pledgee: Shenzhen Rural Commercial Bank Co.,Ltd. Nanshan Sub branch

Pledgor: Shenzhen Lianzhong Interactive Technology Co.,Ltd.

Registration number: Y2023980068411