[go: up one dir, main page]

CN107867296B - 安装在车辆上的车辆控制装置和控制该车辆的方法 - Google Patents

安装在车辆上的车辆控制装置和控制该车辆的方法 Download PDF

Info

Publication number
CN107867296B
CN107867296B CN201710740649.0A CN201710740649A CN107867296B CN 107867296 B CN107867296 B CN 107867296B CN 201710740649 A CN201710740649 A CN 201710740649A CN 107867296 B CN107867296 B CN 107867296B
Authority
CN
China
Prior art keywords
vehicle
driving mode
mobile device
manual driving
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710740649.0A
Other languages
English (en)
Other versions
CN107867296A (zh
Inventor
金成焕
卢垠暻
韩珉娥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN107867296A publication Critical patent/CN107867296A/zh
Application granted granted Critical
Publication of CN107867296B publication Critical patent/CN107867296B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/0098Details of control systems ensuring comfort, safety or stability not otherwise provided for
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0051Handover processes from occupants to vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/082Selecting or switching between different modes of propelling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/10Interpretation of driver requests or demands
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0059Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • G05D1/024Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors in combination with a laser
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/027Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means comprising intertial navigation means, e.g. azimuth detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/724098Interfacing with an on-board device of a vehicle
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W48/00Access restriction; Network selection; Access point selection
    • H04W48/16Discovering, processing access restriction or access information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/563Vehicle displaying mobile device information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/566Mobile devices displaying vehicle information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/569Vehicle controlling mobile device functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/55Remote control arrangements
    • B60K2360/56Remote control arrangements using mobile devices
    • B60K2360/573Mobile devices controlling vehicle functions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0004In digital systems, e.g. discrete-time systems involving sampling
    • B60W2050/0005Processor details or data handling, e.g. memory registers or chip architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0063Manual parameter input, manual setting means, manual initialising or calibrating means
    • B60W2050/0064Manual parameter input, manual setting means, manual initialising or calibrating means using a remote, e.g. cordless, transmitter or receiver unit, e.g. remote keypad or mobile phone
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/007Switching between manual and automatic parameter input, and vice versa
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • B60W2050/0095Automatic control mode change
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/045Occupant permissions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/215Selection or confirmation of options
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/221Physiology, e.g. weight, heartbeat, health or special needs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/225Direction of gaze
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/92Driver displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Optics & Photonics (AREA)
  • Computer Security & Cryptography (AREA)
  • Mathematical Physics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)

Abstract

公开了一种安装在车辆上的车辆控制装置和控制该车辆的方法。该车辆控制装置包括:通信单元,所述通信单元被配置为(i)与移动装置通信并且(ii)接收包括在所述移动装置处接收到的用户输入的数据;以及处理器,所述处理器被配置为:基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件,并且基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。

Description

安装在车辆上的车辆控制装置和控制该车辆的方法
技术领域
本申请总体上涉及与用于车辆的车辆控制装置有关的技术。
背景技术
车辆是能够按照用户期望的方向载运用户的设备,并且代表性示例可以是汽车。为便于用户使用车辆,各种类型的传感器和电子装置被设置在车辆中。具体地,正在积极地进行对高级驾驶辅助系统(ADAS)的研究。另外,正在积极地开发自动驾驶车辆。近来,随着正在积极地进行对高级驾驶辅助系统(ADAS)的开发,需要开发用于在驾驶车辆的同时优化用户便利性和安全性的技术。作为其中的一部分,已经对用于车辆自行驾驶而不需要驾驶员的任何操控的自动驾驶的各种用户界面/用户体验(UI/UX)积极地进行了技术开发。
发明内容
本公开涉及与用户的移动装置通信的车辆控制装置。
总体来说,本说明书中描述的主题的一个创新方面可以体现在一种车辆控制装置中,该车辆控制装置包括:通信单元,所述通信单元被配置为(i)与移动装置通信并且(ii)接收包括在所述移动装置处接收到的用户输入的数据;以及处理器,所述处理器被配置为:基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件,并且基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
上述和其它实施方式可以各自可选地以单独或组合的方式包括一个或更多个以下特征。特别地,一种实施方式以组合方式包括所有以下特征。该车辆控制装置还包括相机,所述相机被配置为获取用户的第一眼跟踪信息,其中,所述处理器被配置为:从所述相机获取所述第一眼跟踪信息;基于所述第一眼跟踪信息,确定所述用户是否使用所述移动装置达到第一时间段,并且基于对所述车辆处于所述手动驾驶模式并且所述用户使用所述移动装置达到所述第一时间段的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。所述用户输入包括用户的第二眼跟踪信息,并且其中,所述处理器被配置为:基于所述第二眼跟踪信息,确定所述用户是否使用所述移动装置达到第二时间段,并且基于对所述车辆处于所述手动驾驶模式并且所述用户使用所述移动装置达到所述第二时间段的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。多个菜单项被显示在所述移动装置上,所述多个菜单项中的每一个与相应的菜单等级相关联,并且其中,所述处理器被配置为:基于包括所述用户输入的所述数据,确定用户是否选择了针对来自所述多个菜单项中的第一菜单项的第一菜单等级,基于对所述用户选择了针对来自所述多个菜单项中的所述第一菜单项的所述第一菜单等级的确定,确定所述第一菜单等级是否满足阈值菜单等级,并且基于对所述车辆处于所述手动驾驶模式并且所述第一菜单等级满足所述阈值菜单等级的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。所述处理器被配置为:基于包括所述用户输入的所述数据,确定已接收到所述用户输入的时间段,并且基于(i)对所述车辆处于所述手动驾驶模式的确定和(ii)所述时间段,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。由所述通信单元从所述移动装置接收的所述数据还包括所述移动装置的取向信息,并且其中,所述处理器被配置为:基于(i)对所述车辆处于所述手动驾驶模式的确定和(ii)所述移动装置的所述取向信息,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。所述处理器被配置为:基于所述移动装置的所述取向信息,生成控制所述移动装置以执行第一功能的命令信号,并且通过所述通信单元向所述移动装置提供所述命令信号。所述处理器被配置为:确定所述手动驾驶模式与所述自动驾驶模式之间的切换是否被锁定,并且基于(i)对所述车辆处于所述手动驾驶模式的确定、(ii)所述移动装置的所述取向信息以及(iii)对所述手动驾驶模式与所述自动驾驶模式之间的切换是否被锁定的确定,确定是否向所述移动装置提供所述命令信号。所述移动装置的所述取向信息包括所述移动装置正在面向的方向或所述移动装置的倾斜角。所述处理器被配置为:基于所述取向信息,通过所述通信单元向所述车辆的显示单元提供显示在所述移动装置的显示器上的画面信息。由所述通信单元从所述移动装置接收的所述数据还包括与在所述移动装置上执行的多个应用有关的信息,所述多个应用中的每一个与相应的类型相关联,并且其中,所述处理器被配置为:基于(i)对所述车辆处于所述手动驾驶模式的确定和(ii)所述多个应用的相应类型,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。所述处理器被配置为:确定所述移动装置是执行来自所述多个应用中的第一类型的应用还是执行来自所述多个应用中的第二类型的应用,所述第二类型的应用与所述第一类型的应用不同,并且基于对所述车辆处于所述手动驾驶模式并且所述移动装置执行来自所述多个应用中的所述第一类型的应用或者来自所述多个应用中的所述第二类型的应用的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。由所述通信单元从所述移动装置接收的所述数据还包括所述移动装置的取向信息,并且其中,所述处理器被配置为:基于(i)对所述车辆处于所述手动驾驶模式的确定、(ii)所述移动装置的所述取向信息以及(iii)对所述移动装置执行来自所述多个应用中的所述第一类型的应用或者来自所述多个应用中的所述第二类型的应用的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。由所述通信单元从所述移动装置接收的所述数据还包括:(i)触摸输入和(ii)与在所述移动装置上发生的事件有关的信息,并且其中,所述处理器被配置为:基于(i)对所述车辆处于所述手动驾驶模式的确定、(ii)所述触摸输入和(iii)在所述移动装置上发生的所述事件,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。由所述通信单元从所述移动装置接收的所述数据还包括与所述移动装置与所述通信单元之间的连接有关的信息,并且其中,所述处理器被配置为:基于(i)对所述车辆处于所述手动驾驶模式的确定、(ii)与所述移动装置与所述通信单元之间的所述连接有关的所述信息以及(iii)在所述移动装置上发生的所述事件,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。所述处理器被配置为:确定所述移动装置与所述通信单元之间的有线连接是否被释放,并且基于对所述车辆处于所述手动驾驶模式并且所述移动装置与所述通信单元之间的所述有线连接被释放的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。由所述通信单元从所述移动装置接收的所述数据还包括与所述移动装置的移动有关的信息,并且其中,所述处理器被配置为:基于对所述车辆处于所述手动驾驶模式的确定和与所述移动装置的所述移动有关的所述信息,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。与所述移动装置的所述移动有关的所述信息包括所述移动装置移动的距离或方向。
总体来说,本说明书中描述的主题的另一创新方面可以体现在一种车辆的控制方法中,该控制方法包括以下步骤:连接至移动装置以启用通信;从所述移动装置接收包括在所述移动装置处接收到的用户输入的数据;基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件;以及基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
上述和其它实施方式可以各自可选地以单独或组合的方式包括一个或更多个以下特征。特别地,一种实施方式以组合方式包括所有以下特征。该控制方法还包括以下步骤:获取用户的眼跟踪信息;基于所述用户的所述眼跟踪信息,确定所述眼跟踪信息是否满足指示所述用户使用所述移动装置达到第一时间段的所述预设条件;以及基于对所述车辆处于所述手动驾驶模式并且所述眼跟踪信息满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
本说明书中描述的主题可以按照具体实施方式来实现,以实现以下优点中的一个或更多个。与传统的车辆系统相比,车辆控制装置可以基于在用户的移动装置中进行的用户活动、事件或用户输入来控制车辆或车辆系统。特别地,该车辆控制装置可以基于用户的活动、事件或用户输入来控制车辆按照自动驾驶模式或手动驾驶模式来进行操作。因此,该车辆控制装置可以基于给定的情况有效地确定车辆的驾驶模式并且提高了道路安全性。
在附图和下面的描述中对本说明书的主题的一个或更多个实施方式的细节进行了阐述。根据描述、附图和权利要求书,该主题的其它特征、方面和优点将变得显而易见。
附图说明
图1是例示示例车辆的示图。
图2是例示示例车辆的示图。
图3和图4是例示车辆的示例内部的示图。
图5和图6是例示车辆的示例操作的示图。
图7是例示示例车辆系统的示图。
图8是例示示例车辆控制装置的示图。
图9是用于控制车辆的示例处理的流程图。
图10A、图10B、图10C、图11A、图11B、图11C、图12A、图12B、图13A、图13B、图13C、图14A、图14B、图15和图16是例示车辆的示例操作的示图。
具体实施方式
图1和图2例示了示例车辆。图3和图4例示了车辆的示例内部。图5和图6例示了车辆的示例操作。图7例示了示例车辆系统。
如图1至图7所示,车辆100包括通过驱动力转动的车轮和用于调整车辆100的行驶(例如,前进或移动)方向的转向设备510。
车辆100可以是自动驾驶车辆。
车辆100可以基于用户输入而被切换为自动驾驶模式或手动模式。
例如,车辆可以基于通过用户接口设备200接收的用户输入而被从手动模式转换为自动驾驶模式或从自动驾驶模式转换为手动模式。
车辆100可以基于行驶环境信息而被切换到自动驾驶模式或手动模式。可以基于从对象检测设备300提供的对象信息来生成行驶环境信息。
例如,车辆100可以基于在对象检测设备300中生成的行驶环境信息而被从手动模式切换到自动驾驶模式或从自动驾驶模式切换到手动模式。
在示例中,车辆100可以基于通过通信设备400接收的行驶环境信息而被从手动模式切换到自动驾驶模式或从自动驾驶模块切换到手动模式。
车辆100可以基于从外部装置提供的信息、数据或信号而被从手动模式切换到自动驾驶模式或从自动驾驶模块切换到手动模式。
当以自动驾驶模式驾驶车辆100时,可以基于操作系统700来驾驶自动驾驶车辆100。
例如,可以基于在驾驶系统710、泊车出位系统(parking exit system)740和泊车系统750中生成的信息、数据或信号来驾驶自动驾驶车辆100。
当以手动模式驾驶车辆100时,自动驾驶车辆100可以通过驾驶控制设备500接收用于驾驶的用户输入。可以基于通过驾驶控制设备500接收的用户输入来驾驶该车辆100。
总长度是指车辆100的从前端到后端的长度,宽度是指车辆100的宽度,以及高度是指从车轮底部到车顶的长度。在下面的描述中,总长度方向L可以是指作为用于测量车辆100的总长度的标准的方向,宽度方向W可以是指作为用于测量车辆100的宽度的标准的方向,以及高度方向H可以是指作为用于测量车辆100的高度的标准的方向。
如图7所示,车辆100可以包括用户接口设备200、对象检测设备300、通信设备400、驾驶控制设备500、车辆操作设备600、操作系统700、导航系统770、感测单元120、接口单元130、存储器140、控制器170和电源单元190。
在一些实施方式中,除了包括本说明书中要说明的组件之外,车辆100还可以包括更多组件,或者可以不包括本说明书中要说明的那些组件中的一些。
用户接口设备200是用于在车辆100与用户之间进行通信的设备。用户接口设备200可以接收用户输入并且将在车辆100中生成的信息提供给用户。车辆100可以通过用户接口设备200来实现用户界面(UI)或用户体验(UX)。
用户接口设备200可以包括输入单元210、内部相机220、生物感测单元230、输出单元250和处理器270。
在一些实施方式中,除了包括本说明书中要说明的组件之外,用户接口设备200还可以包括更多组件,或者可以不包括本说明书中要说明的那些组件中的一些。
输入单元210可以允许用户输入信息。在输入单元210中收集的数据可以由处理器270来进行分析,并且作为用户的控制命令来进行处理。
输入单元210可以被设置在车辆内。例如,输入单元210可以被设置在方向盘的一个区域、仪表板的一个区域、座椅的一个区域、各个支柱的一个区域、门的一个区域、中央控制台的一个区域、顶蓬的一个区域、遮阳板的一个区域、挡风板的一个区域、窗户的一个区域等上。
输入单元210可以包括语音输入模块211、姿势输入模块212、触摸输入模块213和机械输入模块214。
音频输入模块211可以将用户的语音输入转换为电信号。所转换的电信号可以被提供给处理器270或控制器170。
语音输入模块211可以包括至少一个麦克风。
姿势输入模块212可以将用户的姿势输入转换为电信号。转换后的电信号可以被提供给处理器270或控制器170。
姿势输入模块212可以包括用于检测用户的姿势输入的红外传感器和图像传感器中的至少一个。
在一些实施方式中,姿势输入模块212可以检测用户的三维(3D)姿势输入。为此,姿势输入模块212可以包括输出多束红外线的发光二极管或多个图像传感器。
姿势输入模块212可以通过飞行时间(TOF)方法、结构化光方法或视差方法来检测用户的3D姿势输入。
触摸输入模块213可以将用户的触摸输入转换为电信号。转换后的电信号可以被提供给处理器270或控制器170。
触摸输入模块213可以包括用于检测用户的触摸输入的触摸传感器。
在一些实施方式中,触摸输入模块213可以与显示单元251集成在一起,以实现触摸屏。触摸屏可以提供车辆100与用户之间的输入接口和输出接口。
机械输入模块214可以包括按钮、圆顶开关、滚轮和点动开关中的至少一个。由机械输入模块214生成的电信号可以被提供给处理器270或控制器170。
机械输入模块214可以被布置在方向盘、中心面板、中央控制台、驾驶舱模块、门等上。
内部相机220可以获取车辆的内部图像。处理器270可以基于车辆的内部图像来检测用户的状态。处理器270可以从车辆的内部图像中获取与用户的视线有关的信息。处理器270可以从车辆的内部图像中检测用户姿势。
生物感测单元230可以获取用户的生物信息。生物感测模块230可以包括用于检测用户的生物信息的传感器,并且使用传感器获取关于用户的指纹信息和心率信息。生物信息可以被用于用户认证。
输出单元250可以生成与视觉、听觉或触觉信号相关的输出。
输出单元250可以包括显示模块251、音频输出模块252和触觉输出模块253中的至少一个。
显示模块251可以输出与各种类型的信息对应的图形对象。
显示模块251可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT LCD)、有机发光二极管(OLED)、柔性显示器、三维(3D)显示器和电子墨水显示器中的至少一种。
显示模块251可以与触摸输入模块213分层或集成在一起以实现触摸屏。
显示模块251可以被实现为平视显示器(HUD)。当显示模块251被实现为HUD时,显示模块251可以被设置有投影模块,以通过投影在挡风玻璃或窗户上的图像来输出信息。
显示模块251可以包括透明显示器。透明显示器可以被附接至挡风玻璃或窗户。
透明显示器可以具有预定的透明度并且在其上输出预定的画面。透明显示器可以包括薄膜电致发光(TFEL)、透明OLED、透明LCD、透射透明显示器和透明LED显示器中的至少一种。透明显示器可以具有可调节的透明度。
在一些实施方式中,用户接口设备200可以包括多个显示模块251a至251g。
显示模块251可以被设置在方向盘的一个区域、仪表板的一个区域251a、251b、251e、座椅的一个区域251d、每个支柱的一个区域251f、门的一个区域251g、中心控制台的一个区域、顶蓬的一个区域或遮阳板的一个区域上,或者可以被实现在挡风玻璃的一个区域251c或窗户的一个区域251h上。
音频输出模块252将从处理器270或控制器170提供的电信号转换为用于输出的音频信号。为此,音频输出模块252可以包括至少一个扬声器。
触觉输出模块253生成触觉输出。例如,触觉输出模块253可以使方向盘、安全带、座椅110FL、110FR、110RL、110RR振动,使得用户可以识别这种输出。
处理器270可以控制用户接口设备200的每个单元的整体操作。
在一些实施方式中,用户接口设备200可以包括多个处理器270,或者可以不包括任何处理器270。
当处理器270没有被包括在用户接口设备200中时,可以通过车辆100内的另一设备的处理器或控制器170的控制来操作用户接口设备200。
在一些实施方式中,用户接口设备200可以被称为用于车辆的显示设备。
用户接口设备200可以通过控制器170的控制来进行操作。
对象检测设备300是用于检测位于车辆100外部的对象的设备。
对象可以是与车辆100的驾驶(操作)相关联的各种对象。
参照图5和图6,对象O可以包括行车道OB10、另一车辆OB11、行人OB12、两轮车辆OB13、交通信号OB14和OB15、光、道路、结构、减速带、地理特征、动物等。
车道OB10可以是行驶车道、该行驶车道旁边的车道或其上有另一车辆沿着与车辆100相反的方向驶来的车道。车道OB10可以是包括形成车道的左线和右线的概念。
另一车辆OB11可以是在车辆100周围正在移动的车辆。另一车辆OB11可以是位于距车辆100预定距离内的车辆。例如,另一车辆OB11可以是在车辆100前面或后面移动的车辆。
行人OB12可以是位于车辆100附近的人。行人OB12可以是位于距车辆100预定距离内的人。例如,行人OB12可以是位于人行道或车行道上的人。
两轮车辆OB13可以是指位于车辆100附近并且使用两个车轮移动的车辆(运输设施)。两轮车辆OB13可以是位于距车辆100预定距离内并且具有两个车轮的车辆。例如,两轮车辆OB13可以是位于人行道或车行道上的摩托车或自行车。
交通信号可以包括交通灯OB15、交通标志OB14和在路面上绘制的图案或文字。
所述光可以是从设置在另一车辆上的灯发出的光。所述光可以是从路灯产生的光。所述光可以是太阳光。
道路可以包括路面、弯道、上坡、下坡等。
结构可以是位于道路附近并且固定在地面上的对象。例如,所述结构可以包括路灯、路边树、建筑物、电杆、交通灯、桥等。
地理特征可以包括高山、小山等。
在一些实施方式中,对象可以被分为移动对象和固定对象。例如,移动对象可以是包括另一车辆和行人的概念。固定对象可以是包括交通信号、道路和结构的概念。
对象检测设备300可以包括相机310、雷达320、激光雷达330、超声波传感器340、红外传感器350和处理器370。
在一些实施方式中,除了所描述的组件之外,对象检测设备300还可以包括其它组件,或者可以不包括所描述的一些组件。
相机310可以位于车辆外部的合适部分上,以获取车辆的外部图像。相机310可以是单目相机、立体相机310a、全景式监控(AVM)相机310b或360度相机。
例如,相机310可以被设置在车辆内的前挡风玻璃附近,以获取车辆的前部图像。或者,相机310可以被设置在前保险杠或散热器护栅附近。
例如,相机310可以被设置在车辆内的后玻璃附近以获取车辆的后部图像。或者,相机310可以被设置在后保险杠、后备箱或尾门附近。
例如,相机310可以被设置在车辆内的至少一个侧窗附近,以获取车辆的侧面图像。或者,相机310可以被设置在侧镜、挡泥板或门附近。
相机310可以向处理器370提供所获取的图像。
雷达320可以包括电波发射部和电波接收部。雷达320可以根据发射电波的原理而被实现为脉冲雷达或连续波雷达。雷达320可以按照连续波雷达方法当中的根据信号波形的频率调制连续波(FMCW)方式或频移键控(FSK)方式来实现。
雷达320可以通过电波作为媒介按照飞行时间(TOF)方式或相移方式来检测对象,并且检测被检测对象的位置、距被检测对象的距离以及与被检测对象的相对速度。
雷达320可以被设置在车辆外部的合适位置上,以用于检测位于车辆的前部、后部或侧面处的对象。
激光雷达330可以包括激光发射部和激光接收部。激光雷达330可以按照飞行时间(TOF)方式或相移方式来实现。
激光雷达330可以被实现为驱动类型或非驱动类型。
对于驱动类型,激光雷达330可以被发动机旋转并且检测车辆100附近的对象。
对于非驱动类型,激光雷达330可以通过光导引检测位于基于车辆100的预定范围内的对象。车辆100可以包括多个非驱动型激光雷达330。
激光雷达330可以通过激光束作为媒介按照TOP方式或相移方式来检测对象,并且检测被检测对象的位置、距被检测对象的距离以及与被检测对象的相对速度。
激光雷达330可以被设置在车辆外部的合适位置上,以用于检测位于车辆的前部、后部或侧面处的对象。
超声波传感器340可以包括超声波发射部和超声波接收部。超声波传感器340可以基于超声波来检测对象,并且检测被检测对象的位置、距被检测对象的距离以及与被检测对象的相对速度。
超声波传感器340可以被设置在车辆外部的合适位置上,以用于检测位于车辆的前部、后部或侧面处的对象。
红外传感器350可以包括红外光发射部和红外光接收部。红外传感器340可以基于红外光来检测对象,并且检测被检测对象的位置、距被检测对象的距离以及与被检测对象的相对速度。
红外传感器350可以被设置在车辆外部的合适位置上,以用于检测位于车辆的前部、后部或侧面处的对象。
处理器370可以控制对象检测设备300的每个单元的整体操作。
处理器370可以基于所获取的图像来检测对象,并且跟踪对象。处理器370可以通过图像处理算法来执行诸如计算距对象的距离、计算与对象的相对速度等的操作。
处理器370可以基于所发射的电磁波从对象被反射的反射电磁波来检测对象,并且跟踪所述对象。处理器370可以基于该电磁波来执行诸如计算距对象的距离、计算与对象的相对速度等的操作。
处理器370可以基于所发射的激光束从对象被反射的反射激光束来检测对象,并且跟踪对象。处理器370可以基于该激光束来执行诸如计算距对象的距离、计算与对象的相对速度等的操作。
处理器370可以基于所发射的超声波从对象被反射的反射超声波来检测对象,并且跟踪对象。处理器370可以基于该超声波来执行诸如计算距对象的距离、计算与对象的相对速度等的操作。
该处理器可以基于所发射的红外光从对象被反射的反射红外光来检测对象,并且跟踪对象。处理器370可以基于该红外光来执行诸如计算距对象的距离、计算与对象的相对速度等的操作。
在一些实施方式中,对象检测设备300可以包括多个处理器370或者可以不包括任何处理器370。例如,相机310、雷达320、激光雷达330、超声波传感器340和红外传感器350中的每一个均可以以单独的方式包括处理器。
当对象检测设备300中不包括处理器370时,对象检测设备300可以通过车辆100内的设备的处理器或控制器170的控制来操作。
对象检测设备300可以通过控制器170的控制来操作。
通信设备400是用于执行与外部装置之间的通信的设备。在该示例中,外部装置可以是另一车辆、移动终端或服务器。
通信设备400可以通过包括发射天线、接收天线和射频(RF)电路以及用于实现各种通信协议的RF装置中的至少一个来执行通信。
通信设备400可以包括短程通信单元410、位置信息单元420、V2X通信单元430、光学通信单元440、广播收发器450和处理器470。
在一些实施方式中,除了包括所描述的组件之外,通信设备400还可以包括其它组件,或者可以不包括所描述的一些组件。
短程通信单元410是用于促成短程通信的单元。用于实现这种短程通信的适用技术包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。
短程通信单元410可以构造短程区域网络以在车辆100与至少一个外部装置之间进行短程通信。
位置信息单元420是用于获取位置信息的单元。例如,位置信息单元420可以包括全球定位系统(GPS)模块或差分全球定位系统(DGPS)模块。
V2X通信单元430是用于执行与服务器(车辆对基础设施;V2I)、另一车辆(车辆对车辆;V2V)或行人(车辆对行人;V2P)之间的无线通信的单元。V2X通信单元430可以包括实现与基础设施(V2I)之间的通信协议、车辆之间(V2V)的通信协议和与行人(V2P)之间的通信协议的RF电路。
光学通信单元440是用于通过光介质执行与外部装置之间的通信的单元。光学通信单元440可以包括用于将电信号转换为光信号并且向外部发送光信号的发光二极管以及用于将所接收的光信号转换成电信号的光电二极管。
在一些实施方式中,发光二极管可以与设置在车辆100上的灯集成在一起。
广播收发器450是用于从外部广播管理实体接收广播信号或经由广播信道向广播管理实体发送广播信号的单元。广播信道可以包括卫星信道、地面信道或两者。广播信号可以包括TV广播信号、无线电广播信号和数据广播信号。
处理器470可以控制通信设备400中的每个单元的整体操作。
在一些实施方式中,通信设备400可以包括多个处理器470或者可以不包括任何处理器470。
当通信设备400中不包括处理器470时,通信设备400可以通过车辆100内的任何装置的处理器或控制器170的控制来操作。
在一些实施方式中,通信设备400可以与用户接口设备200一起实现用于车辆的显示设备。在这种情况下,用于车辆的显示设备可以被称作远程信息处理设备或音频视频导航(AVN)设备。
通信设备400可以通过控制器170的控制来操作。
驾驶控制设备500是用于接收用于驾驶的用户输入的设备。
在手动模式下,车辆100可以基于由驾驶控制设备500提供的信号进行操作。
驾驶控制设备500可以包括转向输入装置510、加速输入装置530和制动输入装置570。
转向输入装置510可以从用户接收关于车辆100的行驶(前进)方向的输入。转向输入装置510优选地按照转轮的形式来配置以允许按照转动的方式来进行转向输入。在一些实施方式中,转向输入装置也可以按照触摸屏、触摸板或按钮的形状来配置。
加速输入装置530可以从用户接收用于使车辆100加速的输入。制动输入装置570可以从用户接收用于制动车辆100的输入。加速输入装置530和制动输入装置570中的每一个优选地按照踏板的形式来配置。在一些实施方式中,加速输入装置或制动输入装置也可以按照触摸屏、触摸板或按钮的形状来配置。
驾驶控制设备500可以通过控制器170的控制来操作。
车辆操作设备600是用于电控制车辆100内的各种装置的操作的设备。
车辆操作设备600可以包括传动系操作单元610、底盘操作单元620、门/窗操作单元630、安全设备操作单元640、灯操作单元650和空调操作单元660。
在一些实施方式中,除了包括所描述的组件之外,车辆操作设备600还可以包括其它组件,或者可以不包括所描述的一些组件。
在一些实施方式中,车辆操作设备600可以包括处理器。车辆操作设备600的每个单元可以单独地包括处理器。
传动系操作单元610可以控制传动系装置的操作。
传动系操作单元610可以包括动力源操作部611和齿轮箱操作部612。
动力源操作部611可以对车辆100的动力源进行控制。
例如,在使用基于化石燃料的发动机作为动力源时,动力源操作部611可以对发动机进行电控制。因此,可以控制发动机的输出转矩等。动力源操作部611可以根据控制器170的控制来调整发动机输出转矩。
例如,在使用基于电能的电机作为动力源时,动力源操作部611可以对电机进行控制。动力源操作部611可以根据控制器170的控制来调整电机的转速、转矩等。
齿轮箱操作部612可以对齿轮箱进行控制。
齿轮箱操作部612可以调整齿轮箱的状态。齿轮箱操作部612可以将齿轮箱的状态改变为驱动(前进)(D)、倒退(R)、空挡(N)或停车(P)。
在一些实施方式中,当发动机是动力源时,齿轮箱操作部612可以在驱动(D)状态下调整齿轮的锁定状态。
底盘操作单元620可以控制底盘装置的操作。
底盘操作单元620可以包括转向操作部621、制动操作部622和悬架操作部623。
转向操作部621可以对车辆100内的转向设备进行电控制。转向操作部621可以改变车辆的行驶方向。
制动操作部622可以对车辆100内的制动设备进行电控制。例如,制动操作部622可以控制设置在车轮处的制动器的操作,以降低车辆100的速度。
在一些实施方式中,制动操作部622可以单独地控制多个制动器中的每一个。制动操作部622可以不同地控制施加到多个车轮中的每一个的制动力。
悬架操作部623可以对车辆100内的悬架设备进行电控制。例如,悬架操作部623可以控制悬架设备,以便当道路上存在凹凸时减少车辆100的振动。
在一些实施方式中,悬架操作部623可以单独地控制多个悬架中的每一个。
门/窗操作单元630可以对车辆100内的门设备或窗设备进行电控制。
门/窗操作单元630可以包括门操作部631和窗操作部632。
门操作部631可以对门设备进行控制。门操作部631可以控制车辆100中的多个门的打开或关闭。门操作部631可以控制后备箱或尾门的打开或关闭。门操作部631可以控制天窗的打开或关闭。
窗操作部632可以对窗设备进行电控制。窗操作部632可以控制车辆100中的多个窗的打开或关闭。
安全设备操作单元640可以对车辆100内的各种安全设备进行电控制。
安全设备操作单元640可以包括安全气囊操作部641、安全带操作部642和行人保护设备操作部643。
安全气囊操作部641可以对车辆100内的安全气囊设备进行电控制。例如,安全气囊操作部641可以在检测到危险时控制安全气囊的展开。
安全带操作部642可以对车辆100内的安全带设备进行电控制。例如,安全带操作部642可以在检测到危险时使用安全带来控制乘客以使其不移动地坐在座椅110FL、110FR、110RL、110RR中。
行人保护设备操作部643可以对发动机罩把手和行人安全气囊进行电控制。例如,行人保护设备操作部643可以在检测到行人碰撞时控制发动机罩把手和行人安全气囊的打开。
灯操作单元650可以对车辆100内的各种灯具设备进行电控制。
空调操作单元660可以对车辆100内的空调进行电控制。例如,空调操作单元660可以在车辆的内部温度较高时控制空调向车辆内提供冷气。
车辆操作设备600可以包括处理器。车辆操作设备600中的每个单元均可以单独地包括处理器。
车辆操作设备600可以通过控制器170的控制来操作。
操作系统700是控制车辆100的各种驾驶模式的系统。操作系统700可以包括驾驶系统710、泊车出位系统740和泊车系统750。
在一些实施方式中,除了包括要描述的组件之外,操作系统700还可以包括其它组件,或者可以不包括要描述的一些组件。
在一些实施方式中,操作系统700可以包括处理器。操作系统700中的每个单元均可以单独地包括处理器。
在一些实施方式中,当操作系统以软件配置实现时,该操作系统可以是控制器170的子概念。
在一些实施方式中,操作系统700可以是包括用户接口设备200、对象检测设备300、通信设备400、车辆操作设备600和控制器170中的至少一个的概念。
驾驶系统710可以执行车辆100的驾驶。
驾驶系统710可以从导航系统770接收导航信息,向车辆操作设备600发送控制信号,并且执行车辆100的驾驶。
驾驶系统710可以从对象检测设备300接收对象信息,向车辆操作设备600发送控制信号,并且执行车辆100的驾驶。
驾驶系统710可以通过通信设备400从外部装置接收信号,向车辆操作设备600发送控制信号,并且执行车辆100的行驶。
泊车出位系统740可以执行使车辆110从停车场离开。
泊车出位系统740可以从导航系统770接收导航信息,向车辆操作设备600发送控制信号,并且执行使车辆100从停车场离开。
泊车出位系统740可以从对象检测设备300接收对象信息,向车辆操作设备600发送控制信号,并且执行使车辆100从停车场离开。
泊车出位系统740可以通过通信设备400从外部装置接收信号,向车辆操作设备600发送控制信号,并且执行使车辆100从停车场离开。
泊车系统750可以执行车辆100的停车。
泊车系统750可以从导航系统770接收导航信息,向车辆操作设备600发送控制信号,并且停泊车辆100。
泊车系统750可以从对象检测设备300接收对象信息,向车辆操作设备600发送控制信号,并且停泊车辆100。
泊车系统750可以通过通信设备400从外部装置接收信号,向车辆操作设备600发送控制信号,并且停泊车辆100。
导航系统770可以提供导航信息。导航信息可以包括地图信息、关于所设置的目的地的信息、根据所设置的目的地的路径信息、关于路径上的各种对象的信息、车道信息和车辆的当前位置信息中的至少一种。
导航系统770可以包括存储器和处理器。存储器可以存储导航信息。处理器可以控制导航系统770的操作。
在一些实施方式中,导航系统770可以通过经由通信设备400从外部装置接收信息来更新预存储的信息。
在一些实施方式中,导航系统770可以被分类为用户接口设备200的子组件。
感测单元120可以感测车辆的状态。感测单元120可以包括姿势传感器(例如,偏航传感器、滚动传感器、俯仰(pitch)传感器等)、碰撞传感器、车轮传感器、速度传感器、倾斜传感器、重量检测传感器、航向传感器、陀螺仪传感器、位置模块、车辆前进/后退移动传感器、电池传感器、燃料传感器、轮胎传感器,通过转动手柄的转向传感器、车辆内部温度传感器、车辆内部湿度传感器、超声波传感器、照度传感器、加速器位置传感器、制动踏板位置传感器等。
感测单元120可以获取关于以下车辆相关信息的感测信号,诸如姿势、碰撞、方向、位置(GPS信息)、角度、速度、加速度、倾斜、前进/后退移动、电池、燃料、轮胎、灯、内部温度、内部湿度、方向盘的转动角度、外部照度、施加到加速器的压力、施加到制动踏板的压力等。
感测单元120还可以包括加速度传感器、压力传感器、发动机速度传感器、空气流量传感器(AFS)、空气温度传感器(ATS)、水温传感器(WTS)、节流阀位置传感器(TPS)、TDC传感器、曲柄角传感器(CAS)等。
接口单元130可以用作允许车辆100与连接至其的各种外部装置接口连接的路径。例如,接口单元130可以被设置有可与移动终端连接的端口,并且通过该端口连接至移动终端。在这种情况下,接口单元130可以与移动终端交换数据。
在一些实施方式中,接口单元130可以用作向所连接的移动终端提供电能的路径。当移动终端电连接至接口单元130时,接口单元130根据控制器170的控制将从电源单元190提供的电能提供给移动终端。
存储器140电连接至控制器170。存储器140可以存储用于单元的基本数据、用于控制单元的操作的控制数据和输入/输出数据。存储器140可以是硬件配置中的诸如ROM、RAM、EPROM、闪存驱动器、硬盘驱动器等的各种存储装置。存储器140可以存储用于车辆100的整体操作的各种数据,诸如用于对控制器170进行处理或控制的程序。
在一些实施方式中,存储器140可以与控制器170集成在一起或被实现为控制器170的子组件。
控制器170可以控制车辆100中的每个单元的整体操作。控制器170可以被称为电子控制单元(ECU)。
电源单元190可以根据控制器170的控制来提供每个组件的操作所需的电力。具体地,电源单元190可以接收从车辆的内部电池提供的电力等。
包括在车辆100中的至少一个处理器和控制器170可以使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器和执行其它功能的电气单元中的至少一个来实现。
在一些实施方式中,车辆100可以包括车辆控制装置800。
车辆控制装置800可以控制图7所示的那些组件中的至少一个。从这个角度来看,车辆控制装置800可以是控制器170。
不限于此,车辆控制装置800可以是独立于控制器170的单独装置。当车辆控制装置800被实现为独立于控制器170的组件时,车辆控制装置800可以被设置在车辆100的一部分上。
以下,为了说明起见,将给出对车辆控制装置800是与控制器170分离的组件的示例的描述。在本说明书中,所描述的关于车辆控制装置800的功能(操作)和控制方法可以由车辆的控制器170执行。也就是说,所描述的关于车辆控制装置800的每个细节可以按照相同/类似的方式应用于控制器170。
而且,本文描述的车辆控制装置800可以包括图7所示的一些组件和包括在车辆中的各种组件。为了说明起见,将使用单独的名称和附图标记来描述图7所示的组件和包括在车辆中的各种组件。
图8例示了示例车辆控制装置。
车辆控制装置800可以包括通信单元810、接口单元820、感测单元830、相机840、处理器870等。
通信单元810可以是上述通信设备400。通信单元810可以连接至存在于车辆100中的移动终端以实现通信。
例如,车辆控制装置800(或车辆100)和移动终端可以通过通信单元810来连接以实现无线通信。车辆控制装置800和移动终端可以通过用户请求以无线方式彼此连接来实现通信,或者如果车辆控制装置800和移动终端之前已连接以实现通信,则它们可以基于进入车辆内部的移动终端以无线方式彼此连接来实现通信。
通信单元810可以被设置在车辆内(或车辆控制装置内),或者以附加模块的形式来形成,并且被形成为与车辆的构成元件一起实现通信(或电联接)。
接口单元820可以是上述接口单元130。
接口单元820可以执行到连接至车辆100的各种类型的外部装置的路径的作用。例如,接口单元820可以包括能够连接至移动终端的端口,并且通过该端口连接至移动终端。在该示例中,接口单元820可以与移动终端交换数据。
接口单元820和移动终端可以以有线方式连接以通过端口实现有线通信。
在执行与移动终端(外部装置)之间的通信方面,可以理解的是,接口单元820被包括在通信单元810中。
在一些实施方式中,接口单元820可以执行用于向连接至其的移动终端提供电能的路径的作用。当移动终端电连接至接口单元820时,接口单元820可以根据控制器170(或车辆控制装置800)的控制将从电源单元190提供的电能提供给移动终端。
包括在车辆控制装置800中的感测单元830可以是图7所示的对象检测设备300或设置在车辆100中的感测单元120。
此外,感测单元830可以是独立于设置在车辆中的对象检测设备300或设置在车辆100中的感测单元120的附加感测单元。即使当感测单元830是独立的感测单元时,感测单元830也可以包括图7所示的感测单元120或对象检测设备300的特性。
此外,感测单元830可以与相机310、雷达320、激光雷达330、超声波传感器340、红外传感器和感测单元120中的至少两个组合地实现。
感测单元830可以感测与车辆100相关联的信息。
与车辆相关联的信息可以是车辆的车辆信息(或车辆的行驶状态)和车辆的周围信息中的至少一种。
例如,车辆信息可以包括车辆的行驶速度、车辆的重量、车辆中的乘客数量、车辆的制动力、车辆的最大制动力、车辆的驾驶模式(自动驾驶模式或手动驾驶模式)、车辆的停车模式(自主停车模式、自动停车模式、手动停车模式)、用户是否上车以及与用户相关联的信息(例如,用户是否是已认证用户)等。
车辆的周围信息可以是车辆在其上行进的路面的状态、天气、与前方(后方)车辆的距离、前方(后方)车辆的相对速度、当行驶车道为曲线时的曲线曲率,车辆的周围环境亮度、与存在于基于车辆的参考区域(预定区域)中的对象相关联的信息、对象是否进入(或离开)预定区域、车辆周围是否存在用户以及与用户相关联的信息(例如,用户是否是已认证用户)等。
此外,车辆的周围信息(或周围环境信息)可以包括车辆的外部信息(例如,周围环境亮度、温度、太阳的位置、附近主题(人、其它车辆、标志等)信息、行驶路面的类型、地标、线路信息、行驶车道信息)和自动驾驶/自主停车/自动停车/手动停车模式所需的信息。
此外,车辆的周围信息还可以包括从车辆周围存在的对象到车辆100的距离、对象的类型、车辆的停车位、用于识别停车位(例如,停泊线、柱、另一车辆、墙壁等)的对象等。
以下,为便于说明起见,将以感测单元830附加地设置在车辆控制装置800中的配置为示例来进行描述。允许处理器870通过感测单元830获取任何信息可以被理解为允许处理器870使用设置在车辆100中的对象检测设备300和感测单元120中的至少一个来获取任何信息。
此外,感测单元830可以感测接收自(或施加至)存在于车辆中的移动终端的用户输入。例如,处理器870可以使用内部相机220、相机310、雷达320、激光雷达330、超声波传感器340、红外传感器350等来感测驾驶员(或用户)是否操控移动终端、驾驶员是否注视移动终端、在移动终端处接收的用户输入等。
相机840可以被形成为拍摄车辆的内部。相机840可以是上述的内部相机220。
处理器870可以基于通过相机840接收的图像(或预览图像)来感测在存在于车辆中的移动终端处所接收到的用户输入。
例如,处理器870可以分析通过相机840接收的图像,以感测驾驶员(用户)是否操控移动终端、驾驶员的视线、驾驶员是否注视移动终端、在移动终端处所接收到的用户输入等。
处理器870可以通过与移动终端以及感测单元830和相机840之间的有线/无线通信来感测(确定、提取、检测、判断)在移动终端处所接收到的用户输入。
移动终端可以包括通信单元、接口单元、触摸屏、感测单元、控制器等。
当在按照有线/无线方式连接至车辆控制装置(或车辆)以实现通信的状态下接收到用户输入时,移动终端的控制器可以通过通信单元将与所接收的用户输入相关联的信息发送至车辆控制装置800(或车辆)。
与用户输入相关联的信息可以包括所接收的用户输入的类型、时间、位置等。
例如,当在移动终端的触摸屏上接收到触摸时,移动终端的控制器可以通过通信单元将与施加触摸的位置相关联的信息、施加触摸的时间、触摸的类型等发送至车辆控制装置(或车辆)。
此外,移动终端的感测单元可以包括接近传感器、照度传感器、触摸传感器、加速度传感器、磁性传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声波传感器、光学传感器(例如,参照相机)、麦克风、电池计量器、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器、气体传感器等)以及化学传感器(例如,电子鼻、医疗保健传感器、生物传感器等)。在一些实施方式中,本文中公开的移动终端可以使用与由这些传感器中的至少两个传感器感测到的信息相结合的信息。
移动终端的控制器可以使用移动终端的感测单元来感测在移动终端处所接收到的用户输入。此外,移动终端的控制器可以感测移动终端的移动、移动终端的取向信息(例如,移动终端的倾斜)、眼睛跟踪信息(例如,用户的视线)和移动终端的各种其它信息。
这种移动终端的移动、倾斜、用户的视线等可以被包括在移动终端处所接收到的用户输入中。
移动终端的控制器可以通过通信单元将与通过移动终端的感测单元感测的与用户输入相关联的信息发送至车辆控制装置(或车辆)。
车辆控制装置800的处理器870可以基于通过通信单元810接收到的与用户输入相关联的信息来确定(感测、提取、判断、检测)在移动终端处所接收到的用户输入。
车辆控制装置800可以包括能够控制通信单元810、接口单元820、感测单元830、相机840等的处理器870。
处理器870可以是图7所示的控制器170。
处理器870可以控制图7所示的构成元件和图8所示的构成元件。
包括在车辆控制装置800中的处理器870可以基于在移动终端处所接收到的用户输入满足预设条件而将手动驾驶模式切换到自动驾驶模式。
图9是用于控制车辆的示例性处理的流程图。图10A至图16例示了车辆的示例性操作。
参照图9,首先,执行连接移动终端以实现通信的处理(S910)。
具体地,处理器870可以以有线/无线方式连接至移动终端,以通过通信单元810实现与存在于车辆中的移动终端之间的有线/无线通信。
例如,当移动终端进入车辆内(或移动终端安装在车辆内)时,处理器870可以基于用户请求控制通信单元810来实现与移动终端之间的无线通信。
再例如,当通过接口单元820以有线方式连接至移动终端时,处理器870可以执行与移动终端之间的有线通信。
另外,车辆控制装置800和移动终端可以基于满足预设条件而彼此连接以实现有线/无线通信。
然后,在车辆100的驾驶模式处于手动驾驶模式的状态下,基于在移动终端处所接收到的用户输入满足预设条件来执行将手动驾驶模式切换到自动驾驶模式的处理(S920)。
具体地,处理器870可以在车辆100的驾驶模式处于手动驾驶模式的状态下感测在存在于车辆中的移动终端1000处所接收到的用户输入。
例如,处理器870可以使用感测单元830和相机840中的至少一个来感测在连接至其的移动终端1000处接收到的或施加至移动终端1000的用户输入以实现通信。
再例如,当通过移动终端的感测单元(或相机)感测到用户输入时,处理器870可以从移动终端接收与所感测到的用户输入相关联的信息,并且基于与所接收的用户输入相关联的信息来确定在移动终端1000处所接收的或施加至移动终端1000的用户输入。
车辆100可以在手动驾驶模式和自动驾驶模式中的任一种模式下操作。换句话说,车辆100的驾驶模式可以包括手动驾驶模式和自动驾驶模式。
手动驾驶模式可以表示通过驾驶员的驾驶操控来驱动车辆的模式。例如,在手动驾驶模式中,可以基于驾驶员对方向盘的操控来改变车辆的转向,并且车辆的速度可以通过制动踏板或加速踏板的操控而改变。
自主驾驶模式(或自动驾驶模式)可以表示车辆基于预设算法而不管驾驶员的驾驶操控来自行驾驶的模式。例如,自动驾驶模式可以是车辆在预定路线的至少一部分或直到用户设置的目的地的路线内自行驾驶(行进)的模式。
在自动驾驶模式下,例如,即使存在驾驶员的驾驶操控,车辆也可以根据预设算法进行驾驶以执行自动驾驶而不改变车辆的转向或速度。
手动驾驶模式和自动驾驶模式属于常规技术领域,因此将省略其详细描述。
在车辆的驾驶模式处于手动驾驶模式的状态下,车辆控制装置800的处理器870可以感测(确定、提取、检测、判断)在连接至其的移动终端(或存在于车辆中的移动终端)处接收的用户输入以实现通信。
然后,基于在移动终端处所接收到的用户输入满足预设条件,处理器870可以将车辆的驾驶模式从手动驾驶模式改变为自动驾驶模式。
在该示例中,在移动终端处所接收到的用户输入可以包括各种类型的输入。例如,在移动终端处所接收到的用户输入可以包括施加至移动终端的触摸、手势、移动终端的运动、移动、转动、倾斜、用户注视移动终端的视线等。
这种用户输入可以通过设置在车辆控制装置(或车辆)中的相机840和感测单元830、120中的至少一个来感测,或者可以通过如上所述的触摸屏、相机和感测单元中的至少一个来感测。
处理器870可以连接至移动终端1000以实现通信,并且因此即使在移动终端处感测到用户输入,也可以基于从移动终端发送的与用户输入相关联的信息来确定用户输入。
处理器870可以确定在移动终端处所接收到的用户输入是否满足预设条件。具体地,当在车辆100的驾驶模式处于手动驾驶模式的状态下在移动终端处接收到用户输入时,处理器870可以确定所接收到的用户输入是否满足预设条件。
在该示例中,预设条件可以表示在移动终端处所接收到的各种用户输入当中的被预设为改变车辆的驾驶模式的用户输入。
预设条件可以包括驾驶员的视线面向移动终端是否超过预定时间段、在移动终端上选择的菜单的深度是否超过预定深度、移动终端在一个方向上倾斜的角度是否大于预定角度、在移动终端上所执行的应用类型、在移动终端上所发生的事件类型、移动终端是否按照预设移动来进行移动、移动终端的有线连接是否被释放等。
另外,车辆控制装置可以基于满足特定条件而将车辆100的驾驶模式从自动驾驶模式改变为手动驾驶模式。
参照图10A,车辆控制装置800(或车辆100)可以包括配置为感测驾驶员的视线的相机840(或内部相机220)。
处理器870可以使用相机840感测在移动终端1000处接收的用户输入。在该示例中,用户输入可以包括驾驶员的视线。
此外,移动终端1000的控制器可以使用设置在移动终端1000中的相机来感测驾驶员的视线。然后,移动终端1000可以通过有线/无线通信而将与所感测到的驾驶员的视线相关联的信息发送至车辆控制装置800(或车辆100)。
处理器870可以基于从移动终端接收的与驾驶员的视线相关联的信息来感测驾驶员的视线。
可以通过感测单元830、120或移动终端的感测单元以及相机840和移动终端的相机来感测驾驶员的视线。
例如,当车辆的驾驶模式处于手动驾驶模式时,可以感测驾驶员的视线。在一些实施方式中,即使当车辆的驾驶模式处于自动驾驶模式时,也可以感测驾驶员的视线。
基于通过相机840(或感测单元830)和移动终端的相机(或感测单元)中的至少一个感测到的驾驶员的视线注视移动终端1000超过预定时间段(t1),处理器870可以将手动驾驶模式切换到自动驾驶模式。
例如,如图10A的(c)所示,当在车辆的驾驶模式处于手动驾驶模式的状态下所感测到的驾驶员的视线注视移动终端1000超过预定时间段(t1)时,处理器870可以将车辆的有区别的方式从手动驾驶模式改变为自动驾驶模式。
相反,如图10A的(b)所示,当驾驶员的视线注视移动终端1000小于(低于)预定时间段(t1)时,处理器870可以维持手动驾驶模式。
例如,当在车辆处于手动驾驶模式的状态下驾驶员的视线注视移动终端1000小于预定时间段(t1)时,处理器870可以维持手动驾驶模式。
预定时间段(t1)可以表示驾驶员注视移动终端以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式的时间段,并且可以通过用户的设置来确定/改变。例如,预定时间段(t1)可以根据法律规定来应用。
在一些实施方式中,参考图10B的(a),可以在移动终端上显示多个可选菜单项。多个菜单项可以被显示在移动终端的触摸屏上。
多个菜单项可以分别被形成为具有预设深度。该深度指示移动装置的应用或操作系统中的菜单等级。在一些实施方式中,每个菜单项可以与相应的菜单等级相关联。例如,一些菜单项可以与两级相关联,而其它菜单项可以与三级相关联。
在该示例中,深度可以被理解为与用于执行链接至相关菜单项的功能而施加的触摸的次数对应的概念。例如,具有两级深度的菜单项(2级深度菜单)可以是需要一次触摸输入以在触摸屏上显示用于执行链接至相关项目的功能或控制链接至相关项目的功能的画面信息的项目。再例如,具有两级深度的菜单项(2级深度菜单)可以是需要两次触摸输入来执行特定功能(或在触摸屏上显示用于执行特定功能的画面信息)的项目。具有大于两级深度的菜单项可以具有更低的菜单项。
可以基于链接至更低菜单项的菜单项的层的数量来定义深度。
在该示例中,当它是具有更高深度的菜单项时,可能需要更多次触摸输入来执行用户期望的功能。因此,当正在驾驶车辆的驾驶员通过具有更高深度的菜单项来执行他或她期望的功能时,不注视前方的时间段可能会增大。
当在移动终端上选择了具有高于预定值的深度的菜单项时,处理器870可以将手动驾驶模式切换到自动驾驶模式。
当选择(触摸)在触摸屏上所显示的多个菜单项中的任一个时,移动终端1000可以通过通信单元将与所选择的菜单项相关联的信息(例如,深度信息)发送给车辆控制装置800。
然后,车辆控制装置800的处理器870可以基于与菜单项相关联的信息来确定在移动终端上所选择的菜单项的深度。
当在移动终端上选择的菜单项是具有超过预定深度的菜单项时,处理器870可以将车辆的驾驶模式从手动驾驶模式改变为自动驾驶模式。
例如,如图10B的(c)所示,当在移动终端1000上显示的多个菜单项当中选择具有超过预定深度的菜单项(例如,2级深度)时,处理器870可以将车辆的驾驶模式切换到自动驾驶模式。
再例如,如图10B的(b)所示,当在移动终端1000上显示的多个菜单项当中选择具有小于预定深度的菜单项(例如,1级深度菜单)时,处理器870可以维持车辆的驾驶模式处于手动驾驶模式。
如上所述,当不注视前方的时间段随着用户注视移动终端超过预定时间段或者选择具有超过预定深度的菜单项而增大时,恶意代码检测和分类系统可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式,从而提供能够显著提高驾驶安全性的控制方法。
在一些实施方式中,当在接收到用户输入之后在自动驾驶模式下已经过预定时间段时,自动驾驶模式可以被切换(恢复)到手动驾驶模式。
例如,如图10C的(a)所示,当在车辆的自动驾驶模式进入手动驾驶模式的状态下,随着在移动终端1000处接收的用户输入满足预设条件,从接收到用户输入的时间点(例如,用户的视线偏离移动终端的时间点或选择具有超过预定深度的菜单项的时间点)已经过预定时间段(t2)时,处理器870可以将车辆的驾驶模式从自动驾驶模式切换(恢复)到手动驾驶模式,如图10C的(b)所示。
当如图11A的(a)所示,移动终端1000被用户倾斜超过预定角度时,处理器870可以将手动驾驶模式切换到自动驾驶模式,如图11A的(b)所示。
具体地,在车辆的驾驶模式处于手动驾驶模式的状态下,处理器870可以感测到安装在车辆内的移动终端(在移动终端的触摸屏面向驾驶员的方向上)被倾斜超过预定角度。
该预定角度可以是链接至将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式的功能的移动终端被倾斜的角度,并且可以通过用户的设置来确定/改变。
在该示例中,处理器870可以基于移动终端在一个方向上被倾斜超过预定角度而将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
在该示例中,如图11A的(b)所示,移动终端1000可以基于移动终端1000的倾斜来执行预设功能。
例如,当移动终端主体在一个方向上被用户倾斜超过预定角度时,移动终端1000的控制器可以执行预设功能(例如,视频回放、地图信息显示、音乐回放等)。
预设功能可以由移动终端1000的控制器来执行,也可以通过车辆控制装置800的处理器870的控制在移动终端上执行。
当连接以实现通信的移动终端1000在一个方向上被倾斜超过预定角度时,处理器870可以控制移动终端1000来执行移动终端上的预设功能。
换句话说,当移动终端在一个方向上被用户倾斜超过预定角度时,车辆控制装置可以将车辆的驾驶模式切换到自动驾驶模式,并且执行在移动终端上预设的功能。
在该示例中,在一个方向上以预定角度倾斜移动终端可以被包括在移动终端处所接收到的用户输入中。
可以在移动终端的触摸屏上显示执行预设功能的执行画面1100b。
例如,当在倾斜之前显示第一画面信息(例如,地图信息1100a)并且然后随着移动终端在一个方向上被用户倾斜超过预定角度而执行预设功能时,所执行功能的执行画面1100b可以被显示在移动终端的触摸屏上。
通过上述配置,车辆控制装置可以提供以下接口:该接口能够允许正在驾驶的用户以更方便的方式将驾驶模式切换到自动驾驶模式,并且以更直观且更容易的方式执行在移动终端上的由用户预设的功能。
在一些实施方式中,如图11B的(a)所示,当在倾斜移动终端1000的时间点不允许切换到自动驾驶模式时,处理器870可以维持手动驾驶模式。
具体地,当移动终端1000在一个方向上被倾斜超过预定角度时,处理器870可以确定是否允许切换到自动驾驶模式。
例如,当感测单元830或相机840的正常操作不被允许(或失败)或者所感测到的车辆的周围环境被确定为不允许自动驾驶模式时,处理器870可以确定不允许切换到自动驾驶模式。
由于车辆的周围环境而不允许自动驾驶模式的情况可以包括存在大雾、降雨超过特定量、降雪超过特定量、道路正在施工、无法识别车道等情况。
此外,如图11B的(b)所示,移动终端1000可以被限制根据移动终端的倾斜来执行预设功能。在该示例中,可以在移动终端的触摸屏上显示用于通知预设功能的执行受到限制的信息或用于通知车辆的驾驶模式未被切换到自动驾驶模式的信息1110。
信息1110可以通过移动终端的控制器的控制而被显示,或者通过处理器870的控制而被显示。
当不允许自动驾驶模式的情况被切换到允许自动驾驶模式的情况时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式,并且执行移动终端上的预设功能。
在一些实施方式中,如图11C的(a)所示,当在车辆的驾驶模式处于手动驾驶模式的状态下,移动终端在不同于所述一个方向(例如,移动终端的触摸屏面向驾驶员的方向)的另一方向(例如,移动终端的触摸屏面向乘客座椅的方向)上被倾斜时,处理器870可以维持手动驾驶模式,如图11C的(b)所示。
具体地,当移动终端1000在所述另一方向上被倾斜超过预定角度时,处理器870可以维持手动驾驶模式,而不将车辆的驾驶模式切换到自动驾驶模式。
当移动终端1000在所述另一方向上被倾斜超过预定角度时,移动终端1000可以执行上述预设功能(例如,视频回放)。
在该示例中,处理器870可以基于移动终端1000在所述另一方向上的倾斜而在设置在车辆中的显示单元251、251b上显示在移动终端上所显示的画面信息1100a。
具体地,当移动终端1000在不同于所述一个方向的另一方向(与移动终端的触摸屏面向驾驶员的一个方向相反的另一方向)上被倾斜(或旋转)超过预定角度时,处理器870可以在车辆中所设置的显示单元壳体251上显示在移动终端1000倾斜之前显示的第一画面信息1100a。
此外,处理器870可以在移动终端1000的触摸屏上显示当移动终端1000被倾斜超过预定角度时所执行的预设功能的执行画面1100b。
执行画面1100b可以通过移动终端的控制器的控制而被显示在移动终端的触摸屏上。
当移动终端1000在一个方向(例如,移动终端的触摸屏面向驾驶员)上被倾斜超过预定角度时,车辆控制装置的处理器870可以将手动驾驶模式切换到自动驾驶模式。
此外,当移动终端1000在与所述一个方向相反的另一方向上被用户倾斜时,车辆控制装置的处理器870可以维持手动驾驶模式。
另外,当移动终端在另一方向(例如,移动终端的触摸屏面向乘客座椅的方向)上被倾斜超过预定角度时,处理器870可以在设置在车辆中的显示单元上移动和显示画面信息,以允许驾驶员继续观看在移动终端1000上显示的画面信息。
控制方法可以提供维持针对驾驶员的信息的显示以及提高坐在乘客座椅上的乘客的便利性。
另外,车辆控制装置可以基于在移动终端上所执行的应用的类型来改变车辆的驾驶模式。
处理器870可以感测(确定、检测、判断)在移动终端上所执行的应用的类型。例如,处理器870可以从可通信的移动终端1000通过通信单元810接收与在移动终端1000上执行的应用相关联的信息。
处理器870可以基于从移动终端1000接收的与应用相关联的信息来确定在移动终端1000上所执行的应用的类型(或种类)。
然后,处理器870可以基于在移动终端1000上所执行的应用的类型来确定是否将手动驾驶模式切换到自动驾驶模式。
例如,如图12A的(a)所示,当在车辆的驾驶模式处于手动驾驶模式的状态下在移动终端1000上执行第一类型的应用1200a(或者在移动终端1000上执行的应用是第一类型的应用1200a)时,处理器870可以维持手动驾驶模式,如图12A的(b)所示。
再例如,当在移动终端1000上执行不同于第一类型的第二类型的应用1200b(或者在移动终端1000上执行的应用是第二类型的应用1200b)时,处理器870可以将手动驾驶模式切换到自动驾驶模式。
在该示例中,第一类型的应用和第二类型的应用可以通过用户的设置来确定,或者根据由法律规定定义的标准来分类。
例如,第一类型的应用可以是针对手动驾驶具有最小风险的应用,并且例如可以包括地图应用、导航应用、音乐回放应用、语音呼叫应用等。
再例如,第二类型的应用可以是针对手动驾驶具有很大风险的应用,并且例如可以包括视频回放应用、图像显示应用、游戏应用、DMB应用、视频呼叫应用等。
在一些实施方式中,可以通过用户的设置来确定或改变第一类型和第二类型的应用。
换句话说,当在移动终端上执行第一类型的应用时,处理器870可以将车辆的驾驶模式维持在手动驾驶模式下,并且当执行第二类型的应用时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
在一些实施方式中,即使在移动终端1000上执行第二类型的应用,当移动终端在预设方向(例如,上述另一方向,即,移动终端的触摸屏面向乘客座椅的方向)上被倾斜时,处理器870可以维持手动驾驶模式。
例如,即使如图12B的(a)所示,在车辆的驾驶模式处于手动驾驶模式的状态下,在移动终端1000上执行第二类型的应用1200b,则当移动终端1000在预设方向(例如,移动终端的触摸屏面向除了驾驶员的座椅以外的乘客座椅的方向)上被用户倾斜超过预定角度时,处理器870也可以维持手动驾驶模式,而不将车辆的驾驶模式切换到自动驾驶模式),如图12B的(b)所示。
在一些实施方式中,在车辆的驾驶模式处于手动驾驶模式的状态下,当车辆控制装置800连接至移动终端1000以实现通信并且在移动终端上已发生事件之后向移动终端的触摸屏施加触摸时,车辆控制装置800可以将手动驾驶模式切换到自动驾驶模式。
例如,如图13A的(a)所示,当在移动终端1000上发生事件(例如,接收到呼叫信号、电话呼叫、视频呼叫、发消息、接收到消息、接收到通知信息、接收到弹出消息等)时,与该事件相关联的信息1300可以被显示在移动终端1000的触摸屏上。
然后,如图13A的(b)所示,当在显示与事件相关联的信息1300的状态下向移动终端1000的触摸屏施加触摸时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
在一些实施方式中,当在移动终端1000上发生的事件是在车辆的驾驶模式处于手动驾驶模式的状态下的特定事件(或预设事件)时,即使向移动终端的触摸屏施加触摸,处理器870也可以维持手动驾驶模式。
例如,如图13B的(a)所示,特定事件可以是在移动终端上可能发生的所有类型的事件当中的对手动驾驶影响较小的事件。例如,特定事件可以是接收到呼叫信号、接收到语音呼叫等。
当如图13B的(a)所示,在移动终端1000上发生特定事件并且然后向触摸屏施加了触摸时,处理器870可以维持手动驾驶模式,如图13B的(b)所示,而不将车辆的驾驶模式从手动驾驶模式改变为自动驾驶模式。
在一些实施方式中,当即使在移动终端上发生了特定事件,在移动终端与车辆(或车辆控制装置)之间也没有连接通信时,响应于施加至移动终端的触摸屏的触摸,处理器870可以将手动驾驶模式切换到自动驾驶模式。
例如,如图13C的(a)所示,当即使在移动终端上发生了特定事件,在移动终端1000与车辆100之间也没有连接通信(例如,有线/无线通信、蓝牙、短程通信)时,响应于施加至移动终端的触摸屏的触摸,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式,如图13C的(b)所示。
再例如,当感测到发生了特定事件且然后向触摸屏施加了触摸并且移动终端被用户移动时,即使所发生的事件是特定事件,处理器870也可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
换句话说,当在移动终端上发生了事件并且在移动终端处接收到对此的响应时,车辆控制装置可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
在一些实施方式中,在所发生的事件是对驾驶具有较小影响的特定事件(例如,语音呼叫、接收到呼叫信号)的情况下,当在移动终端处接收到对此的响应时,车辆控制装置可以将车辆的驾驶模式维持在手动驾驶模式下。
相反,当即使所发生的事件是特定事件,但感测到车辆和移动终端之间没有进行通信连接或者移动终端被驾驶员(用户)移动时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
通过上述配置,即使根据用户的意愿以及响应于在移动终端上已发生的事件来执行应用,车辆控制装置也可以提供能够以更安全的方式驾驶车辆的与车辆相关联的控制方法。
在一些实施方式中,如图14A的(a)所示,在移动终端和车辆100(或车辆控制装置800)以有线方式连接的状态下,基于移动终端与车辆之间的有线连接被释放,处理器870可以将手动驾驶模式切换到自动驾驶模式,如图14A的(b)所示。
此外,在车辆的驾驶模式处于手动驾驶模式的状态下,当在通过接口单元对按照有线方式连接的移动终端正在进行充电的状态下暂停充电(或断开有线连接)时,处理器870可以将车辆的手动驾驶模式切换到自动驾驶模式。
此外,当感测到移动终端按照预设运动来进行移动时,处理器870可以将手动驾驶模式切换到自动驾驶模式。
例如,如图14B所示,当在移动终端1000上感测到预设运动(例如,移动终端被用户拿起的运动或移动终端移动超过预定距离的运动)时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
再例如,如图15所示,当在车辆的驾驶模式处于手动驾驶模式的状态下感测到移动终端1000的锁定状态被释放时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
又例如,如图16所示,当手表型移动终端1600按照预设运动来进行移动(例如,驾驶员注视手表型移动终端1600超过预定时间段或手表型移动终端1600在形成特定轨迹的同时进行移动)时,处理器870可以将车辆的驾驶模式从手动驾驶模式切换到自动驾驶模式。
处理器870可以通过上述通信单元810来感测(确定、检测、判断)在移动终端上所发生的事件、在移动终端上执行的应用、在移动终端处所接收到的(施加于移动终端的)用户输入(或触摸)、在移动终端上执行的功能等。
在一些实施方式中,在移动终端处接收到用户输入。例如,锁定状态的释放、移动终端的运动、响应于在移动终端上发生的事件而进行的触摸、应用的执行等可以被包括在本说明书中所公开的移动终端处接收到的用户输入中。
在一些实施方式中,可以基于车辆正在行驶的假设来执行对车辆的驾驶模式的切换(即,从手动驾驶模式切换到自动驾驶模式或从自动驾驶模式切换到手动驾驶模式)。在一些其它实施方式中,即使在车辆处于静止的状态下也可以执行对车辆的驾驶模式的切换。
车辆控制装置800可以被包括在车辆100中。
此外,将以相同或相似的方式将车辆控制装置800的上述操作或控制方法类比地应用于车辆100(或控制器170)的操作和控制方法。
例如,车辆100的控制方法(或车辆控制装置800的控制方法)可以包括以下处理:连接至移动终端以实现通信;以及在车辆的驾驶模式处于手动驾驶模式的状态下,基于在移动终端处接收到的用户输入满足预设条件来将手动驾驶模式切换到自动驾驶模式。
上述处理可以由设置在车辆100中的控制器170以及由车辆控制装置800执行。
此外,由车辆控制装置800执行的每个功能、配置或控制方法可以由设置在车辆100中的控制器170来执行。换句话说,本文中公开的每种控制方法均可以适用于车辆的控制方法,并且也适用于控制装置的控制方法。
上述示例可以被实现为通过程序写入在介质上的由计算机可读的代码。计算机可读介质可以包括存储有由计算机系统可读的数据的所有类型的记录装置。计算机可读介质的示例可以包括ROM、RAM、CD-ROM、磁带、软盘和光学数据存储装置等,并且还包括以载波(例如,经由互联网传输)的形式实现的装置。另外,计算机可以包括处理器或控制器。因此,其详细描述在所有方面不应被解释为具有限制性,而应被认为是例示性的。

Claims (19)

1.一种车辆控制装置,该车辆控制装置包括:
通信单元,所述通信单元被配置为与移动装置通信并且接收包括在所述移动装置处接收到的用户输入的数据;以及
处理器,所述处理器被配置为:
基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件,并且
基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式,
其中,多个菜单项被显示在所述移动装置上,所述多个菜单项中的每一个与相应的菜单等级相关联,并且
其中,所述处理器被配置为:
基于包括所述用户输入的所述数据,确定用户是否选择了针对来自所述多个菜单项中的第一菜单项的第一菜单等级,
基于对所述用户选择了针对来自所述多个菜单项中的所述第一菜单项的所述第一菜单等级的确定,确定所述第一菜单等级是否满足阈值菜单等级,并且
基于对所述车辆处于所述手动驾驶模式并且所述第一菜单等级满足所述阈值菜单等级的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
2.根据权利要求1所述的车辆控制装置,其中,所述处理器被配置为:
从包括在所述车辆控制装置中的相机或者所述用户输入获取用户的眼跟踪信息,
基于所述眼跟踪信息,确定所述用户是否使用所述移动装置达到第一时间段,并且
基于对所述车辆处于所述手动驾驶模式并且所述用户使用所述移动装置达到所述第一时间段的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
3.根据权利要求1所述的车辆控制装置,其中,所述处理器被配置为:
基于对所述车辆处于所述自动驾驶模式并且从接收到所述用户输入的时间点起已经过预定时间段的确定,将所述车辆从所述自动驾驶模式切换到所述手动驾驶模式。
4.根据权利要求1所述的车辆控制装置,其中,所述处理器被配置为:
基于包括所述用户输入的所述数据,确定已接收到所述用户输入的时间段,并且
基于对所述车辆处于所述手动驾驶模式的确定和所述时间段,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
5.根据权利要求1所述的车辆控制装置,其中,由所述通信单元从所述移动装置接收的所述数据还包括所述移动装置的取向信息,并且
其中,所述处理器被配置为:
基于对所述车辆处于所述手动驾驶模式的确定和所述移动装置的所述取向信息,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
6.根据权利要求5所述的车辆控制装置,其中,所述处理器被配置为:
基于所述移动装置的所述取向信息,生成控制所述移动装置以执行第一功能的命令信号,并且
通过所述通信单元向所述移动装置提供所述命令信号。
7.根据权利要求6所述的车辆控制装置,其中,所述处理器被配置为:
确定所述手动驾驶模式与所述自动驾驶模式之间的切换是否被锁定,并且
基于对所述车辆处于所述手动驾驶模式的确定、所述移动装置的所述取向信息以及对所述手动驾驶模式与所述自动驾驶模式之间的切换是否被锁定的确定,确定是否向所述移动装置提供所述命令信号。
8.根据权利要求5所述的车辆控制装置,其中,所述移动装置的所述取向信息包括所述移动装置正在面向的方向或所述移动装置的倾斜角。
9.根据权利要求5所述的车辆控制装置,其中,所述处理器被配置为:
基于所述取向信息,通过所述通信单元向所述车辆的显示单元提供显示在所述移动装置的显示器上的画面信息。
10.根据权利要求1所述的车辆控制装置,其中,由所述通信单元从所述移动装置接收的所述数据还包括与在所述移动装置上执行的多个应用有关的信息,所述多个应用中的每一个与相应的类型相关联,并且
其中,所述处理器被配置为:
基于对所述车辆处于所述手动驾驶模式的确定和所述多个应用的相应类型,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
11.根据权利要求10所述的车辆控制装置,其中,所述处理器被配置为:
确定所述移动装置是执行来自所述多个应用中的第一类型的应用还是执行来自所述多个应用中的第二类型的应用,所述第二类型的应用与所述第一类型的应用不同,并且
基于对所述车辆处于所述手动驾驶模式并且所述移动装置执行来自所述多个应用中的所述第二类型的应用的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
12.根据权利要求11所述的车辆控制装置,其中,由所述通信单元从所述移动装置接收的所述数据还包括所述移动装置的取向信息,并且
其中,所述处理器被配置为:
基于对所述车辆处于所述手动驾驶模式的确定、所述移动装置的所述取向信息以及对所述移动装置执行来自所述多个应用中的所述第二类型的应用的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
13.根据权利要求1所述的车辆控制装置,其中,由所述通信单元从所述移动装置接收的所述数据还包括:触摸输入和与在所述移动装置上发生的事件有关的信息,并且
其中,所述处理器被配置为:
基于对所述车辆处于所述手动驾驶模式的确定、所述触摸输入和在所述移动装置上发生的所述事件,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
14.根据权利要求13所述的车辆控制装置,其中,由所述通信单元从所述移动装置接收的所述数据还包括与所述移动装置与所述通信单元之间的连接有关的信息,并且
其中,所述处理器被配置为:
基于对所述车辆处于所述手动驾驶模式的确定、与所述移动装置与所述通信单元之间的所述连接有关的所述信息以及在所述移动装置上发生的所述事件,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
15.一种车辆控制装置,该车辆控制装置包括:
通信单元,所述通信单元被配置为与移动装置通信并且接收包括在所述移动装置处接收到的用户输入的数据;以及
处理器,所述处理器被配置为:
基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件,并且
基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式,其中,所述处理器被配置为:
确定所述移动装置与所述通信单元之间的有线连接是否被释放,并且
基于对所述车辆处于所述手动驾驶模式并且所述移动装置与所述通信单元之间的所述有线连接被释放的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
16.一种车辆控制装置,该车辆控制装置包括:
通信单元,所述通信单元被配置为与移动装置通信并且接收包括在所述移动装置处接收到的用户输入的数据;以及
处理器,所述处理器被配置为:
基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件,并且
基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式,
其中,由所述通信单元从所述移动装置接收的所述数据还包括与所述移动装置的移动有关的信息,并且
其中,所述处理器被配置为:
基于对所述车辆处于所述手动驾驶模式的确定和与所述移动装置的所述移动有关的所述信息,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
17.根据权利要求16所述的车辆控制装置,其中,与所述移动装置的所述移动有关的所述信息包括所述移动装置移动的距离或方向。
18.一种车辆的控制方法,该控制方法包括以下步骤:
连接至移动装置以启用通信;
从所述移动装置接收包括在所述移动装置处接收到的用户输入的数据;
基于接收到包括所述用户输入的所述数据,确定与所述移动装置相关联的车辆是在手动驾驶模式下还是在自动驾驶模式下进行操作并且确定在所述移动装置处接收到的所述用户输入是否满足预设条件;以及
基于对所述车辆处于所述手动驾驶模式并且在所述移动装置处接收到的所述用户输入满足所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式,
其中,多个菜单项被显示在所述移动装置上,所述多个菜单项中的每一个与相应的菜单等级相关联,并且
其中,所述控制方法还包括以下步骤:
基于包括所述用户输入的所述数据,确定用户是否选择了针对来自所述多个菜单项中的第一菜单项的第一菜单等级;
基于对所述用户选择了针对来自所述多个菜单项中的所述第一菜单项的所述第一菜单等级的确定,确定所述第一菜单等级是否满足阈值菜单等级;以及
基于对所述车辆处于所述手动驾驶模式并且所述第一菜单等级满足所述阈值菜单等级的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
19.根据权利要求18所述的控制方法,该控制方法还包括以下步骤:
获取用户的眼跟踪信息;
基于所述用户的所述眼跟踪信息,确定所述眼跟踪信息是否满足指示所述用户使用所述移动装置达到第一时间段的所述预设条件;以及
基于对所述车辆处于所述手动驾驶模式并且所述眼跟踪信息满足指示所述用户使用所述移动装置达到所述第一时间段的所述预设条件的确定,将所述车辆从所述手动驾驶模式切换到所述自动驾驶模式。
CN201710740649.0A 2016-09-28 2017-08-25 安装在车辆上的车辆控制装置和控制该车辆的方法 Active CN107867296B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160125026A KR101922009B1 (ko) 2016-09-28 2016-09-28 차량에 구비된 차량 제어 장치 및 차량의 제어방법
KR10-2016-0125026 2016-09-28

Publications (2)

Publication Number Publication Date
CN107867296A CN107867296A (zh) 2018-04-03
CN107867296B true CN107867296B (zh) 2020-09-01

Family

ID=59269781

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710740649.0A Active CN107867296B (zh) 2016-09-28 2017-08-25 安装在车辆上的车辆控制装置和控制该车辆的方法

Country Status (4)

Country Link
US (1) US10606268B2 (zh)
EP (1) EP3300979B1 (zh)
KR (1) KR101922009B1 (zh)
CN (1) CN107867296B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12515658B2 (en) * 2022-11-18 2026-01-06 Toyota Jidosha Kabushiki Kaisha Moving body operation system

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3048557B1 (fr) * 2016-03-07 2018-03-30 Valeo Comfort And Driving Assistance Equipement electronique d'aide au stationnement pour vehicule automobile
CN109863545B (zh) * 2016-10-21 2022-04-26 三菱电机株式会社 自动驾驶辅助装置、自动驾驶车、自动驾驶辅助方法及计算机可读取存储介质
WO2018099677A1 (en) * 2016-11-29 2018-06-07 Jaguar Land Rover Limited Improvements relating to hearing assistance in vehicles
US10172145B2 (en) * 2017-01-31 2019-01-01 Ford Global Technologies, Llc Phone-as-a-key localization based on object detection
US10412581B2 (en) 2017-02-14 2019-09-10 Ford Global Technologies, Llc Secure session communication between a mobile device and a base station
US20180229654A1 (en) * 2017-02-16 2018-08-16 Regents Of The University Of Minnesota Sensing application use while driving
JP6971197B2 (ja) * 2018-05-22 2021-11-24 ヤンマーパワーテクノロジー株式会社 作業車両
JP7210906B2 (ja) * 2018-05-31 2023-01-24 株式会社デンソー 車両の自動運転制御装置及びプログラム
US10780888B2 (en) * 2018-06-12 2020-09-22 Rivian IP Holidings, LLC Systems and methods for operating an autonomous vehicle in a guardian mode
KR102053201B1 (ko) * 2018-08-22 2019-12-06 엘지전자 주식회사 차량에 구비된 차량용 로봇 및 차량용 로봇의 제어방법
US10816635B1 (en) * 2018-12-20 2020-10-27 Autonomous Roadway Intelligence, Llc Autonomous vehicle localization system
KR102674789B1 (ko) * 2019-01-31 2024-06-17 현대자동차주식회사 차량 및 그 제어 방법
CN109871169A (zh) * 2019-03-04 2019-06-11 上海卓易科技股份有限公司 Ui界面调整方法、装置、终端及存储介质
KR102159943B1 (ko) * 2019-04-11 2020-09-25 울산과학기술원 2차사고를 방지하는 자율주행 안전삼각대
KR102830233B1 (ko) * 2019-10-11 2025-07-08 현대자동차주식회사 차량 및 그 제어 방법
US11754689B2 (en) 2019-12-16 2023-09-12 Plusai, Inc. System and method for detecting sensor adjustment need
US11313704B2 (en) 2019-12-16 2022-04-26 Plusai, Inc. System and method for a sensor protection assembly
US11650415B2 (en) 2019-12-16 2023-05-16 Plusai, Inc. System and method for a sensor protection mechanism
US11724669B2 (en) 2019-12-16 2023-08-15 Plusai, Inc. System and method for a sensor protection system
US11738694B2 (en) 2019-12-16 2023-08-29 Plusai, Inc. System and method for anti-tampering sensor assembly
US11077825B2 (en) 2019-12-16 2021-08-03 Plusai Limited System and method for anti-tampering mechanism
US11470265B2 (en) 2019-12-16 2022-10-11 Plusai, Inc. System and method for sensor system against glare and control thereof
US20210206396A1 (en) * 2020-01-08 2021-07-08 Bendix Commercial Vehicle Systems Llc System, controller and method controlling autonomous vehicle functions
JP7255507B2 (ja) 2020-01-31 2023-04-11 トヨタ自動車株式会社 車両
CN111565250B (zh) * 2020-03-25 2021-05-25 浙江吉利汽车研究院有限公司 一种智能车载接听电话的方法、系统及车辆
CN111547065B (zh) * 2020-05-07 2022-01-11 新石器慧通(北京)科技有限公司 一种无人车辆远程控制器控制方法、控制器及控制系统
CN112162547B (zh) * 2020-06-24 2023-05-26 上汽通用五菱汽车股份有限公司 车辆自动泊出方法、系统及可读存储介质
CN112606795B (zh) * 2020-12-28 2022-06-07 中国第一汽车股份有限公司 一种车辆传动系防盗控制方法、装置、设备及存储介质
KR20220094285A (ko) * 2020-12-28 2022-07-06 현대자동차주식회사 공유 차량 및 그 제어 방법
KR102588610B1 (ko) * 2021-06-29 2023-10-17 주식회사 이노핀 차량 내 인포테인먼트 시스템과 연계된 주식 거래 시스템 및 그에 의한 방법
CN113815637A (zh) * 2021-08-28 2021-12-21 济南臻真技术研究所 基于驾驶辅助功能调度通知的方法,设备及存储介质
US20250115259A1 (en) * 2022-03-29 2025-04-10 Hitachi Astemo, Ltd. Arithmetic processing device and arithmetic processing method
KR20230152227A (ko) * 2022-04-26 2023-11-03 현대모비스 주식회사 차량용 디스플레이 장치
US11772667B1 (en) * 2022-06-08 2023-10-03 Plusai, Inc. Operating a vehicle in response to detecting a faulty sensor using calibration parameters of the sensor
CN115649201A (zh) * 2022-11-16 2023-01-31 上海逐路智能科技发展有限公司 驾驶模式切换方法、系统、设备及存储介质
WO2024111684A1 (ko) * 2022-11-21 2024-05-30 주식회사 이노핀 차량 내 인포테인먼트 시스템과 연계된 주식 거래 시스템 및 그에 의한 방법
KR20250055541A (ko) * 2023-02-15 2025-04-24 주식회사 엔씨소프트 컨트롤러를 자동으로 키매핑하는 방법 및 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009054100A1 (de) * 2009-11-20 2010-06-17 Daimler Ag Steuern einer Kommunikationseinrichtung eines Fahrzeugs in Abhängigkeit von einem Fahrerassistenzsystem
US9238467B1 (en) * 2013-12-20 2016-01-19 Lytx, Inc. Automatic engagement of a driver assistance system
CN105517873A (zh) * 2013-07-31 2016-04-20 法雷奥开关和传感器有限责任公司 操作自主驾驶机动车辆的驾驶员辅助装置的方法和机动车辆
CN105593104A (zh) * 2013-07-31 2016-05-18 法雷奥开关和传感器有限责任公司 用于当自动驾驶仪被激活时使用机动车辆中的通信终端的方法和机动车辆

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4076632B2 (ja) * 1998-08-25 2008-04-16 富士通テン株式会社 車載用表示装置
US7899610B2 (en) 2006-10-02 2011-03-01 Inthinc Technology Solutions, Inc. System and method for reconfiguring an electronic control unit of a motor vehicle to optimize fuel economy
DE102012016039B4 (de) * 2012-08-14 2022-06-30 Audi Ag Autonomer Betrieb eines Kraftfahrzeugs in einer Waschstraße
US8918240B2 (en) * 2013-03-15 2014-12-23 GM Global Technology Operations LLC Method for operating hybrid vehicle
JP6163017B2 (ja) * 2013-05-29 2017-07-12 富士通テン株式会社 携帯端末、及び、危険報知システム
KR101562235B1 (ko) 2014-01-21 2015-10-22 자동차부품연구원 차량 운전 중 휴대단말 사용 감지 장치 및 방법 그리고 그를 구비한 휴대단말
JP6265146B2 (ja) * 2014-05-27 2018-01-24 株式会社デンソー 注意喚起装置
JP2016090274A (ja) * 2014-10-30 2016-05-23 トヨタ自動車株式会社 警報装置、警報システム及び携帯端末
KR102332055B1 (ko) 2014-12-01 2021-11-29 현대모비스 주식회사 차량 디스플레이 장치 지향 방향 조절 시스템 및 방법
KR101624191B1 (ko) * 2014-12-08 2016-05-25 현대자동차주식회사 차량 및 그 제어 방법
KR102287789B1 (ko) 2014-12-19 2021-08-10 인포뱅크 주식회사 차량 인터페이스를 제어하는 휴대용 단말기 및 그 동작 방법
US10705521B2 (en) * 2014-12-30 2020-07-07 Visteon Global Technologies, Inc. Autonomous driving interface

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009054100A1 (de) * 2009-11-20 2010-06-17 Daimler Ag Steuern einer Kommunikationseinrichtung eines Fahrzeugs in Abhängigkeit von einem Fahrerassistenzsystem
CN105517873A (zh) * 2013-07-31 2016-04-20 法雷奥开关和传感器有限责任公司 操作自主驾驶机动车辆的驾驶员辅助装置的方法和机动车辆
CN105593104A (zh) * 2013-07-31 2016-05-18 法雷奥开关和传感器有限责任公司 用于当自动驾驶仪被激活时使用机动车辆中的通信终端的方法和机动车辆
US9238467B1 (en) * 2013-12-20 2016-01-19 Lytx, Inc. Automatic engagement of a driver assistance system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12515658B2 (en) * 2022-11-18 2026-01-06 Toyota Jidosha Kabushiki Kaisha Moving body operation system

Also Published As

Publication number Publication date
CN107867296A (zh) 2018-04-03
US20180088577A1 (en) 2018-03-29
EP3300979A1 (en) 2018-04-04
KR20180035044A (ko) 2018-04-05
KR101922009B1 (ko) 2018-11-26
EP3300979B1 (en) 2019-05-15
US10606268B2 (en) 2020-03-31

Similar Documents

Publication Publication Date Title
CN107867296B (zh) 安装在车辆上的车辆控制装置和控制该车辆的方法
CN108016435B (zh) 安装在车辆中的车辆控制设备以及车辆控制方法
CN108725350B (zh) 安装在车辆上的车辆控制设备和车辆的控制方法
CN108058712B (zh) 车辆及其控制方法
CN107878460B (zh) 自动驾驶车辆的控制方法和服务器
KR101959300B1 (ko) 차량용 스마트 키 및 시스템
CN109849906B (zh) 自主行驶车辆及其控制方法
CN107867227B (zh) 车辆驾驶辅助装置
CN108928342B (zh) 车辆用驻车系统及车辆
CN109507994B (zh) 安装在车辆上的车辆控制装置以及控制该车辆的方法
CN110001547B (zh) 输入输出装置以及包括输入输出装置的车辆
KR101994699B1 (ko) 차량 운전 보조 장치 및 차량
KR101977092B1 (ko) 차량에 구비된 차량 제어 장치 및 차량의 제어방법
CN109484343B (zh) 车辆上安装的车辆控制设备和用于控制车辆的方法
CN110723149A (zh) 车辆控制装置和包括该车辆控制装置的车辆
KR20180051977A (ko) 차량용 사용자 인터페이스 장치 및 차량
KR102005443B1 (ko) 사용자 인터페이스 장치
KR102212777B1 (ko) 영상 출력 장치
EP4290475A1 (en) Ar display device for vehicle and method for operating same
KR102043954B1 (ko) 차량에 구비된 차량용 로봇 및 차량용 로봇의 제어방법
KR102721365B1 (ko) 차량 제어 방법, 장치, 차량을 이용한 배달 서비스 방법 및 시스템
KR102125289B1 (ko) 디스플레이 장치 및 그것을 포함하는 차량
KR102089955B1 (ko) 차량에 구비된 차량용 로봇 및 차량용 로봇의 제어방법
KR101982535B1 (ko) 차량에 구비된 차량 제어 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant