[go: up one dir, main page]

DE102024117856A1 - Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle - Google Patents

Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle

Info

Publication number
DE102024117856A1
DE102024117856A1 DE102024117856.6A DE102024117856A DE102024117856A1 DE 102024117856 A1 DE102024117856 A1 DE 102024117856A1 DE 102024117856 A DE102024117856 A DE 102024117856A DE 102024117856 A1 DE102024117856 A1 DE 102024117856A1
Authority
DE
Germany
Prior art keywords
motor vehicle
user
control device
sleep
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102024117856.6A
Other languages
German (de)
Inventor
Karsten Belz
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE102024117856.6A priority Critical patent/DE102024117856A1/en
Publication of DE102024117856A1 publication Critical patent/DE102024117856A1/en
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • A61B5/4818Sleep apnoea
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb using a particular sensing technique using image analysis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • A61B5/4815Sleep quality
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893Cars
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61MDEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording for evaluating the cardiovascular system, e.g. pulse, heart rate, blood pressure or blood flow
    • A61B5/024Measuring pulse rate or heart rate
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Measuring devices for evaluating the respiratory organs
    • A61B5/0816Measuring devices for examining respiratory frequency
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/1103Detecting muscular movement of the eye, e.g. eyelid movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/1113Local tracking of patients, e.g. in a hospital or private home
    • A61B5/1114Tracking parts of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/113Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb occurring during breathing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/486Biofeedback
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Psychology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Acoustics & Sound (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Anesthesiology (AREA)
  • Hematology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Überwachen eines Schlafs eines Benutzers im Kraftfahrzeug (10), wobei eine Steuervorrichtung (22): ein Ruheprogramm des Kraftfahrzeugs (10) aktiviert (S1), das den Benutzer beim Ausruhen im Kraftfahrzeug (10) unterstützt; feststellt, dass der Benutzer im Kraftfahrzeug (10) ruht oder schläft (S2); und aus einer Sensoreinrichtung (14) des Kraftfahrzeugs (10) ein Insassenüberwachungssignal empfängt (S3), das mindestens einen Körperzustandsparameter beschreibt, der einen Zustand eines oder mehrere Körperteile und/oder eine oder mehrere Körperaktionen des ruhenden oder schlafenden Benutzers beschreibt. Die Steuervorrichtung (22) stellt anhand des Insassenüberwachungssignals ein benutzerspezifisches Schlafanalysemodell bereit (S6), das einen Gesamtzustand des Körpers des Benutzers beschreibt, und ermittelt anhand des bereitgestellten Schlafanalysemodells eine Schlafqualität des Schlafs des Benutzers (S7). Die Steuervorrichtung (22) erzeugt dann ein Anzeigesignal (S8), das die Information zur ermittelten Schlafqualität beschreibt, und überträgt dieses an eine Anzeigeeinrichtung (30) des Kraftfahrzeugs (10) (S9).
The invention relates to a method for monitoring a user's sleep in a motor vehicle (10), wherein a control device (22): activates a rest program of the motor vehicle (10) (S1) that assists the user while resting in the motor vehicle (10); detects that the user is resting or sleeping in the motor vehicle (10) (S2); and receives an occupant monitoring signal (S3) from a sensor device (14) of the motor vehicle (10), which describes at least one body state parameter that describes a state of one or more body parts and/or one or more body actions of the resting or sleeping user. Based on the occupant monitoring signal, the control device (22) provides a user-specific sleep analysis model (S6) that describes an overall state of the user's body and determines the sleep quality of the user's sleep (S7) based on the provided sleep analysis model. The control device (22) then generates a display signal (S8) that describes the information on the determined sleep quality and transmits this to a display device (30) of the motor vehicle (10) (S9).

Description

Die Erfindung betrifft ein Verfahren zum Überwachen eines Schlafs eines Benutzers eines Kraftfahrzeugs im Kraftfahrzeug, eine entsprechend eingerichtete Steuervorrichtung, und ein Kraftfahrzeug mit der Steuervorrichtung.The invention relates to a method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, a correspondingly configured control device, and a motor vehicle with the control device.

Die Funktion „Erlebnis Innenraum“ ist mittlerweile in einigen Fahrzeugen bereits zu erleben. Hier wird unter anderem eine Funktion angeboten, bei der zum Beispiel Einschlafmusik gespielt wird, damit ein Benutzer des Kraftfahrzeugs, zum Beispiel eines vollautonom fahrenden oder eines geparkten Kraftfahrzeugs, besser einschlafen kann, und der Benutzer kann gezielt aufgeweckt werden. Beim Schlafen kann es unter anderem zu eventuellen Atemaussetzern kommen.The "Interior Experience" function is already available in some vehicles. This includes features such as playing sleep music to help the occupant of a vehicle, whether it's a fully autonomous or parked car, fall asleep more easily, and also allows for targeted awakenings. Sleep disturbances can sometimes occur, including breathing pauses.

Im Schlaf kann es unter anderem zu eventuellen Atemaussetzern kommen. Menschen mit Schlafstörungen nutzen dazu ein Schlaflabor oder benutzen ein Gerät zur Schlafüberwachung.During sleep, breathing pauses can occur, among other things. People with sleep disorders use a sleep lab or a sleep monitoring device to investigate this.

Die DE 10 2019 218 051 A1 beschreibt ein Verfahren zur Detektion eines Schlafapnoe-Syndroms und entsprechender Reaktion darauf während eines Aufenthaltes von einem Fahrzeuginsassen in einem Fahrzeug sowie ein Fahrzeug, welches solch ein Verfahren ausführen kann. Es ist vorgesehen, dass ein Verfahren zur Detektion eines Schlafapnoe-Syndroms und entsprechender Reaktion darauf während eines Aufenthaltes von einem Fahrzeuginsassen in einem Fahrzeug bereitgestellt wird.The DE 10 2019 218 051 A1 This document describes a method for detecting sleep apnea syndrome and a corresponding response to it during a vehicle occupant's stay in a vehicle, as well as a vehicle capable of performing such a method. It is intended that a method for detecting sleep apnea syndrome and a corresponding response to it will be provided during a vehicle occupant's stay in a vehicle.

Die DE 10 2019 208 952 A1 betrifft ein Verfahren zum gezielten Durchführen eines Kurzschlafes eines Fahrers in einem zumindest teilweise autonom fahrenden Fahrzeug, wobei während des Schlafes in einer Schlafphase mindestens ein physiologischer Parameter zur Bestimmung einer Schlaftiefe des Fahrers mittels mindestens eines Sensors gemessen wird.The DE 10 2019 208 952 A1 relates to a method for the targeted induction of a short sleep by a driver in a vehicle that is at least partially autonomous, wherein during the sleep at least one physiological parameter is measured by means of at least one sensor to determine the depth of sleep of the driver.

Aus der DE 10 2020 213 654 A1 ist ein Verfahren zum Unterstützen eines vorgesehenen Fahrers eines Fortbewegungsmittels bekannt. Es wird bei einem Stehen des Fortbewegungsmittels zumindest eine Kenngröße für die Qualität eines Schlafes des vorgesehenen Fahrers ermittelt und zumindest eine Funktion des Fortbewegungsmittels wird in Abhängigkeit von der zumindest einen Kenngröße für die vorgesehenen Fahrer aktiviert und/oder deaktiviert.From the DE 10 2020 213 654 A1 A method for supporting a designated driver of a means of transport is known. When the means of transport is stationary, at least one parameter for the quality of the designated driver's sleep is determined, and at least one function of the means of transport is activated and/or deactivated depending on this parameter.

Ein Aufwecken eines Benutzers des Kraftfahrzeugs bei einer festgestellten Schlafapnoe hilft dem Benutzer, den ungesunden Schlaf abzubrechen. Schlechter Schlaf oder Schlafapnoe hat jedoch auch eine Auswirkung auf die Kondition des Fahrers nach dem Aufwecken. Befindet sich der Benutzer zum Beispiel auf einer Fernreise und hat auf einem Rastplatz eine Pause eingelegt, um etwas zu schlafen und sich für den Rest der Fahrt zu erholen, kann bei schlechtem Schlaf oder Schlafapnoe sein Wohlbefinden trotz Rast eingeschränkt sein. Mit anderen Worten kann der Benutzer zwar meinen, er habe sich wegen der Ruhepause erholt, aber physisch gesehen kann dies nicht der Fall sein.Waking a motorist diagnosed with sleep apnea helps them break the unhealthy sleep pattern. However, poor sleep or sleep apnea also affects the driver's physical condition after waking. For example, if the driver is on a long journey and stops at a rest area to sleep and recover for the remainder of the trip, poor sleep or sleep apnea may impair their well-being despite the break. In other words, the driver may believe they have recovered from the rest, but physically, this may not be the case.

Eine der Erfindung zugrundeliegende Aufgabe ist eine verbesserte Unterstützung eines Benutzers des Kraftfahrzeugs, insbesondere eines Fahrers, bei einer Ruhepause mit Schlaf.One of the problems underlying the invention is to provide improved support for a user of the motor vehicle, in particular a driver, during a rest break with sleep.

Die gestellte Aufgabe wird jeweils durch das erfindungsgemäße Verfahren und die erfindungsgemäßen Vorrichtungen gemäß den nebengeordneten Ansprüchen gelöst. Vorteilhafte Weiterbildungen sind durch die Unteransprüche gegeben.The stated problem is solved in each case by the inventive method and the inventive devices according to the dependent claims. Advantageous embodiments are given by the sub-claims.

Die Erfindung basiert auf der Idee, über das Feststellen der Schlafqualität hinweg den Schlaf zu analysieren, und dem Fahrer die Analyse auszugeben, also zum Beispiel anzuzeigen. Der Fahrer erfährt so, ob er sich in der Ruhepause tatsächlich erholt hat, oder ob er trotz der Rast unausgeschlafen oder gesundheitlich eingeschränkt sein könnte. Dies ist insbesondere auf längeren Reisen eine große Unterstützung, weil vor allem ein Fahrer die eigene Fitness und Aufmerksamkeitsspanne nach einer Ruhepause besser einschätzen und somit eine Weiterfahrt besser planen kann. Der Fahrer kann dann zum Beispiel gewarnt werden, dass die Schlafqualität schlecht war und der Fahrer kann sich darauf einstellen, dass er unter Umständen nicht ausgeschlafen ist und auf der Weiterfahrt vielleicht besser noch ein paar weitere Ruhepausen einlegen sollte.The invention is based on the idea of analyzing sleep quality and displaying the analysis to the driver. This allows the driver to see whether they have truly recovered during their rest break, or whether they might still be sleep-deprived or experiencing health problems despite the break. This is particularly helpful on longer journeys, as it allows drivers to better assess their fitness and attention span after a rest and thus plan their onward journey more effectively. For example, the driver can be warned that their sleep quality was poor and can prepare for the possibility that they may not be fully rested and should perhaps take a few more breaks before continuing their journey.

Das erfindungsgemäße Verfahren zum Überwachen eines Schlafs eines Benutzers eines Kraftfahrzeugs im Kraftfahrzeug wird durch eine Steuervorrichtung durchgeführt. Unter einer Steuervorrichtung wird ein Bauteil oder Gerät, oder eine Gerätekomponente oder Gerätegruppe verstanden, das/die dazu eingerichtet und ausgestaltet ist, Signale zu empfangen, diese auszuwerten, und Steuersignale zum Steuern anderer Komponenten des Kraftfahrzeugs zu erzeugen und diese an eine andere Kraftfahrzeugkomponente zu übertragen. Hierzu kann die Steuervorrichtung vorzugsweise ein gängiges Empfangs- und Sendemodul aufweisen. Die Steuervorrichtung kann zum Beispiel als Steuergerät oder Steuerchip ausgestaltet sein.The inventive method for monitoring the sleep of a motor vehicle user is carried out by a control device. A control device is understood to be a component or device, or a device component or group of devices, which is configured and designed to receive signals, evaluate them, and generate control signals for controlling other components of the motor vehicle and transmit these signals to another motor vehicle component. For this purpose, the control device preferably comprises a conventional receiver and transmitter module. The control device can, for example, be designed as a control unit or control chip.

Die Steuervorrichtung aktiviert ein Ruheprogramm des Kraftfahrzeugs, das den Benutzer beim Ausruhen im Kraftfahrzeug unterstützt. Das aktivierte Ruheprogramm kann zum Beispiel eine „Powernap“-Funktion sein, also eine Software oder Anwenderprogramm („App“) zum beispielsweise Abspielen von beruhigender Musik und/oder Abdunkeln des Innenraums des Kraftfahrzeugs.The control device activates a vehicle rest program that assists the user while resting in the vehicle. The activated rest program could, for example, be a "power nap" function, i.e., software or user-generated features. program (“app”) for, for example, playing calming music and/or darkening the interior of the vehicle.

Die Steuervorrichtung stellt fest, dass der Benutzer des Kraftfahrzeugs im Kraftfahrzeug ruht oder schläft. Die Steuervorrichtung kann zum Beispiel durch Auswertung von Kameradaten und/oder Mikrofondaten ableiten, dass der Benutzer die Augen geschlossen hat und ruhig atmet und/oder schnarcht.The control device detects that the vehicle's occupant is resting or sleeping. For example, the control device can deduce from camera and/or microphone data that the occupant has their eyes closed and is breathing quietly and/or snoring.

Aus einer Sensoreinrichtung des Kraftfahrzeugs empfängt die Steuervorrichtung ein Insassenüberwachungssignal, das mindestens einen Körperzustandsparameter beschreibt. Unter einer Sensoreinrichtung wird ein Gerät, eine Gerätekomponente oder eine Gerätegruppe verstanden, das/die mindestens einen Sensor aufweist und dazu eingerichtet ist, zum Beispiel Bildinformationen und/oder Schallinformationen zu detektieren. Hierzu kann die Sensoreinrichtung vorzugsweise mindestens eine Kamera aufweisen, und/oder ein Mikrofon. Weitere bevorzugte Sensoren werden weiter unten angesprochen. Der Körperzustandsparameter ist dabei ein Parameter, der einen Zustand eines oder mehrerer Körperteile des ruhenden oder schlafenden Benutzers beschreibt, und/oder eine oder mehrere Körperaktionen des Benutzers. Beispielhaft kann das Insassenüberwachungssignal ein Bild oder eine Bilderserie der Augen des Benutzers beschreiben, des Oberkörpers, des Kopfs oder des ganzen Körpers. Beschreibt das empfangene Insassenüberwachungssignal ein Bild oder eine Bilderserie von Körperbewegungen oder Körperteilbewegungen des Benutzers, kann die „Körperaktion“ dann eine Bewegung sein, beispielsweise wenn sich der Benutzer des Kraftfahrzeugs umdreht oder den Kopf unruhig hin und her wirft.The control device receives an occupant monitoring signal from a sensor unit of the vehicle, describing at least one body state parameter. A sensor unit is defined as a device, device component, or device group that includes at least one sensor and is configured to detect, for example, image and/or sound information. For this purpose, the sensor unit preferably includes at least one camera and/or a microphone. Further preferred sensors are discussed below. The body state parameter is a parameter that describes the state of one or more body parts of the resting or sleeping user and/or one or more body actions of the user. For example, the occupant monitoring signal can describe an image or a series of images of the user's eyes, upper body, head, or entire body. If the received occupant monitoring signal describes an image or a series of images of body movements or movements of body parts of the user, the "body action" can then be a movement, for example, if the vehicle user turns over or tosses their head restlessly.

Das Insassenüberwachungssignal kann zusätzlich oder alternativ von einem Mikrofon der Sensoreinrichtung aufgenommene Geräusche im Kraftfahrzeug beschreiben, vorzugsweise Geräusche des Benutzers, wie zum Beispiel Atemgeräusche oder Schnarchen.The occupant monitoring signal can additionally or alternatively describe sounds in the motor vehicle recorded by a microphone of the sensor device, preferably sounds of the user, such as breathing sounds or snoring.

Der Körperzustandsparameter kann beispielhaft ein Öffnungsgrad oder Schließgrad der Augenlider sein, eine Bewegungsfrequenz des Körpers und/oder des Kopfes, eine Atemfrequenz und/oder eine Schnarchfrequenz, und/oder eine Atemtiefe und/oder Lautstärke des Schnarchens.Examples of body condition parameters include the degree of opening or closing of the eyelids, the movement frequency of the body and/or head, the respiratory rate and/or the snoring rate, and/or the depth of breathing and/or the volume of snoring.

Anhand des empfangenen Insassenüberwachungssignals stellt die Steuervorrichtung ein benutzerspezifisches Schlafanalysemodell des Benutzers bereit, welches einen Gesamtzustand des Körpers des Benutzers beschreibt. Das Schlafanalysemodell kann zum Beispiel einen Zeitverlauf der Ruhepause des Benutzers beschreiben, über den einer oder mehrere Körperzustandsparameter ausgebildet sein können.Based on the received occupant monitoring signal, the control device provides a user-specific sleep analysis model of the user, which describes the overall state of the user's body. The sleep analysis model can, for example, describe a time course of the user's rest period, over which one or more body state parameters can be defined.

Anhand des bereitgestellten Schlafanalysemodells ermittelt die Steuervorrichtung eine Schlafqualität des Schlafs des Benutzers. Hierzu kann die Steuervorrichtung zum Beispiel alle Daten des Schlafanalysemodells auswerten und zum Beispiel die Schlafqualität als Zahl auf einer vorgegebenen Skala unterschiedlicher die Schlafqualität beschreibende Werte beschreiben. Alternativ oder zusätzlich kann die Schlafanalyse der Steuervorrichtung das Ergebnis der Schlafqualität einem Emoticon zuordnen, das die ermittelte Schlafqualität beschreibt. So kann zum Beispiel bei einer sehr guten Schlafqualität das Bild eines lachenden Smileys die gute Schlafqualität repräsentieren, bei einer mittleren Schlafqualität der vorgegebenen Skala ein Smiley mit einem neutralen Mund, und bei einer schlechten Schlafqualität ein Smiley mit einem traurigen Gesicht. Alternativ oder zusätzlich kann die Steuervorrichtung dem Ergebnis der Schlafanalyse eine vorgegebene Farbe zuordnen, zum Beispiel Rot bei schlechter Schlafqualität, Gelb bei mittelwertiger Schlafqualität, und Grün bei sehr guter Schlafqualität. Zusätzlich oder alternativ kann die Information zur ermittelten Schlafqualität zum Beispiel ein Diagramm mit den Werten sein, und/oder eine Statistik.Using the provided sleep analysis model, the control device determines the user's sleep quality. For this purpose, the control device can, for example, evaluate all data from the sleep analysis model and describe the sleep quality as a number on a predefined scale of different values describing sleep quality. Alternatively or additionally, the control device's sleep analysis can assign the sleep quality result to an emoticon that describes the determined sleep quality. For example, a smiling smiley face could represent very good sleep quality, a smiley face with a neutral mouth could represent average sleep quality on the predefined scale, and a smiley face with a sad face could represent poor sleep quality. Alternatively or additionally, the control device can assign a predefined color to the sleep analysis result, for example, red for poor sleep quality, yellow for average sleep quality, and green for very good sleep quality. Additionally or alternatively, the information on the determined sleep quality can be presented, for example, as a graph with the values and/or statistics.

Zur Umsetzung der Bereitstellung der Schlafanalyse während der Ruhepause erzeugt die Steuervorrichtung ein Anzeigesignal, welches die Information zu der ermittelten Schlafqualität beschreibt. Die Steuervorrichtung überträgt das erzeugte Anzeigesignal dann an eine Anzeigeeinrichtung des Kraftfahrzeugs. Unter einer Anzeigeeinrichtung wird ein Gerät, eine Gerätekomponente oder eine Gerätegruppe verstanden, die dazu eingerichtet und ausgestaltet ist, eine Bildinformation an den Benutzer des Kraftfahrzeugs auszugeben. Die Anzeigeeinrichtung kann zum Beispiel als Anzeigevorrichtung ausgestaltet sein, zum Beispiel als Bildschirm des Kraftfahrzeugs. Der beispielhafte Bildschirm kann zum Beispiel ein Bildschirm der Mittelkonsole sein, oder zum Beispiel ein Bildschirm einer Mensch-Maschine-Schnittstelle („HMI“).To implement the provision of sleep analysis during rest periods, the control unit generates a display signal describing the determined sleep quality. The control unit then transmits this signal to a display unit in the vehicle. A display unit is defined as a device, component, or group of devices designed and configured to output visual information to the vehicle's user. The display unit can be, for example, a screen in the vehicle. This screen could be, for instance, a center console screen or a human-machine interface (HMI) screen.

Es ergeben sich die oben beschriebenen Vorteile. Zusätzlich hat der Benutzer eine weitere Erlebnisfunktion im Innenraum des Kraftfahrzeugs.The advantages described above result. In addition, the user gains another experiential function within the vehicle's interior.

Vorzugsweise kann das Insassenüberwachungssignal beschreiben:

  • - Daten aus einem Mikrofon des Kraftfahrzeugs, wobei die Steuervorrichtung dazu eingerichtet ist, anhand der Mikrofondaten ein Schnarchen und/oder Atemgeräusche des Benutzers festzustellen; insbesondere eine Lautstärke und/oder einen Schallpegel des Schnarchens und/oder des Atems, eine Frequenz des Schnarchens und/oder des Atems, und/oder eine Pause zwischen Schnarch- und/oder Atemgeräuschen; und/oder
  • - Daten einer Kamera, die vorzugsweise ein Bild oder eine Bilderserie beschreiben, vorzugsweise der Augen und/oder Augenlider des Benutzers, und/oder eine Körperhaltung des Benutzers, und/oder eine Bewegung des Benutzers; und/oder
  • - Daten aus einer Sitzsensorik oder einer Belegungssensorik des Kraftfahrzeugs, wobei diese Daten vorzugsweise ein den Sitz beaufschlagendes Gewicht beschreiben; wobei die Steuervorrichtung dazu eingerichtet ist, anhand der Sitzsensorik- oder Belegungssensorikdaten eine Sitzplatzbelegung festzustellen; und/oder
  • - Daten aus einer Kopfstützensensorik, die einen Druck und/oder eine Druckänderung beschreiben können; wobei die Steuervorrichtung dazu eingerichtet ist, anhand der Kopfstützensensorikdaten eine Bewegungsserie des Benutzers festzustellen.
Preferably, the occupant monitoring signal can describe:
  • - Data from a microphone of the motor vehicle, wherein the control device is configured to detect snoring and/or breathing sounds of the user based on the microphone data; in particular, a volume and/or sound level of the snoring and/or of breathing, a frequency of snoring and/or breathing, and/or a pause between snoring and/or breathing sounds; and/or
  • - Data from a camera, preferably describing an image or series of images, preferably of the user's eyes and/or eyelids, and/or a posture of the user, and/or a movement of the user; and/or
  • - Data from a seat sensor or occupancy sensor of the motor vehicle, wherein this data preferably describes a weight acting on the seat; wherein the control device is configured to determine seat occupancy based on the seat sensor or occupancy sensor data; and/or
  • - Data from a headrest sensor system that can describe pressure and/or pressure changes; wherein the control device is configured to detect a series of user movements based on the headrest sensor data.

Diese Daten, insbesondere bei einer Vielzahl unterschiedlicher Daten, sind besonders gut geeignet, den Schlaf zu analysieren und eine genaue Aussage über die Schlafqualität zu treffen.This data, especially when combined with a large number of different data points, is particularly well suited to analyzing sleep and making an accurate statement about sleep quality.

In einer weiteren Ausführungsform des erfindungsgemäßen Verfahrens kann die Steuervorrichtung zum Ermitteln der Schlafqualität einen Anteil der durch das empfangene Insassenüberwachungssignal beschriebenen Daten gegenüber einem anderen Anteil der durch das empfangene Insassenüberwachungssignal beschriebenen Daten priorisieren, also gewichten. Vorzugsweise können dabei Mikrofondaten zu den priorisierten Daten gehören. Mit anderen Worten kann die Steuervorrichtung bei der Schlafanalyse eine Priorisierung oder Gewichtung vornehmen. Das Schlafanalysemodell kann so personenspezifisch konfiguriert werden und Eigenheiten des Benutzers, zum Beispiel ungewöhnlich laute, aber für diesen Benutzer normale Atemgeräusche, berücksichtigen. Insbesondere bei der Priorisierung der Mikrofondaten kann eine sehr viel genauere Aussage über die Schlafqualität gemacht werden.In a further embodiment of the method according to the invention, the control device for determining sleep quality can prioritize, i.e., weight, one portion of the data described by the received occupant monitoring signal over another portion. Preferably, microphone data can be included among the prioritized data. In other words, the control device can perform prioritization or weighting during sleep analysis. The sleep analysis model can thus be configured for a specific individual and take into account user characteristics, for example, unusually loud but normal breathing sounds for that user. In particular, prioritizing the microphone data allows for a much more accurate assessment of sleep quality.

Gemäß einer weiteren, besonders bevorzugten Ausführungsform des erfindungsgemäßen Verfahrens kann die Steuervorrichtung in Abhängigkeit von der ermittelten Schlafqualität eine vorbestimmte Maßnahme zum Verbessern eines Wohlbefindens des Benutzers festlegen. Zum Beispiel kann die Steuervorrichtung die Maßnahme aus einer Mehrzahl an vorbestimmten oder vorgegebenen Maßnahmen auswählen. Zusätzlich zu der Anzeige der Schlafanalyse kann der Benutzer also aktiv dabei unterstützt werden, sein aktuelles Wohlbefinden und/oder nachhaltig auch das zukünftige Wohlbefinden zu verbessern. Die Steuervorrichtung kann dann ein Steuersignal erzeugen, das Instruktionen zum Umsetzen der festgelegten Maßnahme durch ein Kraftfahrzeugsystem des Kraftfahrzeugs beschreiben kann. Die Steuervorrichtung kann dann das erzeugte Steuersignal an das Kraftfahrzeugsystem übertragen.According to a further, particularly preferred embodiment of the method according to the invention, the control device can, depending on the determined sleep quality, define a predetermined measure to improve the user's well-being. For example, the control device can select the measure from a plurality of predetermined or predefined measures. In addition to displaying the sleep analysis, the user can thus be actively supported in improving their current well-being and/or sustainably improving their future well-being. The control device can then generate a control signal that can describe instructions for the implementation of the defined measure by a vehicle system. The control device can then transmit the generated control signal to the vehicle system.

Legt die Steuervorrichtung zum Beispiel fest, dass Atemübungen dem Benutzer helfen würden, eine festgestellte unregelmäßige Atmung beim Schlafen zu verbessern, kann die Steuervorrichtung zum Beispiel ein im Bordsystem gespeichertes Trainingsprogramm für Atemübungen als Maßnahme auswählen und durch Erzeugung und Übertragung des entsprechenden Steuersignals können dem Benutzer zum Beispiel, während das Kraftfahrzeug noch geparkt ist, ein Tutorial zu den Atemübungen auf dem Bildschirm angezeigt werden. Alternativ oder zusätzlich kann zum Beispiel eine Tonaufnahme eine Anleitung für die Atemübungen über ein Lautsprechersystem des Kraftfahrzeugs ausgegeben werden.For example, if the control unit determines that breathing exercises would help the user improve detected irregular breathing during sleep, the control unit can select a breathing exercise training program stored in the vehicle's system as a measure. By generating and transmitting the corresponding control signal, a tutorial on the breathing exercises can be displayed on the screen for the user, for example, while the vehicle is still parked. Alternatively or additionally, an audio recording providing instructions for the breathing exercises can be played through the vehicle's speaker system.

Dadurch wird das Wohlbefinden des Benutzers nachhaltig verbessert. Legt der Benutzer gerade eine Pause auf einer längeren Fahrt ein, kann die Maßnahme auch dazu beitragen, dass der Benutzer für die Fahrt auf dem nächsten Streckenabschnitt fitter ist oder bei der nächsten Pause besser schläft.This sustainably improves the user's well-being. If the user is taking a break during a longer journey, this measure can also help them be fitter for the next leg of the journey or sleep better during the next break.

In einer Weiterbildung kann die Steuervorrichtung als Maßnahme zum Verbessern des Wohlbefindens des Benutzers ein Trainingsprogramm zum Verbessern der Schlafqualität festlegen, wobei das erzeugte Steuersignal das festgelegte Trainingsprogramm beschreiben kann. Das erzeugte Steuersignal kann die Steuervorrichtung dann an die Anzeigeeinrichtung des Kraftfahrzeugs übertragen. Die Vorteile wurden bereits vorhin bei einem optionalen Trainingsprogramm mit Atemübungen beschrieben. Ein anderes, bevorzugtes Trainingsprogramm kann zum Beispiel ein Vitalisierungsprogramm sein, zum Beispiel ein Programm mit ein paar Dehnungsübungen, die den Benutzer zusätzlich munter machen.In a training program, the control unit can define a sleep quality training program as a measure to improve the user's well-being, with the generated control signal describing the defined training program. The control unit can then transmit this signal to the vehicle's display. The advantages of an optional training program with breathing exercises were described earlier. Another preferred training program could be, for example, a revitalization program, such as one with stretching exercises to further energize the user.

In einer weiteren Weiterbildung, die mit einer oder mehreren Weiterbildungen kombiniert werden kann, kann die Steuervorrichtung als Maßnahme zum Verbessern des Wohlbefindens ein Ausgeben eines Aufwecksignals durch eine Ausgabeeinrichtung des Kraftfahrzeugs auswählen. Unter einer Ausgabeeinrichtung wird dabei ein Gerät, eine Gerätekomponente oder eine Gerätegruppe verstanden, das/die zum Ausgeben eines Audiosignals ausgestaltet ist, und hierzu vorzugsweise einen Lautsprecher aufweisen kann oder als Lautsprecher ausgestaltet sein kann. Die Steuervorrichtung kann dann das erzeugte Steuersignal an die Ausgabeeinrichtung des Kraftfahrzeugs übertragen. Hierdurch kann das Kraftfahrzeug ein Aufwecksignal ausgeben, durch das der Benutzer aufgeweckt wird. Zur Umsetzung kann die Steuervorrichtung optional an einen Zeitgeber des Kraftfahrzeugs gekoppelt sein, und so zum Beispiel von einer Uhr den richtigen Zeitpunkt zum Aufwecken des Benutzers feststellen.In a further advanced development step, which can be combined with one or more advanced development steps, the control device can select the output of a wake-up signal via an output device of the vehicle as a measure to improve well-being. An output device is understood to be a device, device component, or device group that is designed to output an audio signal and may preferably include a loudspeaker or be designed as a loudspeaker for this purpose. The control device can then The generated control signal is transmitted to the vehicle's output device. This allows the vehicle to output a wake-up signal, which awakens the user. Optionally, the control device can be linked to a timer in the vehicle, for example, to determine the correct time to wake the user from a clock.

In einer weiteren Weiterbildung, die mit einer oder mehreren der vorhergehenden Weiterbildungen kombiniert werden kann, kann die Steuervorrichtung zum Verbessern des Wohlbefindens des Benutzers ein Aussenden eines Notrufsignals an eine kraftfahrzeugexterne Empfangseinrichtung durch eine Sendeeinrichtung des Kraftfahrzeugs auswählen. Dies kann insbesondere der Fall sein, falls die Steuervorrichtung eine sehr schlechte Schlafqualität feststellt oder sogar Schlafapnoe, oder eine Schlafapnoe in einem Bereich, in dem ein Gesundheitsrisiko vorliegen kann. Unter einer Empfangseinrichtung wird dabei ein Gerät oder eine Gerätekomponente zum Empfangen von Signalen verstanden. Die Empfangseinrichtung kann zum Beispiel ein Empfänger eines kraftfahrzeugexternen Datenservers, zum Beispiel einer medizinischen Einrichtung wie zum Beispiel einem Krankenhaus, sein. Unter einer Sendeeinrichtung wird ein Gerät oder eine Gerätekomponente verstanden, die zum Senden von Nachrichten ausgestaltet und eingerichtet ist. Die Sendeeinrichtung, die zum Beispiel als gängiger Sender ausgestaltet sein kann, kann vorzugsweise eine Komponente der Steuervorrichtung sein. Das erzeugte Steuersignal kann dann auch als Notrufsignal bezeichnet werden. Die Steuervorrichtung überträgt das erzeugte Notrufsignal, welches den Notruf beschreiben kann, an die Sendeeinrichtung des Kraftfahrzeugs. Hierdurch kann dem Benutzer bei einer drohenden gesundheitlichen Gefahr schneller geholfen werden.In a further advanced feature, which can be combined with one or more of the preceding features, the control device can select the transmission of an emergency signal to an external receiving device via a transmitting device within the vehicle to improve the user's well-being. This may be particularly relevant if the control device detects very poor sleep quality or even sleep apnea, or sleep apnea in a range where a health risk may exist. A receiving device is understood to be a device or device component for receiving signals. The receiving device could, for example, be a receiver from an external data server, such as one belonging to a medical facility like a hospital. A transmitting device is understood to be a device or device component designed and configured for transmitting messages. The transmitting device, which could, for example, be a conventional transmitter, is preferably a component of the control device. The generated control signal can then also be referred to as an emergency signal. The control device transmits the generated emergency call signal, which can describe the emergency call, to the vehicle's transmitter. This allows the user to receive help more quickly in the event of an imminent health emergency.

Optional kann eine der Ausführungsformen des erfindungsgemäßen Verfahrens mit Hilfe eines neuronalen Netzwerks, also mit einer künstlichen Intelligenz, erfolgen. Als Trainingsdaten für das neuronale Netzwerk können zum Beispiel Kameradaten und/oder Mikrodondaten, vorzugsweise alternativ oder zusätzlich Daten anderer Sensoriken, die oben genannt sind, verwendet werden, die Körperzustandsparameter von einer Vielzahl von Personen beschreiben. Zusätzlich oder alternativ kann das neuronale Netzwerk Sensordaten, die die Sensorik von dem Benutzer erfasst, als weitere Trainingsdaten verwenden, um so benutzerspezifische Wertebereiche des Benutzers zu „lernen“.Optionally, one embodiment of the method according to the invention can be implemented using a neural network, i.e., artificial intelligence. For example, camera data and/or microdon data, preferably alternatively or additionally, data from other sensors mentioned above, describing body state parameters of a large number of people, can be used as training data for the neural network. Additionally or alternatively, the neural network can use sensor data acquired by the user's sensors as further training data in order to "learn" user-specific value ranges.

Optional kann die durch die Ausführungsformen des erfindungsgemäßen Verfahrens beschriebene Funktion mit anderen oder weiteren Funktionen des Kraftfahrzeugs verwendet werden.Optionally, the function described by the embodiments of the method according to the invention can be used with other or further functions of the motor vehicle.

Für Anwendungsfälle oder Anwendungssituationen, die sich bei dem Verfahren ergeben können und die hier nicht explizit beschrieben sind, kann vorgesehen sein, dass gemäß dem Verfahren eine Fehlermeldung und/oder eine Aufforderung zur Eingabe einer Nutzerrückmeldung ausgegeben und/oder eine Standardeinstellung und/oder ein vorbestimmter Initialzustand eingestellt wird.For use cases or application situations that may arise during the procedure and are not explicitly described here, it may be provided that, according to the procedure, an error message and/or a request for user feedback is issued and/or a default setting and/or a predetermined initial state is set.

Zu der Erfindung gehört auch die Steuervorrichtung für das Kraftfahrzeug, die dazu eingerichtet ist, eine Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Die Steuervorrichtung kann eine Datenverarbeitungsvorrichtung oder eine Prozessoreinrichtung (Prozessorschaltung) aufweisen, die dazu eingerichtet ist, eine Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Die Prozessoreinrichtung kann hierzu zumindest einen Mikroprozessor und/oder zumindest einen Mikrocontroller und/oder zumindest einen FPGA (Field Programmable Gate Array) und/oder zumindest einen DSP (Digital Signal Processor) aufweisen. Als Mikroprozessor kann insbesondere jeweils eine CPU (Central Processing Unit), eine GPU (Graphical Processing Unit) oder eine NPU (Neural Processing Unit) verwendet werden. Des Weiteren kann die Prozessoreinrichtung einen Programmcode aufweisen, der dazu eingerichtet ist, bei Ausführen durch die Prozessoreinrichtung die Ausführungsform des erfindungsgemäßen Verfahrens durchzuführen. Der Programmcode kann in einem Datenspeicher der Prozessoreinrichtung gespeichert sein. Die Prozessoreinrichtung kann zum Beispiel auf zumindest einer Schaltungsplatine und/oder auf zumindest einem SoC (System on Chip) basieren.The invention also includes the control device for the motor vehicle, which is configured to carry out an embodiment of the method according to the invention. The control device can comprise a data processing device or a processor device (processor circuit) configured to carry out an embodiment of the method according to the invention. For this purpose, the processor device can comprise at least one microprocessor and/or at least one microcontroller and/or at least one FPGA (Field Programmable Gate Array) and/or at least one DSP (Digital Signal Processor). In particular, a CPU (Central Processing Unit), a GPU (Graphics Processing Unit), or an NPU (Neural Processing Unit) can be used as the microprocessor. Furthermore, the processor device can comprise program code configured to carry out the embodiment of the method according to the invention when executed by the processor device. The program code can be stored in a data memory of the processor device. The processor device can, for example, be based on at least one circuit board and/or on at least one SoC (System on Chip).

Das erfindungsgemäße Kraftfahrzeug ist bevorzugt als Kraftwagen, insbesondere als Personenkraftwagen oder Lastkraftwagen, oder als Personenbus oder Motorrad ausgestaltet, und weist eine Ausführungsform der erfindungsgemäßen Steuervorrichtung auf.The motor vehicle according to the invention is preferably designed as a motor vehicle, in particular as a passenger car or truck, or as a passenger bus or motorcycle, and has an embodiment of the control device according to the invention.

Zu der Erfindung gehören auch Weiterbildungen der erfindungsgemäßen Steuervorrichtung und des erfindungsgemäßen Kraftfahrzeugs, die Merkmale aufweisen, wie sie bereits im Zusammenhang mit den Weiterbildungen des erfindungsgemäßen Verfahrens beschrieben worden sind. Aus diesem Grund sind die entsprechenden Weiterbildungen der erfindungsgemäßen Steuervorrichtung und des erfindungsgemäßen Kraftfahrzeugs hier nicht noch einmal beschrieben.The invention also includes further developments of the control device and the motor vehicle according to the invention, which have features already described in connection with the further developments of the method according to the invention. For this reason, the corresponding further developments of the control device and the motor vehicle according to the invention are not described again here.

Als eine weitere Lösung umfasst die Erfindung auch ein computerlesbares Speichermedium, umfassend Programmcode, der bei der Ausführung durch einen Computer oder einen Computerverbund diesen veranlasst, eine Ausführungsform des erfindungsgemäßen Verfahrens auszuführen. Das Speichermedium kann zumindest teilweise als ein nicht-flüchtiger Datenspeicher (zum Beispiel als eine Flash-Speicher und/oder als SSD - solid state drive) und/oder zumindest teilweise als ein flüchtiger Datenspeicher (zum Beispiel als ein RAM - random access memory) bereitgestellt sein. Das Speichermedium kann in dem Computer oder Computerverbund angeordnet sein. Das Speichermedium kann aber auch beispielsweise als sogenannter Appstore-Server und/oder Cloud-Server im Internet betrieben sein. Durch den Computer oder Computerverbund kann eine Prozessorschaltung mit beispielsweise zumindest einem Mikroprozessor bereitgestellt sein. Der Programmcode kann als Binärcode und/oder als Assembler-Code und/oder als Quellcode einer Programmiersprache (zum Beispiel C) und/oder als Programmskript (zum Beispiel Python) bereitgestellt sein. Das computerlesbare Speichermedium kann alternativ durch ein Signal mit computerlesbaren Daten realisiert sein, zum Beispiel ein zeitvariantes Spannungssignal und/oder ein Funksignal.As a further solution, the invention also includes a computer-readable storage medium comprising program code which, when executed by a computer or a computer network, causes it to execute an embodiment of the method according to the invention. The storage medium The storage medium can be provided at least partially as non-volatile data storage (for example, as flash memory and/or as an SSD - solid state drive) and/or at least partially as volatile data storage (for example, as RAM - random access memory). The storage medium can be located within the computer or computer network. However, the storage medium can also be operated on the internet, for example, as an app store server and/or cloud server. The computer or computer network can provide a processor circuit with, for example, at least one microprocessor. The program code can be provided as binary code and/or assembly code and/or source code of a programming language (for example, C) and/or as a program script (for example, Python). Alternatively, the computer-readable storage medium can be implemented as a signal with computer-readable data, for example, a time-varying voltage signal and/or a radio signal.

Die Erfindung umfasst auch die Kombinationen der Merkmale der beschriebenen Ausführungsformen. Die Erfindung umfasst also auch Realisierungen, die jeweils eine Kombination der Merkmale mehrerer der beschriebenen Ausführungsformen aufweisen, sofern die Ausführungsformen nicht als sich gegenseitig ausschließend beschrieben wurden.The invention also includes combinations of the features of the described embodiments. The invention therefore also includes realizations that each exhibit a combination of the features of several of the described embodiments, provided that the embodiments have not been described as mutually exclusive.

Im Folgenden sind Ausführungsbeispiele der Erfindung beschrieben. Hierzu zeigt:

  • 1 eine schematische Darstellung zu einem Ausführungsbeispiel des erfindungsgemäßen Kraftfahrzeugs, der erfindungsgemäßen Steuervorrichtung, und des erfindungsgemäßen Verfahrens;
  • 2 eine schematische Darstellung zu einem weiteren Ausführungsbeispiel des erfindungsgemäßen Verfahrens;
  • 3 eine schematische Darstellung zu einem Ausführungsbeispiel der Anzeige des erfindungsgemäßen Verfahrens;
  • 4 eine weitere schematische Darstellung zu einem Ausführungsbeispiel der Anzeige des erfindungsgemäßen Verfahrens; und
  • 5 eine weitere schematische Darstellung zu einem Ausführungsbeispiel der Anzeige des erfindungsgemäßen Verfahrens.
The following are exemplary embodiments of the invention described. This is illustrated by:
  • 1 a schematic representation of an embodiment of the motor vehicle according to the invention, the control device according to the invention, and the method according to the invention;
  • 2 a schematic representation of a further embodiment of the method according to the invention;
  • 3 a schematic representation of an embodiment of the display of the method according to the invention;
  • 4 a further schematic representation of an embodiment of the display of the method according to the invention; and
  • 5 a further schematic representation of an embodiment of the display of the method according to the invention.

Bei den im Folgenden erläuterten Ausführungsbeispielen handelt es sich um bevorzugte Ausführungsformen der Erfindung. Bei den Ausführungsbeispielen stellen die beschriebenen Komponenten der Ausführungsformen jeweils einzelne, unabhängig voneinander zu betrachtende Merkmale der Erfindung dar, welche die Erfindung jeweils auch unabhängig voneinander weiterbilden. Daher soll die Offenbarung auch andere als die dargestellten Kombinationen der Merkmale der Ausführungsformen umfassen. Des Weiteren sind die beschriebenen Ausführungsformen auch durch weitere der bereits beschriebenen Merkmale der Erfindung ergänzbar.The exemplary embodiments described below are preferred embodiments of the invention. In these exemplary embodiments, the described components each represent individual features of the invention, which can be considered independently of one another and each further develops the invention independently. Therefore, the disclosure is intended to include combinations of features of the embodiments other than those shown. Furthermore, the described embodiments can also be supplemented by further features of the invention already described.

In den Figuren bezeichnen gleiche Bezugszeichen jeweils funktionsgleiche Elemente.In the figures, identical reference symbols denote functionally equivalent elements.

Die 1 zeigt ein Ausführungsbeispiel eines erfindungsgemäßen Kraftfahrzeugs 10, das zum Beispiel als Personenkraftwagen ausgestaltet sein kann. Das Kraftfahrzeug 10 ist dabei im Querschnitt gezeigt, so dass ein Kraftfahrzeugsitz 12 zu sehen ist. Der Kraftfahrzeugsitz 12 kann zum Beispiel der Fahrersitz sein, auf dem ein Fahrer (in der 1 nicht gezeigt) zum Beispiel eine Ruhepause auf einem Parkplatz einer Raststätte einlegt.The 1 Figure 1 shows an embodiment of a motor vehicle 10 according to the invention, which can, for example, be designed as a passenger car. The motor vehicle 10 is shown in cross-section, so that a motor vehicle seat 12 is visible. The motor vehicle seat 12 can, for example, be the driver's seat, on which a driver (in the 1 (not shown) for example, taking a break in the parking lot of a rest stop.

Das beispielhafte Kraftfahrzeug 10 zeigt ebenfalls schematisch eine Sensoreinrichtung 14, die zum Beispiel einen oder mehrere Vibrationssensoren 16 im Kraftfahrzeugsitz 12 und/oder ein Mikrofon 18, das zum Beispiel im Spiegeldreieck angeordnet sein kann, umfassen kann. Die Sensoren der 1 sind dabei als beispielhafte Sensoren gezeigt, sowie drahtlose oder drahtgebundene Datenkommunikationsverbindungen 20 zur Datenkommunikation zwischen den Sensoren und einer Steuerung der Sensoreinrichtung 14. Vorzugsweise kann die Sensoreinrichtung 14 zusätzlich oder alternativ einen oder mehrere Schallsensoren aufweisen, und/oder eine oder mehrere Kameras. Aus Gründen der besseren Übersichtlichkeit sind diese weiteren möglichen Sensoren in der 1 nicht gezeigt. Die Vibrationssensoren 16 können auch als Sitzsensorik bezeichnet werden. Die optionale Sitzsensorik kann zusätzlich oder alternativ auch in der 1 nicht gezeigte Drucksensoren umfassen, anhand derer eine Steuervorrichtung 22 des Kraftfahrzeugs 10 feststellen kann, welcher der Kraftfahrzeugsitze 12 belegt ist. Die Sensorik kann dann auch als Belegungssensorik bezeichnet werden. Sind mehrere Passagiere im Kraftfahrzeug 10, so kann die Steuervorrichtung 22 vorzugsweise für jeden einzelnen Passagier eine Schlafanalyse bereitstellen.The exemplary motor vehicle 10 also schematically shows a sensor device 14, which may, for example, comprise one or more vibration sensors 16 in the motor vehicle seat 12 and/or a microphone 18, which may, for example, be arranged in the mirror triangle. The sensors of the 1 Examples of sensors are shown, as well as wireless or wired data communication links 20 for data communication between the sensors and a controller of the sensor device 14. Preferably, the sensor device 14 can additionally or alternatively include one or more sound sensors and/or one or more cameras. For the sake of clarity, these other possible sensors are shown in the 1 not shown. The vibration sensors 16 can also be referred to as seat sensors. The optional seat sensors can be installed additionally or alternatively in the 1 The pressure sensors (not shown) enable a control device 22 of the motor vehicle 10 to determine which of the motor vehicle seats 12 are occupied. This sensor system can also be referred to as occupancy sensors. If there are several passengers in the motor vehicle 10, the control device 22 can preferably provide a sleep analysis for each individual passenger.

Die Kommunikation zwischen Steuervorrichtung 22 und Sensoreinrichtung 14 kann über vorzugsweise drahtgebundene Datenkommunikationsverbindungen 24 erfolgen, zum Beispiel über einen oder mehrere Datenbusse des Kraftfahrzeugs 10. Die Steuervorrichtung 22 kann zum Beispiel als Steuergerät oder Steuerchip ausgestaltet sein, und vorzugsweise eine Prozessoreinrichtung 26 mit einem oder mehreren Mikroprozessoren aufweisen, und/oder einen Datenspeicher 28, der zum Beispiel als Speicherchip oder anderes geeignetes Speichermedium ausgestaltet sein kann.Communication between the control device 22 and the sensor device 14 can take place via preferably wired data communication links 24, for example via one or more data buses of the motor vehicle 10. The control device 22 can, for example, be designed as a control unit or control chip, and preferably include a processor device 26 with one or more microprocessors, and/or a data memory 28, which, for example, may be designed as a memory chip or other suitable storage medium.

Die 1 zeigt weiterhin eine Anzeigeeinrichtung 30, die zum Beispiel als Bildschirm eines Kombiinstruments des Kraftfahrzeugs 10 ausgestaltet sein kann. Das Kraftfahrzeug 10 kann optional auch eine Ausgabeeinrichtung, die als Lautsprechersystem ausgestaltet sein kann, oder einen oder mehrere Lautsprecher aufweisen kann, umfassen. Die optionale Ausgabeeinrichtung ist aus Gründen der besseren Übersichtlichkeit in der 1 nicht gezeigt. Optional kann eine solche Ausgabeeinrichtung die Anzeigeeinrichtung 30 umfassen.The 1 The figure further shows a display device 30, which can, for example, be designed as the screen of an instrument cluster of the motor vehicle 10. The motor vehicle 10 can optionally also include an output device, which can be designed as a loudspeaker system or have one or more loudspeakers. The optional output device is shown in the figure for the sake of clarity. 1 not shown. Optionally, such an output device can include the display device 30.

In S1 kann die Steuervorrichtung 22 ein Ruheprogramm aktivieren, das zum Beispiel als Anwenderprogramm in einem Bordsystem des Kraftfahrzeugs 10 gespeichert sein kann. Das Ruheprogramm kann zum Beispiel als Anwenderprogramm zum Durchführen des erfindungsgemäßen Verfahrens eingerichtet sein. Optional kann das Ruheprogramm auch Funktionen zum Abspielen von beruhigender Musik und/oder eine Aufweckfunktion umfassen.In S1, the control device 22 can activate a sleep program, which may, for example, be stored as a user program in an on-board system of the motor vehicle 10. The sleep program may, for example, be configured as a user program for carrying out the method according to the invention. Optionally, the sleep program may also include functions for playing calming music and/or a wake-up function.

Zum Feststellen S2 dahingehend, dass der Benutzer im Kraftfahrzeug 10 ruht oder schläft, kann die Steuervorrichtung 22 zum Beispiel anhand von Daten aus einem in S3 empfangenen Insassenüberwachungssignal auswerten und feststellen, dass der Benutzer im Kraftfahrzeugsitz 12 zurückgelehnt ist und die Augen geschlossen hat. Zusätzlich oder alternativ kann die Steuervorrichtung 22 hierzu Vitaldaten des Benutzers, zum Beispiel einen Puls oder eine Herzfrequenz, auswerten. Diese können zum Beispiel aus einer entsprechenden Kraftfahrzeug-Sensorik stammen, oder aus einem mobilen Gerät des Benutzers, zum Beispiel einer Fitnessuhr. Alternativ kann das Feststellen S2 zum Beispiel daran erfolgen, dass der Benutzer das Ruheprogramm über zum Beispiel das Kombiinstrument startet.To determine S2 that the user is resting or sleeping in the vehicle 10, the control device 22 can, for example, evaluate data from an occupant monitoring signal received in S3 and determine that the user is reclining in the vehicle seat 12 and has their eyes closed. Additionally or alternatively, the control device 22 can evaluate the user's vital data, such as pulse or heart rate. This data can originate, for example, from appropriate vehicle sensors or from a mobile device belonging to the user, such as a fitness watch. Alternatively, the determination S2 can be made, for example, by the user activating the rest program via, for example, the instrument cluster.

Im Beispiel der 1 kann das Insassenüberwachungssignal aus der Sensoreinrichtung 14 zum Beispiel Mikrofondaten, Kameradaten, die Daten der Sitzsensorik oder Belegungssensorik mit den beispielhaften Vibrationssensoren 16 beschreiben. Anhand der beispielhaften Mikrofondaten kann die Steuervorrichtung in S4 ein Schnarchen und/oder Atemgeräusch des Benutzers feststellen, vorzugsweise auch eine Lautstärke und/oder eine Frequenz des Atems und/oder des Schnarchens. Anhand der Kameradaten kann die Steuervorrichtung 22 in S4 zum Beispiel eine Körperhaltung des Benutzers feststellen, und/oder, ob die Augenlider des Benutzers geschlossen sind oder nicht. Schließlich kann die Steuervorrichtung 22 anhand der Daten der Sitzsensorik oder Belegungssensorik feststellen (S4), ob sich der Benutzer während der Ruhephase oft hin und her wälzt oder ob sich der Benutzer nur ab und zu hin und her dreht, was zum Beispiel anhand einer Druckkraft und einer Frequenz von beaufschlagender Kraft im Kraftfahrzeugsitz 12 abgeleitet werden kann.In the example of the 1 The occupant monitoring signal from the sensor device 14 can, for example, describe microphone data, camera data, seat sensor data, or occupancy sensor data with the exemplary vibration sensors 16. Based on the exemplary microphone data, the control device in S4 can detect snoring and/or breathing sounds of the user, preferably also the volume and/or frequency of the breathing and/or snoring. Based on the camera data, the control device 22 in S4 can, for example, determine the user's posture and/or whether the user's eyelids are closed or not. Finally, based on the seat sensor or occupancy sensor data (S4), the control device 22 can determine whether the user frequently tosses and turns during the resting phase or whether the user only turns occasionally, which can be derived, for example, from the pressure force and frequency of the force acting on the vehicle seat 12.

Im Beispiel der 4 kann die Steuervorrichtung 22 all diese Daten vorzugsweise unterschiedlich gewichten oder priorisieren (S5), wobei zum Beispiel die Mikrofondaten beim Bereitstellen des Schlafanalysemodells S6 und/ oder bei der Ermittlung der Schlafqualität S7 stärker gewichtet werden können wie die weiteren Daten. Das bereitgestellte Schlafanalysemodell ist dabei ein digitales Modell, das die einzelnen Daten und/oder eine Statistik zum Beispiel über den Zeitverlauf der Ruhepause hinweg beschreiben kann. In the example of the 4 The control device 22 can preferably weight or prioritize all these data differently (S5), whereby, for example, the microphone data can be weighted more heavily than the other data when providing the sleep analysis model S6 and/or when determining sleep quality S7. The provided sleep analysis model is a digital model that can describe the individual data and/or statistics, for example, over the course of the rest period.

Anhand des bereitgestellten Schlafanalysemodells kann die Steuervorrichtung 22 in S7 zum Beispiel ermitteln, dass der Benutzer in der Ruhepause einen guten Schlaf hat. Dies kann zum Beispiel durch einen durch die Steuervorrichtung 22 ermittelten Zahlenwert repräsentiert sein, der auf einer vorgegebenen Skala der Schlafqualität in einem oberen Drittel der Skala liegen kann, oder zum Beispiel in einem oberen Fünftel der Skala. Eine Einteilung in zum Beispiel die Kategorien „guter Schlaf“, „mittelmäßige Schlafqualität“, „schlechte Schlafqualität“ und „Schlafapnoe“ kann in der Steuervorrichtung 22 vorprogrammiert sein. Insbesondere bei einer möglichen Bewertung des Schlafs dahingehend, dass ein Gesundheitsrisiko vorliegen könnte, kann eine entsprechende beispielhafte Kategorie „gesundheitsschädliche Schlafapnoe“ und/oder „medizinischer Notfall“ vorgesehen sein.Using the provided sleep analysis model, the control device 22 in S7 can, for example, determine that the user is having good sleep during the rest period. This can be represented, for example, by a numerical value determined by the control device 22, which may lie in the upper third or, for example, the upper fifth of a predefined sleep quality scale. A classification into categories such as "good sleep," "fair sleep quality," "poor sleep quality," and "sleep apnea" can be pre-programmed in the control device 22. Particularly if the sleep is assessed as potentially posing a health risk, a corresponding exemplary category such as "harmful sleep apnea" and/or "medical emergency" can be provided.

Bei zum Beispiel einer Kategorisierung als gute Schlafqualität kann die Steuervorrichtung 22 in S8 ein Anzeigesignal erzeugen, das eine entsprechende Information über ein positives Ergebnis beschreiben kann. In S9 überträgt die Steuervorrichtung 22 das erzeugte Anzeigesignal an die Anzeigeeinrichtung 30.For example, if sleep quality is categorized as good, the control device 22 in S8 can generate a display signal that can describe corresponding information about a positive result. In S9, the control device 22 transmits the generated display signal to the display unit 30.

Die 3 zeigt zu diesem Beispiel eine beispielhafte Anzeige S10 der Anzeigeeinrichtung 30, also zum Beispiel auf einem Bildschirm. Als graphische Repräsentation für die Qualität des Schlafs kann das erzeugte Anzeigesignal zum Beispiel drei Repräsentationen 32 anzeigen, wobei jede dieser Repräsentationen 32 symbolisch für eine Schlafqualität stehen kann. So können die drei Repräsentationen 32, also die drei Graphiken, von links nach rechts: eine gute Schlafqualität beschreiben, eine mittelmäßige Schlafqualität oder eine schlechte Schlafqualität. Im Beispiel der 3 können zum Beispiel die graphischen Repräsentationen 32 für mittelmäßige oder schlechte Schlafqualität durchgestrichen sein, und die graphische Repräsentation 32 für gute Schlafqualität, ein lächelnder Smiley, kann nicht durchgestrichen sein, und zum Beispiel farbig oder leuchtend ausgegeben werden. Die 3 zeigt damit das Beispiel einer „Schlafqualitäts-Ampel“. Im Beispiel der 3 ist außerdem ein optionales Textfeld 34 gezeigt, was das Ergebnis der Schlafanalyse - hier im Beispiel zum Beispiel „Sie hatten einen erholsamen Schlaf“ - anzeigen kann.The 3 This example shows a sample display S10 of the display device 30, for example, on a screen. As a graphical representation of sleep quality, the generated display signal can, for example, show three representations 32, where each of these representations 32 can symbolically represent a sleep quality. Thus, the three representations 32, i.e., the three graphics, can, from left to right: describe good sleep quality, average sleep quality, or poor sleep quality. In the example of the 3 For example, the graphic representations 32 can be used to describe average or poor sleep quality. The graphic representation 32 for good sleep quality, a smiling smiley face, cannot be crossed out and can, for example, be displayed in color or in bright colors. 3 This illustrates the example of a "sleep quality traffic light". In the example of the 3 An optional text field 34 is also shown, which can display the result of the sleep analysis - in this example, for instance, "You had a restful sleep".

Die 4 zeigt eine alternative oder zusätzliche Darstellung einer Anzeigeeinrichtung 30, zum Beispiel eine wissenschaftliche Darstellung mit Messwerten wie zum Beispiel Lautstärke, Schalldruck, Vibrationen im Kraftfahrzeugsitz 12 und/oder eine Lautheit in der Maßeinheit Sone. Ein erstes Textfeld 34 oberhalb eines Diagramms 36 kann zum Beispiel die Überschrift „dBA-Wert-Vergleich“ anzeigen, während ein weiteres Textfeld 38 eine weitere Information zur Analyse anzeigen kann, zum Beispiel einen Text zu einem Ratschlag. Ergibt die Schlafanalyse, dass der Benutzer gut geschlafen hat, kann in diesem weiteren Textfeld 38 zum Beispiel „Sie sind sehr erholt“ angezeigt werden. Bei einer schlechten oder sogar voraussichtlich gesundheitsschädlichen Schlafqualität kann das Textfeld 38 auch zum Beispiel den Text „Bitte Hausarzt besuchen!“ anzeigen.The 4 The display shows an alternative or additional representation of a display device 30, for example, a scientific representation with measured values such as volume, sound pressure, vibrations in the vehicle seat 12, and/or loudness in the unit sone. A first text field 34 above a diagram 36 can, for example, display the heading "dBA value comparison," while another text field 38 can display further information about the analysis, for example, text with advice. If the sleep analysis shows that the user slept well, this further text field 38 can, for example, display "You are very rested." In the case of poor or even potentially harmful sleep quality, the text field 38 can also display, for example, the text "Please visit your family doctor!"

Im Diagramm 36 kann vorzugsweise eine Maßeinheit eines Schalldruckpegels (umgangssprachlich der „Geräuschpegel“) dB (A) oberhalb der Zeit t aufgetragen sein. Dabei kann das Diagramm 36 zum Beispiel eine Kurve 40 darstellen, die den Verlauf der Werte zum Beispiel der Lautstärke des Schnarchens beschreiben kann, sowie eine weitere Kurve 42, die zum Beispiel einen Referenzwert eines normalen Schalldruckpegels veranschaulichen kann. Mit anderen Worten werden in dem Diagramm 36 des Beispiels gemessene Schalldruckpegel im Vergleich zu einem normalen, gesunden Schalldruckpegel in der Kurve 42 gezeigt. Idealerweise kann das Diagramm 36 zusätzlich eine Legende 44 zur Erklärung der Kurven 40, 42 aufweisen.Diagram 36 preferably plots a unit of measurement of a sound pressure level (colloquially the "noise level") dB(A) against time t. For example, diagram 36 can represent a curve 40, which can describe the progression of values such as the loudness of snoring, and another curve 42, which can illustrate a reference value of a normal sound pressure level. In other words, diagram 36 of the example shows measured sound pressure levels compared to a normal, healthy sound pressure level in curve 42. Ideally, diagram 36 can also include a legend 44 to explain curves 40 and 42.

Die 5 zeigt eine zusätzliche oder alternative Anzeige, bei der im Textfeld 34 zum Beispiel die Überschrift „Vergleich von mehreren Powernaps“ angezeigt werden kann. Die „Schlafqualitäts-Ampel“ kann dann zum Beispiel graphische Repräsentationen zur Schlafqualität zu drei verschiedenen Messzeiträumen („01/24“, „03/24“, „04/24“) anzeigen. Die drei verschiedenen Messzeiträume können dabei zum Beispiel verschiedene Monate des laufenden Jahres sein. Mit anderen Worten zeigt die 5 eine Darstellung mehrerer Schlafaktionen.The 5 This displays an additional or alternative view, where, for example, the heading "Comparison of several power naps" can be shown in text field 34. The "sleep quality traffic light" can then, for example, display graphical representations of sleep quality for three different measurement periods ("01/24", "03/24", "04/24"). The three different measurement periods could, for example, be different months of the current year. In other words, the 5 a representation of several sleep actions.

In einer alternativen oder zusätzlichen Darstellung der „Schlafampel“ können die unterschiedlichen graphischen Repräsentationen 32 zum Beispiel in den Ampelfarben Grün, Gelb und Rot dargestellt sein.In an alternative or additional representation of the “sleep traffic light”, the different graphic representations 32 can, for example, be shown in the traffic light colors green, yellow and red.

Vorzugsweise kann vorgesehen sein, dass die Priorisierung oder Gewichtung der Daten bei der Schlafanalyse angepasst werden kann. Als Unterfunktion des Ruheprogramms kann ein Benutzer des Kraftfahrzeugs 10 dann zum Beispiel die Gewichtung der Sensorik anpassen, zum Beispiel durch Abwählen der Sitzsensorik. Dies kann zum Beispiel dann vorteilhaft sein, falls der Benutzer sich generell sehr häufig und kräftig beim Schlafen umdreht und jedes Mal vom System aufgeweckt wird, aber eigentlich weiterschlafen möchte.Preferably, the prioritization or weighting of the data during sleep analysis can be adjusted. As a sub-function of the rest program, a user of the vehicle 10 can then, for example, adjust the weighting of the sensors, for instance by deselecting the seat sensors. This can be advantageous, for example, if the user generally tosses and turns very frequently and vigorously while sleeping and is woken up by the system each time, but actually wants to continue sleeping.

Vorzugsweise kann die Steuervorrichtung 22 zusätzlich dazu eingerichtet sein, in Abhängigkeit von der ermittelten Schlafqualität in S11 eine Maßnahme zum Verbessern des Wohlbefindens des Benutzers festzulegen. Ermittelt die Steuervorrichtung 22 in S7 zum Beispiel eine sehr gute Schlafqualität, kann zum Beispiel ein Vitalisierungsprogramm als Maßnahme festgelegt werden (S11). Das daraufhin in S12 erzeugte Steuersignal kann dann zum Beispiel das Abspielen des Vitalisierungsprogramms nach dem Aufwecken des Benutzers beschreiben. Das erzeugte Steuersignal mit der Information zu der Maßnahme kann dann zum Beispiel als ausgebendes Kraftfahrzeugsystem das Kombiinstrument oder das HMI des Kraftfahrzeugs 10 angeben. In S13 überträgt die Steuervorrichtung 22 dann das erzeugte Steuersignal mit der festgelegten Maßnahme an das Kraftfahrzeugsystem.Preferably, the control device 22 can additionally be configured to define a measure to improve the user's well-being, depending on the sleep quality determined in S11. For example, if the control device 22 determines very good sleep quality in S7, a revitalization program can be defined as the measure (S11). The control signal subsequently generated in S12 can then, for example, describe the playback of the revitalization program after the user wakes up. The generated control signal with the information about the measure can then, for example, specify the instrument cluster or the HMI of the vehicle 10 as the output vehicle system. In S13, the control device 22 then transmits the generated control signal with the defined measure to the vehicle system.

Stellt die Steuervorrichtung 22 in S7 zum Beispiel eine eher schlechte Schlafqualität fest, und beschreiben die Mikrofondaten, dass der Benutzer einen unruhigen Atem oder Schlafapnoe hat, kann die Maßnahme zum Beispiel das Abspielen eines Trainingsprogramms mit Atemübungen sein. For example, if the control device 22 in S7 detects rather poor sleep quality, and the microphone data indicate that the user has restless breathing or sleep apnea, the measure could be, for example, playing a training program with breathing exercises.

Bei besonders schlechter Schlafqualität kann die Steuervorrichtung 22 als Maßnahme in S11 auch ein Aufwecken des Benutzers auswählen, und ein Lautsprechersystem des Kraftfahrzeugs 10 kann dann das Wecksignal ausgeben.In cases of particularly poor sleep quality, the control device 22 can also select a wake-up of the user as a measure in S11, and a loudspeaker system of the motor vehicle 10 can then emit the wake-up signal.

Stellt die Steuervorrichtung 22 in S7 sogar einen gesundheitlichen Notfall fest, kann die in S11 festgestellte Maßnahme das Aussenden eines Notrufsignals sein, und ein Sender des Kraftfahrzeugs 10 kann dann das in S12 erzeugte Notrufsignal an zum Beispiel eine Notrufstation eines Krankenhauses übertragen. Beim Feststellen S7 einer schlechten Qualität kann vorzugsweise vorgesehen sein, dass ein entsprechender Hinweis, zum Beispiel „Bitte Hausarzt besuchen!“, in einem wie in der 4 gezeigten Textfeld 38 angezeigt werden kann.If the control device 22 detects a medical emergency in S7, the action determined in S11 can be the transmission of an emergency call signal, and a transmitter of the motor vehicle 10 can then transmit the emergency call signal generated in S12 to, for example, an emergency call station of a hospital. If S7 detects poor signal quality, it can preferably be provided that a corresponding message, for example "Please visit your family doctor!", is displayed in a manner similar to that shown in the 4 The text field shown (38) can be displayed.

Die 2 zeigt ein Strukturdiagramm und veranschaulicht nochmal ein weiteres Ausführungsbeispiel des erfindungsgemäßen Verfahrens. Das Strukturdiagramm der 2 zeigt schematisiert beispielhaft zwei Mikrofone 18, einen Schallsensor 46 und einen Vibrationssensor 48 der Sensoreinrichtung 14. Die entsprechenden Sensordaten werden in S3 von der Steuervorrichtung 22, zum Beispiel dem Steuergerät des Kraftfahrzeugs 10, empfangen. In S14 erfolgt die Verarbeitung der Informationen, umfassend das Bereitstellen S6 des Schlafanalysemodells und das Ermitteln der Schlafqualität in S7. In S10 erfolgt die Ausgabe zum Beispiel der Ergebnisse, zum Beispiel nach Beendigung des Schlafprogramms, durch die Anzeigeeinrichtung 30. Beim Feststellen S7 einer schlechten oder sogar gesundheitlich schädlichen Schlafqualität kann in S15 das Aussenden eines Notrufs an einen Arzt, ein Aussenden einer Information an einen Arzt, oder ein Aussenden zum Anfordern schneller medizinischer Hilfe erfolgen.The 2 The diagram shows a structure diagram and illustrates another embodiment of the method according to the invention. The structure diagram of the 2 Figure 14 schematically shows two microphones 18, a sound sensor 46, and a vibration sensor 48 of the sensor device 14. The corresponding sensor data are received in S3 by the control device 22, for example, the control unit of the motor vehicle 10. In S14, the information is processed, including the provision of the sleep analysis model in S6 and the determination of sleep quality in S7. In S10, the results, for example, after completion of the sleep program, are displayed by the display device 30. If poor or even harmful sleep quality is detected in S7, an emergency call to a doctor, information to a doctor, or a request for rapid medical assistance can be sent in S15.

Das Verfahren kann vorzugsweise durch eine Benutzereingabe S0 in zum Beispiel einer Bedieneinheit des HMIs erfolgen. Hierbei kann der Benutzer zum Beispiel ein Anwenderprogramm „Powernap“ aktivieren.The process can preferably be initiated by user input S0, for example, in an operator panel of the HMI. Here, the user can, for example, activate a user program called "Powernap".

Insgesamt zeigen die Beispiele, wie ein Verfahren und eine Vorrichtung zur Überwachung von Schlafaktivitäten und einer entsprechenden Reaktion im Fahrzeuginnenraum bereitgestellt werden kann, wodurch unter anderem ein Fokus auf ein Erlebnis im Innenraum des Kraftfahrzeugs erreicht wird.Overall, the examples demonstrate how a method and device for monitoring sleep activities and a corresponding response can be provided in the vehicle interior, thereby achieving, among other things, a focus on the experience inside the vehicle.

Kern der Idee ist, dass bei einer Power-Nap-Funktion im Kraftfahrzeug 10 der Schlaf mittels Sensoriken überwacht wird und zum Beispiel automatisch entsprechende Auswertungen im Anschluss dem Benutzer zur Verfügung gestellt wird.The core idea is that with a power nap function in the vehicle, sleep is monitored using sensors and, for example, corresponding evaluations are automatically made available to the user afterwards.

Der Benutzer kann im Kraftfahrzeug 10 zum Beispiel über eine Funktion „Erlebnis Innenraum“ eine „Power Nap“-Funktion aktivieren. Weiterhin kann er sein Kraftfahrzeug 10 auch zum normalen Schlafen nutzen.The user can, for example, activate a "Power Nap" function in vehicle 10 via a function called "Interior Experience". Furthermore, they can also use their vehicle 10 for normal sleeping.

Diese Anwendungsfälle können gemäß einem weiteren Ausführungsbeispiel vorzugsweise im Kraftfahrzeug 10 auswählbar sein. Wenn ein Benutzer einen oder mehrere dieser Anwendungsfälle auswählt, kann er angefragt werden, ob der Schlaf überwacht werden soll.According to a further embodiment, these use cases can preferably be selected in the motor vehicle 10. If a user selects one or more of these use cases, they can be asked whether sleep should be monitored.

Dabei kann vorzugsweise über Sensoriken der Innenraum überwacht werden. Hierzu zählen zum Beispiel Innenraummikrofone 18 und/oder Schallsensoren. Diese können die Geräusche entsprechend aufnehmen und können entsprechend zu hinterlegten Werten (pauschal oder personifiziert) einen Abgleich durchführen. Wenn diese abweichen von regulären Werten, kann das dem Benutzer im Anschluss mitgeteilt werden. Auch ein positiver Schlafrhythmus kann dem Benutzer mitgeteilt werden.The interior can preferably be monitored using sensors. These include, for example, indoor microphones and/or sound sensors. These can record sounds and compare them to predefined values (general or personalized). If these values deviate from the norm, the user can be notified. A positive sleep pattern can also be communicated to the user.

Ein optionaler Transfer zu einem Device ist ebenfalls denkbar. Hierbei können durch eine Personalisierung auch mehrere Schlafwerte von einer Person entsprechend ausgewertet werden. Diese Werte können (wenn gewünscht) auch zum Beispiel einem Hausarzt/Spezialisten mitgeteilt werden. Im schlimmsten Fall (zum Beispiel bei extremen Atemaussetzern) kann ein Aufwecksignal im Innenraum abgegeben werden und/oder ein Signal außerhalb (zum Beispiel Warnblinker/Hupe) vom Kraftfahrzeug 10, um Passanten aufmerksam zu machen.An optional transfer of data to a device is also conceivable. Personalization allows for the evaluation of multiple sleep data points from a single individual. These data points can (if desired) also be shared with, for example, a general practitioner or specialist. In the worst-case scenario (e.g., extreme sleep apnea), an alarm can be triggered inside the vehicle and/or a signal can be emitted outside (e.g., hazard lights/horn) to alert passersby.

Weiterhin kann optional auch vorgesehen sein, dass die Funktion mit einem SOS-Signal (zum Beispiel Telefon: 112 und/oder 110) verbunden ist und es eine entsprechende Information abgesetzt werden kann, um zum Beispiel einen Notarzt automatisch zu informieren und/oder anzufordern (zum Beispiel unter anderem welche Person, Kennzeichen, Fahrzeugtyp und/oder GPS-Signal vom Kraftfahrzeug 10).Furthermore, it may optionally be provided that the function is linked to an SOS signal (for example, telephone: 112 and/or 110) and that corresponding information can be sent in order to automatically inform and/or request an emergency doctor (for example, including which person, license plate number, vehicle type and/or GPS signal from the vehicle 10).

Diese Funktion kann durch verschiedene Unterfunktionen einstellbar vom Benutzer angewählt werden.This function can be configured and selected by the user through various sub-functions.

Diese Hinweise/Maßnahmen können für den gesamten Innenraum und/oder Sitzplatz-selektiv erfolgen. Eine Kopplung mit der Sitzplatzerkennung kann vorzugsweise vorgesehen sein.These warnings/measures can be applied to the entire interior and/or selectively to individual seats. Integration with seat occupancy detection is a preferred option.

Vorteilhaft ergibt sich unter anderem, dass durch diese Vorrichtung und dieses Verfahren der Benutzer einen zusätzlichen Nutzen für „Erlebnis Innenraum“-Funktion in seinem Kraftfahrzeug 10 hat.One advantage is that this device and this method provides the user with an additional benefit for the “interior experience” function in his motor vehicle 10.

In einer bevorzugten technischen Umsetzung kann der Fahrzeuginnenraum mit entsprechenden Sensoriken (zum Beispiel wie oben beschrieben) ein Steuergerät mit entsprechender Software für Auswertung der Sensoriken und der Verarbeitung dieser aufweisen; und es kann eine Verarbeitung der Daten und einer entsprechenden Informationsweitergabe an den Fahrzeuginsassen zum Beispiel via Sprache und/oder HMI. Zusätzlich oder alternativ kann eine Verarbeitung der Daten und einer entsprechenden Informationsweitergabe außerhalb des Kraftfahrzeugs 10 erfolgen.In a preferred technical implementation, the vehicle interior can include appropriate sensors (for example, as described above) and a control unit with corresponding software for evaluating and processing the sensor data; and the data can be processed and the corresponding information transmitted to the vehicle occupants, for example, via voice and/or HMI. Additionally or alternatively, the data can be processed and the corresponding information transmitted outside the vehicle.

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was automatically generated and is included solely for the reader's convenience. The list is not part of the German patent or utility model application. The DPMA accepts no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • DE 10 2019 218 051 A1 [0004]DE 10 2019 218 051 A1 [0004]
  • DE 10 2019 208 952 A1 [0005]DE 10 2019 208 952 A1 [0005]
  • DE 10 2020 213 654 A1 [0006]DE 10 2020 213 654 A1 [0006]

Claims (10)

Verfahren zum Überwachen eines Schlafs eines Benutzers eines Kraftfahrzeugs (10) in dem Kraftfahrzeug (10), wobei eine Steuervorrichtung (22): - ein Ruheprogramm des Kraftfahrzeugs (10) aktiviert, das den Benutzer beim Ausruhen im Kraftfahrzeug (10) unterstützt (S1), - feststellt, dass der Benutzer im Kraftfahrzeug (10) ruht oder schläft (S2), - aus einer Sensoreinrichtung des Kraftfahrzeugs (10) ein Insassenüberwachungssignal empfängt (S3), das mindestens einen Körperzustandsparameter beschreibt, wobei der Körperzustandsparameter ein Parameter ist, der einen Zustand eines oder mehrere Körperteile und/oder eine oder mehrere Körperaktionen des ruhenden oder schlafenden Benutzers beschreibt, - anhand des empfangenen Insassenüberwachungssignals ein benutzerspezifisches Schlafanalysemodell bereitstellt (S6), das einen Gesamtzustand des Körpers des Benutzers beschreibt, - anhand des bereitgestellten Schlafanalysemodells eine Schlafqualität des Schlafs des Benutzers ermittelt (S7), - ein Anzeigesignal erzeugt (S8), das die Information zur ermittelten Schlafqualität beschreibt, und - das erzeugte Anzeigesignal an eine Anzeigeeinrichtung (30) des Kraftfahrzeugs (10) überträgt (S9).Method for monitoring the sleep of a user of a motor vehicle (10) in the motor vehicle (10), wherein a control device (22): - activates a rest program of the motor vehicle (10) that assists the user in resting in the motor vehicle (10) (S1), - detects that the user is resting or sleeping in the motor vehicle (10) (S2), - receives an occupant monitoring signal (S3) from a sensor device of the motor vehicle (10) that describes at least one body state parameter, wherein the body state parameter is a parameter that describes a state of one or more body parts and/or one or more body actions of the resting or sleeping user, - provides a user-specific sleep analysis model (S6) based on the received occupant monitoring signal, which describes an overall state of the user's body, - determines the sleep quality of the user's sleep based on the provided sleep analysis model (S7), - generates a display signal (S8) that describes the information on the determined sleep quality, and - the The generated display signal is transmitted to a display device (30) of the motor vehicle (10) (S9). Verfahren nach Anspruch 1, wobei das empfangene Insassenüberwachungssignal beschreibt: - Daten aus einem Mikrofon (18); wobei die Steuervorrichtung (22) dazu eingerichtet ist, anhand der Mikrofondaten ein Schnarchen und/oder Atemgeräusche des Benutzers festzustellen (S4); insbesondere eine Lautstärke und/oder einen Schallpegel des Schnarchens und/oder des Atems, eine Frequenz des Schnarchens und/oder des Atems, und/oder eine Pause zwischen Schnarch- und/oder Atemgeräuschen; und/oder - Daten einer Kamera; wobei die Kameradaten vorzugsweise ein Bild oder eine Bilderserie der Augen und/oder Augenlider des Benutzers beschreiben, und/oder eine Körperhaltung des Benutzers, und/oder eine Bewegung des Benutzers; und/oder - Daten aus einer Sitzsensorik oder einer Belegungssensorik des Kraftfahrzeugs (10), die vorzugsweise ein den Sitz beaufschlagendes Gewicht beschreiben; wobei die Steuervorrichtung (22) dazu eingerichtet ist, anhand der Sitzsensorik- oder Belegungssensorikdaten eine Sitzplatzbelegung festzustellen (S4); und/oder - Daten aus einer Kopfstützensensorik, die einen Druck und/oder eine Druckänderung beschreiben; wobei die Steuervorrichtung (22) dazu eingerichtet ist, anhand der Kopfstützensensorikdaten eine Bewegungsserie des Benutzers festzustellen (S4).Procedure according to Claim 1 , wherein the received occupant monitoring signal describes: - data from a microphone (18); wherein the control device (22) is configured to detect snoring and/or breathing sounds of the user based on the microphone data (S4); in particular, a volume and/or sound level of the snoring and/or breathing, a frequency of the snoring and/or breathing, and/or a pause between snoring and/or breathing sounds; and/or - data from a camera; wherein the camera data preferably describes an image or a series of images of the eyes and/or eyelids of the user, and/or a posture of the user, and/or a movement of the user; and/or - data from a seat sensor or occupancy sensor of the motor vehicle (10), which preferably describes a weight acting on the seat; wherein the control device (22) is configured to detect seat occupancy based on the seat sensor or occupancy sensor data (S4); and/or - data from a headrest sensor system describing a pressure and/or a pressure change; wherein the control device (22) is configured to detect a series of user movements based on the headrest sensor data (S4). Verfahren nach einem der vorhergehenden Ansprüche, wobei die Steuervorrichtung (22) zum Ermitteln der Schlafqualität einen Anteil der durch das empfangene Insassenüberwachungssignal beschriebenen Daten gegenüber einem anderen Anteil der durch das empfangene Insassenüberwachungssignal beschriebenen Daten priorisiert oder gewichtet (S5); vorzugsweise wobei die Mikrofondaten zu den priorisierten Daten gehören.Method according to one of the preceding claims, wherein the control device (22) for determining sleep quality prioritizes or weights a proportion of the data described by the received occupant monitoring signal over another proportion of the data described by the received occupant monitoring signal (S5); preferably wherein the microphone data are among the prioritized data. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Steuervorrichtung (22): - in Abhängigkeit von der ermittelten Schlafqualität eine vorbestimmte Maßnahme zum Verbessern eines Wohlbefindens des Benutzers festlegt (S11), - ein Steuersignal erzeugt (S12), das Instruktionen zum Umsetzen der festgelegten Maßnahme durch ein Kraftfahrzeugsystem des Kraftfahrzeugs (10) beschreibt, und - das erzeugte Steuersignal an das Kraftfahrzeugsystem überträgt (S13).A method according to any of the preceding claims, wherein the control device (22): - determines a predetermined measure to improve the well-being of the user based on the determined sleep quality (S11), - generates a control signal (S12) that describes instructions for implementing the determined measure by a motor vehicle system of the motor vehicle (10), and - transmits the generated control signal to the motor vehicle system (S13). Verfahren nach Anspruch 4, wobei die Steuervorrichtung (22): - als Maßnahme zum Verbessern des Wohlbefindens des Benutzers ein Trainingsprogramm zum Verbessern der Schlafqualität festlegt (S11), wobei das erzeugte Steuersignal das festgelegte Trainingsprogramm beschreibt, und - das erzeugte Steuersignal an die Anzeigeeinrichtung (30) des Kraftfahrzeugs (10) überträgt (S13).Procedure according to Claim 4 , wherein the control device (22): - as a measure to improve the well-being of the user, establishes a training program to improve sleep quality (S11), wherein the generated control signal describes the established training program, and - transmits the generated control signal to the display device (30) of the motor vehicle (10) (S13). Verfahren nach Anspruch 5, wobei das festlegte Trainingsprogramm Atemübungen beschreibt.Procedure according to Claim 5 , whereby the prescribed training program describes breathing exercises. Verfahren nach einem der Ansprüche 4 bis 6, wobei die Steuervorrichtung (22): - als Maßnahme zum Verbessern des Wohlbefindens ein Ausgeben eines Aufwecksignals durch eine Ausgabeeinrichtung des Kraftfahrzeugs (10) auswählt (S11); und - das erzeugte Steuersignal an die Ausgabeeinrichtung des Kraftfahrzeugs (10) überträgt (S13).Procedure according to one of the Claims 4 until 6 , wherein the control device (22): - selects, as a measure to improve well-being, the output of a wake-up signal by an output device of the motor vehicle (10) (S11); and - transmits the generated control signal to the output device of the motor vehicle (10) (S13). Verfahren nach einem der Ansprüche 4 bis 7, wobei die Steuervorrichtung (22): - als Maßnahme zum Verbessern des Wohlbefindens ein Aussenden eines Notrufsignals an eine kraftfahrzeugexterne Empfangseinrichtung durch eine Sendeeinrichtung des Kraftfahrzeugs (10) auswählt (S11), wobei das erzeugte Notrufsignal einen Notruf beschreibt; und - das erzeugte Notrufsignal an die Sendeeinrichtung des Kraftfahrzeugs (10) überträgt (S13).Procedure according to one of the Claims 4 until 7 , wherein the control device (22): - selects, as a measure to improve well-being, the sending of an emergency call signal to a motor vehicle external receiving device by a transmitting device of the motor vehicle (10) (S11), wherein the generated emergency call signal describes an emergency call; and - transmits the generated emergency call signal to the transmitting device of the motor vehicle (10) (S13). Steuervorrichtung (22), die dazu eingerichtet ist, ein Verfahren nach einem der vorhergehenden Ansprüche durchzuführen.Control device (22) configured to perform a method according to one of the preceding claims. Kraftfahrzeug (10), das eine Steuervorrichtung (22) nach Anspruch 9 aufweist.motor vehicle (10) which has a control device (22) according to Claim 9 exhibits.
DE102024117856.6A 2024-06-25 2024-06-25 Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle Pending DE102024117856A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102024117856.6A DE102024117856A1 (en) 2024-06-25 2024-06-25 Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102024117856.6A DE102024117856A1 (en) 2024-06-25 2024-06-25 Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle

Publications (1)

Publication Number Publication Date
DE102024117856A1 true DE102024117856A1 (en) 2026-01-08

Family

ID=98100426

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102024117856.6A Pending DE102024117856A1 (en) 2024-06-25 2024-06-25 Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle

Country Status (1)

Country Link
DE (1) DE102024117856A1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200383580A1 (en) 2017-12-22 2020-12-10 Resmed Sensor Technologies Limited Apparatus, system, and method for physiological sensing in vehicles

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200383580A1 (en) 2017-12-22 2020-12-10 Resmed Sensor Technologies Limited Apparatus, system, and method for physiological sensing in vehicles

Similar Documents

Publication Publication Date Title
DE102019200412A1 (en) Seating system with detection and stimulation of an occupant
DE102018207069B4 (en) Method and control unit for operating an autonomous vehicle
DE102014207807A1 (en) Personal driver assistance
DE102019201695A1 (en) Biometric sensor fusion for classifying the condition of a vehicle occupant
DE102017109730A1 (en) Temperature monitoring in autonomous vehicles
DE102018113158A1 (en) SYSTEMS AND METHOD FOR REDUCING MOTIVATION CAUSED BY MOTION IN A VEHICLE
DE102016207447A1 (en) Method for occupant assistance for a vehicle and device therefor
DE102012020901A1 (en) Method for operating assistance device of vehicle using mobile communication device, involves controlling and/or regulating function of assistance device of vehicle based on determined personal parameters of vehicle occupant
DE102013021928A1 (en) Comfort device control for a motor vehicle
DE102019204201A1 (en) Method and device for adapting a driving strategy of an at least partially automated vehicle
WO2018033258A1 (en) Method for operating a motor vehicle with the aid of a mobile terminal of a user and physiological vital data
DE112016007124T5 (en) Methods and apparatus for monitoring a level of activity of a driver
DE102014101273A1 (en) Biometric data controlled application of vehicle operating settings
DE102020202388B4 (en) Method for adjusting a signaling device to output signals to a driver and a system
DE102020122292A1 (en) SYSTEM FOR A VEHICLE, METHOD AND COMPUTER PROGRAM PRODUCT
DE102016225222A1 (en) Method and device for influencing an interaction process
DE102020122760A1 (en) SYSTEMS AND METHODS FOR ANIMAL REDUCTION IN A VEHICLE OCCUPANT
DE102021210263A1 (en) Method for the attention support of a driver of a vehicle
DE102023120674A1 (en) EXPERIENCE MODE-BASED CONTROL OF A SYSTEM
DE102024117856A1 (en) Method for monitoring the sleep of a user of a motor vehicle in the motor vehicle, control device, and motor vehicle
DE102014219892A1 (en) Support the breathing of a driver
DE102018127105A1 (en) Method and device for influencing a state of mind of a user of a vehicle
DE102020132807A1 (en) Procedure and arrangement for child care in a vehicle while driving
DE102017220120A1 (en) An apparatus, system, method and computer readable storage medium having instructions to assist a person to relax, means of transportation
DE112017005139T5 (en) INTERFACE DEVICE AND METHOD

Legal Events

Date Code Title Description
R163 Identified publications notified
R082 Change of representative

Representative=s name: HOFSTETTER, SCHURACK & PARTNER - PATENT- UND R, DE

R012 Request for examination validly filed