[go: up one dir, main page]

WO2003001359A2 - System and method for simultaneously recording measuring data and video and/or audio data - Google Patents

System and method for simultaneously recording measuring data and video and/or audio data Download PDF

Info

Publication number
WO2003001359A2
WO2003001359A2 PCT/AT2002/000181 AT0200181W WO03001359A2 WO 2003001359 A2 WO2003001359 A2 WO 2003001359A2 AT 0200181 W AT0200181 W AT 0200181W WO 03001359 A2 WO03001359 A2 WO 03001359A2
Authority
WO
WIPO (PCT)
Prior art keywords
data
vid
video
mes
aud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/AT2002/000181
Other languages
German (de)
French (fr)
Other versions
WO2003001359A3 (en
Inventor
Egon Winter
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SAADOON ADEL
Original Assignee
SAADOON ADEL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SAADOON ADEL filed Critical SAADOON ADEL
Priority to AU2002322134A priority Critical patent/AU2002322134A1/en
Publication of WO2003001359A2 publication Critical patent/WO2003001359A2/en
Anticipated expiration legal-status Critical
Publication of WO2003001359A3 publication Critical patent/WO2003001359A3/en
Ceased legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7232Signal processing specially adapted for physiological signals or for diagnostic purposes involving compression of the physiological signal, e.g. to extend the signal recording period
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient; User input means
    • A61B5/742Details of notification to user or communication with user or patient; User input means using visual displays
    • A61B5/7445Display arrangements, e.g. multiple display units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/04Constructional details of apparatus
    • A61B2560/0443Modular apparatus
    • A61B2560/045Modular apparatus with a separable interface unit, e.g. for communication
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • A61B5/339Displays specially adapted therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/781Television signal recording using magnetic recording on disks or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums

Definitions

  • the invention relates to a system for the simultaneous recording of measurement data and video and / or audio data, consisting of at least one data processing device, at least one measurement data recording device connected to the data processing device via at least one interface, and at least one device connected to the data processing device via at least one interface for recording video and / or audio data, the data processing device being set up to receive data recorded by the device for recording video and / or audio data via the interface.
  • the invention relates to a method for the simultaneous recording of measurement data and video and / or audio data, in which measurement data are recorded by a measurement data recording device, furthermore data are recorded by a device for recording video and / or audio data, and both Measurement data as well as the audio and / or video data are transmitted to a data processing device.
  • a link of such measurement data with the audiovisually recorded data is of particular interest. However, there is currently no way to enable such a link.
  • US Pat. No. 6,241,668 describes an EDP system in which various imaging medical devices are connected to a central EDP / image storage via data lines, e.g. B. X-ray, CT, NMR. Computers are also connected to the system for entering patient data and for sending / retrieving images and data in this system. In addition, a digital photo or video camera or a scanner for taking pictures of the patient, for example an identification photo, can also be connected.
  • a device shown in WO 00/08585 is used in operations. This consists of a video camera, a monitor for the ongoing direct display of the operation and a switch, such as a foot switch, for storing individual images. Furthermore, the device includes a microphone for recording comments from an operator and a second switch for storing these comments. Finally, the device also includes a timer that provides the images and comments with the current time, and a computer with software to combine this data.
  • US 5,776,057 shows a general device for measuring EKG, EEG and any other biological signals. The measurement procedures are stored in the device, and the corresponding procedure is then selected for taking a measurement.
  • the US 5,205,800 shows a treadmill (fitness device) with a video screen, in which a video cassette is played during the running training, on which a running route is shown.
  • a treadmill fitness device
  • the incline and pace of the treadmill are set automatically.
  • the data processing device is set up to compress the video and / or audio data and, together with the measurement data transmitted by the measurement data breathing apparatus, in at least one common one Saving data files on a storage device, the data processing device being further set up to break down the measurement data into measurement data packets, further breaking down the compressed video and / or audio data also into data packets, and the measurement data packets in the data file in the data stream of the video and / or or save audio data packets.
  • the invention is not only limited to use in psychotherapeutic sessions, the system according to the invention can also be used in the field of physicotherapy and sports medicine, for example for documenting progress and therapy or training in comparison to the initial values.
  • the driver of a racing car can be provided with a simple pulse monitor or connected to an electrocardiograph, and the like Corresponding data are then transmitted together with the video / audio data of an on-board camera to a data processing device, processed accordingly and then displayed on television.
  • the driver's pulse rate can then be displayed, for example, as a number on television.
  • the measurement data recording device can, for example, communicate with the data processing device itself by radio, or it is connected to the on-board camera to which the measurement data is transmitted and from which it is then forwarded to the data processing device.
  • the measurement data for example the pulse frequency
  • the measurement data are transmitted to a data processing device together with the video / audio data of an on-board camera, processed and stored accordingly.
  • the measurement data can appear on the one hand at the same time as the picture on television, and on the other hand can be used for any analysis due to the storage, for example for displaying the scene with the highest / lowest pulse frequency.
  • the storage in a common data file on a storage device enables the recorded situation to be viewed later, even several times.
  • a hard disk, CD-ROM, DVD etc. for example, can be used as the storage device, which offer sufficient storage space to accommodate the recorded amounts of data.
  • the temporally related video / audio data and the measurement data are stored in a common data file in order to have related information available at the same time. In this way, it is also easily possible, for example, to quickly find the video / audio sequence (s) belonging to a specific measured value.
  • the entire recording is usually recorded in one data file, but it can also be that it is divided into several data files if this appears to be favorable. It is only important that, as already mentioned, video / audio data and measurement data that belong together in time are each stored in a common file.
  • the data processing device is set up to write the measurement data as well as the video and / or audio data into the at least one common data file immediately after it has been received and after any compression on the data processing device, since in In this case, it is not necessary to temporarily store large amounts of data in a working memory (RAM, “random access memory”) of the data processing device.
  • RAM random access memory
  • the device for recording video and / or audio data usually transmits the video data in digital, compressed form, for example in digital video (DV) format, to the data processing device, which then decompresses the video data and then compressed again.
  • the device can be a video camera with which the video and audio data are recorded, the video data is compressed and then transmitted to the data processing device.
  • the audio data is usually transmitted from the video camera to the data processing device in an uncompressed form, where it is then compressed accordingly.
  • the at least one interface is a wire interface, via which the device for video / audio data recording and the measurement data recording device are connected.
  • Such interfaces are well known and are widely used.
  • the at least one interface is a radio interface.
  • one or more devices can be connected to the data processing device via a radio interface, and other devices via a wire interface.
  • the interfaces are, for example, serial interfaces, for example an RS-232 interface and / or USB interfaces and / or interfaces based on the Firewire standard.
  • the Firewire interface also known as IEEE1394 from the "Institute of Electrical and Electronics Engineers" is particularly suitable for the invention, since particularly high data rates can be transmitted via these interfaces.
  • a broadband radio transmission of the data can, for example, be carried out via the planned, future Wireless Firewire standard.
  • an infrared interface is also possible, at least for the transmission of the measurement data to the data processing device.
  • the at least one or at least one of the several measurement data recording devices is set up at least for the measurement of physical measurement variables.
  • the at least one or one of the plurality of measurement data recording devices is set up at least for measuring vital parameters of a test person or an animal.
  • the data processing device is set up to provide the at least one data file with one or more markings.
  • the data processing device can be connected to at least one remote control and the markings in the data file can be made using the remote control.
  • the data processing device is set up to compress the video data using a method according to MPEG and to save them in compressed form. With this format, it is easily possible to link this data with the recorded measurement data.
  • the data processing device is set up to compress the audio data using a method according to MP2 or MP3 and to save them in compressed form, since in this way a high compression rate of the audio data can be achieved and the quality losses due to the compression are hardly noticeable are.
  • the initially mentioned object is further achieved with a method mentioned at the outset in that, according to the invention, the video and / or audio data is compressed by the data processing device and, together with the measurement data transmitted by the measurement data recording device, is stored together in at least one common data file on a storage device , the measurement data being broken down into measurement data packets, the compressed video and / or audio data also being broken down into data packets, and the measurement data packets being stored in the data file in the data stream of the video and / or audio data packets.
  • Fig. 1 is a schematic representation of a system according to the invention.
  • Fig. 2 is a schematic representation of the sequence of a method according to the invention.
  • FIG. 1 shows a system SYS according to the invention, consisting of a device for data processing, for example a known personal computer COM, to which via interface SCHI, SCH2 a device CAM for recording video data and a device MIC for recording audio data are connected.
  • the video data recording device CAM is, for example, a known video camera
  • the audio data recording device is a microphone MIC.
  • the microphone will be integrated in the video camera.
  • a measurement data recording device MES is connected via a further interface SCH3.
  • the measurement data recording device MES shown is an electrocardiograph, i.e. a device for recording the electrocardiogram, in a greatly simplified representation.
  • the recorded measurement data in the application shown is therefore the curve image recorded by the electrocardiograph (time profile) of the bioelectrical potentials or potential differences which arise in the heart during the spreading and regression of excitation.
  • the derivation takes place with the aid of electrodes ELK from the body surface or directly from the heart of a person to be examined PER, and the measurement data thus supplied to the electrocardiograph MES are fed to the computer COM via the interface SCH3.
  • the interfaces SCHI - SCH3 are, for example, serial interfaces, infrared interfaces, etc.
  • the interface SCHI is an interface for transmitting high data rates, for example a USB or An interface is based on the Firewire standard ("IEEE1394").
  • Radio interfaces are also suitable for high-speed data transmission, for example on the "Bluetooth” standard or on the future, planned WirelessFirewire standard.
  • the Firewire interface is a so-called multiplex interface, so that communication between the individual devices CAM, MIC, MES is possible via only one interface on the computer COM and a corresponding interface for each of the devices.
  • the measurement data recording device MES to the camera CAM which is then set up accordingly and which then transmits the measurement data to the computer COM. This is particularly necessary if a direct connection of the measurement data recording device to the computer is not possible or is only possible with difficulty.
  • important medical devices include blood pressure monitors, devices for measuring blood oxygen saturation, electroencephalographs (EEG), skin resistance meters, devices for measuring respiratory rate, etc.
  • the person to be recorded PER records video data vid and audio data aud and transmits them to the computer COM.
  • the video data vid are recorded and compressed, for example, by a video camera with an integrated microphone, and the compressed video data vid 'present in digital form is sent to the computer COM via the corresponding interface transfer.
  • the audio data aud recorded with the microphone MIC of the video camera CAM are also recorded and transmitted to the computer COM.
  • the audio data aud are already digitized in the camera CAM, when using an analog camera, such as VHS cameras, however, the audio data are transmitted in analog form to the computer COM and only digitized in the computer COM.
  • the audio data aud are fed, for example, to a so-called “video capture” card or a sound card, from which the digitization is carried out.
  • the video data vid and the audio data aud can be output via a corresponding output device of the computer COM, i.e. are usually output via a display such as a monitor and via loudspeakers.
  • measurement data mes recorded with a corresponding measurement data recording device for example measurement data mes recorded with an EKG device MES
  • a computing unit CPR of the computer COM which as a rule consists of a working memory and one or more processors, these incoming data vid, aud, mes are processed accordingly and then in a storage device SPE, for example a hard disk of the computer, a CD-ROM , DVD etc. are stored.
  • the video data vid are usually recorded by the video camera CAM and brought into a digitally compressed form vid ', usually using a DV compression process ("digital video").
  • mated video data vid 'decompressed and in turn compressed mostly by a method according to MPEG, which will be discussed in more detail below.
  • MPEG digital video
  • any other compression method that offers a corresponding compression factor is also possible, but the use of MPEG offers certain advantages, which will also be discussed below.
  • the audio data aud are usually transmitted from the video camera or another, independent recording device MIC to the computer COM in an uncompressed form and brought into a compressed form aud * in its computing unit CPR, for example by a method such as MP2 or MP3. In principle, however, it is also possible to leave the audio data uncompressed.
  • the recorded measurement data are fed to the computer COM or its computing unit CPR via a further channel, but remain uncompressed.
  • the compressed video data vid *, the compressed audio data aud * and the measurement data mes are stored in data packets vid * (l), vid * (2), vid * (3), vid * (4), ..., in the computing unit CPR. aud * (l), aud * (2), aud * (3), aud * (4), ..., mes (l), mes (2), mes (3), mes (4), etc. disassembled and built into a system stream as explained below and thus stored in a common file or a common data file dat in the storage device SPE. It should be noted here that FIG. 2 shows the actual situation in a considerably simplified manner, since normally in such a system stream, significantly more video data packets vid * (l), vid * (2) etc. than packets with audio data aud * ( l), ... or measurement data mes (l), etc. are included.
  • the data processing device is set up to provide the at least one data file with one or more markings.
  • a measurement data channel is used specifically for the markings; the bytes of this channel are e.g. normally 00, markings are identified by another value, e.g. 01.
  • markings are identified by another value, e.g. 01.
  • the data processing device COM has at least one Remote control FER is connectable and the markings in the data file can be attached using the remote control FER.
  • the MPEG compression method (Motion Pictures Expert Group) for compressing video data will be briefly discussed below.
  • MPEG First, the compression of single frames of the video according to the MPEG1 standard of the Moving Pictures Expert Group will be dealt with here.
  • a first step the color resolution of an image to be compressed is reduced, whereby the amount of data can be reduced, for example, by 50%.
  • the amount of data can be reduced, for example, by 50%.
  • Khalid Sayood Introduction to Data Compression (2nd Edition, 2000, Morgan Kaufmann Publishers), especially chap. 16 pp. 529-560 and pp. 531-534; "Information Technology - Coding of Moving Pictures and Associated Audio for Digital Storage Media Up to about 1.5 Mbit / s" (ISO / IEC IS 11172 on the MPEG-1 standards); J.L. Mitchell, W.B. Pennebaker, C.E. Fogg, D. LeGall: MPEG Video Compression Standard, New York: Chapman and Hall, 1997.
  • PAL DV camera
  • each drawing file is broken down into square blocks.
  • the color partial images are reduced to 360 x 288 points.
  • a color partial image consists of 45 x 36 blocks of 8 x 8 pixels, the black and white image of 90 x 72 such blocks of 8 x 8 pixels.
  • the blocks are processed in order from left to right and line by line from top to bottom, always the corresponding blocks from the SW image and the color images together.
  • the color partial images are divided into 45 x 36 units, each of which contains 16 x 16 pixels, or four blocks of 8 x 8 pixels.
  • This compression is lossy and it is therefore not possible to restore the original image exactly, but the loss of data is usually not noticeable compared to the original image.
  • An image can be compressed to about 5% of the original amount of data without an excessive reduction in quality being discernible. With an even larger data reduction, however, the blocks in the image, for example, become visible.
  • I-image An image compressed in this way is called an "intra-coded" image or I-image for short, the compressed data contains all the information necessary for decompression and display of the image.
  • a further data reduction can be achieved by taking advantage of the fact that There are often only slight differences between successive individual frames of a video, for example the background often remains unchanged for several successive images, and only one or more objects have changed their position due to movement.
  • a search area is defined, for example 16 pixels in each direction - horizontally and vertically. Within this search area, a 16 x 16 block is found in the next picture that best matches the 16 x 16 block of the previous picture. is If such a block is found, the position difference in the horizontal and vertical directions between the images form a vector, the so-called motion vector. Now it is sufficient to encode the motion vector and any small differences that may be present, which means that even less data is required for storage than with single-shot compression. If no suitable 16 x 16 block is found in the search area, then such parts of the image must be completely coded, the motion estimation does not work in these cases.
  • P-frames Pictures that have been coded from a previous picture by motion estimation are called P-frames.
  • the motion estimation can also be carried out on the basis of the preceding and subsequent image, that is to say bidirectionally (“B frames”).
  • B frames bidirectionally
  • IBBPBBPBBPBBI Usually the sequence of the pictures in an MPEG video is IBBPBBPBBPBBI ... .When playing the video you can "get in” with every I-picture, i.e. every 0.5 seconds at 25 pictures / second, because the I- The picture contains the complete information for decoding.
  • the I-pictures are therefore also called support pictures or "key frames”.
  • System stream An MPEG file that contains both video and audio data is referred to as a "system stream".
  • the audio data is usually compressed to MP2, a process similar to the well-known MP3 process, but simpler. However, the audio data can basically also be compressed in MP3 or an even simpler method such as MP1.
  • the data is broken down into packets, each containing video or audio data.
  • the packages usually have 2 kilobytes each.
  • Each package contains a header with information nen about
  • Time stamps (a few bytes, different), which indicate the time for the output of the decoded video / audio data and the time for the decoding of the data of the corresponding packet and ensure the synchronization of the video and audio data during playback.
  • Digital video format (“DV" format): According to the invention, video data coming from the digital camera, for example in digital video format, is decompressed in order to be able to display it continuously on a computer monitor.
  • the image data are compressed by means of a chip contained therein for storage on tape or another storage medium, using a method which is similar to the MPEG compression method; however, each image is compressed as a single image and no motion estimation is carried out.
  • the details of the DV format are specified in the DV standard document IEC 61834 of the International Electrotechnical Commission, which emerged from the "Blue Book” (Specification of ConsumerUse Digital VCRs using 6.3 mm magnetic tape).
  • the details of the transmission of the video / audio data The IEEE1394 interface specifies the standard IEC 61883.
  • the audio data after it has been digitized in the video camera, is transmitted uncompressed (for example, 48 kHz sampling rate). Furthermore, the decompressed video data vid is immediately compressed again, e.g. B. in the format MPEG (1, 2, or 4) or in another format.
  • the audio data is also subjected to compression (e.g. MP2, MP3 etc.). Data packets are formed from audio, video and measurement data, which are put together to form a system stream.
  • the invention offers several major advantages. On the one hand, it becomes possible to save recorded video / audio data and simultaneously recorded measurement data in a common data file. On the other hand, this also results in a link between the video / audio data and the measurement data, so that it is easily possible to search the data file for specific events and then to play back the corresponding locations.
  • the invention is ideally suited in psychotherapy or in sports medicine and physicotherapy for (documentation of the therapy progress and for movement analysis. Furthermore, the documentation of operations with simultaneous video recording of the operation and the physiological parameters important for anesthesia such as ECG, oxygen saturation, blood pressure, etc Space-saving archiving of the recorded data on CD-ROMs or DVDs ("Digital Versatile Disc”) is also possible.
  • the invention is not only limited to use in psychotherapeutic sessions, the system according to the invention can also be used in everyday medical practice, for example for documentation (operating room recordings, sports medicine), advanced diagnostics (e.g. sleep laboratory), follow-up checks such as documentation of the Fortsehnt- tes and therapy or training compared to the initial values, but also compared to standard values.
  • documentation operating room recordings, sports medicine
  • advanced diagnostics e.g. sleep laboratory
  • follow-up checks such as documentation of the Fortsehnt- tes and therapy or training compared to the initial values, but also compared to standard values.
  • Another area of application is in neurology, for example in the area of video EEGs for seizure evaluation.
  • a patient is monitored 24 hours a day using EEG and video with additional observation by a supervisor such as a nurse or a doctor.
  • the recorded data is currently stored separately on the hard disk, evaluated and the seizure-free data is discarded after review.
  • all data can be stored in a file, and it is also possible to use markings, for example, to specifically identify the seizures (e.g. epilepsy) so that they can be easily evaluated and viewed later.
  • data can be exchanged between different medical professionals etc. using powerful data connections such as broadband internet and their opinions obtained on a specific case.
  • the method according to the invention and the system according to the invention are not limited to medical or therapeutic use, but can basically be used over a very wide area.
  • it is also possible to record any physical or chemical measurement data together with audio / video data for example to record a combustion process optically (for example also in the infrared range) and to detect chemical substances measured and released during combustion and correspondingly as measurement data in the data file.
  • a video camera and a measurement data recording device were mostly used in the above description.
  • several measurement data recording devices can and will often be connected to the computer, and it is also quite conceivable for video data to be recorded by several video cameras;
  • one video camera can record in the optical range, another in the infrared range, but several optical cameras can also simply record from different camera positions.
  • USB web cameras can also be used for the invention, as well as digital cameras which forward the video data to a computer in an uncompressed manner, for example so-called IEEE1394 digital cameras.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Psychiatry (AREA)
  • Physiology (AREA)
  • Cardiology (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

The invention relates to a system for simultaneously recording measuring data (mes) and video and/or audio data (vid, aud), comprising at least one data processing device (COM), at least one measuring data recording device (MES) that is connected to the data processing device (COM) by at least one interface (SCH1, SCH2), in addition to at least one device (CAM, MIC) for recording video and/or audio data (vid, aud) that is connected to the data processing device (COM) by at least one interface (SCH3), wherein the data processing device (COM) is equipped to receive data (vid, aud) ) recorded by the device (CAM, MIC) for recording video and/or audio data via the interface (SCH1, SCH2), to compress said data and to at least buffer said data together with the measuring data (mes) transmitted by the measuring data recording device (MES). The invention also relates to a corresponding method.

Description

SYSTEM SOWIE VERFAHREN ZUM SIMULTANEN AUFZEICHNEN VON MESSDATEN UND VIDEO- UND/ODER AUDIODATEN SYSTEM AND METHOD FOR SIMULTANEOUSLY RECORDING MEASURED DATA AND VIDEO AND / OR AUDIO DATA

Die Erfindimg betrifft ein System zum simultanen Aufzeichnen von Messdaten und Video- und/oder Audiodaten, bestehend aus zumindest einem Datenverarbeitungsgerat, zumindest einer mit dem Datenverarbeitungsgerat über zumindest eine Schnittstelle verbundenen Messdaten- Aufnahmevorrichtung, sowie zumindest einer über zumindest eine Schnittstelle mit dem Datenverarbeitungsgerat verbundenen Vorrichtung zur Aufnahme von Video- und/oder Audiodaten, wobei das Datenverarbeitungsgerat dazu eingerichtet ist, von der Vorrichtung zur Aufnahme von Video- und/ oder Audiodaten aufgezeichnete Daten über die Schnittstelle entgegenzunehmen.The invention relates to a system for the simultaneous recording of measurement data and video and / or audio data, consisting of at least one data processing device, at least one measurement data recording device connected to the data processing device via at least one interface, and at least one device connected to the data processing device via at least one interface for recording video and / or audio data, the data processing device being set up to receive data recorded by the device for recording video and / or audio data via the interface.

Weiters betrifft die Erfindung ein Verfahren zum simultanen Aufzeichnen von Messdaten und Video- und/ oder Audiodaten, bei welchem von einer Messdaten-Aufnahmevorrichtung Messdaten aufgenommen werden, weiters von einer Vorrichtung zur Aufnahme von Video- und/ oder Audiodaten Daten aufgenommen werden, und sowohl die Messdaten als auch die Audio- und/ oder Videodaten an ein Datenverarbeitungsgerat übermittelt werden.Furthermore, the invention relates to a method for the simultaneous recording of measurement data and video and / or audio data, in which measurement data are recorded by a measurement data recording device, furthermore data are recorded by a device for recording video and / or audio data, and both Measurement data as well as the audio and / or video data are transmitted to a data processing device.

Ärzte und Therapeuten sind in zunehmendem Maße mit einem wachsenden Bedarf nach psychologischer und psychotherapeutischer Hilfe konfrontiert. Dazu bedarf es beispielsweise in der klinischen Psychosomatik, Psychiatrie und Psychotherapie a) fundiert ausgebildeter Ärzte und Therapeuten, kombiniert mit einem Qualitätsnachweis und einer Quahtätssicherung des ärztlichen und therapeutischen Handelns, sowie b) der Erforschung, Dokumentation und Auswertung von Therapiemaßnahmen.Doctors and therapists are increasingly confronted with a growing need for psychological and psychotherapeutic help. In clinical psychosomatics, psychiatry and psychotherapy, for example, this requires a) well-trained doctors and therapists, combined with proof of quality and quality assurance of medical and therapeutic action, and b) research, documentation and evaluation of therapeutic measures.

Zur Zeit erfolgt allerdings ein Qualitätsnachweis betreffend die ärztliche bzw. therapeutische Tätigkeit nur in den seltensten Fällen, und auch eine Dokumentation von Therapiemaßnahmen wird nur in den wenigsten Fällen durchgeführt. In den seltenen Fällen, wo eine solche Dokumentation durchgeführt wird, wird zumeist eine Therapiesitzung audiovisuell auf Videobändern aufgezeichnet, um diese später beispielsweise nochmals ansehen und daraus entsprechende Schlüsse ziehen zu können. Eventuell erfolgt auch noch ein nachträgliches Bearbeiten mit Hilfe von Videoschnittsystemen. Eine zusätzliche Aufnahme und Speicherung beispielsweise von medizinischen Messdaten betreffend den Patienten wird in der Regel nicht durchgeführt, da dies mit einem hohen zeitlichen und technischen Aufwand verbunden wäre. Bei solchen Therapiesitzungen ist es weiters oftmals auch noch von Interesse, körperliche Reaktionen der zu therapierenden Person in bestirnrnten Situationen zu beobachten, beispielsweise eine Veränderung der Herzfrequenz, eine Erniedrigung des Hautwiderstandes, welche auf ein vermehrtes Schwitzen der Person hindeutet, etc.At the moment, however, proof of quality regarding medical or therapeutic activity is only provided in the rarest of cases, and documentation of therapeutic measures is only carried out in very few cases. In the rare cases where such documentation is carried out, a therapy session is usually recorded audiovisually on video tapes so that, for example, it can be viewed again later and the appropriate conclusions drawn. Subsequent editing may also be carried out using video editing systems. Additional recording and storage, for example of medical measurement data relating to the patient, is generally not carried out, since this would involve a great deal of time and technical effort. During such therapy sessions, it is often also of interest to observe the physical reactions of the person to be treated in a situation in the brain, for example a change in heart rate, a decrease in skin resistance, which indicates increased sweating of the person, etc.

Insbesondere ist eine Verknüpfung solcher Messdaten mit den audiovisuell aufgenommenen Daten von Interesse. Allerdings besteht derzeit keine Möglichkeit, eine solche Verknüpfung zu ermöglichen.A link of such measurement data with the audiovisually recorded data is of particular interest. However, there is currently no way to enable such a link.

In der US 6,241,668 ist ein EDV-System beschrieben, bei dem über Datenleitungen verschiedene bildgebende medizinische Geräte an eine zentrale EDV/Bildspeicherung angeschlossen sind, z. B. Röntgen, CT, NMR. Weiters sind Computer für die Eingabe von Patientendaten an das System angeschlossen, und um Bilder und Daten in diesem System zu versenden/abzurufen. Außerdem kann noch eine digitale Foto- bzw. Videokamera oder ein Scanner für Aufnahmen des Patienten, beispielsweise eines Identifizierungsfotos, angeschlossen sein.US Pat. No. 6,241,668 describes an EDP system in which various imaging medical devices are connected to a central EDP / image storage via data lines, e.g. B. X-ray, CT, NMR. Computers are also connected to the system for entering patient data and for sending / retrieving images and data in this system. In addition, a digital photo or video camera or a scanner for taking pictures of the patient, for example an identification photo, can also be connected.

Eine in der WO 00/08585 gezeigte Vorrichtung wird bei Operationen verwendet. Diese besteht aus einer Videokamera, einem Monitor zur laufenden direkten Darstellung der Operation und einem Schalter, etwa einem Fußschalter, zum Speichern einzelner Bilder. Weiters u fasst die Vorrichtung ein Mikrofon zum Aufnehmen von Kommentaren eines Operateurs und einen zweiten Schalter zum Speichern dieser Kommentare. Schließlich beinhaltet die Vorrichtung noch einen Zeitgeber, der die Bilder und Kommentare mit der aktuellen Zeit versieht, und einen Computer mit Software, um diese Daten zu kombinieren.A device shown in WO 00/08585 is used in operations. This consists of a video camera, a monitor for the ongoing direct display of the operation and a switch, such as a foot switch, for storing individual images. Furthermore, the device includes a microphone for recording comments from an operator and a second switch for storing these comments. Finally, the device also includes a timer that provides the images and comments with the current time, and a computer with software to combine this data.

Die US 5,776,057 zeigt eine allgemeine Vorrichtung zum Messen von EKG, EEG und beliebigen anderen biologischen Signalen. Dabei werden die Messungs-Prozeduren in der Vorrichtung gespeichert, zur Diirchführung einer Messung wird dann die entsprechende Prozedur ausgewählt.US 5,776,057 shows a general device for measuring EKG, EEG and any other biological signals. The measurement procedures are stored in the device, and the corresponding procedure is then selected for taking a measurement.

Die US 5,205,800 zeigt ein Laufband (Fitness-Gerät) mit Video-Bildschirm, bei dem während des Lauftrainings eine Videokassette abgespielt wird, auf dem eine Laufstrecke dargestellt ist. Je nach Steigung und Tempo auf der Laufstrecke werden automatisch Steigung und Tempo des Laufbandes eingestellt.The US 5,205,800 shows a treadmill (fitness device) with a video screen, in which a video cassette is played during the running training, on which a running route is shown. Depending on the incline and pace on the running track, the incline and pace of the treadmill are set automatically.

Einige dieser Systeme zeigen die Verwendung von Videoaufzeichnungsgeräten in der Medizin, zum Teil auch gemeinsam mit der Aufzeichnung oder Eingabe von Patien- ten(mess)daten. Allerdings betrifft keines dieser Systeme unmittelbar die oben angesproche- nen Themen und es bieten demgemäss diese Dokumente auch keine Lösungsansätze für diese Problemstellungen.Some of these systems show the use of video recording devices in medicine, sometimes also together with the recording or input of patient (measurement) data. However, none of these systems directly affects the topics and, accordingly, these documents do not offer any solutions to these problems.

Demgemäss ist es eine Aufgabe der Erfindung, eine oben angesprochene Verknüpfung von Messdaten mit Audio- und/ oder Videodaten zu ermöglichen, welche es insbesondere ermöglicht, bei einem späteren Abspielen der Aufzeichnung unmittelbar die aufgezeichneten Messdaten betreffend den Patienten zur Verfügung zu haben.Accordingly, it is an object of the invention to enable the above-mentioned linking of measurement data with audio and / or video data, which in particular makes it possible to have the recorded measurement data relating to the patient immediately available when the recording is played back later.

Diese Aufgabe wird mit einem eingangs erwähnten System gelöst, welches dadurch gekennzeichnet ist, dass erfindungsgemäß das Datenverarbeitungsgerat dazu eingerichtet ist, die Video- und/ oder Audiodaten zu komprimieren und diese gemeinsam mit den von der Messdaten- Atu ahmevorrichtung übermittelten Messdaten gemeinsam in zumindest einem gemeinsamen Datenfile auf einer Speichereinrichtung abzuspeichern, wobei das Datenverarbeitungsgerat weiters dazu eingerichtet ist, die Messdaten in Messdatenpakete zu zerlegen, weiters die komprimierten Video- und/ oder Audiodaten ebenfalls in Datenpakete zu zerlegen, und die Messdatenpakete in dem Datenfile in dem Datenstrom der Video- und/oder Audio-Datenpakete abzuspeichern.This object is achieved with a system mentioned at the outset, which is characterized in that, according to the invention, the data processing device is set up to compress the video and / or audio data and, together with the measurement data transmitted by the measurement data breathing apparatus, in at least one common one Saving data files on a storage device, the data processing device being further set up to break down the measurement data into measurement data packets, further breaking down the compressed video and / or audio data also into data packets, and the measurement data packets in the data file in the data stream of the video and / or or save audio data packets.

Mit einem solchen erfindungsgemäßen System wird es auf einfache Weise möglich, beispielsweise während einer Therapiesitzung einerseits eine Person audiovisuell aufzunehmen, weiters in dieser Situation Messdaten über diese Person, etwa die Herzfrequenz, zu messen und dem Datenverarbeitungsgerat zuzuführen, und diese audio- und/ oder visuellen Daten gemeinsam mit den Messdaten abzuspeichern, sodass diese gemeinsam vorliegen und auch auf einfache Weise bei einer Darstellung der aufgezeichneten Sitzung gemeinsam betrachtet werden können.With such a system according to the invention, it is possible in a simple manner, for example, on the one hand to record a person audiovisually during a therapy session, furthermore in this situation to measure measurement data about this person, for example the heart rate, and to feed it to the data processing device, and this audio and / or visual Save data together with the measurement data so that they are available together and can also be viewed together in a simple manner when the recorded session is displayed.

Die Erfindung ist aber nicht nur auf den Einsatz in psychotherapeutischen Sitzungen beschränkt, auch im physikotherapeutischen sowie sportmedizinischen Bereich kann das erfindungsgemäße System zum Einsatz kommen, etwa zur Dokumentation des Fortschrittes und der Therapie bzw. des Trainings im Vergleich zu den Ausgangswerten.However, the invention is not only limited to use in psychotherapeutic sessions, the system according to the invention can also be used in the field of physicotherapy and sports medicine, for example for documenting progress and therapy or training in comparison to the initial values.

Auch im Alltag zeigen sich zusätzliche Anwendungsbereiche: z. B. als Diebstahlsüberwachungseinrichtung in geschlossenen Räumen (hochsensible Bewegungssensoren schalten auf Aufnahme bei Bewegung) oder als publikumswirksame Zuschaltung bei Sportveranstaltungen wie z. B. Formel-I-Rennen.Additional areas of application are also evident in everyday life: B. as theft monitoring device in closed rooms (highly sensitive motion sensors switch to recording when moving) or as a public-friendly connection at sporting events such. B. Formula I races.

Beispielsweise kann bei Formel-I-Rennen der Fahrer eines Rennwagens mit einem einfachen Pulsmessgerät versehen oder an einen Elektrokardiographen angeschlossen sein, und die entsprechenden Daten werden dann zusammen mit den Video/ Audiodaten einer Bordkamera an ein Datenverarbeitungsgerat übertragen, entsprechend bearbeitet und dann im Fernsehen angezeigt. Die Pulsfrequenz des Fahrers kann dann beispielsweise als Zahl im Fernsehen angezeigt werden. Das Messdaten-Aufnahmegerät kann dabei beispielsweise selbst über Funk mit dem Datenverarbeitungsgerat kommunizieren, oder es ist mit der Bordkamera verbunden, an welche die Messdaten übermittelt und von dieser dann an das Datenverarbeitungsgerat weitergeleitet werden.For example, in Formula I races, the driver of a racing car can be provided with a simple pulse monitor or connected to an electrocardiograph, and the like Corresponding data are then transmitted together with the video / audio data of an on-board camera to a data processing device, processed accordingly and then displayed on television. The driver's pulse rate can then be displayed, for example, as a number on television. The measurement data recording device can, for example, communicate with the data processing device itself by radio, or it is connected to the on-board camera to which the measurement data is transmitted and from which it is then forwarded to the data processing device.

Die Messdaten, beispielsweise die Pulsfrequenz, werden zusammen mit den Video/Audiodaten einer Bordkamera an ein Datenverarbeitungsgerat übertragen, entsprechend bearbeitet und gespeichert. Die Messdaten können einerseits zeitgleich zum Bild im Fernsehen erscheinen, andererseits aufgrund der Speicherung zu jeglichen Analysen herangezogen werden, etwa zum Anzeigen der Szene mit der höchsten/ niedrigsten Pulsfrequenz.The measurement data, for example the pulse frequency, are transmitted to a data processing device together with the video / audio data of an on-board camera, processed and stored accordingly. The measurement data can appear on the one hand at the same time as the picture on television, and on the other hand can be used for any analysis due to the storage, for example for displaying the scene with the highest / lowest pulse frequency.

Durch die Abspeicherung in einem gemeinsamen Datenfile auf einer Speichereinrichtung wird eine spätere, auch mehrmalige Betrachtung der aufgezeichneten Situation möglich ist. Als Speichereinrichtung kommen beispielsweise eine Festplatte, CD-ROM, DVD etc. in Frage, welche ausreichend Speicherplatz bieten, um die aufgezeichneten Datenmengen aufzunehmen. Die zeitlich zusammengehörenden Video-/ Audiodaten und die Messdaten werden in einem gemeinsamen Datenfile abgespeichert, um jeweils zusammengehörende Informationen gleichzeitig zur Verfügung zu haben. Auf diese Weise wird es beispielsweise auch einfach möglich, die zu einem bestimmten Messwert gehörende(n) Video/ Audiosequenz(en) schnell aufzusuchen. Weiters wird üblicherweise die gesamte Aufzeichnung in einem Datenfile aufgezeichnet, es kann aber auch sein, dass diese auf mehrere Datenfiles aufgeteilt wird, falls dies günstig erscheint. Wichtig ist lediglich, dass wie schon erwähnt zeitlich zusammengehörende Video/ Audiodaten und Messdaten jeweils in einem gemeinsamen File abgespeichert sind.The storage in a common data file on a storage device enables the recorded situation to be viewed later, even several times. A hard disk, CD-ROM, DVD etc., for example, can be used as the storage device, which offer sufficient storage space to accommodate the recorded amounts of data. The temporally related video / audio data and the measurement data are stored in a common data file in order to have related information available at the same time. In this way, it is also easily possible, for example, to quickly find the video / audio sequence (s) belonging to a specific measured value. Furthermore, the entire recording is usually recorded in one data file, but it can also be that it is divided into several data files if this appears to be favorable. It is only important that, as already mentioned, video / audio data and measurement data that belong together in time are each stored in a common file.

Besonders vorteilhaft, weil Speicher- und ressourcenschonend ist es, wenn das Datenverarbeitungsgerat dazu eingerichtet ist, die Messdaten sowie die Video- und/ oder Audiodaten unmittelbar nach ihrem Einlangen sowie einer allfälligen Komprimierung auf dem Datenverarbeitungsgerat in das zumindest eine gemeinsame Datenfile zu schreiben, da in diesem Fall ein Zwischenspeichern größerer Datenmengen in einem Arbeitsspeicher (RAM, „Random Access Memory") des Datenverarbeitungsgerätes nicht notwendig ist.It is particularly advantageous because it saves memory and resources if the data processing device is set up to write the measurement data as well as the video and / or audio data into the at least one common data file immediately after it has been received and after any compression on the data processing device, since in In this case, it is not necessary to temporarily store large amounts of data in a working memory (RAM, “random access memory”) of the data processing device.

Üblicherweise übermittelt die Vorrichtung zur Aufnahme von Video- und/ oder Audiodaten die Videodaten in digitaler, komprimierter Form, beispielsweise im Digital Video (DV)-Format, an das Datenverarbeitungsgerat, welches dann die Videodaten dekomprimiert und anschließend wieder komprimiert. Beispielsweise kann die Vorrichtung eine Videokamera sein, mit der die Video- und Audiodaten aufgenommen, die Videodaten komprimiert und dann an das Datenverarbeitungsgerat übermittelt werden.The device for recording video and / or audio data usually transmits the video data in digital, compressed form, for example in digital video (DV) format, to the data processing device, which then decompresses the video data and then compressed again. For example, the device can be a video camera with which the video and audio data are recorded, the video data is compressed and then transmitted to the data processing device.

Die Audiodaten werden in der Regel von der Videokamera unkomprimiert an das Datenverarbeitungsgerat übertragen, wo sie dann entsprechend komprimiert werden.The audio data is usually transmitted from the video camera to the data processing device in an uncompressed form, where it is then compressed accordingly.

In der Regel ist die zumindest eine Schnittstelle eine Drahtschnittstelle, über welche die Vorrichtung zur Video-/ Audiodatenaufnahme sowie das Messdaten- Aufnahmegerät angebunden sind. Solche Schnittstellen sind hinlänglich bekannt und weit verbreitet sind.As a rule, the at least one interface is a wire interface, via which the device for video / audio data recording and the measurement data recording device are connected. Such interfaces are well known and are widely used.

Im Sinne einer möglichst freien Aufstellung der miteinander verbundenen Geräte ist es, wenn die zumindest eine Schnittstelle eine Funkschnittstelle ist. Natürlich ist es auch möglich, dass eines oder mehrere Geräte über eine Funkschnittstelle, andere Geräte über eine Drahtschnittstelle an das Datenverarbeitungsgerat angebunden sind.In the sense of a free arrangement of the interconnected devices it is when the at least one interface is a radio interface. Of course, it is also possible for one or more devices to be connected to the data processing device via a radio interface, and other devices via a wire interface.

Bei den Schnittstellen handelt es sich beispielsweise um serielle Schnittstellen, beispielsweise um RS-232-Schnittstelle und/ oder USB-Schnittstellen und/ oder Schnittstellen basierend auf dem Firewire-Standard. Die Firewire-Schnittstelle (auch unter IEEE1394 des „Institute of Electrical and Electronics Engineers" bekannt) eignet sich besonders für die Erfindung, da über diese Schnittstellen besonders hohe Datenraten übertragen werden können. Eine Breitband-Funkübertragung der Daten kann beispielsweise über den geplanten, zukünftigen Wireless-Firewire-Standard erfolgen.The interfaces are, for example, serial interfaces, for example an RS-232 interface and / or USB interfaces and / or interfaces based on the Firewire standard. The Firewire interface (also known as IEEE1394 from the "Institute of Electrical and Electronics Engineers") is particularly suitable for the invention, since particularly high data rates can be transmitted via these interfaces. A broadband radio transmission of the data can, for example, be carried out via the planned, future Wireless Firewire standard.

Auch die Verwendung einer Infrarotschnittstelle ist zumindest für die Übertragung der Messdaten an das Datenverarbeitungsgerat möglich.The use of an infrared interface is also possible, at least for the transmission of the measurement data to the data processing device.

Um das erfindungsgemäße System möglichst vielfältig einsetzen zu können, wie diese später noch eingehender erläutert wird, ist die zumindest eine oder zumindest eine der mehreren Messdaten-Aufnahmevorrichtungen zumindest zur Messung von physikalischen Messgrößen eingerichtet.In order to be able to use the system according to the invention as diverse as possible, as will be explained in more detail later, the at least one or at least one of the several measurement data recording devices is set up at least for the measurement of physical measurement variables.

Für einen medizinischen Einsatz oder zum Aufzeichnen von therapeutischen Sitzungen ist es zweckmäßig, wenn die zumindest eine oder eine der mehreren Messdaten- Aufnahmevorrichtungen zumindest zur Messung von Vitalparametern einer Testperson oder eines Tieres eingerichtet ist. Um ein schnelles Auffinden bestimmter Aufnahmeabschnitte zu erlauben, ist es zweckmäßig, wenn das Datenverarbeitungsgerat dazu eingerichtet ist, das zumindest eine Datenfile mit einer oder mehreren Markierungen zu versehen.For medical use or for recording therapeutic sessions, it is expedient if the at least one or one of the plurality of measurement data recording devices is set up at least for measuring vital parameters of a test person or an animal. In order to allow certain recording sections to be found quickly, it is expedient if the data processing device is set up to provide the at least one data file with one or more markings.

Damit dieser Markierungsvorgang beispielsweise vor einem Patienten möglichst unauffällig erfolgen kann, ist es günstig, wenn das Datenverarbeitungsgerat mit zumindest einer Fernbedienung verbindbar ist und die Markierungen in dem Datenfile unter Verwendung der Fernbedienung anbringbar sind.So that this marking process can take place in front of a patient as inconspicuously as possible, it is favorable if the data processing device can be connected to at least one remote control and the markings in the data file can be made using the remote control.

Besonders zweckmäßig ist es, wenn das Datenverarbeitungsgerat dazu eingerichtet ist, die Videodaten mittels eines Verfahrens nach MPEG zu komprimieren und in komprimierter Form abzuspeichern. Bei diesem Format ist es auf einfache Weise möglich, diese Daten mit den aufgenommenen Messdaten zu verknüpfen.It is particularly expedient if the data processing device is set up to compress the video data using a method according to MPEG and to save them in compressed form. With this format, it is easily possible to link this data with the recorded measurement data.

Weiters ist es günstig, wenn das Datenverarbeitungsgerat dazu eingerichtet ist, die Audiodaten mittels eines Verfahrens nach MP2 oder MP3 zu komprimieren und in komprimierter Form abzuspeichern, da auf diese Weise eine hohe Kompressionsrate der Audiodaten erzielt werden kann und die Qualitätsverluste in Folge der Kompression kaum merkbar sind.Furthermore, it is favorable if the data processing device is set up to compress the audio data using a method according to MP2 or MP3 and to save them in compressed form, since in this way a high compression rate of the audio data can be achieved and the quality losses due to the compression are hardly noticeable are.

Die anfangs erwähnte Aufgabe wird mit weiters mit einem eingangs erwähnten Verfahren dadurch gelöst, dass erfindungsgemäß von dem Datenverarbeitungsgerat die Video- und/oder Audiodaten komprimiert und gemeinsam mit den von der Messdaten- Aufnahrnevorrichtung übermittelten Messdaten gemeinsam in zumindest einem gemeinsamen Datenfile auf einer Speichereinrichtung abgespeichert werden, wobei die Messdaten in Messdatenpakete zerlegt werden, weiters die komprimierten Video- und/ oder Audiodaten ebenfalls in Datenpakete zerlegt werden, und die Messdatenpakete in dem Datenfile in dem Datenstrom der Video- und/ oder Audio-Datenpakete abgespeichert werden.The initially mentioned object is further achieved with a method mentioned at the outset in that, according to the invention, the video and / or audio data is compressed by the data processing device and, together with the measurement data transmitted by the measurement data recording device, is stored together in at least one common data file on a storage device , the measurement data being broken down into measurement data packets, the compressed video and / or audio data also being broken down into data packets, and the measurement data packets being stored in the data file in the data stream of the video and / or audio data packets.

Auf die vorteilhaften Ausführungsformen des erfindungsgemäßen Verfahrens wurde bereits im Zusammenhang mit dem erfindungsgemäßen System näher eingegangen.The advantageous embodiments of the method according to the invention have already been discussed in more detail in connection with the system according to the invention.

Im folgenden ist die Erfindung an Hand der Zeichnung näher erläutert. In dieser zeigenThe invention is explained in more detail below with reference to the drawing. In this show

Fig. 1 eine schematische Darstellung eines erfindungsgemäßen Systems, undFig. 1 is a schematic representation of a system according to the invention, and

Fig. 2 eine schematische Darstellung des Ablaufs eines erfindungsgemäßen Verfahrens.Fig. 2 is a schematic representation of the sequence of a method according to the invention.

Die Fig. 1 zeigt ein erfindungsgemäßes System SYS, bestehend aus einem Gerät zur Datenverarbeitung, beispielsweise einem bekannten Personalcomputer COM, an den über Schnitt- stellen SCHI, SCH2 eine Vorrichtung CAM zur Aufnahme von Videodaten sowie eine Vorrichtung MIC zur Aufnahme von Audiodaten angeschlossen sind. Bei dem Videodaten- Aufnahmegerät CAM handelt es sich beispielsweise um eine bekannte Videokamera, bei dem Audiodaten-Aufnahmegerät um ein Mikrofon MIC. Üblicherweise wird allerdings entgegen der in der Fig. 1 gezeigten Darstellung das Mikrofon in der Videokamera integriert sein.1 shows a system SYS according to the invention, consisting of a device for data processing, for example a known personal computer COM, to which via interface SCHI, SCH2 a device CAM for recording video data and a device MIC for recording audio data are connected. The video data recording device CAM is, for example, a known video camera, and the audio data recording device is a microphone MIC. Usually, however, contrary to the illustration shown in FIG. 1, the microphone will be integrated in the video camera.

Weiters ist gemäß der Fig. 1 über eine weitere Schnittstelle SCH3 eine Messdaten- Aufnahmegerät MES angeschlossen. Beispielsweise handelt es sich bei dem gezeigten Messdaten-Aufnahmegerät MES um einen Elektrokardiograph, d.h. ein Gerät zur Aufzeichnung des Elektiokardiogramms, in einer stark vereinfachten Darstellung. Bei den aufgenommen Messdaten handelt es sich somit bei der gezeigten Anwendung um das vom Elektrokardi- ographen aufgezeichnete Kurvenbild (zeitlicher Verlauf) der bioelektrischen Potentiale bzw. Potentialdifferenzen, die bei der Erregungsausbreitung und -rückbildung im Herz entstehen. Die Ableitung erfolgt mit Hilfe von Elektroden ELK von der Körperoberfläche oder direkt vom Herzen einer zu untersuchenden Person PER, und die so dem Elektrokardiographen MES zugeführten Messdaten werden über die Schnittstelle SCH3 dem Computer COM zugeführt.1, a measurement data recording device MES is connected via a further interface SCH3. For example, the measurement data recording device MES shown is an electrocardiograph, i.e. a device for recording the electrocardiogram, in a greatly simplified representation. The recorded measurement data in the application shown is therefore the curve image recorded by the electrocardiograph (time profile) of the bioelectrical potentials or potential differences which arise in the heart during the spreading and regression of excitation. The derivation takes place with the aid of electrodes ELK from the body surface or directly from the heart of a person to be examined PER, and the measurement data thus supplied to the electrocardiograph MES are fed to the computer COM via the interface SCH3.

Bei den Schnittstellen SCHI - SCH3 handelt es sich beispielsweise um serielle Schnittstellen, Infrarotschnittstellen, etc. Insbesondere für die Übertragung der Videodaten ist es vorteilhaft, wenn es sich zumindest bei der Schnittstelle SCHI um eine Schnittstelle zur Übertragung hoher Datenraten, beispielsweise um eine USB- oder eine Schnittstelle basierend auf dem Firewire-Standard („IEEE1394") handelt. Zur Hochgeschwindigkeits- Datenübertragung eignen sich auch Funkschnittstelle, beispielsweise auf dem „Blue- tooth"-Standard bzw. auf dem zukünftigen, geplanten WirelessFirewire-Standard.The interfaces SCHI - SCH3 are, for example, serial interfaces, infrared interfaces, etc. In particular for the transmission of the video data, it is advantageous if at least the interface SCHI is an interface for transmitting high data rates, for example a USB or An interface is based on the Firewire standard ("IEEE1394"). Radio interfaces are also suitable for high-speed data transmission, for example on the "Bluetooth" standard or on the future, planned WirelessFirewire standard.

Beispielsweise bei der Firewire-Schnittstellen handelt es sich um eine sogenannte Multip- lex-Schnittstelle, sodass eine Kommunikation der einzelnen Geräte CAM, MIC, MES über nur eine Schnittstelle bei dem Computer COM und je eine entsprechende Schnittstelle bei jedem der Geräte möglich ist.For example, the Firewire interface is a so-called multiplex interface, so that communication between the individual devices CAM, MIC, MES is possible via only one interface on the computer COM and a corresponding interface for each of the devices.

An dieser Stelle sei angemerkt, dass es grundsätzlich auch möglich ist, das Messdaten-Aufnahmegerät MES auch an die dann entsprechend eingerichtete Kamera CAM anzubinden, welche dann die Messdaten an den Computer COM überträgt. Dies ist v.a. dann notwendig, wenn eine direkte Verbindung des Messdaten-Aufnahmegerätes mit dem Computer nicht oder nur schwierig möglich ist. Natürlich ist es auch möglich, mehrere Videokameras und/ oder Videokameras und insbesondere mehrere Messdaten-Aufnahmegeräte zur Aufnahme von medizinischen Parametern betreffend die Person PER an den Computer anzuschließen. Neben den Elektrokardiographen seien hier als wichtige medizinische Geräte noch beispielhaft genannt Blutdruckmessgeräte, Geräte für Messung der Sauerstoffsättigung des Blutes, Elektroenzephalographen (EEG), Hautwiderstandsmessgeräte, Geräte zur Messung der Atemfrequenz, etc.At this point it should be noted that it is in principle also possible to connect the measurement data recording device MES to the camera CAM which is then set up accordingly and which then transmits the measurement data to the computer COM. This is particularly necessary if a direct connection of the measurement data recording device to the computer is not possible or is only possible with difficulty. Of course, it is also possible to connect several video cameras and / or video cameras and in particular several measurement data recording devices for recording medical parameters relating to the person PER to the computer. In addition to the electrocardiographs, important medical devices include blood pressure monitors, devices for measuring blood oxygen saturation, electroencephalographs (EEG), skin resistance meters, devices for measuring respiratory rate, etc.

Mit den entsprechenden Vorrichtungen CAM, MIC werden von der aufzuzeichnenden Person PER Videodaten vid und Audiodaten aud aufgezeichnet und an den Computer COM übermittelt. Wie der Fig. 2 zu entnehmen, in der das erfindungsgemäße Verfahren schematisch dargestellt ist, werden beispielsweise von einer Videokamera mit integriertem Mikrofon die Videodaten vid aufgezeichnet, komprimiert und die in digitaler Form vorliegenden, komprimierte Videodaten vid' über die entsprechende Schnittstelle an den Computer COM übertragen. Die mit dem Mikrofon MIC der Videokamera CAM aufgezeichneten Audiodaten aud werden ebenfalls aufgezeichnet und an den Computer COM übertragen.With the corresponding devices CAM, MIC, the person to be recorded PER records video data vid and audio data aud and transmits them to the computer COM. As can be seen in FIG. 2, in which the method according to the invention is shown schematically, the video data vid are recorded and compressed, for example, by a video camera with an integrated microphone, and the compressed video data vid 'present in digital form is sent to the computer COM via the corresponding interface transfer. The audio data aud recorded with the microphone MIC of the video camera CAM are also recorded and transmitted to the computer COM.

Bei einer Digitalkamera werden dabei die Audiodaten aud bereits in der Kamera CAM digitalisiert, bei Verwendung einer Analogkamera, wie VHS-Kameras hingegen werden die Audiodaten in analoger Form an den Computer COM übertragen und erst im Computer COM digitalisiert. Die Audiodaten aud werden dazu beispielsweise einer sogenannten „Video-Capture"-Karte oder einer Soundkarte zugeführt, von welcher die Digitalisierung durchgeführt wird.In the case of a digital camera, the audio data aud are already digitized in the camera CAM, when using an analog camera, such as VHS cameras, however, the audio data are transmitted in analog form to the computer COM and only digitized in the computer COM. For this purpose, the audio data aud are fed, for example, to a so-called “video capture” card or a sound card, from which the digitization is carried out.

In der dekomprimierten Form können die Videodaten vid sowie die Audiodaten aud über entsprechende Ausgabeeinrichtung des Computers COM, d.h. in der Regel über eine Anzeige wie einen Monitor sowie über Lautsprecher ausgegeben werden.In the decompressed form, the video data vid and the audio data aud can be output via a corresponding output device of the computer COM, i.e. are usually output via a display such as a monitor and via loudspeakers.

Weiters werden gemäß der Erfindung mit einer entsprechenden Messdaten- Aufnahmevorrichtung aufgenommenen Messdaten mes, etwa mit einem EKG-Gerät MES aufgenommene Messdaten mes an den Computer weitergeleitet. In einer Recheneinheit CPR des Computers COM, welche in der Regel aus einem Arbeitsspeicher und einem oder mehreren Prozessoren besteht, werden diese einlangenden Daten vid, aud, mes entsprechend verarbeitet und anschließend in einer Speichereinrichtung SPE, etwa einer Festplatte des Computers, einer CD-ROM, DVD etc. abgelegt werden.Furthermore, according to the invention, measurement data mes recorded with a corresponding measurement data recording device, for example measurement data mes recorded with an EKG device MES, are forwarded to the computer. In a computing unit CPR of the computer COM, which as a rule consists of a working memory and one or more processors, these incoming data vid, aud, mes are processed accordingly and then in a storage device SPE, for example a hard disk of the computer, a CD-ROM , DVD etc. are stored.

Die Videodaten vid werden übücherweise von der Videokamera CAM aufgenommen und in eine digitaHsierte komprimierte Form vid' gebracht, zumeist nach einem DV-Komprimierungsverfahren („Digital Video"). In der Recheneinheit werden die kompri- mierten Videodaten vid' dekomprimiert und wiederum komprimiert, zumeist nach einem Verfahren nach MPEG, auf welches weiter unten noch näher eingegangen werden soll. Grundsätzlich sind auch beliebige andere Komprimierungsverfahren, die einen entsprechenden Komprimierungsfaktor bieten, möglich, allerdings bietet die Verwendung von MPEG gewisse Vorteile, auf die ebenfalls unten noch eingegangen werden soll.The video data vid are usually recorded by the video camera CAM and brought into a digitally compressed form vid ', usually using a DV compression process ("digital video"). mated video data vid 'decompressed and in turn compressed, mostly by a method according to MPEG, which will be discussed in more detail below. In principle, any other compression method that offers a corresponding compression factor is also possible, but the use of MPEG offers certain advantages, which will also be discussed below.

Die Audiodaten aud werden üblicherweise von der Videokamera oder einem anderen, unabhängigen Aufnahmegerät MIC in unkomprimierter Form an den Computer COM übermittelt und in dessen Recheinheit CPR in eine komprimierte Form aud* gebracht, beispielsweise nach einem Verfahren wie MP2 oder MP3. Grundsätzlich ist es aber auch möglich, die Audiodaten aud unkomprimiert zu belassen.The audio data aud are usually transmitted from the video camera or another, independent recording device MIC to the computer COM in an uncompressed form and brought into a compressed form aud * in its computing unit CPR, for example by a method such as MP2 or MP3. In principle, however, it is also possible to leave the audio data uncompressed.

Über einen weiteren Kanal werden die aufgenommenen Messdaten mes dem Computer COM bzw. dessen Recheneinheit CPR zugeführt, bleiben aber unkomprirniert.The recorded measurement data are fed to the computer COM or its computing unit CPR via a further channel, but remain uncompressed.

In der Recheneinheit CPR werden die komprimierten Videodaten vid*, die komprimierten Audiodaten aud* sowie die Messdaten mes in Datenpakete vid*(l), vid*(2), vid*(3), vid*(4), ..., aud*(l), aud*(2), aud*(3), aud*(4), ..., mes(l), mes(2), mes(3), mes(4), etc. zerlegt und diese in einen System-Stream wie anschließend erklärt eingebaut und so in einer gemeinsamen Datei bzw. einem gemeinsamen Datenfile dat in der Speichereinrichtung SPE abgespeichert. Dabei sei hier angemerkt, dass die Fig. 2 die tatsächliche Situation wesentlich vereinfacht darstellt, da normalerweise in einem solchen System-Stream wesentlich mehr Videodaten-Pakete vid*(l), vid*(2) etc. als Pakete mit Audiodaten aud*(l), ... bzw. Messdaten mes(l), etc. enthalten sind.The compressed video data vid *, the compressed audio data aud * and the measurement data mes are stored in data packets vid * (l), vid * (2), vid * (3), vid * (4), ..., in the computing unit CPR. aud * (l), aud * (2), aud * (3), aud * (4), ..., mes (l), mes (2), mes (3), mes (4), etc. disassembled and built into a system stream as explained below and thus stored in a common file or a common data file dat in the storage device SPE. It should be noted here that FIG. 2 shows the actual situation in a considerably simplified manner, since normally in such a system stream, significantly more video data packets vid * (l), vid * (2) etc. than packets with audio data aud * ( l), ... or measurement data mes (l), etc. are included.

Um ein schnelles Auffinden bestimmter Aufnahmeabschnitte zu erlauben, welche beispielsweise ein Therapeut für wichtig erachtet, ist es zweckmäßig, wenn das Datenverarbeitungsgerat dazu eingerichtet ist, das zumindest eine Datenfile mit einer oder mehreren Markierungen zu versehen. Möglich ist beispielsweise, dass ein Messdatenkanal eigens für die Markierungen verwendet wird; die Bytes dieses Kanals sind z.B. normalerweise 00, Markierungen sind durch einen anderen Wert kenntlich gemacht, z.B. 01. Es besteht aber alternativ auch die Möglichkeit, in den Headern der komprimierten MPEG-Bilddaten - jedes Bild weist einen solchen Header auf - sogenannte „User Data" unterzubringen, die dann solche Markierungen, aber auch kurze Kommentartexte enthalten könnten.In order to allow a quick location of certain recording sections, which, for example, a therapist considers important, it is expedient if the data processing device is set up to provide the at least one data file with one or more markings. It is possible, for example, that a measurement data channel is used specifically for the markings; the bytes of this channel are e.g. normally 00, markings are identified by another value, e.g. 01. However, there is also the alternative of accommodating the headers of the compressed MPEG image data - each image has such a header - so-called "user data", which could then contain such markings but also short commentary texts.

Damit dieser Markierungsvorgang beispielsweise vor einem Patienten möglichst unauffällig erfolgen kann, ist es günstig, wenn das Datenverarbeitungsgerat COM mit zumindest einer Fernbedienung FER verbindbar ist und die Markierungen in dem Datenfile unter Verwendung der Fernbedienung FER anbringbar sind.So that this marking process can take place in front of a patient as inconspicuously as possible, it is favorable if the data processing device COM has at least one Remote control FER is connectable and the markings in the data file can be attached using the remote control FER.

Im folgenden soll auf das MPEG-Komprimierungsverfahren („Motion Pictures Expert Group") zur Komprimierung von Videodaten kurz eingegangen werden.The MPEG compression method ("Motion Pictures Expert Group") for compressing video data will be briefly discussed below.

MPEG: Es soll hier zuerst auf die Komprimierung von Einzelbildern des Videos nach dem MPEG1 -Standard der Moving Pictures Expert Group eingegangen werden. In einem ersten Schritt wird die Farbauflösung eines zu komprimierenden Bildes reduziert, wodurch die Datenmenge beispielsweise um 50 % vermindert werden kann. Für nähere Details zu MPEG siehe auch: Khalid Sayood, Introduction to Data Compression (2. Edition, 2000, Morgan Kaufmann Publishers), insbesondere Kap. 16 pp. 529-560 und pp. 531-534; "Information Technology - Coding of Moving Pictures and Associated Audio for Digital Storage Media Up to about 1.5 Mbit/s" (ISO/IEC IS 11172 zu den MPEG-1-Standards); J.L. Mitchell, W.B. Pennebaker, C.E. Fogg, D . LeGall: MPEG Video Compression Standard, New York: Chap- man and Hall, 1997.MPEG: First, the compression of single frames of the video according to the MPEG1 standard of the Moving Pictures Expert Group will be dealt with here. In a first step, the color resolution of an image to be compressed is reduced, whereby the amount of data can be reduced, for example, by 50%. For further details on MPEG see also: Khalid Sayood, Introduction to Data Compression (2nd Edition, 2000, Morgan Kaufmann Publishers), especially chap. 16 pp. 529-560 and pp. 531-534; "Information Technology - Coding of Moving Pictures and Associated Audio for Digital Storage Media Up to about 1.5 Mbit / s" (ISO / IEC IS 11172 on the MPEG-1 standards); J.L. Mitchell, W.B. Pennebaker, C.E. Fogg, D. LeGall: MPEG Video Compression Standard, New York: Chapman and Hall, 1997.

Zunächst gibt es drei Teilbilder, nämlich für jede der drei Grundfarben Rot, Grün und Blau eines. Bevor diese Farbreduzierung durchgeführt werden kann, müssen diese drei Teilbilder umgewandelt werden in ebenfalls drei Teilbilder, eines mit der Helligkeitsinformation, welches für sich alleine genommen ein Schwarz- Weiß-Bild ist, und zwei Teilbilder mit der Farbinformation (Rotanteil und Blauanteil). Diese Umwandlung von Rot-Grün-Blau (RGB) nach Helligkeit-Blauanteil-Rotanteil nennt man die RGB-YCbCr-Konvertierung.First there are three drawing files, namely one for each of the three primary colors red, green and blue. Before this color reduction can be carried out, these three partial images must also be converted into three partial images, one with the brightness information, which in itself is a black and white image, and two partial images with the color information (red component and blue component). This conversion from red-green-blue (RGB) to brightness-blue component-red component is called the RGB-YCbCr conversion.

Da das menschliche Auge für Helligkeitskontraste viel empfindlicher als für Farbkontraste, bleibt bei einem Bild von z. B. 720 x 576 Bildpunkten Auflösung - dies entspricht dem üblichen Bildformat einer DV-Kamera (PAL) - die Helligkeitsinformation, welche dem Schwarz/ Weiß- Anteil entspricht, unverändert, die Farbinformation wird jedoch auf 360 x 288 Bildpunkte reduziert. So hat jeder Bildpunkt seine eigene Helligkeitsinformation, aber je vier benachbarte Bildpunkte teilen sich die Information über Rot- bzw. Blauanteil.Since the human eye is much more sensitive to brightness contrasts than to color contrasts, an image of e.g. B. 720 x 576 pixels resolution - this corresponds to the usual image format of a DV camera (PAL) - the brightness information, which corresponds to the black / white portion, unchanged, but the color information is reduced to 360 x 288 pixels. Each pixel has its own brightness information, but four neighboring pixels share information about the red and blue components.

In einem zweiten Schritt wird nun jedes Teilbild in quadratische Blöcke zerlegt. Entsprechend obigem Beispiel eines Bildes mit 720 x 576 Bildpunkten werden dabei die Farbteilbilder auf 360 x 288 Punkte reduziert. Somit besteht ein Farbteilbild aus 45 x 36 Blöcken zu je 8 x 8 Bildpunkten, das Schwarz-Weiß-Bild aus 90 x 72 solcher Blöcke zu je 8 x 8 Bildpunkten. Die Blöcke werden der Reihe nach von links nach rechts und zeilenweise von oben nach unten weiterverarbeitet, und zwar immer die entsprechenden Blöcke aus dem SW-Bild und den Farbbildern gemeinsam. Für eine zweckmäßige Darstellung werden ebenso wie das SW-Bild die Farbteilbilder in 45x 36 Einheiten aufgeteilt, welche jeweils 16 x 16 Bildpunkte enthalten, bzw. vier Blöcke zu 8 x 8 Bildpunkten.In a second step, each drawing file is broken down into square blocks. According to the above example of an image with 720 x 576 pixels, the color partial images are reduced to 360 x 288 points. Thus, a color partial image consists of 45 x 36 blocks of 8 x 8 pixels, the black and white image of 90 x 72 such blocks of 8 x 8 pixels. The blocks are processed in order from left to right and line by line from top to bottom, always the corresponding blocks from the SW image and the color images together. For an expedient representation, like the black and white image, the color partial images are divided into 45 x 36 units, each of which contains 16 x 16 pixels, or four blocks of 8 x 8 pixels.

Somit gehören immer vier SW-Blöcke, ein Farbblock (Rot) und ein Farbblock (Blau) zusammen. Diese sechs Blöcke bilden zusammen eine Einheit, der sogenannte Makro-Block.This means that four software blocks, one color block (red) and one color block (blue) always belong together. These six blocks together form a unit, the so-called macro block.

In einem dritten Schritt werden alle diese Macro-Blöcke nacheinander komprimiert, zeilenweise und jede Zeile von links nach rechts, zuerst die vier SW-Blöcke, dann der Rot-Block und der Blau-Block. Bei dieser Komprimierung - diese besteht aus den Schritten Kosinus- Transformation, welche einen Block für die darauffolgende Quantisierung vorbereitet, und die abschließende Huffman-Codierung - findet die meiste Datenreduzierung statt.In a third step, all of these macro blocks are compressed one after the other, line by line and each line from left to right, first the four software blocks, then the red block and the blue block. With this compression - this consists of the steps cosine transformation, which prepares a block for the subsequent quantization, and the final Huffman coding - most of the data reduction takes place.

Diese Komprimierung ist verlustbehaftet und man kann daher das Originalbild nicht genau wiederherstellen, der Datenverlust ist aber in der Regel gegenüber dem ursprünglichen Bild nur unwesentlich zu bemerken. Ein Bild kann bis auf etwa 5 % der ursprünglichen Datenmenge komprimiert werden, ohne dass eine zu große Q^aHtätsminderung zu erkennen ist. Bei einer noch größeren Datenreduktion werden allerdings beispielsweise die Blocks im Bild sichtbar.This compression is lossy and it is therefore not possible to restore the original image exactly, but the loss of data is usually not noticeable compared to the original image. An image can be compressed to about 5% of the original amount of data without an excessive reduction in quality being discernible. With an even larger data reduction, however, the blocks in the image, for example, become visible.

Ein auf diese Weise komprimiertes Bild nennt man „intrakodiertes" Bild oder kurz I-Bild, die komprimierten Daten enthalten alle Informationen, die zur Dekomprimierung und Anzeige des Bildes notwendig sind. Eine noch weitergehende Datenreduktion erreicht man, in dem man die Tatsache ausnützt, dass zwischen aufeinanderfolgenden Einzelbildern eines Videos oft nur geringe Unterschiede bestehen. So bleibt häufig z. B. der Hintergrund bei mehreren aufeinanderfolgenden Bildern unverändert, und nur ein oder mehrere Objekte haben aufgrund von Bewegung ihre Position verändert.An image compressed in this way is called an "intra-coded" image or I-image for short, the compressed data contains all the information necessary for decompression and display of the image. A further data reduction can be achieved by taking advantage of the fact that There are often only slight differences between successive individual frames of a video, for example the background often remains unchanged for several successive images, and only one or more objects have changed their position due to movement.

Aus diesem Grund wird beispielsweise nur jedes zwölfte Einzelbild in der oben beschriebenen Weise als intrakodiertes Bild komprimiert, die übrigen Bilder werden durch Ermittlung der Unterschiede zwischen den Einzelbildern gewonnen. Die Ermittlung der Unterschiede, welche einer Bewegungsabschätzung gleich kommt, wird nur am SW- Anteil durchgeführt. Dazu werden wieder der Reihe nach Blöcke (und zwar 16 x 16- Blöcke, also die vier 8 x 8- SW-Blöcke eines Makro-Blocks) zeilenweise von links nach rechts abgearbeitet.For this reason, for example, only every twelfth individual image is compressed as an intra-coded image in the manner described above, the remaining images are obtained by ascertaining the differences between the individual images. The determination of the differences, which is equivalent to a movement estimate, is only carried out on the software component. To do this, blocks are processed one after the other (namely 16 x 16 blocks, i.e. the four 8 x 8 SW blocks of a macro block) line by line from left to right.

Dabei wird ein Suchbereich definiert, z.B. in jeder Richtung - waagrecht und senkrecht - 16 Bildpunkte. Innerhalb dieses Suchbereichs wird im nächsten Bild ein 16 x 16-Block aufgesucht, der mit dem 16 x 16-Block des vorangegangenen Bildes am besten übereiristimmt. Ist ein solcher Block gefunden, bilden die Positionsdifferenz in waagrechter und senkrechter Richtung zwischen den Bildern einen Vektor, den sogenannten Bewegungsvektor. Nun genügt es, den Bewegungsvektor und eventuell doch vorhandene geringe Unterschiede zu kodieren, wodurch zur Speicherung noch weniger Daten benötigt werden als bei reiner Einzelbüd-Komprimierung. Falls im Suchbereich kein passender 16 x 16-Block gefunden wird, dann müssen solche Teile des Bildes vollständig kodiert werden, die Bewegungsabschätzung funktioniert in diesen Fällen nicht.A search area is defined, for example 16 pixels in each direction - horizontally and vertically. Within this search area, a 16 x 16 block is found in the next picture that best matches the 16 x 16 block of the previous picture. is If such a block is found, the position difference in the horizontal and vertical directions between the images form a vector, the so-called motion vector. Now it is sufficient to encode the motion vector and any small differences that may be present, which means that even less data is required for storage than with single-shot compression. If no suitable 16 x 16 block is found in the search area, then such parts of the image must be completely coded, the motion estimation does not work in these cases.

Bilder, die mittels Bewegungsabschätzung von einem vorausgegangenen Bild kodiert wurden, werden P-Frames genannt. Die Bewegungsabschätzung kann auch ausgehend von dem vorhergehenden und nachfolgenden Bild durchgeführt werden, also bidirektional („B- Frames"). Wie aus dem vorher gesagten klar ist, enthält jedes I-Bild die vollständige Information zur Dekomprimierung, für die P- und B-Bilder benötigt man jedoch dazu auch die Nachbarbilder.Pictures that have been coded from a previous picture by motion estimation are called P-frames. The motion estimation can also be carried out on the basis of the preceding and subsequent image, that is to say bidirectionally (“B frames”). As is clear from the foregoing, each I image contains the complete information for decompression, for which P and B However, you also need pictures of the neighboring pictures.

Für gewöhnlich ist die Abfolge der Bilder in einem MPEG-Video IBBPBBPBBPBBI... .Beim Abspielen des Videos kann man dann bei jedem I-Bild „einsteigen", also etwa alle 0,5 Sekunden bei 25 Bilder/ Sekunde, da das I-Bild die vollständige Information zur Dekodie- rung enthält. Man nennt die I-Bilder daher auch Stützbilder oder „Key-Frames".Usually the sequence of the pictures in an MPEG video is IBBPBBPBBPBBI ... .When playing the video you can "get in" with every I-picture, i.e. every 0.5 seconds at 25 pictures / second, because the I- The picture contains the complete information for decoding. The I-pictures are therefore also called support pictures or "key frames".

Die Bewegungsabschätzung benötigt sehr viel Rechenleistung des Computers, weshalb eine erfindungsgemäße Videokomprimierung „in Echtzeit", also während die Kamera läuft, durch eine Softwarelösung auf einem Datenverarbeitungsgerat erst jetzt möglich ist.The motion estimation requires a great deal of computing power from the computer, which is why a video compression according to the invention “in real time”, that is to say while the camera is running, is only now possible with a software solution on a data processing device.

Das obige Verfahren beschreibt die Komprimierung von Videodaten nach dem MPEGl-Standard. Es gibt allerdings auch neuere MPEG-Standards, wie MPEG2 oder MPEG4, die grundsätzlich ähnlich funktionieren. Auf die Unterschiede soll hier nicht eingegangen werden, da diese dem Fachmann bekannt sind und die wesentÜchen Gedankenzüge aus dem obigen ersichtlich sind.The above method describes the compression of video data according to the MPEG1 standard. However, there are also newer MPEG standards, such as MPEG2 or MPEG4, which basically work in a similar way. The differences should not be dealt with here, since these are known to the person skilled in the art and the essential ideas can be seen from the above.

System-Stream: Eine MPEG-Datei, die sowohl Video- als auch Audiodaten enthält, wird als „System Stream" bezeichnet. Die Audiodaten sind meist nach MP2 komprimiert, einem dem bekannten MP3- Verfahren ähnlichen, aber einfacheren Verfahren. Die Audiodaten können aber grundsätzlich auch in MP3 oder einem noch einfacheren Verfahren wie MP1 komprimiert sein.System stream: An MPEG file that contains both video and audio data is referred to as a "system stream". The audio data is usually compressed to MP2, a process similar to the well-known MP3 process, but simpler. However, the audio data can basically also be compressed in MP3 or an even simpler method such as MP1.

Die Daten sind in Pakete zerlegt, die jeweils Video- oder Audiodaten enthalten. Meist haben die Pakete jeweils 2 Kilobyte. Jedes Paket enthält am Anfang einen Header mit Informatio- nen überThe data is broken down into packets, each containing video or audio data. The packages usually have 2 kilobytes each. Each package contains a header with information nen about

• die Art der Daten an Hand eines Identifizierungskodes mit 4 Bytes Länge, z. B. 000001 cO (hexadezimal) für Audiodaten, oder 000001 eO für Videodaten),• the type of data using an identification code with a length of 4 bytes, eg. B. 000001 cO (hexadecimal) for audio data, or 000001 eO for video data),

• die Länge des Pakets (die nächsten 2 Bytes), sowie• the length of the packet (the next 2 bytes), as well

• Zeitmarken (einige Bytes, unterschiedlich), welche den Zeitpunkt für die Ausgabe der dekodierten Video-/ Audiodaten und den Zeitpunkt für die Dekodierung der Daten des entsprechenden Paketes angeben und die Synchronisierung der Video- und Audiodaten beim Abspielen gewährleisten.• Time stamps (a few bytes, different), which indicate the time for the output of the decoded video / audio data and the time for the decoding of the data of the corresponding packet and ensure the synchronization of the video and audio data during playback.

Dann folgen die eigentlichen Audio- bzw. Videodaten. Diese Pakete werden beim Abspielen mit einem Programmteil der Abspielsoftware, dem sogenannten „Demultiplexer", wieder zu jeweils zusammenhängenden Audio- und Videodaten zusammengesetzt und synchron abgespielt.Then the actual audio or video data follows. When playing back, these packages are put together with a program part of the playback software, the so-called “demultiplexer”, to form coherent audio and video data and are played back synchronously.

Es ist nun auch möglich, andere Daten, z.B. wie gemäß der Erfindung, Messdaten ebenfalls in Datenpakete zu fassen und bei der Speicherung in diesen System-Stream einzufügen. Diese enthalten eigene Identifizierungskodes, beispielsweise eigeneIt is now also possible to use other data, e.g. as according to the invention, also to collect measurement data in data packets and to insert them into this system stream when stored. These contain their own identification codes, for example their own

4-Byte-Identifizierungskodes im Header, damit sie als Messdatenpakete erkannt werden. Dafür stehen beispielweise die Codes 000001 bd und 000001 bf zur Verfügung.4-byte identification codes in the header so that they are recognized as measurement data packets. For example, the codes 000001 bd and 000001 bf are available.

Digital Video-Format (,,DV"-Format) : Gemäß der Erfindung werden aus der Digitalkamera kommende, beispielsweise im Digital Video-Format vorliegende Videodaten vid' dekomprimiert, um sie laufend auf einem Computer-Monitor darstellen zu können.Digital video format ("DV" format): According to the invention, video data coming from the digital camera, for example in digital video format, is decompressed in order to be able to display it continuously on a computer monitor.

In einer handelsüblichen DV- Videokamera werden die Bilddaten mittels eines darin enthaltenen Chips für die Speicherung auf Band oder einem anderen Speichermedium komprimiert, und zwar nach einem Verfahren, das ÄhnHchkeiten mit den Kon primierungsverfahren nach MPEG hat; allerdings wird jedes Bild als Einzelbild komprimiert und keine Bewegungsabschätzung durchgeführt.In a commercially available DV video camera, the image data are compressed by means of a chip contained therein for storage on tape or another storage medium, using a method which is similar to the MPEG compression method; however, each image is compressed as a single image and no motion estimation is carried out.

Die Details des DV-Formats sind festgelegt in dem DV Standard Dokument IEC 61834 der International Electrotechnical Commission, hervorgegangen aus dem „Blue Book" (Specifica- tion of ConsumerUse Digital VCRs using 6.3 mm magnetic tape). Die Einzelheiten der Übertragung der Video/ Audiodaten über die IEEE1394-Schnittstelle sind im Standard IEC 61883 festgelegt. Dabei werden die Audiodaten, nach dem sie in der Videokamera digitalisiert wurden, unkomprimiert übertragen (beispielsweise 48 kHz Abtastrate ). Weiters werden die dekomprimierten Videodaten vid unmittelbar wieder komprimiert, z. B. im Format MPEG (1, 2, oder 4) oder in einem anderen Format. Die Audiodaten werden ebenfalls einer Komprimierung unterzogen (z. B. MP2, MP3 etc.). Aus Audio-, Video- und Messdaten werden Datenpakete gebildet, die zu einem Systemstream zusammengesetzt werden.The details of the DV format are specified in the DV standard document IEC 61834 of the International Electrotechnical Commission, which emerged from the "Blue Book" (Specification of ConsumerUse Digital VCRs using 6.3 mm magnetic tape). The details of the transmission of the video / audio data The IEEE1394 interface specifies the standard IEC 61883. The audio data, after it has been digitized in the video camera, is transmitted uncompressed (for example, 48 kHz sampling rate). Furthermore, the decompressed video data vid is immediately compressed again, e.g. B. in the format MPEG (1, 2, or 4) or in another format. The audio data is also subjected to compression (e.g. MP2, MP3 etc.). Data packets are formed from audio, video and measurement data, which are put together to form a system stream.

Grundsätzlich wäre es möglich, das DV-Format auch für die Speicherung auf der Speichereinrichtung zu verwenden, allerdings ist dies wenig sinnvoll, da aufgrund der relativ geringen Kompressionsrate zuviel Speicherplatz benötigt wird.In principle, it would be possible to use the DV format for storage on the storage device, but this is not very useful since the relatively low compression rate means that too much storage space is required.

Die Erfindung bietet mehrere große Vorteile. Einerseits wird es möglich, aufgezeichnete Video-/ Audiodaten und zeitgleich aufgenommene Messdaten in einem gemeinsamen Datenfile abzuspeichern. Dadurch erfolgt andererseits aber auch eine Verknüpfung der Video-/ Audiodaten mit den Messdaten, sodass es auf einfache Weise möglich wird, das Datenfile nach bestimmten Ereignissen zu durchsuchen und dann die entsprechenden Stellen wiederzugegeben.The invention offers several major advantages. On the one hand, it becomes possible to save recorded video / audio data and simultaneously recorded measurement data in a common data file. On the other hand, this also results in a link between the video / audio data and the measurement data, so that it is easily possible to search the data file for specific events and then to play back the corresponding locations.

Bei medizinischen oder therapeutischen Aufzeichnungen ist es beispielsweise möglich, das Datenfile dahingehend zu untersuchen, ob der Blutdruck, Puls, Herzfrequenz, Sauerstoffsättigung des arteriellen Blutes, etc. einen bestimmten Wert oder Wertebereich überschreiten oder unterschreiten, und kann sich dann die entsprechenden Video-/ Audiosequenzen unmittelbar ansehen, sodass ein einfaches und schnelles Auffinden bestimmter Stellen in den Aufzeichnungen gewährleistet ist. Außerdem ist es beispielsweise bei einer Komprimierung nach MPEG möglich, auch die Videodaten etwa nach einem hohen Bewegungsanteil zu durchsuchen und diese dann gemeinsam mit den Messdaten anzuzeigen.In the case of medical or therapeutic recordings, it is possible, for example, to examine the data file to determine whether the blood pressure, pulse, heart rate, oxygen saturation of the arterial blood, etc. exceed or fall below a certain value or range of values, and can then determine the corresponding video / audio sequences view immediately, so that it is easy and quick to find certain places in the recordings. In addition, for example with MPEG compression, it is also possible to search the video data for a high proportion of motion and then display it together with the measurement data.

Die Erfindung eignet sich hervorragend in der Psychotherapie oder in der Sportmedizin und Physikotherapie zur (Dokumentation des Therapiefortschrittes und zur Bewegungsanalyse. Weiters kann damit die Dokumentation von Operationen bei gleichzeitiger Videoaufnahme der Operation und der für die Anästhesie wichtigen physiologischen Parameter wie EKG, Sauerstoffsättigung, Blutdruck usw. erfolgen. Außerdem ist eine platzsparende Archivierung der aufgezeichneten Daten auf CD-ROM's oder DVD's („Digital Versatile Disc") möglich.The invention is ideally suited in psychotherapy or in sports medicine and physicotherapy for (documentation of the therapy progress and for movement analysis. Furthermore, the documentation of operations with simultaneous video recording of the operation and the physiological parameters important for anesthesia such as ECG, oxygen saturation, blood pressure, etc Space-saving archiving of the recorded data on CD-ROMs or DVDs ("Digital Versatile Disc") is also possible.

Die Erfindung ist aber nicht nur auf den Einsatz in psychotherapeutischen Sitzungen beschränkt, auch im gesamten medizinischen Alltag kann das erfindungsgemäße System zum Einsatz kommen, etwa zur Dokumentation (OP- Aufzeichnungen, Sportmedizin ), erweiterten Diagnostik (z.B. Schlaflabor), Verlaufskontrollen wie z.B. Dokumentation des Fortsehnt- tes und der Therapie bzw. des Trainings im Vergleich zu den Ausgangswerten, aber auch im Vergleich zu Standardwerten.However, the invention is not only limited to use in psychotherapeutic sessions, the system according to the invention can also be used in everyday medical practice, for example for documentation (operating room recordings, sports medicine), advanced diagnostics (e.g. sleep laboratory), follow-up checks such as documentation of the Fortsehnt- tes and therapy or training compared to the initial values, but also compared to standard values.

Ein weiteres Anwendungsgebiete liegt in der Neurologie zum Beispiel im Bereich des Video- EEG's zur Anfallsevaluierung. Hierbei wird ein Patient mittels EEG und Video 24 Stunden unter zusätzlicher Observanz durch eine Aufsichtsperson wie eine Krankenschwester oder einen Arzt monitorisiert. Die aufgezeichneten Daten werden derzeit getrennt auf Festplatte gespeichert, ausgewertet und die anfallsfreien Daten werden nach Durchsicht wieder verworfen. Mit der vorliegenden Erfindung können hingegen alle Daten in einer Datei gespeichert werden, und weiters ist es auch noch möglich, über Markierungen beispielsweise die Anfälle (z.B. Epilesie ) speziell zu kennzeichnen, sodass diese später leicht ausgewertet und betrachtet werden können.Another area of application is in neurology, for example in the area of video EEGs for seizure evaluation. A patient is monitored 24 hours a day using EEG and video with additional observation by a supervisor such as a nurse or a doctor. The recorded data is currently stored separately on the hard disk, evaluated and the seizure-free data is discarded after review. With the present invention, on the other hand, all data can be stored in a file, and it is also possible to use markings, for example, to specifically identify the seizures (e.g. epilepsy) so that they can be easily evaluated and viewed later.

Außerdem kann unter Verwendung leistungsfähiger Datenverbindung wie etwa Breitband-Internet der Datenaustausch zwischen verschiedenen Medizinern etc. erfolgen und deren Meinung zu einem bestimmten Fall eingeholt werden.In addition, data can be exchanged between different medical professionals etc. using powerful data connections such as broadband internet and their opinions obtained on a specific case.

Das erfindungsgemäße Verfahren sowie das erfindungsgemäße System sind allerdings nicht auf die medizinische oder therapeutische Anwendung beschränkt sondern grundsätzlich sehr breitflächig anwendbar. Beispielsweise ist es auch möglich, beliebige physikalische oder chemische Messdaten gemeinsam mit Audio-/ Videodaten aufzuzeichnen, etwa einen Verbrennungsvorgang optisch (etwa auch im Infrarotbereich) aufzuzeichnen und mit Sensoren gemessene, bei der Verbrennung entstehende und freigesetzte chemische Stoffe zu detektieren und entsprechend als Messdaten in dem Datenfile aufzuzeichnen.However, the method according to the invention and the system according to the invention are not limited to medical or therapeutic use, but can basically be used over a very wide area. For example, it is also possible to record any physical or chemical measurement data together with audio / video data, for example to record a combustion process optically (for example also in the infrared range) and to detect chemical substances measured and released during combustion and correspondingly as measurement data in the data file.

Der Einfachheit halber wurde in obiger Beschreibung zumeist von einer Videokamera und einer Messdaten-Aufnahmevorrichtung ausgegangen. Natürlich kann und werden häufig mehrere Messdaten- Aufnahmevorrichtungen an den Computer angeschlossen werden, und es ist auch durchaus denkbar, dass Videodaten von mehreren Videokameras aufgezeichnet werden; beispielsweise kann eine Videokamera im optischen Bereich, eine andere im Infrarotbereich aufzeichnen, es können aber auch mehrere optische Kameras einfach nur aus unterschiedlichen Kamerapositionen aus aufzeichnen.For the sake of simplicity, a video camera and a measurement data recording device were mostly used in the above description. Of course, several measurement data recording devices can and will often be connected to the computer, and it is also quite conceivable for video data to be recorded by several video cameras; For example, one video camera can record in the optical range, another in the infrared range, but several optical cameras can also simply record from different camera positions.

Außerdem sei hier noch erwähnt, dass für die Erfindung natürlich auch USB- Web-Kameras verwendet werden können, sowie Digitalkameras, welche die Videodaten unkomprimiert an einen Computer weiterleiten, beispielsweise sogenannte IEEE1394-Digitalkameras. In addition, it should also be mentioned here that, of course, USB web cameras can also be used for the invention, as well as digital cameras which forward the video data to a computer in an uncompressed manner, for example so-called IEEE1394 digital cameras.

Claims

PATENTANSPRÜCHE 1. System zum simultanen Aufzeichnen von Messdaten (mes) und Video- und/ oder Audiodaten (vid, aud), bestehend aus zumindest einem Datenverarbeitungsgerat (COM), zumindest einer mit dem Datenverarbeitungsgerat (COM) über zumindest eine Schnittstelle (SCHI, SCH2) verbundenen Messdaten-Aufnahmevorrichtung (MES), sowie zumindest einer über zumindest eine Schnittstelle (SCH3) mit dem Datenverarbeitungsgerat (COM) verbimdenen Vorrichtung (CAM, MIC) zur Aufnahme von Video- und/ oder Audiodaten (vid, aud), wobei das Datenverarbeitungsgerat (COM) dazu eingerichtet ist, von der Vorrichtung (CAM, MIC) zur Aufnahme von Video- und/ oder Audiodaten aufgezeichnete Daten (vid, aud) über die Schnittstelle (SCHI, SCH2) entgegenzunehmen,1. System for the simultaneous recording of measurement data (mes) and video and / or audio data (vid, aud), consisting of at least one data processing device (COM), at least one with the data processing device (COM) via at least one interface (SCHI, SCH2) connected measurement data recording device (MES), and at least one device (CAM, MIC) for recording video and / or audio data (vid, aud), which is connected to the data processing device (COM) via at least one interface (SCH3), the data processing device ( COM) is set up to receive data (vid, aud) recorded by the device (CAM, MIC) for recording video and / or audio data via the interface (SCHI, SCH2), dadurch gekennzeichnet, dasscharacterized in that das Datenverarbeitungsgerat (COM) dazu eingerichtet ist, die Video- und/ oder Audiodaten (vid, aud) zu komprimieren und diese gemeinsam mit den von der Messdaten- Aufnahmevorrichtung (MES) übermittelten Messdaten (mes) gemeinsam in zumindest einem gemeinsamen Datenfile (dat) auf einer Speichereinrichtung (SPE) abzuspeichern, wobei das Datenverarbeitungsgerat (COM) weiters dazu eingerichtet ist, die Messdaten (mes) in Messdatenpakete (mes(l), mes(2), mes(3), ...) zu zerlegen, weiters die komprimierten Video- und/ oder Audiodaten (vid*, aud*) ebenfalls in Datenpakete (vid*(l), vid*(2), vid*(3), ...; aud*(l), aud*(2), aud*(3), ...) zu zerlegen, und die Messdatenpakete (mes(l), mes(2), mes(3), ...) in dem Datenfile (dat) in dem Datenstrom der Video- und/ oder Audio-Datenpakete (vid*(l), vid*(2), vid*(3), ...; aud*(l), aud*(2), aud*(3), ...) abzuspeichern.the data processing device (COM) is set up to compress the video and / or audio data (vid, aud) and this together with the measurement data (mes) transmitted by the measurement data recording device (MES) together in at least one common data file (dat) store on a storage device (SPE), the data processing device (COM) being further set up to break down the measurement data (mes) into measurement data packets (mes (l), mes (2), mes (3), ...), further the compressed video and / or audio data (vid *, aud *) also in data packets (vid * (l), vid * (2), vid * (3), ...; aud * (l), aud * ( 2), aud * (3), ...), and the measurement data packets (mes (l), mes (2), mes (3), ...) in the data file (dat) in the data stream of the video - and / or audio data packets (vid * (l), vid * (2), vid * (3), ...; aud * (l), aud * (2), aud * (3), .. .) to save. 2. System nach Anspruch 1, dadurch gekennzeichnet, dass das Datenverarbeitungsgerat (COM) dazu eingerichtet ist, die Messdaten (mes) sowie die Video- und/ oder Audiodaten (vid', aud) unmittelbar nach ihrem Einlangen sowie einer allfälligen Komprimierung auf dem Datenverarbeitungsgerat (COM) in das zumindest eine gemeinsame Datenfile (dat) zu schreiben.2. System according to claim 1, characterized in that the data processing device (COM) is set up to the measurement data (mes) and the video and / or audio data (vid ', aud) immediately after their arrival and any compression on the data processing device (COM) into the at least one common data file (dat). 3. System nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Vorrichtung (CAM) zur Aufnahme von Video- und/ oder Audiodaten die Videodaten (vid') in digitaler, komprimierter Form an das Datenverarbeitungsgerat (COM) übermittelt und dieses die Videodaten (vid') dekomprimiert und anschließend wieder komprimiert. 3. System according to claim 1 or 2, characterized in that the device (CAM) for recording video and / or audio data transmits the video data (vid ') in digital, compressed form to the data processing device (COM) and this the video data (COM vid ') decompressed and then compressed again. 4. System nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass die zumindest eine Schnittstelle (SCH1-SCH3) eine Drahtschnittstelle ist.4. System according to one of claims 1 to 3, characterized in that the at least one interface (SCH1-SCH3) is a wire interface. 5. System nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass die zumindest eine Schnittstelle (SCH1-SCH3) eine Funkschnittstelle ist.5. System according to one of claims 1 to 4, characterized in that the at least one interface (SCH1-SCH3) is a radio interface. 6. System nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass die Schnittstellen (SCH1-SCH3) serielle Schnittstellen und/ oder USB-Schnittstellen und/ oder Schnittstellen basierend auf dem Firewire-Standard sind.6. System according to one of claims 1 to 5, characterized in that the interfaces (SCH1-SCH3) are serial interfaces and / or USB interfaces and / or interfaces based on the Firewire standard. 7. System nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass die zumindest eine oder zumindest eine der mehreren Messdaten-Aufnahmevorrichtungen (MES) zumindest zur Messung von physikalischen Messgrößen eingerichtet ist.7. System according to one of claims 1 to 6, characterized in that the at least one or at least one of the plurality of measurement data recording devices (MES) is set up at least for the measurement of physical measurement variables. 8. System nach einem der Ansprüche 1 bis 7, dadurch gekennzeichnet, dass die zumindest eine oder eine der mehreren Messdaten-Aufnahrnevorrichtungen (MES) zumindest zur Messung von Vitalparametern einer Testperson oder eines Tieres eingerichtet ist.8. System according to one of claims 1 to 7, characterized in that the at least one or one of the several measurement data recording devices (MES) is set up at least for measuring vital parameters of a test person or an animal. 9. System nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass das Datenverarbeitungsgerat (COM) dazu eingerichtet ist, das zumindest eine Datenfile (dat) mit einer oder mehreren Markierungen zu versehen.9. System according to one of claims 1 to 8, characterized in that the data processing device (COM) is set up to provide the at least one data file (dat) with one or more markings. 10. System nach Anspruch 9, dadurch gekennzeichnet, dass das Datenverarbeitungsgerat (COM) mit zumindest einer Fernbedienung (FER ) verbindbar ist.10. System according to claim 9, characterized in that the data processing device (COM) with at least one remote control (FER) can be connected. 11. System nach Anspruch 9 und 10, dadurch gekennzeichnet, dass Markierungen in dem Datenfile (Dat) mit der Fernbedienung (FER) anbringbar sind.11. System according to claim 9 and 10, characterized in that markings in the data file (Dat) with the remote control (FER) can be attached. 12. System nach einem der Ansprüche 1 bis 11, dadurch gekennzeichnet, dass das Datenverarbeitungsgerat (COM) dazu eingerichtet ist, die Videodaten (vid) mittels eines Verfahrens nach MPEG zu komprimieren und in komprimierter Form (vid*) abzuspeichern.12. System according to one of claims 1 to 11, characterized in that the data processing device (COM) is set up to compress the video data (vid) by means of a method according to MPEG and to save it in compressed form (vid *). 13. System nach einem der Ansprüche 1 bis 12, dadurch gekennzeichnet, dass das Datenverarbeitungsgerat (COM) dazu eingerichtet ist, die Audiodaten (aud) mittels eines Verfahrens nach MP2 oder MP3 zu komprimieren und in komprimierter Form (aud*) abzuspeichern. 13. System according to one of claims 1 to 12, characterized in that the data processing device (COM) is set up to compress the audio data (aud) by means of a method according to MP2 or MP3 and to store them in compressed form (aud *). 14. Verfahren zum simultanen Aufzeichnen von Messdaten und Video- und/ oder Audiodaten, bei welchem von einer Messdaten-Aufnahmevorrichtung (MES) Messdaten (mes) aufgenommen werden, weiters von einer Vorrichtung (CAM, MIC) zur Aufnahme von Video- und/ oder Audiodaten Daten (vid, aud) aufgenommen werden, und sowohl die Messdaten (mes) als auch die Audio- und/ oder Videodaten (vid', aud) an ein Datenverarbeitungsgerat (COM) übermittelt werden,14. Method for the simultaneous recording of measurement data and video and / or audio data, in which measurement data (mES) are recorded by a measurement data recording device (MES), furthermore by a device (CAM, MIC) for recording video and / or Audio data data (vid, aud) are recorded, and both the measurement data (mes) and the audio and / or video data (vid ', aud) are transmitted to a data processing device (COM). dadurch gekennzeichnet, dasscharacterized in that von dem Datenverarbeitungsgerat (COM) die Video- und/ oder Audiodaten (vid, aud) komprimiert und gemeinsam mit den von der Messdaten-Aufnahmevorrichtung (MES) übermittelten Messdaten (mes) gemeinsam in zumindest einem gemeinsamen Datenfile (dat) auf einer Speichereinrichtung (SPE) abgespeichert werden, wobei die Messdaten (mes) in Messdatenpakete (mes(l), mes(2), mes(3), ...) zerlegt werden, weiters die komprimierten Video- und/oder Audiodaten (vid*, aud*) ebenfalls in Datenpakete (vid*(l), vid*(2), vid*(3), ...; aud *(1), aud *(2), aud*(3), ...) zerlegt werden, und die Messdatenpakete (mes(l), mes(2), mes(3), ...) in dem Datenfile (dat) in dem Datenstrom der Video- und/oder Audio- Datenpakete (vid*(l), vid*(2), vid*(3), ...; aud *(1), aud *(2), aud*(3), ...) abgespeichert werden.the video and / or audio data (vid, aud) is compressed by the data processing device (COM) and together with the measurement data (mes) transmitted by the measurement data recording device (MES) together in at least one common data file (dat) on a storage device (SPE ) are saved, whereby the measurement data (mes) are broken down into measurement data packets (mes (l), mes (2), mes (3), ...), furthermore the compressed video and / or audio data (vid *, aud * ) also broken down into data packets (vid * (l), vid * (2), vid * (3), ...; aud * (1), aud * (2), aud * (3), ...) and the measurement data packets (mes (l), mes (2), mes (3), ...) in the data file (dat) in the data stream of the video and / or audio data packets (vid * (l), vid * (2), vid * (3), ...; aud * (1), aud * (2), aud * (3), ...) can be saved. 15. Verfahren nach Anspruch 14, dadurch gekennzeichnet, dass die Messdaten (mes) sowie die Video- und/ oder Audiodaten (vid*, aud*) unmittelbar nach ihrem Einlangen sowie einer allfälligen Komprimierung auf dem Datenverarbeitungsgerat (COM) in das zumindest eine gemeinsame Datenfile (dat) geschrieben werden.15. The method according to claim 14, characterized in that the measurement data (mes) and the video and / or audio data (vid *, aud *) immediately after their arrival and any compression on the data processing device (COM) in the at least one common Data file (dat) can be written. 16. Verfahren Anspruch 14 oder 15, dadurch gekennzeichnet, dass die Videodaten (vid) von der Vorrichtung (CAM) zur Aufnahme der Video- und/ oder Audiodaten in digitaler, komprimierter Form (vid') an das Datenverarbeitungsgerat (COM) übermittelt, von diesem die Videodaten (vid') dekomprimiert und anschließend wieder komprimiert werden.16. The method of claim 14 or 15, characterized in that the video data (vid) from the device (CAM) for recording the video and / or audio data in digital, compressed form (vid ') to the data processing device (COM) from this the video data (vid ') decompressed and then compressed again. 17. Verfahren nach einem der Ansprüche 14 bis 16, dadurch gekennzeichnet, dass von der zumindest einen oder zumindest einer der mehreren Messdaten-Aufnahmevorrichtungen (MES) physikalische Messgrößen aufgenommen werden.17. The method according to any one of claims 14 to 16, characterized in that physical measurement variables are recorded by the at least one or at least one of the several measurement data recording devices (MES). 18. Verfahren nach einem der Ansprüche 14 bis 17, dadurch gekennzeichnet, dass von der zumindest einen oder einer der mehreren Messdaten-Aumahmevorrichtungen (MES) Vitalparameter einer Person oder eines Tieres aufgenommen werden. 18. The method according to any one of claims 14 to 17, characterized in that vital parameters of a person or an animal are recorded by the at least one or one of the several measurement data acquisition devices (MES). 19. Verfahren nach einem der Ansprüche 14 bis 18, dadurch gekennzeichnet, dass unter Verwendung des Datenverarbeitungsgerätes (COM) das zumindest eine Datenfile (dat) mit einer oder mehreren Markierungen versehbar ist.19. The method according to any one of claims 14 to 18, characterized in that using the data processing device (COM) the at least one data file (dat) can be provided with one or more markings. 20. Verfahren nach Anspruch 19, dadurch gekennzeichnet, dass Markierungen in dem Datenfile (dat) mit einer dem Datenverarbeitungsgerat (COM) zugeordneten Fernbedienung (FER) angebracht werden.20. The method according to claim 19, characterized in that markings are made in the data file (dat) with a remote control (FER) assigned to the data processing device (COM). 21. Verfahren nach einem der Ansprüche 14 bis 20, dadurch gekennzeichnet, dass Videodaten (vid) mittels eines Verfahrens nach MPEG komprimiert und in komprimierter Form (vid*) abgespeichert werden.21. The method according to any one of claims 14 to 20, characterized in that video data (vid) is compressed by a method according to MPEG and stored in compressed form (vid *). 22. System nach einem der Ansprüche 14 bis 21, dadurch gekennzeichnet, dass die Audiodaten (aud) mittels eines Verfahrens nach MP2 oder MP3 komprimiert und in komprimierter Form (aud*) abgespeichert werden.22. System according to one of claims 14 to 21, characterized in that the audio data (aud) is compressed by a method according to MP2 or MP3 and stored in compressed form (aud *). 23. Cornputerprogrammrnittel zum Durchführen eines Verfahrens nach einem der Ansprüche 14 bis 22. 23. Computer program means for carrying out a method according to one of claims 14 to 22.
PCT/AT2002/000181 2001-06-25 2002-06-24 System and method for simultaneously recording measuring data and video and/or audio data Ceased WO2003001359A2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
AU2002322134A AU2002322134A1 (en) 2001-06-25 2002-06-24 System and method for simultaneously recording measuring data and video and/or audio data

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
AT9752001 2001-06-25
ATA975/2001 2001-06-25
ATA977/2001 2001-06-25
AT9772001 2001-06-25

Publications (2)

Publication Number Publication Date
WO2003001359A2 true WO2003001359A2 (en) 2003-01-03
WO2003001359A3 WO2003001359A3 (en) 2004-03-18

Family

ID=25608478

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/AT2002/000181 Ceased WO2003001359A2 (en) 2001-06-25 2002-06-24 System and method for simultaneously recording measuring data and video and/or audio data

Country Status (2)

Country Link
AU (1) AU2002322134A1 (en)
WO (1) WO2003001359A2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005022550A1 (en) * 2005-05-17 2006-11-23 Siemens Ag Method for postprocessing at least one film shot created during an investigation
DE102007010837A1 (en) * 2007-03-03 2008-09-04 Silvio Mindt Mobile video-recording system for patient simulation, has patient simulator, which has simulation monitor and stage rack, having video server, video screen, keyboard, audio-mixer and junction box
CN106200573A (en) * 2016-07-01 2016-12-07 苏州泽达兴邦医药科技有限公司 Chinese medicine enterprise extracts Workshop Production manufacturing execution system (MES) implementation method
EP4345754A1 (en) 2022-09-27 2024-04-03 Erbe Elektromedizin GmbH Method and system for assisting evaluation of a video-assisted medical intervention procedure

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6104948A (en) * 1996-04-03 2000-08-15 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Method for visually integrating multiple data acquisition technologies for real time and retrospective analysis
US5856973A (en) * 1996-09-10 1999-01-05 Thompson; Kenneth M. Data multiplexing in MPEG server to decoder systems
JPH10164494A (en) * 1996-12-03 1998-06-19 Matsushita Electric Ind Co Ltd Video processing apparatus and video processing system using the same

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005022550A1 (en) * 2005-05-17 2006-11-23 Siemens Ag Method for postprocessing at least one film shot created during an investigation
US7742145B2 (en) 2005-05-17 2010-06-22 Siemens Aktiengesellschaft Method and medical examination apparatus for editing a film clip produced by medical imaging
DE102007010837A1 (en) * 2007-03-03 2008-09-04 Silvio Mindt Mobile video-recording system for patient simulation, has patient simulator, which has simulation monitor and stage rack, having video server, video screen, keyboard, audio-mixer and junction box
DE102007010837B4 (en) * 2007-03-03 2011-10-13 Silvio Mindt Mobile video recording system for patient simulation
CN106200573A (en) * 2016-07-01 2016-12-07 苏州泽达兴邦医药科技有限公司 Chinese medicine enterprise extracts Workshop Production manufacturing execution system (MES) implementation method
EP4345754A1 (en) 2022-09-27 2024-04-03 Erbe Elektromedizin GmbH Method and system for assisting evaluation of a video-assisted medical intervention procedure

Also Published As

Publication number Publication date
WO2003001359A3 (en) 2004-03-18
AU2002322134A1 (en) 2003-01-08

Similar Documents

Publication Publication Date Title
AU693192B2 (en) Acquisition of video images simultaneously with analog signals
DE69834196T2 (en) INSTRUMENT AND METHOD FOR RESCUEING THE BRAIN FUNCTIONS
DE4091020C2 (en) Electroencephalic neuro-feedback appts.
DE3781112T2 (en) DEVICE FOR DISPLAYING ARRHYTHMIA.
Kroupi et al. EEG correlates during video quality perception
DE60130609T2 (en) Multi-connection cable assembly system
EP1059875B1 (en) Evaluation system for obtaining diagnostic information from the signals and data of medical sensor systems
DE10150364A1 (en) Physiological data coding method converts patient data into different format before difference coding and transmission to analysis device
DE10313955A1 (en) Interface device and method for a surveillance network
DE102015208144A1 (en) Increase the accuracy of a physiological signal, obtained from a video of a patient
DE2919425A1 (en) DIGITAL REAL-TIME X-RAY SUBTRACTION IMAGES
DE10246404A1 (en) T-waves alternates measurement method for electrocardiography, involves adjusting electrocardiogram data series based on difference between target cubic spline and odd and even cubic splines
EP3928680A1 (en) Endoscopic imaging method, endoscope imaging system, and software program product
DE102012104565A1 (en) Method, device and computer program product for monitoring physiological signals
WO2003001359A2 (en) System and method for simultaneously recording measuring data and video and/or audio data
DE19821761A1 (en) Method and device for the compressed optical representation of medical data
EP1629667A2 (en) Method and device for displaying medical patient data on a medical display unit
Emberger et al. Video object detection for privacy-preserving patient monitoring in intensive care
DE102005004471B4 (en) Medical diagnostic imaging device with a device for compressing image data
DE102005023906B4 (en) Method for determining positron emission measurement information in the context of positron emission tomography
EP0723686B1 (en) Digital integration system for integrating diagnostic imaging and data-processing devices into edp systems
EP3278562A1 (en) System and method for transmitting video data from a server to a client
DE19932964B4 (en) Process for processing object-related image data and object-related information data and device for image acquisition
EP4345754A1 (en) Method and system for assisting evaluation of a video-assisted medical intervention procedure
DE102009000376A1 (en) Method for quantitative representation of blood flow in tissue- or vein region of patients, involves generating difference between successive frames, where generated difference is represented

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A2

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE ES FI GB GD GE GH GM HR HU ID IL IN IS JP KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NO NZ OM PH PL PT RO RU SD SE SG SI SK SL TJ TM TN TR TT TZ UA UG US UZ VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A2

Designated state(s): GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE CH CY DE DK ES FI FR GB GR IE IT LU MC NL PT SE TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
ENP Entry into the national phase

Ref document number: 091332002

Country of ref document: AT

Date of ref document: 20030103

Kind code of ref document: A

Format of ref document f/p: F

WWE Wipo information: entry into national phase

Ref document number: 91332002

Country of ref document: AT

REG Reference to national code

Ref country code: DE

Ref legal event code: 8642

122 Ep: pct application non-entry in european phase
NENP Non-entry into the national phase

Ref country code: JP

WWW Wipo information: withdrawn in national office

Country of ref document: JP