[go: up one dir, main page]

DE102011106814B4 - Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set - Google Patents

Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set Download PDF

Info

Publication number
DE102011106814B4
DE102011106814B4 DE102011106814.0A DE102011106814A DE102011106814B4 DE 102011106814 B4 DE102011106814 B4 DE 102011106814B4 DE 102011106814 A DE102011106814 A DE 102011106814A DE 102011106814 B4 DE102011106814 B4 DE 102011106814B4
Authority
DE
Germany
Prior art keywords
image
image processing
thermal imaging
imaging camera
segmented
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102011106814.0A
Other languages
English (en)
Other versions
DE102011106814A1 (de
Inventor
Matthias Schmieder
Martin Stratmann
Markus Appenzeller
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Testo SE and Co KGaA
Original Assignee
Testo SE and Co KGaA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Testo SE and Co KGaA filed Critical Testo SE and Co KGaA
Priority to DE102011106814.0A priority Critical patent/DE102011106814B4/de
Publication of DE102011106814A1 publication Critical patent/DE102011106814A1/de
Application granted granted Critical
Publication of DE102011106814B4 publication Critical patent/DE102011106814B4/de
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/12Edge-based segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes (5) wobei in dem IR-Bild (5) mittels Segmentierung (10) wenigstens ein Objekt (7, 8) ausgezeichnet und zur Weiterverarbeitung bereitgestellt wird und für das segmentierte Objekt (7) wenigstens ein weiterer Bildanalyse- oder Bildbearbeitungsschritt (18) ausgeführt wird, dadurch gekennzeichnet, - dass in einem Lernmodus für das segmentierte Objekt (7) wenigstens ein Merkmal extrahiert und in dem Lernmodus in einem Merkmalsraum wenigstens eine objektbezogene Information zu dem segmentierten Objekt (7) hinterlegt wird, wobei objektbezogene Informationen einzelnen Objektklassen zugeordnet werden, sodass für die segmentierten Objekte, welche in die jeweiligen Objektklassen fallen, bestimmte Einstellungen für die Bildaufbereitung automatisch vorgenommen werden, - und dass in einem Anwendungsmodus zu wenigstens einem aus dem IR-Bild (5) extrahierten Merkmal wenigstens eine objektbezogene Information in dem zugehörigen Punkt oder Bereich des Merkmalsraumes ausgelesen und zur Einstellung für die Bildaufbereitung automatisiert ausgewählt wird.

Description

  • Die Erfindung betrifft ein Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes wobei in dem IR-Bild mittels Segmentierung wenigstens ein Objekt ausgezeichnet und zur Weiterverarbeitung bereitgestellt wird und für das segmentierte Objekt wenigstens ein weiterer Bildanalyse- oder Bildbearbeitungsschritt ausgeführt wird.
  • Die Erfindung betrifft weiter ein Wärmebildkamera-Set mit einer Wärmebildkamera und Bildverarbeitungsmitteln.
  • Es ist bekannt, mit Wärmebildkameras IR-Bilder aufzunehmen. Dabei wird das IR-Bild erstellt, indem das Ausgangssignal eines IR-Strahlungsdetektors ausgewertet und verarbeitet wird. Ein IR-Bild kann somit aus Rohdaten des Detektors, aus offset-korrigierten Daten des Detektors oder aus radiometrischen Daten bestehen. Das IR-Bild kann als Einzelbild oder als Teil einer IR-Videosequenz aufgenommen worden sein.
  • Zur Visualisierung von IR-Bildern ist es üblich, das aufbereitete Messergebnis in Falschfarben-Darstellungen darzustellen.
  • Dazu wird eine Farbpalette verwendet, welche die Umsetzung von Temperaturmesswerten in einfach visuell zu erfassende Farbwerte vorgibt.
  • Es hat sich herausgestellt, dass bei großen Kontrasten in den IR-Bildern unbefriedigende Ergebnisse in der Darstellung erreicht werden. Beispielsweise kann dies auftreten, wenn sogenannte hot spots vor oder hinter wesentlich kühleren Umgebungen betrachtet werden.
  • Die Farbpalette, die oft eine mehr oder weniger lineare Umsetzung der Temperaturwerte in Farbwerte erlaubt, bedarf dann einer Anpassung auf den individuell dargestellten Fall.
  • Um aussagekräftige Messwerte zu erhalten, ist es zudem erforderlich, möglichst genau den Emissionsgrad und den Reflexionsgrad der betrachteten Szene zu kennen. Die Aufnahme von IR-Bildern erfordert daher in der Regel die langjährige Erfahrung eines Spezialisten, ohne welche sich leicht Mess- oder Verarbeitungsfehler einschleichen können.
  • Aus US 2008 / 0 123 956 A1 ist eine Technik zur Abbildung eines Winkelsichtfeldes eines Bildschirms in Abhängigkeit einer Betrachterposition bekannt, bei welcher Rote-Augen-Regionen in einem aufgenommenen Bild detektiert werden, die zu den aktuellen Positionen eines oder mehrerer Betrachter gehören.
  • Aus der US 2007 / 0 223 815 A1 ist eine Vorrichtung zum Segmentieren von Konturen von Objekten in einem Bild bekannt, mit den folgenden Schritten: Erfassungsmittel zum Empfangen eines Eingangsbildes, das mindestens ein Objekt enthält, wobei das Bild Pixeldatensätze von mindestens zwei Dimensionen umfasst; Auswahlmittel zum Auswählen eines Referenzpunktes innerhalb des Objekts des Eingangsbildes; und Verarbeitungsmittel zum: Erzeugen einer Koordinatenkarte eines Abstandsparameters zwischen den Pixeln des Eingangsbildes und dem Referenzpunkt; Verarbeiten des Eingangsbildes, um ein kantenerkanntes Bild aus dem Eingangsbild zu erzeugen; Berechnen mindestens eines statistischen Moments des Abstandsparameters in Bezug auf ein Pixel p des Eingangsbildes, wobei die Gewichtungsfaktoren von dem kantenerfassten Bild und von einem Filterkern abhängen, der auf einer Fensterfunktion definiert ist, die auf dem Pixel p zentriert ist; und Analysieren des mindestens einen statistischen Moments, um zu bewerten, ob das Pixel p innerhalb des Objekts liegt.
  • Aus der US 2006 / 0 098 870 A1 ist ein Verfahren bekannt das folgendes umfasst:(a) Empfangen eines vom Benutzer ausgewählten Punktes in einem Bild;(b) Durchführen einer Wasserscheidentransformation an dem vom Benutzer ausgewählten Punkt, um ein primäres Objekt zu bestimmen; und (c) Hinzufügen einer benachbarten Wasserscheide-Region zu dem primären Objekt auf der Grundlage von Regionskonkurrenz und einer Glättungsbeschränkung, um ein aktualisiertes Objekt zu bilden.
  • Aus Lehmann T. et al. 1997, Bildverarbeitung für die Medizin, Springer Verlag, ist die Nutzung von Infrarotbilder in der Medizin bekannt.
  • Aus Haasdonk B. 2005, Digitale Bildverarbeitung, Einheit 11, Klassifikation, Albert-Ludwigs-Universität Freiburg, sind Standardmethoden der Objektklassifikation bekannt.
  • Der Erfindung liegt die Aufgabe zugrunde, die Erstellung von aussagekräftigen IR-Bildern zu vereinfachen.
  • Erfindungsgemäß sind zur Lösung der Aufgabe die Merkmale von Anspruch 1 vorgesehen. Insbesondere ist somit erfindungsgemäß bei einem Verfahren der eingangs genannten Art vorgesehen, dass in einem Lernmodus für das segmentierte Objekt wenigstens ein Merkmal extrahiert und in dem Lernmodus in einem Merkmalsraum wenigstens eine objektbezogene Information zu dem segmentierten Objekt hinterlegt wird, wobei objektbezogene Informationen einzelnen Objektklassen zugeordnet werden, sodass für die segmentierten Objekte, welche in die jeweiligen Objektklassen fallen, bestimmte Einstellungen für die Bildaufbereitung automatisch vorgenommen werden, - und dass in einem Anwendungsmodus zu wenigstens einem aus dem IR-Bild (5) extrahierten Merkmal wenigstens eine objektbezogene Information in dem zugehörigen Punkt oder Bereich des Merkmalsraumes ausgelesen und zur Einstellung für die Bildaufbereitung automatisiert ausgewählt wird.
  • Die Erfindung bietet so den Vorteil, dass die Bildanalyse- oder Bildbearbeitungsschritte zur Aufbereitung der aufgenommenen Messdaten, des IR-Rohbildes, in intelligenter Weise an den dargestellten Inhalt des IR-Bildes angepasst werden können. Es ist mit der Erfindung nicht mehr erforderlich, den gewünschten Bildanalyse- oder Bildbearbeitungsschritt für das gesamte IR-Bild gleichermaßen durchzuführen, sondern es ist eine maßgeschneiderte und zielgerichtete Aufbereitung möglich. Die segmentierten Objekte sind somit voneinander und vom Hintergrund separierbar und anschließend einzeln mit Bildanalyse- oder Bildverarbeitungsschritten manipulierbar.
  • Beispielsweise kann vorgesehen sein, dass die Segmentierung die Auswahl wenigstens eines Bildpunktes in dem IR-Bild umfasst. Von Vorteil ist dabei, dass das Objekt für den Bildanalyse- oder Bildbearbeitungsschritt dadurch ausgezeichnet werden kann, dass zunächst ein dem Objekt zugeordneter Bildpunkt ausgewählt wird und dass für diesen Bildpunkt in einem an sich aus der Verarbeitung von Fotografien im sichtbaren Spektralbereich bekannten Segmentierungsalgorithmus das Objekt ausgewählt wird.
  • Hierbei kann vorgesehen sein, dass parallel zu dem IR-Bild ein VIS-Bild im sichtbaren Spektralbereich aufgenommen wird und dass für das VIS-Bild die Segmentierung durchgeführt wird und dass anschließend das segmentierte Objekt anhand einer Korrespondenz zwischen IR-Bild und VIS-Bild im IR-Bild ausgezeichnet wird. Bevorzugt erfolgt jedoch die Segmentierung direkt im IR-Bild.
  • Günstig ist es, wenn die Segmentierung automatisiert durchgeführt wird. Dies kann beispielsweise dadurch erfolgen, dass zunächst ein Bildpunkt als Seed point oder Startpunkt und ein Startmodell als Bereich des IR-Bildes (oder VIS-Bildes) festgelegt werden und dass in dem Startmodell ein Strukturelement, ein sogenanntes Texon, als derjenige Baustein des Bildes bestimmt wird, für welchen die Intensitätsverteilung oder ein anderes strukturelles Merkmal bei Variation über das Startmodell der gesamten Intensitätsverteilung oder dem gesamten strukturellen Merkmal des Startmodells am ähnlichsten ist. Hierbei kann anschließend die Region außerhalb des Startmodells im bearbeiteten Bild ermittelt werden, die eine hohe Ähnlichkeit mit dem Texon aufweist, und es kann die so ermittelte Region mit Hilfe einer Entwicklungsgleichung propagiert werden. Das durch die Propagierung entstandene Modell kann nun erneut als Startmodell verwendet werden, bis eine Konvergenz des Verfahrens feststellbar ist.
  • Bei einer Ausgestaltung der Erfindung kann vorgesehen sein, dass wenigstens zwei segmentierbare Objekte in dem IR-Bild zur Auswahl bereitgestellt werden. Beispielsweise können im IR-Bild die sinnvoll möglichen Segmentierungen zunächst automatisch rechnergestützt erkannt und anschließend zur Auswahl angeboten werden.
  • Von Vorteil ist dabei, dass der Benutzer auf einfache Weise kritische Aufnahmesituationen, in denen mehrere Objekte jeweils Kandidaten für Messfehler darstellen und/oder eine individuelle Nachbearbeitung erfordern, individuell bearbeiten kann.
  • Zur Automatisierung der Segmentierung ist es günstig, wenn die Segmentierung wenigstens eine Merkmalsdetektion umfasst. Von Vorteil ist dabei, dass während der Segmentierung bereits Informationen über eine Objektklasse, zu welcher das segmentierte Objekt gehört, gewinnbar sind. Zu diesen Informationen kann in einer Zuordnungstabelle wenigstens ein objektbezogener Parameter ausgelesen werden, mit welchem der Bildanalyse- oder Bildbearbeitungsschritt parametrierbar ist oder parametriert wird, beispielsweise gemäß einer Voreinstellung.
  • Besonders günstig ist es, wenn die Merkmalsdetektion wenigstens eine Kanten- und/oder Eckendetektion umfasst. Zur automatisierten Erkennung von Objekten kann vorgesehen sein, dass die Segmentierung wenigstens eine Detektion geschlossener Linien oder Konturen umfasst. Von Vorteil ist dabei, dass vollständig abgebildete Objekte einfach anhand von geschlossenen Linien identifizierbar sind. Besonders günstig ist es, wenn die Detektion nach der Polar-Log-Methode erfolgt, welche aus der Objekterkennung in der sichtbaren Fotografie- und Bildbearbeitung bekannt ist. Bei dieser wird die sogenannte Edge-map in einen Polar-Raum transformiert, um die Ränder eines Objekts schneller auffinden zu können. Besonders günstig ist es, wenn das Zentrum der Polar-Log-Darstellung in den oder einen anfangs ausgewählten Bildpunkt gelegt wird.
  • Bei einer Ausgestaltung der Erfindung kann vorgesehen sein, dass das IR-Bild mit einer Wärmebildkamera aufgenommen wird.
  • Hierbei kann die Wärmebildkamera mit einem Sensorfeld (FPA) von Bolometern oder in Scannertechnik ausgerüstet sein.
  • Eine besonders einfache Weiterverarbeitung des IR-Bildes wird ermöglicht, wenn das segmentierte Objekt über eine Ausgabeeinheit ausgegeben wird.
  • Beispielsweise kann vorgesehen sein, dass das segmentierte Objekt an einer Anzeigeeinheit angezeigt wird, sodass ein Nutzer das Ergebnis eines erfindungsgemäß für das segmentierte Objekt ausgeführten, objektbezogenen Bildanalyse- oder Bildbearbeitungsschritt direkt wahrnehmen oder begutachten kann.
  • Beispielsweise kann vorgesehen sein, dass der Bildanalyse- oder Bildbearbeitungsschritt ein Mitführen eines Cursors umfasst. Von Vorteil ist dabei, dass über eine Sequenz von IR-Bildern die Bewegung eines aus dem IR-Bild segmentierten Objektes verfolgt werden kann.
  • Beispielsweise kann vorgesehen sein, dass der Bildanalyse- oder Bildbearbeitungsschritt eine Berechnung einer exakten Temperatur einer auf das segmentierte Objekt bezogenen Relativposition umfasst. Von Vorteil ist dabei, dass die Auswahl derjenigen Bildpunkte, für welche die Temperaturen nicht nur näherungsweise, sondern mit einem aufwendigen Rechenverfahren exakt bestimmt werden, in intelligenter Weise auf den konkreten Bildinhalt abgestimmt werden kann.
  • Es kann vorgesehen sein, dass der Bildanalyse- oder Bildbearbeitungsschritt eine Auswahl einer Farb- und/oder Grauwertpalette einer Falschfarbendarstellung umfasst. Von Vorteil ist dabei, dass große Kontraste in den Bildern dadurch aufbereitet werden können, dass für besonders heiße oder besonders kalte Objekte eine andere Farbpalette genutzt wird, als für den Bildhintergrund. Alternativ oder zusätzlich kann dies genutzt werden, um uninteressante Bildbereiche des IR-Bildes auszublenden oder mit reduzierter Intensität darzustellen.
  • Es kann auch vorgesehen sein, dass der Bildanalyse- oder Bildbearbeitungsschritt eine Eingabe oder Auswahl von wenigstens einem Emissions- und/oder Reflexionsgradwert umfasst. Von Vorteil ist dabei, dass die unterschiedlichen IR-optischen oder strahlungsphysikalischen Eigenschaften der dargestellten Objekte in dem verarbeiteten IR-Bild individuell eingestellt werden können.
  • In einer Speichereinheit können die auszeichenbaren Objekte zu Objektklassen, zusammengefasst sein, wobei zu jeder Objektklasse objektbezogene Informationen wie Emissions-, Reflexions- und/oder Transmissionsgrade hinterlegt sind.
  • Beispielsweise kann vorgesehen sein, dass in einem Lernmodus für das segmentierte Objekt wenigstens ein Merkmal extrahiert wird. Auf diese Weise können Objektklassen geschaffen werden, die jeweils ein eigenes Set von Parametern besitzen, sodass ein später segmentiertes Objekt anhand von extrahierten Merkmalen automatisch dieser Objektklasse zugeordnet werden kann.
  • Der Bildanalyse- oder Bildbearbeitungsschritt kann auch ein Ein- oder Ausblenden des segmentierten Objekts oder des Komplements zu dem segmentierten Objekt in dem aufgenommenen IR-Bild umfassen.
  • Es können auch weitere Arten von Bildanalyse- oder Bildbearbeitungsschritten vorgesehen sein.
  • Es kann vorgesehen sein, dass in einem oder dem Lernmodus in einem Merkmalsraum wenigstens eine objektbezogene Information zu einem segmentierten Objekt hinterlegt wird. Von Vorteil ist dabei, dass objektbezogene Informationen, wie Emissions-, Reflexions- und/oder Transmissionsgrad, den einzelnen Objektklassen zugeordnet werden können, sodass für die segmentierten Objekte, welche in die jeweiligen Objektklassen fallen, bestimmte Einstellungen für die Bildaufbereitung automatisch vorgenommen werden können.
  • Es kann auch vorgesehen sein, dass die Bildanalyse- oder Bildbearbeitungsschritte individuelle Analysefunktionen definieren, beispielsweise die Ermittlung eines minimalen Temperaturwerts, eines maximalen Temperaturwerts, eines Mittelwerts und dergleichen, für das segmentierte Objekt.
  • Beispielsweise kann ein im Lernmodus extrahiertes Merkmal die geometrische Form des Objektes sein.
  • Der Lernmodus kann bei einer Wärmebildkamera oder in der Software zur Aufbereitung von aufgenommenen IR-Bildern bereits werkseitig durchgeführt worden sein, oder es kann auch dem Nutzer die Möglichkeit eingeräumt sein, in einem Lernmodus individuelle Anwendungsfälle zu bearbeiten.
  • Zur Anwendung der gelernten Regeln kann vorgesehen sein, dass in einem Anwendungsmodus zu wenigstens einem aus dem IR-Bild extrahierten Merkmal wenigstens eine objektbezogene Information in dem zugehörigen Punkt oder Bereich eines Merkmalsraums ausgelesen wird. Beispielsweise kann dies mit Hilfe einer Support Vector Machine eingerichtet sein. Von Vorteil ist dabei, dass nicht nur entschieden werden kann, welcher Objektklasse ein sogeben segmentiertes Objekt zugehört, sondern dass für das segmentierte Objekt die Einstellungen und Prozeduren, welche für die zugehörige Objektklasse angewendet werden sollen, automatisiert ausgewählt werden können.
  • Besonders günstig ist es dabei, wenn die Dimension des Merkmalsraums derart eingerichtet ist oder erweitert wird, dass die Objektklassen durch Hyperebenen voneinander trennbar sind.
  • Zur Lösung der Aufgabe ist bei einem Wärmebildkamera-Set der eingangs genannten Art vorgesehen, dass Bildverarbeitungsmittel zur Segmentierung wenigstens eines Objekts in einem mit der Wärmebildkamera aufgenommenen IR-Bild eingerichtet sind. Von Vorteil ist dabei, dass Objekte mittels Segmentierung ausgezeichnet werden können, für welche mit den Bildverarbeitungsmitteln ein individueller Bildanalyse- oder Bildbearbeitungsschritt ausführbar ist.
  • Bei einer Ausgestaltung der Erfindung kann vorgesehen sein, dass die Bildverarbeitungsmittel in einem an die Wärmebildkamera angeschlossenen oder anschließbaren PC ausgebildet und eingerichtet sind und im online-Modus oder (nach der Datenübertragung der IR-Bilder) im offline-Modus betätigt werden.
  • Eine besonders kompakte Ausgestaltung der Erfindung kann jedoch vorsehen, dass die Bildverarbeitungsmittel in die Wärmebildkamera integriert sind. Von Vorteil ist dabei, dass die Aufbereitung des aufgenommenen IR-Bildes bereits in der Wärmebildkamera erfolgen kann.
  • Es kann vorgesehen sein, dass eine Ausgabeeinheit ein berührempfindliches Display aufweist, welches zur Auswahl eines segmentierten und/oder segmentierbaren Objektes und/oder eines Bildpunktes eingerichtet ist. Von Vorteil ist dabei, dass der Nutzer auf einfache Weise direkt festlegen kann, welches Objekt segmentiert werden soll. Besonders günstig ist es dabei, wenn die Ausgabeeinheit an der Wärmebildkamera ausgebildet ist. Ein weiterer Vorteil ist, dass bei Auswahl eines Bildpunktes die Bildverarbeitungsmittel das zugehörige Objekt automatisch durch Segmentierung ermitteln können, indem automatisch, also rechnergestützt, diejenigen Punkte ermittelt werden, die inhaltlich mit dem ausgewählten Bildpunkt zusammenhängen. Durch die Möglichkeit der Auswahl eines segmentierten und/oder segmentierbaren Objektes aus mehreren Objekten kann der Nutzer in die Lage versetzt werden, zwischen zwei oder mehreren segmentierten Objekten im IR-Bild auszuwählen. Der vorgesehene Bildanalyse- oder Bildbearbeitungsschritt kann dann für das ausgewählte Objekt durchgeführt werden, während der Rest des IR-Bildes unbearbeitet bleibt oder mit einem anderen Bildanalyse- oder Bildbearbeitungsschritt aufbereitet wird.
  • Zur automatischen, inhaltsgerechten Auswahl des Bildanalyse- oder Bildbearbeitungsschrittes kann vorgesehen sein, dass in einer Speichereinheit ein Merkmalsraum eingerichtet ist, dessen Punkte und/oder Bereiche mit Einträgen für objektbezogene Informationen belegbar sind. Von Vorteil ist dabei, dass die objektbezogenen Informationen direkt zur Festlegung des objektbezogenen Bildanalyse- oder Bildbearbeitungsschrittes, beispielsweise zur Auswahl einer Farbpalette und/oder zur Festlegung eines Analyseprogramms, bereitgestellt und verwendbar sind. Vorzugsweise ist eine Speichereinheit in die Wärmebildkamera integriert.
  • Besonders günstig ist es, wenn bei dem erfindungsgemäßen Wärmebildkamera-Set Mittel zur Ausführung eines erfindungsgemäßen Verfahrens ausgebildet und eingerichtet sind. Dies kann beispielsweise durch geeignete Programmierung der Bildverarbeitungsmittel in einer Datenverarbeitungseinheit erreicht sein.
  • Die Erfindung wird nun anhand eines Ausführungsbeispiels näher beschrieben, ist aber nicht auf dieses Ausführungsbeispiel beschränkt. Weitere Ausführungsbeispiele ergeben sich durch Kombination einzelner oder mehrerer Merkmale der Schutzansprüche untereinander und/oder mit einzelnen oder mehreren Merkmalen des Ausführungsbeispiels.
  • Es zeigt:
    • 1: eine Wärmebildkamera eines erfindungsgemäßen Wärmebildkamera-Sets in einer Schrägansicht von vorn,
    • 2: die Wärmebildkamera gemäß 1 in einer Schrägansicht von hinten und
    • 3: eine Prinzipdarstellung zur Erläuterung des erfindungsgemäßen Verfahrens.
  • 1 und 2 zeigen in dreidimensionalen Schrägdarstellungen jeweils unterschiedliche Ansichten eines im Ganzen mit 1 bezeichneten erfindungsgemäßen Wärmebildkamera-Sets, welches eine Wärmebildkamera 2 umfasst.
  • Die Wärmebildkamera weist in an sich bekannter Weise eine IR-Optik 3 mit einem hinter der IR-Optik 3 im Inneren der Wärmebildkamera 2 angeordneten IR-Strahlungsdetektor 4 auf.
  • Die Wärmebildkamera 2 ist somit mit entsprechender Auswertelektronik zur Aufnahme von IR-Bildern 5 (vgl. 3) eingerichtet.
  • Im Inneren der Wärmebildkamera 2 ist in einer Datenverarbeitungseinheit ein Bildverarbeitungsmittel 6 ausgebildet und eingerichtet.
  • Das Bildverarbeitungsmittel 6 ist so durch Programmierung eingerichtet, dass Objekte in einem aufgenommenen IR-Bild 5 segmentiert werden können.
  • Zur Ausführung des erfindungsgemäßen Verfahrens wird daher zunächst mit der Wärmebildkamera 2 ein IR-Bild 5 aufgenommen, welches in 3 beispielhaft dargestellt ist.
  • Das IR-Bild 5 stellt eine Szene 6 mit mehreren Objekten 7, 8 in einer Falschfarbendarstellung dar, wobei zur Berechnung der Falschfarbenwerte eine Farb- und/oder Grauwertpalette 9 verwendet wurde.
  • Die dargestellten Objekte 7, 8 im IR-Bild 5 machen aufgrund der gewählten Farb- und/oder Grauwertpalette 9 im IR-Bild 5 eine Aufbereitung des Objekts 7 erforderlich, während die Objekte 8 beispielsweise keine weitere Nachbearbeitung erfordern oder für einen Weiterverarbeitung nicht relevant sind.
  • Daher wird in einem Segmentierungsschritt 10 das Objekt 7 automatisch segmentiert.
  • Dies geschieht dadurch, dass das IR-Bild 5 zunächst an einer Anzeigeeinheit 11 dargestellt wird und dass ein Nutzer einen Bildpunkt 12, den der Nutzer inhaltlich dem gewünschten Objekt 7 zuordnen kann, auswählt.
  • Die Auswahl kann beispielsweise dadurch erfolgen, dass die Anzeigeeinheit 11 (vgl. 2) als berührempfindliches Display ausgebildet ist, und der Nutzer den Bildpunkt 12 durch entsprechende Berührung der Anzeigeeinheit 11 an der entsprechenden Position auswählt.
  • Alternativ oder zusätzlich kann ein Cursor 13 mit Bedienelementen 14 (vgl. 2) auf die Position des Bildpunktes 12 verfahren werden, und es kann der unter dem Cursor 13 liegende Bildpunkt 12 ausgewählt werden.
  • Das Bildverarbeitungsmittel 6 in der Wärmebildkamera 2 segmentiert nun rechnergestützt das zu dem Bildpunkt 12 gehörende Objekt 7, indem es eine geschlossene Kontur 16 automatisch, also rechnergestützt ermittelt, welche das Objekt 7 im IR-Bild 5 umgibt.
  • Dies kann beispielsweise dadurch geschehen, dass Kanten 17 in dem IR-Bild 5 mit einer Kantendetektion gesucht werden, und dass die detektierten Kanten 17 zu geschlossenen Konturen 16 zusammengesetzt werden.
  • Das zu segmentierende Objekt 7 ergibt sich in diesem Fall aus derjenigen Kontur 16, in deren Innerem der zuvor ausgewählte Bildpunkt 12 liegt.
  • Für das segmentierte Objekt 7 wird nun wenigstens ein Bildanalyse- oder Bildbearbeitungsschritt 18 ausgeführt, während die weiteren Objekte 8, welche nicht zur Weiterverarbeitung bereitgestellt wurden, unverändert belassen oder sogar in der Darstellungsintensität reduziert werden.
  • Im dargestellten Ausführungsbeispiel gemäß 3 besteht der Bildanalyse- oder Bildbearbeitungsschritt 18 in der Auswahl einer geänderten Farb- und/oder Grauwertpalette 19, welche für das Objekt 7 geeigneter ist als die Farb- und/oder Grauwertpalette 9.
  • Für viele Anwendungen ist es nützlich, dass die nicht dem Bildanalyse- oder Bildbearbeitungsschritt 18 unterworfenen Teile des IR-Bildes, insbesondere die Objekte 8, gemeinsam mit dem aufbereiteten segmentierten Objekt 7 angezeigt oder ausgegeben werden.
  • Statt oder zusätzlich zu der Auswahl einer Farb- und/oder Grauwertpalette 19 kann für das Objekt 7 auch ein geänderter Emissionsgradwert und/oder ein geänderter Reflexionsgradwert angewendet werden, mit dem oder mit denen für das Objekt 7 sich ein geänderter Temperaturwert gegenüber dem Ausgangswert ergibt.
  • Es kann auch vorgesehen sein, dass für das Objekt 7 ein anderer Vergrößerungsfaktor und/oder ein anderer Helligkeitswert als für den nichtsegmentierten Bildanteil des IR-Bildes 5 angewendet wird.
  • Das so aufbereitete IR-Bild 5 wird anschließend erneut an der Anzeigeeinheit 11 ausgegeben.
  • In der Wärmebildkamera 2 (oder in weiteren Ausführungsbeispielen in einem angeschlossenen PC) befindet sich ferner eine Speichereinheit 20, in welcher ein Merkmalsraum eingerichtet ist, dessen Punkte und/oder Bereiche mit Einträgen für objektbezogene Informationen belegt sind.
  • Das Bildverarbeitungsmittel 6 extrahiert für das segmentierte Objekt 7 eine vorgegebene Anzahl und Art von Merkmalen und ermittelt, welche Objektklassen in einem festgelegten Merkmalsraum zu dem Satz von extrahierten Merkmalen gehört.
  • Anschließend wird die zu der Objektklasse hinterlegte objektbezogene Information, beispielsweise eine objektspezifische Farb- und/oder Grauwertpalette, ein Vergrößerungsfaktor, ein Helligkeits- oder Transparenzwert oder ein auszuführendes Analyseprogramm, automatisch aus einer Zuordnungstabelle ausgelesen, und das Bildverarbeitungsmittel wendet diese Information in einem Bildanalyse- oder Bildbearbeitungsschritt 18 automatisch auf das segmentierte Objekt 7 an.
  • Wird die Wärmebildkamera 2 zur Aufnahme neuerer Bilder bewegt, so wandert das Objekt 7 über das IR-Bild 5.
  • Das Bildverarbeitungsmittel 6 erkennt diese Bewegung und führt den Cursor 13 so nach, dass dessen Relativposition in Bezug auf das jeweils dargestellte Objekt 7 immer einen festen Wert einnimmt.
  • Somit kann beispielsweise an der Bildposition 12 des Cursors 13 die Temperatur des segmentierten Objekts 7 über mehrere IR-Bilder 5 einer Video-Sequenz verfolgt werden, auch wenn sich das Objekt 7 zwischen den einzelnen IR-Bildern 5 bewegt oder verändert
  • Bei dem Wärmebildkamera-Set 1, welches wenigstens eine Wärmebildkamera 2 und ein Bildverarbeitungsmittel 6 umfasst, ist ein Verfahren zur Bildanalyse- und/oder Bildbearbeitung eines mit der Wärmebildkamera 2 aufgenommenen IR-Bildes 5 eingerichtet, bei welchem ein angewähltes Objekt 7 in dem IR-Bild 5 automatisch rechnergestützt segmentiert und einem objektbezogenen Bildanalyse- oder Bildbearbeitungsschritt 18 unterworfen wird.

Claims (10)

  1. Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes (5) wobei in dem IR-Bild (5) mittels Segmentierung (10) wenigstens ein Objekt (7, 8) ausgezeichnet und zur Weiterverarbeitung bereitgestellt wird und für das segmentierte Objekt (7) wenigstens ein weiterer Bildanalyse- oder Bildbearbeitungsschritt (18) ausgeführt wird, dadurch gekennzeichnet, - dass in einem Lernmodus für das segmentierte Objekt (7) wenigstens ein Merkmal extrahiert und in dem Lernmodus in einem Merkmalsraum wenigstens eine objektbezogene Information zu dem segmentierten Objekt (7) hinterlegt wird, wobei objektbezogene Informationen einzelnen Objektklassen zugeordnet werden, sodass für die segmentierten Objekte, welche in die jeweiligen Objektklassen fallen, bestimmte Einstellungen für die Bildaufbereitung automatisch vorgenommen werden, - und dass in einem Anwendungsmodus zu wenigstens einem aus dem IR-Bild (5) extrahierten Merkmal wenigstens eine objektbezogene Information in dem zugehörigen Punkt oder Bereich des Merkmalsraumes ausgelesen und zur Einstellung für die Bildaufbereitung automatisiert ausgewählt wird.
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Segmentierung (10) die Auswahl wenigstens eines Bildpunktes (12) in dem IR-Bild (5) umfasst.
  3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Segmentierung (10) automatisiert durchgeführt wird und/oder dass wenigstens zwei segmentierbare Objekte (7, 8) in dem IR-Bild (5) zur Auswahl bereitgestellt werden.
  4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass die Segmentierung (10) wenigstens eine Merkmalsdetektion, insbesondere wenigstens eine Kanten- und/oder Eckendetektion, umfasst und/oder dass die Segmentierung (10) wenigstens eine Detektion geschlossener Linien oder Konturen (16), insbesondere nach der Polar-Log-Methode, umfasst.
  5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass das IR-Bild (5) mit einer Wärmebildkamera (2) aufgenommen wird und/oder dass das segmentierte Objekt (7) über eine Ausgabeeinheit ausgegeben, insbesondere an einer Anzeigeeinheit (11) angezeigt, wird.
  6. Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass der Bildanalyse- oder Bildbearbeitungsschritt (18) ein Mitführen eines Cursors (13) umfasst und/oder dass der Bildanalyse- oder Bildbearbeitungsschritt (18) eine Berechnung einer exakten Temperatur an wenigstens einer auf das segmentierte Objekt (7) bezogenen Relativposition umfasst.
  7. Verfahren nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass der Bildanalyse- oder Bildbearbeitungsschritt (18) eine Auswahl einer Farb- und/oder Grauwertpalette (9, 19) einer Falschfarbendarstellung umfasst und/oder dass der Bildanalyse- oder Bildbearbeitungsschritt (18) eine Eingabe oder Auswahl von wenigstens einem Emissions- und/oder Reflexionsgradwert umfasst.
  8. Wärmebildkamera-Set (1), mit einer Wärmebildkamera (2) und Bildverarbeitungsmitteln (6), dadurch gekennzeichnet, dass die Bildverarbeitungsmittel (6) zur Segmentierung (10) wenigstens eines Objekts (7) in einem mit der Wärmebildkamera (2) aufgenommenen IR-Bild (5) eingerichtet sind und dass Mittel zur Ausführung des Verfahrens nach einem der Ansprüche 1 bis 7 ausgebildet sind.
  9. Wärmebildkamera-Set (1) nach Anspruch 8, dadurch gekennzeichnet, dass die Bildverarbeitungsmittel (6) in die Wärmebildkamera (2) integriert sind und/oder dass eine Ausgabeeinheit (11) ein berührempfindliches Display aufweist, welches zur Auswahl eines segmentierten und/oder segmentierbaren Objektes (7) und/oder eines Bildpunktes (12) eingerichtet ist.
  10. Wärmebildkamera-Set (1) nach Anspruch 8 oder 9, dadurch gekennzeichnet, dass in einer vorzugsweise in die Wärmebildkamera (2) integrierten Speichereinheit (20) ein Merkmalsraum eingerichtet ist, dessen Punkte und/oder Bereiche mit Einträgen für objektbezogene Informationen belegbar sind.
DE102011106814.0A 2011-07-07 2011-07-07 Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set Active DE102011106814B4 (de)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE102011106814.0A DE102011106814B4 (de) 2011-07-07 2011-07-07 Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102011106814.0A DE102011106814B4 (de) 2011-07-07 2011-07-07 Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set

Publications (2)

Publication Number Publication Date
DE102011106814A1 DE102011106814A1 (de) 2013-01-10
DE102011106814B4 true DE102011106814B4 (de) 2024-03-21

Family

ID=47426590

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102011106814.0A Active DE102011106814B4 (de) 2011-07-07 2011-07-07 Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set

Country Status (1)

Country Link
DE (1) DE102011106814B4 (de)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019134439A1 (de) * 2019-10-30 2021-05-06 Elpro Gmbh Verfahren zur automatisierten Darstellung von Messwerten
EP4645845A1 (de) * 2024-04-29 2025-11-05 Testo SE & Co. KGaA Verfahren zur darstellung eines wärmebilds

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060098870A1 (en) 2004-11-08 2006-05-11 Huseyin Tek Region competition via local watershed operators
US20070223815A1 (en) 2004-09-02 2007-09-27 Koninklijke Philips Electronics N.V. Feature Weighted Medical Object Contouring Using Distance Coordinates
US20080123956A1 (en) 2006-11-28 2008-05-29 Honeywell International Inc. Active environment scanning method and device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070223815A1 (en) 2004-09-02 2007-09-27 Koninklijke Philips Electronics N.V. Feature Weighted Medical Object Contouring Using Distance Coordinates
US20060098870A1 (en) 2004-11-08 2006-05-11 Huseyin Tek Region competition via local watershed operators
US20080123956A1 (en) 2006-11-28 2008-05-29 Honeywell International Inc. Active environment scanning method and device

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Haasdonk B.: Digitale Bildverarbeitung, Einheit 11, Klassifikation. Albert-Ludwigs-Universität Freiburg, 2005. URL: https://lmb.informatik.uni-freiburg.de/people/haasdonk/DBV_FHO/ DBV_FHO_2005_E11.pdf
Lehmann, T. [et al.]: Bildverarbeitung für die Medizin. Berlin: Springer, 1997. Seiten 141-147, 354-358

Also Published As

Publication number Publication date
DE102011106814A1 (de) 2013-01-10

Similar Documents

Publication Publication Date Title
DE102020214863A1 (de) Selbstüberwachtes verfahren und system zur tiefenschätzung
DE102010048022B4 (de) Verfahren zur berührungslosen Bestimmung der Temperatur eines Objekts und korrespondierende Wärmebildkamera
DE60307583T2 (de) Auswertung der Schärfe eines Bildes der Iris eines Auges
DE112010004767B4 (de) Punktwolkedaten-Verarbeitungsvorrichtung, Punktwolkedaten-Verarbeitungsverfahren und Punktwolkedaten-Verarbeitungsprogramm
DE102009050474B4 (de) Bildgebende Inspektionsvorrichtung
DE102013217354B4 (de) Kantenmessungs-videowerkzeug und schnittstelle mit automatischen parametersatzalternativen
DE112019004112T5 (de) System und verfahren zur analyse mikroskopischer bilddaten und zur erzeugung eines annotierten datensatzes zum training der klassifikatoren
DE102016123149A1 (de) Bilddatenbasierte rekonstruktion dreidimensionaler oberflächen
Aguero Review of the Current Technologies and Applications of Digital Image Processing
WO2017153354A1 (de) Verfahren und vorrichtung zum bewerten von blickabbildungen
DE3921257A1 (de) Verfahren und vorrichtung zur digitalen analyse von auf stratigraphische daten bezogenen abbildungen
Hidalgo-Gavira et al. Variational Bayesian blind color deconvolution of histopathological images
EP3931798B1 (de) Schätzung der bewegung einer bildposition
DE102011106814B4 (de) Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes und Wärmebildkamera-Set
DE102013217347A1 (de) Benutzeroberfläche zur parametereinstellung für kantenmessungs- videowerkzeuge
EP3663981A1 (de) Verfahren zur erfassung von fingerabdrücken
EP3663976A1 (de) Verfahren zur erfassung von fingerabdrücken
DE102010028382A1 (de) Verfahren und Computersystem zur Bearbeitung tomographischer Bilddaten aus einer Röntgen-CT-Untersuchung eines Untersuchungsobjektes
DE102014014737A1 (de) Verfahren sowie Wärmebildaufnahmevorrichtung zur Erzeugung radiometrischer Bilder mit in Teilbereichen erhöhter Auflösung
DE112021004035T5 (de) Systeme und verfahren zur erleichterung einer auswahl von werkzeugen für bildverarbeitungsaufträge
CN113888395A (zh) 一种融合红外测温图像的电力设备三维可视化方法及装置
DE102023122978A1 (de) Kamera-zu-kamera-transformation unter anwendung eines abgleichs mehrerer bereiche und einer bündeleinstellung
EP1869620B1 (de) Verfahren zur verarbeitung von bild- und volumendaten auf basis statistischer modelle
DE102012003256A1 (de) Auswerteverfahren für ein ortsauflösendes Messergebnis und Auswerteeinrichtung
DE102011106810B4 (de) Wärmebildkamera und Verfahren zur Bildanalyse und/oder Bildbearbeitung eines IR-Bildes mit einer Wärmebildkamera

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R082 Change of representative

Representative=s name: MAUCHER JENKINS PATENTANWAELTE & RECHTSANWAELT, DE

R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: G06K0009620000

Ipc: G06V0030190000

R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: G06V0030190000

Ipc: G06V0010260000

R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final