Graduation papers

In der Mensch-Roboter Kollaboration sowie bei Anwendungen mit unbemannten Fluggeräten (engl. Unmanned Aerial Vehicle, UAV) hat hierbei die Posenschätzung sowie Kalibrierung eine wichtige Schlüsselrolle. UAVs finden in verschiedenen Anwendungsbereichen wie Luftbildfotografie, Kartierung und Vermessung Verwendung. Das Landen in anspruchsvollen Umgebungen wie auf einem sich bewegenden Objekt bei Nacht oder in unwbwnwm Boden stellt jedoch aufgrund von schlechten Lichtverhältnissen und hoher Bewegung eine Herausforderung dar. Die Kamerakalibrierung ermöglicht es dem UAV, seine Position und Entfernung genau zu schätzen und somit eine sichere und präzise Landung durch Echtzeit-Anpassung des Flugwegs zu gewährleisten. Hierfür werden beispielsweise Marker wie ArUco-Marker verwendet. Bei Verwendung der traditionellen OpenCV-Methode gestaltet sich die Markererkennung unter den genannten Umweltbedingungen schwierig, was zu einer ungenauen Schätzung der Kamerakalibrierungsparameter und der Position führt. Diese Masterarbeit beschreibt die Implementierung des DeepChArUco Frameworks (nicht frei verfügbar) nach der Veröffentlichung [HDC+18]. Dieses Framework umfasst zwei Deep Convolutional Neural Networks (ChArUcoNet und RefineNet). Für das Training des Modells werden zwei Datensatze verwendet: ein realer Datensatz des Fachgebiets Qualitätssicherung und Industrielle Bildverarbeitung (TU Ilmenau) für ChArUcoNet und eigene synthetisch generierte Daten für das RefineNet. Es werden verschiedene Datenaugmentierungstechniken angewendet, um die schwierigen Bedingungen im Datensatz widerzuspiegeln. Es werden vier verschiedene Testfallstrategien entwickelt, um die Markererkennungsleistung auf dem Testdatensatz zu bewerten: (1) traditionelle Methode, (2) ChArUcoNet ohne Verfeinerung, (3) ChArUcoNet mit traditioneller Verfeinerung und (4) ChArUcoNet mit RefineNet. Die Testergebnisse zeigen, dass die traditionelle Methode unter extremen Bedingungen schlechte Leistung erbringt und nur 54 % der ChArUco-Marker erkennt, was zu einer ungenauen Kalibrierungsparameterschätzung führt. Die trainierten Modelle verbessern die Markererkennung jedoch signifikant auf 92 %, was zu verbesserter Schätzung der Kalibrierungsparameter und präziser ChArUco-Positionsbestimmung unter komplexen Bedingungen führt. Eine Einschränkung der Implementierung besteht darin, dass in einigen Bildern identische IDs zweimal erkannt werden, was zu fehlerhafter Klassifizierung der IDs führt. In dieser Arbeit werden zukünftige Arbeiten beschrieben, um die Gesamtleistung der eigen umgesetzten DeepChArUco Methode zu verbessern. Im Rahmen dieser Arbeit entstand eine frei verfügbare Umsetzung des DeepChArUco-Frameworks (GitLab).

In den letzten Jahren leiden immer mehr Mensch unter den Symptomen von Schlafstörungen. Diese Symptome können durch die Überwachung der Vitalparameter diagnostiziert werden. Herkömmliche Überwachungsmethoden wie die Polysomnographie (PSG) sind kompliziert in der Anwendung und beeinträchtigen die Qualität des Schlafs des Patienten. Ein multimodales und multispektrales Sensorsystem ermöglicht die Fernschätzung der Vitalparameter des menschlichen Körpers direkt aus dem Video, das von der Kopfposition, -orientierung und -bewegung abhängig ist. Um sicherzustellen, dass die Vitaldaten effektiv extrahiert werden können, muss daher in der Phase der Datenvorverarbeitung die Auswertbarkeit der erfassten Videodaten bestimmt werden. In der vorangegangenen Arbeit wurde das oben genannte Sensorsystem zur Langzeitüberwachung der Vitalparameter von Patienten mit Schlafapnoe im Schlaflabor des Universitätsklinikums Essen eingesetzt. Nach dem Stand der Technik gibt es keinen Anwendungsfall für die Reinigung von Gesichtsvideos zur Extraktion von Vitaldaten im medizinischen Umfeld. In dieser Arbeit wird eine stabile und effektive Methode auf der Grundlage von maschinellem Lernen und Techniken zur Gesichtsdetektion für die Bereinigung von Gesichtsvideodaten in diesem speziellen Szenario vorgeschlagen. Zunächst wird für jedes aufgenommene Bild das Gesicht detektiert und mit 478 Landmarken auf der Grundlage des Mediapipe Solution Face Mesh dargestellt. Diese Landmarken werden weiter definiert und als Gesichtsmerkmale ausgewählt. Mit den definierten und ausgewählten Gesichtsmerkmalen kann die Datenauswertbarkeit durch die Einstellung der Schwellenwerte bestimmt werden. In dieser Arbeit wurde maschinelles Lernen integriert, um die traditionelle Schwellenwertmethode für diese binäre Klassifizierung zu ersetzen. Darüber hinaus werden auch Arm- und Handdetektion berücksichtigt, um die Bilder mit typischen Verdeckungen des Gesichts zu bereinigen. Um die Leistung der vorgeschlagenen Methode zu bewerten, wurden 128-stündige Videos von 16 Patienten während des Schlafs mit 15,2-Hz-Bildern aufgenommen. Obwohl die Qualität der Grundwahrheit aufgrund der menschlichen Subjektivität variieren kann, was sich negativ auf das Modelltraining auswirkt, kann die vorgeschlagene Methode bei der Leave-One-Out-Validierung immer noch eine Genauigkeit von über 90 % erreichen.

Die Sonneneinstrahlung hat große gesundheitliche Vorteile wie eine bessere Schlafunterstützung, eine hebende Stimmung, eine Verbesserung des psychischen Gesundheitszustands, einen niedrigeren Blutdruck, eine Steigerung der Energie, eine Krebsprävention und eine allgemeine Verlängerung der Lebenserwartung. Es bewirkt die Produktion von Vitamin D in unserem Körper, das die Aufnahme von Kalzium zum Schutz vor Osteoporose und zur Stärkung der Knochen unterstützt. Auf der anderen Seite führt eine längere ungeschützte Sonneneinstrahlung zu einer Absorption von ultravioletter Strahlung, die Sonnenbrand verursacht und in akuten Fällen zu Hautkrebs führt. Die Anwendung von Sonnencreme schützt die menschliche Haut, indem sie schädliche ultraviolette Strahlung entweder absorbiert oder reflektiert. Das richtige Auftragen von Sonnencreme ist ebenfalls sehr wichtig, da jeder kleine exponierte Hautbereich, der beim Auftragen von Sonnencreme übersprungen wurde, zu den gleichen Folgen von Sonnenbrand und Hautkrebs führen kann. In den meisten Fällen ist es fast unmöglich, diese Hautareale mit bloßem Auge zu erkennen. Daher ist es entscheidend, ein System zu entwickeln, das die Bereiche der menschlichen Haut mit und ohne Sonnencreme genau erkennen kann. Darüber hinaus muss das System in einer natürlichen Umgebung wie einem Strand arbeiten, wo das System auf einen unterschiedlich komplexen Hintergrund stoßen kann, so dass es auch wirklich wichtig ist, den Hintergrund effektiv von Haut und Sonnencreme zu trennen. Die Bedeutung dieser Forschung besteht darin, die Anwendung von Deep-Learning-Methoden zur Bildsegmentierung im Bereich der multispektralen Bildgebung besser zu verstehen. Das Hauptziel der Forschung ist die Entwicklung eines Proof-of-Concept-Sonnencreme- und Haut Segmentierung Systems aus multispektralen Daten ohne die Informationen der Hintergrund Klasse. Ein Unterbereich der Bildklassifizierung, nämlich die Ein-Klassen-Klassifizierung (OCC), wurde übernommen, um einen Teil der Bilder in Ziel- und Nicht-Zielklassen zu klassifizieren. Im Wesentlichen gäbe es zwei OCC-Klassifikatoren, einen für Haut und den anderen für Sonnencreme, und jeder Teil von Bildern, der von beiden Klassifikatoren zurückgewiesen würde, würde automatisch als Hintergrund klassifiziert. Mehrere überwachte und nicht überwachte Methoden wurden angewendet, um optimale Ergebnisse zu erzielen, und daraus wurden zugrunde liegende Erkenntnisse gezogen. Schließlich wurde eine Merkmalsanalyse Studie durchgeführt, um das Versagen von OCC-Methoden bei diesem speziellen Problem der Sonnencreme Erkennen zu verstehen.

In der industriellen Qualität spielt die Analyse und Klassifizierung von Schüttgütern eine wichtige Rolle sowohl in der Lebensmittelindustrie als auch im Bauwesen und Recycling. Zum Beispiel ist die automatisierte Analyse von Gesteinen für die Verwendung als Zuschlagstoffe im Beton unerlässlich, um zukünftige Zerstörungen durch reaktive Gesteine in Form von Alkali-Silica-Reaktion zu verhindern. Diese Arbeit zielt darauf ab, durch einen Algorithmus die Masse jedes Gesteinstyps, der als Zuschlagstoffe verwendet wird, zu schätzen, um ihre Qualität im Beton zu kontrollieren, indem mehrere Proben untersucht werden. Dazu werden Daten verwendet, die mit einem 3D-Laserlinienscanner und einer Präzisionswaage erfasst wurden, um die geschätzten Massenergebnisse jedes Gesteinstyps mit ihrer tatsächlichen Masse zu vergleichen.

Im Rahmen dieser Masterarbeit wird in Zusammenarbeit mit dem Unternehmen Steinbeis Qualitätssicherung und Bildverarbeitung GmbH ein Konzept für einen Mikrotiterplatten-Reader mit Digitalkamera entwickelt. Mikrotiterplatten-Reader sind in der Medizintechnik eingesetzte Laborgeräte, welche die Auswertung verschiedenster medizinischer Nachweisreaktionen mittels Bildverarbeitung ermöglichen. Die Konzeptentwicklung beinhaltet theoretische und experimentelle Untersuchungen, auf deren Grundlage das Bildverarbeitungssystem entworfen wird. Es werden sich grundlegend unterscheidende Anordnungskonzepte mit einer und mehreren Kameras sowie verschiedenen Beleuchtungssystemen untersucht. Dabei wird festgestellt, dass der Einsatz von Low-Cost-Bildverarbeitungskomponenten ein vielversprechender Ansatz für die Neuentwicklung eines Lesegeräts für Mikrotiterplatten ist. Weiterhin wird geprüft, ob die Verwendung eines Multi-Kamera-Systems zweckmäßig ist. Die Arbeit zeigt, dass der Einsatz mehrerer in einer Reihe angeordneter Kameras funktionserfüllend ist, zugleich aber kaum Vorteile gegenüber einer Einzelkameraanwendung hat. Im Rahmen dieser Masterarbeit wird schließlich ein aus einer Kamera bestehendes Low-Cost-Bildverarbeitungssystem mit Auf- und Durchlicht ausgewählt. Weiterhin beinhaltet die Konzeptentwicklung die Auslegung des 3-Achs-Positioniersystems. Dazu werden Lösungsprinzipe zur Umsetzung der Relativbewegung zwischen der Mikrotiterplatte und der Kamera erarbeitet und bewertet. Nach der Auswahl eines Positioniersystems werden die mechanischen und elektronischen Komponenten dimensioniert. Schlussendlich stehen ein CAD-Modell und ein Schaltplan zur Verfügung. Die Ergebnisse dieser Arbeit bilden die Grundlage zur Entwicklung eines funktionsfähigen Prototyps. Dieser wird ein erster Schritt hin zur Entwicklung eines serienreifen Mikrotiterplatten-Readers sein.