Unsere Lösungen und Entwicklungen
D'Elite VisionGuard
Innovative Produkte und Technologien für Investoren und Partner
Wahrnehmung als erster Schritt zum Handeln
D'Elite VisionGuard ist ein Softwaremodul für Computer Vision, das Zielobjekte erkennt, ihre Position schätzt und das Ergebnis an eine externe Anwendung oder Roboterplattform überträgt.
Der Kern arbeitet bereits an der lokalen Bildverarbeitung: austauschbare Erkennungsmodelle, Live-Stereomodus bei zwei Kameras, Rückfall auf Mono bei Sensorverschlechterung und Vorkehrungen für Nachtsicht-/Wärmebildquellen.
Ein Modul – verschiedene Praxisszenarien
Erkennung von Vögeln in der Nähe von Anbauflächen und Einsatz ausgewählter gewaltfreier Abwehrmittel.
Koordinaten und Ereignisse werden an den Roboter übermittelt, um einen Bereich zu überprüfen, einem Hindernis auszuweichen oder die Mission fortzusetzen.
Möglichkeit zum Anschluss einer Nachtsichtkamera, einer Wärmebildkamera und eines Infrarot-Triggers für Situationen mit schlechten Lichtverhältnissen.
Wie erfolgt die Verarbeitung?
- Die Kameras übertragen Bilder mit Zeitstempeln.
- Das Modell findet Objekte der ausgewählten Klasse und wählt das Zielobjekt aus.
- Ein Stereobildpaar schätzt die Koordinaten; bei Verwendung einer einzelnen Kamera wird ein explizit gekennzeichnetes Mono-Ergebnis zurückgegeben.
- Die Ergebnisse und der Status der Sensoren stehen dem Bediener bzw. dem autonomen Schaltkreis zur Verfügung.
Was sich bereits in einem realen Lauf bewährt hat
Das technische Risiko für den Wahrnehmungskern wurde auf dem Prüfstand beseitigt: Nach Mono-Tests wurde ein Live-Stereo-Prototyp mit zwei Kameras getestet. Der Stereomodus war stabil, die Entfernungsschätzung stimmte im Betriebsbereich mit der Kontrollmessung überein, Zielerkennung und sicheres Abschalten bei Videoausfall wurden bestätigt.
Der Kern der Stereowahrnehmung wurde bereits auf Hardwarebasis erprobt: Detektion, Triangulation und Fallback funktionieren. Phase 1 ist abgeschlossen; nun arbeiten wir an den Zielmodellen und der Sensorschaltung, gefolgt von einem Pilotprojekt mit Kalibrierung für eine spezifische Konfiguration auf Kundengeräten.
Wird das Objekt vom unteren Bildrand abgeschnitten, schaltet der Stereoanker auf den Kopf (Auto/Top) um, und Mono passt die scheinbare Höhe an – weniger Z-Fehler bei der Annäherung des Roboters.
Sensoren verbessern verschiedene Teile des Systems.
Ein Kamerapaar wurde bereits im Live-Betrieb getestet: Synchronisation, Abgleich und Triangulation der Koordinaten in einem gemeinsamen System.
Zusätzliche Bilder können die Beobachtung in der Dämmerung und bei Dunkelheit verbessern.
Dient als Anwesenheits- oder Bewegungsauslöser und hilft, eine unnötige vollständige Analyse zu vermeiden.
Man kann die Entfernung zum Objekt festlegen, auf das der Strahl gerichtet ist.
Die Sensorlogik wird im Softwarekern unterstützt. Hardwareadapter und Feldtests zusätzlicher Sensoren werden separat durchgeführt.
Verbindung mit der Autonomieschicht
VisionGuard meldet, was das System sieht. Die Autonomieschicht entscheidet, wie die Mission ausgeführt wird.
Die beabsichtigte Verbindung: Zielkoordinaten und Sensorstatus werden an die Roboterschaltung übermittelt, die den Missionsschritt einleitet, Ereignisse aufzeichnet und eine Fehlerkorrekturstrategie implementiert.
Die ROS-2-Bridge und das Simulationsframework der Autonomieschicht sind voneinander getrennt. Die Integration mit VisionGuard und der Physikplattform ist noch nicht abgeschlossen.
Implementierungsphasen
Abgeschlossen: Mono- und Stereo-Prototyp an Live-Kameras, stabiler Modus = Stereo, konsistente Entfernungsschätzung im Arbeitsbereich, Zielauswahl und sicherer Leerlauf.
Konfiguration austauschbarer Modelle für spezifische Objektklassen, Bewertung der Erkennungsqualität und Anschluss zusätzlicher Sensoren je nach Szenario.
Koordinaten und Ereignisse werden an die Autonomieschicht übertragen, und die Mission wird in einer Simulation und auf der Plattform des Kunden verifiziert. Die stereoskopische Kalibrierung des Kamerapaares erfolgt an einem speziellen Gerät innerhalb der Anlage, das auf die Kamerageometrie und die Standortkonfiguration abgestimmt ist.
Überprüfen Sie Genauigkeit und Robustheit in der Zielumgebung und bereiten Sie eine wiederholbare Implementierung für neue Standorte und Gerätetypen vor.
Phase 1 ist abgeschlossen – die Zielmodelle befinden sich in der Entwicklung.
Phase 1 ist abgeschlossen: Der Stereo-Prototyp wurde getestet und hat die geforderte Leistung erbracht. Phase 2 läuft derzeit – Zielerkennungsmodelle und Erweiterung der Sensorschaltung. Die Kalibrierung des Stereopaars für das kundenspezifische Gerät ist Bestandteil von Phase 3 (Integrationspilotprojekt).
Wir laden interessierte Investoren und Kunden ein, Computer-Vision-Anwendungen in Robotik und andere Geräte zu integrieren.
Integration diskutieren