Naše řešení a vývoj

D'Elite VisionGuard

Inovativní produkty a technologie pro investory a partnery

Konceptuální vizualizace

Vnímání jako první krok k akci

D'Elite VisionGuard je softwarový modul počítačového vidění pro detekci cílových objektů, odhad jejich polohy a přenos výsledku do externí aplikace nebo robotické platformy.

Jádro již pracuje na lokálním zpracování snímků: vyměnitelné modely detekce, živý stereo režim na dvojici kamer, návrat k mono v případě degradace senzoru a opatření pro NV/tepelné zdroje.

1

Jeden modul – různé praktické scénáře

Konceptuální ilustrace scénářů VisionGuard: dohled nad terénem, detekce objektů ve skladu a noční perimetrická inspekce robotem
Konceptuální vizualizace scénářů. Obrázky nejsou záběry z testů VisionGuard.
Zemědělský sektor
Detekce ptáků v blízkosti plodin a rozmístění vybraných nenásilných repelentů.
Mobilní robotika
Přenos souřadnic a událostí robotovi za účelem kontroly oblasti, vyhýbání se překážce nebo pokračování v misi.
Noční monitorování
Možnost připojení NV kamery, termokamery a IR spouště pro scénáře se slabým osvětlením.
2

Jak probíhá zpracování?

  1. Kamery přenášejí snímky s časovými údaji.
  2. Model vyhledá objekty vybrané třídy a vybere cílový objekt.
  3. Stereopár odhaduje souřadnice; v případě jedné kamery je vrácen explicitně označený mono výsledek.
  4. Výsledky a stav senzorů jsou k dispozici operátorovi nebo autonomnímu obvodu.
Validace prototypu

Co se již osvědčilo v reálném provozu

Technické riziko pro vnímací jádro bylo eliminováno na zkušební stolici: po mono kontrolách byl na dvojici kamer otestován prototyp živého stereo režimu. Stereo režim byl stabilní, odhad vzdálenosti byl v souladu s kontrolním měřením v provozní oblasti, byla potvrzena selekce cíle a bezpečné selhání při ztrátě videa.

Prototyp stereo systému byl testován a dosáhl požadovaných vlastností.

Dvě kamery, pevná stereo základna, živý záznam a detekce YOLO: mode=stereo s depth_source=stereo, odhad hloubky je konzistentní se skutečnou polohou objektu v typické pracovní vzdálenosti. V případě selhání shody je řízený přechod na mono.

Stereo režim ~99% Podíl snímků v režimu stereo v úspěšném běhu je stabilní stereo geometrie, nikoli občasné shody okolností.
Vzdálenost Souhlasím Odhad hloubky pro živý pár se shoduje s kontrolním měřením v provozním dosahu; stabilní přesnost dosahu v cílovém scénáři byla dříve potvrzena na monoklonálním detektoru.
Tolerance chyb Bezpečný klidový stav Ztráta kamery → nouzový režim; žádný cíl v záběru → pracovní režim bez falešného volnoběhu; po obnovení toku obvod pokračuje v práci.
Pro investora

Základní princip stereo vnímání již byl ověřen na hardwaru: detekce, triangulace a záložní technologie fungují. Fáze 1 je uzavřena; nyní pracujeme na cílových modelech a senzorovém obvodu, po kterém bude následovat pilotní projekt na zákaznickém zařízení s kalibrací pro konkrétní nastavení.

Blízký dosah

Pokud je objekt oříznut spodní částí rámečku, stereo kotva se přepne na hlavu (auto/nahoru) a mono upraví zdánlivou výšku – méně chyb z při přiblížení robota.

3

Senzory vylepšují různé části systému

Stereo RGB
Dvojice kamer již byla otestována naživo: synchronizace, párování a triangulace souřadnic ve společném systému.
NV a termokamera
Další snímky mohou zlepšit pozorování za soumraku a ve tmě.
IR senzor
Slouží jako spouštěč přítomnosti nebo pohybu a pomáhá vyhnout se zbytečnému spuštění úplné analýzy.
Laserový dálkoměr
Může specifikovat vzdálenost k objektu, na který je paprsek zaměřen.

Podpora logiky senzorů je zajištěna v softwarovém jádru. Hardwarové adaptéry a testování dalších senzorů v terénu se provádí samostatně.

4

Propojení s vrstvou autonomie

VisionGuard hlásí, co systém vidí. Vrstva autonomie rozhoduje o tom, jak misi provést.

Zamýšlené připojení: souřadnice cíle a stav senzorů jsou předávány do robotického obvodu, který zahájí krok mise, zaznamenává události a implementuje politiku obnovy po selhání.

Můstek ROS 2 a simulační rámec Autonomy Layer jsou oddělené. Integrace s VisionGuard a fyzikální platformou ještě není dokončena.

Zobrazit vrstvu autonomie
5

Fáze implementace

Fáze 1Prototyp a základní validaceDokončeno

Dokončeno: mono a stereo prototyp na živých kamerách, stabilní režim = stereo, konzistentní odhad vzdálenosti v pracovní vzdálenosti, výběr cíle a bezpečný klidový režim.

Fáze 2Cílové modely a senzorický obvodProud

Konfigurace zaměnitelných modelů pro specifické třídy objektů, posouzení kvality detekce a připojení dalších senzorů dle scénáře.

Fáze 3Pilotní integracePlán

Souřadnice a události jsou přenášeny do vrstvy Autonomy Layer a mise je ověřena v simulaci a na platformě zákazníka. Stereoskopická kalibrace dvojice se provádí na specifickém zařízení v rámci instalace, přizpůsobeném geometrii kamery a nastavení lokality.

Fáze 4Testování v terénu a škálováníPlán

Ověřte přesnost a robustnost v cílovém prostředí, připravte opakovatelnou implementaci pro nová pracoviště a typy zařízení.

Aktuální fáze

Fáze 1 je uzavřena – cílové modely se vyvíjejí

Fáze 2

Fáze 1 je dokončena: prototyp stereo systému byl otestován a dosáhl požadovaného výkonu. Fáze 2 aktuálně probíhá – modely pro detekci cílů a rozšíření obvodů senzorů. Kalibrace stereo páru pro specifické zařízení zákazníka je součástí fáze 3 (pilotní integrace).

Zveme zájemce a zákazníky k integraci aplikací počítačového vidění do robotiky a dalších zařízení.

Diskutujte o integraci