Läuft die Objekterkennung auf der in die Kamera integrierten KI oder auf der Entwicklungsplattform (PC, eingebettete Linux-Geräte usw.)?

ZED-Kameras verfügen über keinen integrierten KI-Prozessor: Die Objekterkennung läuft wie alle anderen Funktionen des ZED SDK auf dem Hostgerät (einem PC mit einer NVIDIA®-GPU, einem NVIDIA®-Jetson™-Modul oder einer ZED Box). Die Kamera streamt synchronisierte Bilder von links und rechts, und das ZED SDK verarbeitet sie auf der Host-GPU mithilfe von CUDA und TensorRT.

Das Objekterkennungsmodul des ZED SDK kombiniert KI-Erkennung mit Tiefeninformationen, um Objekte in 3D zu lokalisieren und zu verfolgen:

• Multiklassenerkennung: Integrierte Modelle erkennen mehrere Objektklassen (zum Beispiel Personen, Fahrzeuge, Taschen, Tiere, Elektronik, Obst und Gemüse sowie Sportausrüstung) mit 3D-Position, 3D-Begrenzungsrahmen, Geschwindigkeit und Tracking-ID.
• Benutzerdefinierte Erkennung: Sie können Ihren eigenen Detektor (zum Beispiel ein YOLO-ähnliches ONNX-Modell) ausführen und das ZED SDK die 3D-Position und Verfolgung der erkannten Objekte berechnen lassen.
• Körperspurenverfolgung: 3D-Skeletterkennung und Verfolgung von Personen.

Diese Funktionen sind mit allen ZED-Stereokameras (ZED 2i, ZED Mini, ZED X, ZED X Mini, ZED X Nano) sowie mit einer dualen virtuellen ZED X One-Stereokamera verfügbar. Eine NVIDIA®-GPU mit CUDA-Unterstützung ist erforderlich; das ZED SDK ist kostenlos.

Weitere Informationen:

• Dokumentation zur Objekterkennung
• Dokumentation zur Körperspurenverfolgung
• ZED SDK-Beispiele auf GitHub