Mit FSM:GO und dem Sony IMX678-Sensor der Serie Sony Starvis 2 verlieren Sie keine Zeit beim Erstellen Ihrer Embedded-Vision-Anwendung. Mit dem FSM:GO und unserem Adapter-Ökosystem können Sie Ihre Anwendung ohne nennenswerte Vorkenntnisse effizient, schnell und zuverlässig für die Produktion vorbereiten.
Unser Demonstrator zeigt, wie einfach es ist:
Sie entwickeln Ihre Anwendung wie gewohnt mit einem Entwicklerboard Ihrer Wahl und der entsprechenden Toolchain (für unseren Demonstrator verwenden wir den NVIDIA® Jetson AGX Orin™).
Der Jetson AGX Orin™ ist über unseren Standard-FPA mit einem hochflexiblen Mikrokoaxialkabel mit den optischen Sensormodulen verbunden, das sich ideal für die Verlegung in einem engen Produktgehäuse eignet. Die 4-Lane-MIPI-CSI-2-Schnittstelle mit 2,5 Gbps/Lane ermöglicht es beiden Sensoren, mit voller Bandbreite zu arbeiten und 4K/60 FPS zu liefern. Das Sensorpaar wird werkseitig auf einer Montagehalterung installiert und für die Stitching-Anwendung kalibriert, um die beste optische Leistung zu erzielen und eine einfache Montage in der Produktionslinie des Kunden zu ermöglichen.
Die Anwendungsschicht erzeugt mithilfe dieser beiden 4K-Bildsensoren ein Panorama-Livebild und wird mit zwei Standardpaketen unseres Partners RidgeRun realisiert: Deren hochleistungsfähiger und CUDA-optimierter „CUDA Stitcher“ führt die beiden Bilder zusammen, nachdem die Objektivverzerrungskorrektur mit dem Modul „CUDA Undistort“ an den beiden 90°-FOV-Bildern durchgeführt wurde.
Da wir den Bildsignalprozessor (ISP) von NVIDIAs High-End-System on Module (SoM) bereits für die besten Bildergebnisse mit der gegebenen Sensor-Objektiv-Kombination abgestimmt haben, können Sie sich sofort Ihrer Kernkompetenz widmen – der Benutzeranwendung!
Wie wir Ihre Lösung unterstützen:
- Zwei FRAMOS-Sensormodule mit Sony IMX678, werkseitig montiert an einer Dual-Sensor-Halterung
- Werkseitig fokussierte Objektive mit 90° horizontalem Sichtfeld (HFOV)
- PixelMate™-zu-Micro-Coax-Adapter mit 300 mm Kabel
- Hochleistungs-Entwicklungskit NVIDIA® Jetson AGX Orin™
- Treiber und ISP-Tuning für NVIDIA® Jetson AGX Orin™
- RidgeRun „Cuda Stitcher“- und „Cuda Undistort“-Module
Deshalb FSM:GO mit IMX678:
Dieses FRAMOS-Sensormodul (FSM) bietet den Sony IMX678-Sensor auf einem sehr kompakten 26,5 mm x 26,5 mm großen Modul. Der Rolling-Shutter-Sensor hat eine native Auflösung von 8,3 MP und ein optisches Format von 1/1,8 bei einer Pixelgröße von 2 x 2 µm. Das Modul verfügt über eine MIPI-CSI-2-Schnittstelle mit bis zu 4 Lanes. Als Teil des FRAMOS-Sensormodul-Ökosystems ist es Teil eines ausgeklügelten Konnektivitäts-Frameworks und nutzt die flexible Kompatibilität mit mehreren Verarbeitungsplattformen, wobei es auf eine umfassende Palette von Adaptern zugreift. Optionale FRAMOS-Sensoradapter (FSA) bilden die Standardschnittstelle zu einer Reihe von FRAMOS-Prozessoradaptern (FPA), sodass diese mit einer Vielzahl von proprietären Processing-Plattformen verbunden werden können. Die kundenspezifische Implementierung wird außerdem durch standardisierte Software und Treiber unterstützt, die Referenztreiber für ausgewählte Plattformen enthalten, beginnend mit den Entwicklungsplatinen der NVIDIA® Jetson™-Familie oder NXP® i.MX 8M Plus™.
Anwendung
Mit Hilfe dieses Aufbaus kann ein breites Feld von Anwendungen beobachtet werden, das von der Erstellung von Panoramabildern bis hin zur intelligenten KI-basierten Beobachtung von Menschenmengen reicht. Im industriellen Kontext ist es möglich, Informationen auf Fabrikgeländen oder in Produktionsbereichen zu sammeln und so die Grundlage für die Optimierung von Arbeitsprozessen zu schaffen.
Anwendungsbereiche:
- Streaming-Lösungen & Sportanalysen
- 360° und Virtual Reality
- Sicherheit & Überwachung: Beobachtung von Menschenmengen
- Digitaler Zwilling & Grundstückskartierung
Erstellen Sie Ihr Embedded-Vision-System mit dem FSM:GO IMX678 Development Kit: FSM-IMX678 Development Kit | FRAMOS
