Prophesee & Sony enthüllen gestapelten Event-basierten Visionssensor mit Rekord-HDR und ultra-kleinen Pixeln

PARIS – Prophesee, der parisbasierte Pionier neuromorpher Visionssysteme, und Sony Corp. kündigten auf der International Solid-State Circuits Conference (ISSCC) in San Francisco einen bahnbrechenden gestapelten Event-basierten Visionssensor an, der Prophesees Event-getriebene Architektur mit Sonys fortschrittlicher gestapelter CMOS-Technologie verbindet.

Von Grund auf für asynchrone Event-Detektion konzipiert, liefert der Sensor die branchenkleinste Pixelgröße von 4,86 µm und einen außergewöhnlichen High-Dynamic-Range von 124 dB, was zuverlässigen Betrieb von hellem Tageslicht bis zu tiefen Nachtszenen (bis zu 40 mLx) ermöglicht.

Pixel-Chip (links) und Logik-Chip (Quelle: Prophesee)

In gestapelte Konfiguration sind die obere Pixel-Schicht und die untere Logik-Schicht über Kupfer-zu-Kupfer-Interconnects verbunden, was einen dichten 40-nm-Prozess ermöglicht, der 1280×720 HD-Auflösung bei hoher Öffnungsverhältnis von bis zu 77 % erreicht. Diese Architektur unterstützt auch eine effiziente asynchrone Delta-Modulations-Signalverarbeitungspipeline, die Luminanzänderungen als diskrete Events erfasst.

Zum ersten Mal bietet die Kollaboration die Möglichkeit, KI-Sensing und KI-Verarbeitung direkt auf oder nahe dem Sensor zu integrieren und ebnet den Weg für wahrhaft intelligente Edge-Geräte wie autonome Fahrzeuge, Industrieroboter und fortschrittliche Machine-Vision-Systeme.

Strategische Partnerschaft

Sony, Weltmarktführer bei CMOS-Bildsensoren, bringt seine Fertigungsexzellenz und IP-Portfolio in die Partnerschaft ein und verleiht Prophesees Technologie kommerzielle Glaubwürdigkeit. CEO Luca Verre merkt an, dass die Allianz 2017 begann und die ersten Samples des gestapelten Sensors für 2020 geplant waren.

Für Sony signalisiert die Partnerschaft einen strategischen Wandel hin zu „Sensing“ statt bloßer Bildgebung. Sie spiegelt den Einfluss der 2015er Akquisition von SoftKinetic wider, die Sonys „DepthSense“ Time-of-Flight (ToF) Lösungen in Android-Smartphones ermöglichte. Der Event-basierte Sensor positioniert Sony, um reichere Datenströme in Automobil- und Industriemärkten zu erfassen, wo Verbraucher zunehmend tiefere sensorische Einblicke verlangen.

Experten-Einblick

Yole Dévelopements Pierre Cambou vergleicht die Kollaboration mit „Öffnen der Büchse der Pandora“. Er hebt das Potenzial für zukünftige gestapelte Designs hervor, die Neuronen, Speicher und Verarbeitung integrieren und sich KI-integrierten Bildsensoren nähern, die On-the-Fly-Verbesserung und direkten Event-basierten Output ermöglichen.

Pierre Cambou, Yole Développement

Durch Kombination von Prophesees neuromorphem Pixel-Design mit Sonys Fertigungsfähigkeiten stellt der gemeinsame Sensor einen signifikanten Sprung in der Visions-Technologie dar, bietet hohen Dynamikumfang, niedriges Rauschen und Event-getriebenen Betrieb, der mit der Zukunft KI-fähiger Edge-Computing übereinstimmt.

Da beide Unternehmen den Sensor auf den Markt bringen wollen, verspricht die Partnerschaft, neue kommerzielle Chancen zu erschließen und einen neuen Maßstab für Visionssysteme weltweit zu setzen.