Ambarella, Lumentum und ON Semiconductor präsentieren KI-gesteuerte 3D-Sensing-Lösungen für KIoT-Geräte der nächsten Generation

Ambarella, ein KI-Vision-Silizium-Unternehmen, Lumentum, Entwickler und Hersteller innovativer optischer und photonischer Produkte, und ON Semiconductor, Anbieter von CMOS-Bildsensorlösungen, haben sich zusammengetan, um zwei neue gemeinsame Referenzdesigns zu produzieren, die nach eigenen Angaben „die Bereitstellung von Artificial Intelligence of Things-Geräten über verschiedene Vertikalen hinweg beschleunigen“.

Die Designs bauen auf der vorherigen gemeinsamen Lösung für kontaktlose Zugangssysteme auf.

Durch Kombination der Daten von Lumentums leistungsstarken VCSEL-Array-Illuminatoren und einem ON Semiconductor-Bildsensor mittels Ambarellas KI-SoC lassen sich in KIoT-Geräten der nächsten Generation für biometrische Zugangskontrolle, 3D-elektronische Schlösser und andere intelligente Sensing-Anwendungen höhere Genauigkeit und intelligentere Entscheidungsfindung erreichen.

Ursprünglich für biometrische Zugangskontrolle und elektronische Schlösser gedacht, können diese neuen Referenzdesigns auch die Bedürfnisse von Smart Cities, Smart Buildings, Smart Homes und intelligenter Gesundheitsversorgung adressieren.

Zudem senkt der hohe Integrationsgrad dieser gemeinsamen Lösungen den Systemstromverbrauch und die thermischen Designanforderungen erheblich und ermöglicht viel kleinere Produktformfaktoren.

Fermi Wang, Präsident und CEO von Ambarella, sagt: „Ambarellas Vision ist es, KI-Verarbeitung mit 3D- und Vision-Sensing zu kombinieren, um eine ambient intelligente Zukunft zu schaffen.

„Diese Zusammenarbeit mit Lumentum und ON Semiconductor wird die Konvergenz von KI und IoT weiter vorantreiben, um eine neue Generation von Zugangskontrollsystemen zu ermöglichen, während sie neuartige Kategorien von ambienten Sensing-Produkten inspiriert – alles angetrieben durch die Fusion von Sensoren mittels KI-Vision-Prozessoren, die intelligent und unaufdringlich mit Menschen interagieren, um deren sich stetig wandelnde Bedürfnisse zu adressieren.“

Téa Williams, Senior Vice President und General Manager, 3D Sensing bei Lumentum, sagt: „Unsere neuen gemeinsamen Lösungen werden die Genauigkeit von KIoT-Geräten über Anwendungsbereiche hinweg 크게 steigern – beginnend mit biometrischer Zugangskontrolle und elektronischen Schlössern –, sodass sie Menschen erkennen und ihre Bedürfnisse vorhersagen können, anstatt eine direkte menschliche Schnittstelle zu erfordern.

„Viele dieser Anwendungen werden 3D-Sensing nutzen, um eine neue Dimension der Dateneingabe für verbesserte Entscheidungsfindung zu injizieren. Als Beispiel ermöglicht die hochauflösende VCSEL-basierte Spot-Illumination größere Sensorbereiche und präzisere Gesichtserkennung.

„Lumentums branchenführende, leistungsstarke VCSEL-Arrays mit null Feldausfällen, die in diesen gemeinsamen Lösungen eingesetzt werden, treiben neue Anwendungen voran und helfen, den Traum von KIoT-Geräten mit 3D-Sensing-Fähigkeiten zu verwirklichen.“

Gianluca Colli, Vice President und General Manager, Industrial and Consumer Sensor Division (ICSD) Group bei ON Semiconductor, sagt: „Bildsensoren sind die Augen intelligenter Sensing-Geräte. Ihre Fähigkeit, weiter und mit mehr Detail zu sehen, liefert signifikant mehr Informationen für die Entscheidungsfindung des KI-Prozessors in KIoT-Geräten.

„Unsere branchenführende RGB-IR-Sensortechnologie, kombiniert mit den fortschrittlichen ISP-Fähigkeiten von Ambarellas KI-Vision-SoCs, kann sowohl sichtbare als auch IR-Bilder gleichzeitig in Geräte bringen. Für diese zweite Generation unserer gemeinsamen Lösungen haben wir Kundenfeedback genutzt, um die Auflösung unserer RGB-IR-Bildsensoren auf 4K (8 MP) zu vervierfachen.“

Die drei Unternehmen neuen gemeinsamen KIoT-Lösungen bestehen aus zwei Referenzdesigns und zusätzlichen 3D-Sensing-Entwicklungskits, die jeweils einzigartig konfiguriert sind, um anwendungsspezifische Anforderungen an die Kombination von KI-Verarbeitung, 3D-Tiefensensing und Vision-Sensing zu adressieren:

Vision+ Referenzdesign

Ziel: Biometrische Zugangskontrollleser der nächsten Generation. Es ist die erste 4K-Lösung der KIoT-Industrie, die Single-Camera, 940 nm Structured-Light-Sensing basierend auf RGB-IR-Technologie durchführt. Es ist auch die erste, die eine Single-Chip-Lösung für Tiefenverarbeitung, KI-Verarbeitung und Videoverarbeitung nutzt. Basierend auf dem Ambarella CV22 CVflow KI-Vision-Prozessor, umfasst es Single-Camera Structured-Light-Sensing mit Lumentums VCSEL-Technologie (Reichweite 2 Meter) und einen 4K (8 MP) RGB-IR CMOS-Bildsensor von ON Semiconductor.

Saturn Referenzdesign

Ziel: Smarte elektronische Türschlösser (eLocks) der nächsten Generation für kommerzielle und住宅 Anwendungen. Erstes Design der KIoT-Industrie, das KI-Verarbeitung für Single-Camera Structured-Light-Sensing und Fast-Boot-Videoverarbeitung integriert. Basiert auf dem Ambarella CV25 CVflow KI-Vision-Prozessor, umfasst eine Structured-Light-Kamera mit Lumentums VCSEL-Technologie und den AR0237CS 2MP RGB-IR-Bildsensor von ON Semiconductor.

Entwicklungskits basierend auf Ambarellas CV2-Serie

Für intelligente Sensing-Anwendungen mit Chancen über Vertikale hinweg können Ambarellas CV2-Serie CVflow KI-Vision-Prozessor-basierte Entwicklungskits nun mit ToF-Sensor-Adaptern ausgestattet werden, die von Lumentums führenden VCSEL-Arrays angetrieben werden. Ein optionaler 4K RGB-IR-Bildsensor-Adapter ist ebenfalls für diese Kits verfügbar.

Das offene Software Development Kit (SDK) für Ambarellas CVflow KI-Vision-Prozessoren ermöglicht die einfache Integration von Drittanbieteranwendungen und befähigt OEMs, unterschiedliche regionale Anforderungen mit einer einzigen Plattform zu adressieren (z. B. unterschiedliche KI-Algorithmen in verschiedenen Regionen).

Zusätzlich erweitert dieses robuste, Linux-basierte SDK die Fähigkeiten von Edge-Sensing-Geräten, vereinfacht die Produktentwicklung und beschleunigt die Markteinführung durch:

• Benutzerdefinierte Anwendungsentwicklungsfähigkeiten
• Unterstützung verschiedener 3D-Modalitäten, einschließlich Structured Light und ToF. Einzigartig: Ein einzelner Ambarella SoC bietet 3D-Sensing-Verarbeitung ohne dedizierten Tiefenprozessor oder separaten Host-Prozessor
• Hohe KI-Inferenzfähigkeiten auf dem Kameragerät für gleichzeitiges Ausführen mehrerer neuronaler Netze
• Robuste KI-Tools für Deep Neural Network Entwicklung und Migration
• Integrierter ISP für anspruchsvolle Szenen, einschließlich High Dynamic Range und Low-Light-Szenarien
• Integrierte Arm-Prozessoren für Kundenanwendungen
• Integrierte Sicherheitshardware, einschließlich Secure Boot, OTP zur Speicherung von Verschlüsselungsschlüsseln und Arm TrustZone-Technologie für sichere Verschlüsselungsschlüsselvergleiche
• Reiche Peripherie-Schnittstellenunterstützung zur Vereinfachung von Systemdesigns

Verfügbarkeit

Diese gemeinsamen Referenzdesigns und Entwicklungskits sollen ab Juni verfügbar sein. Weitere Informationen sind bei Ambarella erhältlich.