Ambarella stellt CV28M SoC vor: Intelligente Edge-Kameras mit KI-gestützter Video-Encodierung

Ambarella, ein führender Anbieter von Computer-Vision-Prozessoren, hat einen neuen SoC vorgestellt, der das CVflow-Portfolio des Unternehmens erweitert und eine breitere Palette Smart-Device-Anwendungen adressiert, die flexibles Edge-KI-Sensing und -Processing erfordern.

Der CV28M, neuestes Mitglied der CVflow-Familie, integriert fortschrittliche Bildverarbeitung, hochauflösende Video-Encodierung und Computer-Vision-Beschleunigung in einem einzigen Low-Power-Paket. Zwei Fähigkeiten stechen für intelligentes Edge-Sensing und Bandbreiteneffizienz hervor: KI-basierte Ratenkontrolle – Optimierung der Bildqualität bei gleichzeitiger Reduzierung von Speicher- und Netzwerkbandbreite – und KI-Timelapse, das Szenen analysiert, um nur als wertvoll erachtete Momente aufzuzeichnen und das Sichten stundenlangen Filmmaterials überflüssig zu machen.

Jerome Gigot, Marketingdirektor bei Ambarella, sagte: „KI-basierte Bitrate-Kontrolle ist die Fähigkeit, die Ambarella CVflow KI-Engine zu nutzen, um jeden Frame vor der Encodierung zu analysieren, die wichtigsten Regionen jedes Frames zu finden (wie ein Gesicht oder ein Auto) und diese spezifische Region des Videos mit höherer Qualität zu encodieren im Vergleich zu anderen Regionen, die keine wichtigen Informationen enthalten, wie Hintergrund oder andere unwichtige Objekte.“

Zusätzlich erklärte Chris Day, VP Marketing und Business Development bei Ambarella, gegenüber embedded.com, dass das neue Gerät dieselbe KI-Engine und Fähigkeit wie der CV25 nutzt, aber neue kostensensible Märkte adressiert und eine neue Klasse smarter Edge-Geräte für Anwendungen wie Smart Home Security, Retail-Monitoring, Consumer-Robotik und Belegungsüberwachung ermöglicht.

„Rund um uns werden Geräte smarter, und mit unserem neuesten CV28M SoC können unsere Kunden eine neue Generation intelligenter Sensing-Kameras für diverse neue Anwendungen entwickeln. In datenschutzsensiblen Anwendungen – wie Überwachung von Einzelhandelsgeschäften, Arbeitsplätzen, Mietobjekten oder älteren Menschen zu Hause – kann Edge-basierte KI-Verarbeitung intelligentes Monitoring und schnelle Entscheidungsfindung unterstützen, ohne die Anforderung, Video in die Cloud zu streamen oder aufzuzeichnen.“

Er sagte, der Hauptunterschied zum neuen Kamera-SoC sei die Verwendung eines Dual-Core Arm Cortex-A53 statt eines Quad-Core-Geräts. Dies resultiere in größerer Effizienz für Edge-Sensing-KI und bis zu 30 % Kostensenkung. Für viele consumer-orientierte Embedded-Vision-Anwendungen bräuchten sie nicht die volle KI-Fähigkeit des CV25, sodass der neue CV28M einen gezielteren Ansatz bietet.

Für KI-Sensing-Anwendungen wie Retail-Monitoring oder Belegungsüberwachung bietet der CV28M die KI-Leistung, alle Entscheidungen in der Kamera zu treffen, wodurch Privatsphäre gewahrt und schwere Video-Verarbeitung auf Backend-Servern vermieden wird. In Consumer-Robotik-Anwendungen kann der CV28M mit einer Vielzahl von Sensoren wie Visible, Structured Light und Time-of-Flight (ToF) verbunden werden, um die für Navigation erforderlichen Daten zu erfassen und zu verarbeiten.

Der CV28M liefert effiziente Video-Encodierung in sowohl AVC als auch HEVC Formaten. Ein hochperformanter Image Signal Processor (ISP) liefert herausragende Bildgebung bei Low-Light-Bedingungen, und High-Dynamic-Range (HDR) Processing extrahiert maximalen Bilddetail in hochkontrastreichen Szenen. Der Kamera-SoC umfasst eine vollständige Suite fortschrittlicher Cybersicherheitsfeatures zum Schutz vor Hacking, einschließlich Secure Boot, TrustZone und I/O-Virtualisierung. In 10 nm Ultra-Low-Power-Prozesstechnologie gefertigt, ist der CV28M Chip optimiert für drahtlose Kameraanwendungen, die lange Batterielebensdauer und kleine Formfaktoren erfordern.

Der CV28M Chip teilt ein gemeinsames SDK und Computer-Vision (CV) Tools mit Ambarellas CV25, CV22 und CV2 CVflow SoC-Familien, was Entwicklung von Kameras mit mehreren Preis- und Leistungsoptionen vereinfacht. Ein vollständiger Satz CV-Tools hilft Kunden, ihre eigenen neuronalen Netze auf CV28M zu portieren und umfasst Compiler, Debugger und Support für Industriestandard-ML-Frameworks wie Caffe und TensorFlow mit umfangreichen Guidelines für CNN-Performance-Optimierungen.