Ambarella, Inc. (Ambarella) ist ein Entwickler von System-on-a-Chip (SoC)-Halbleitern und Software für Edge-Künstliche-Intelligenz (KI)-Anwendungen.
Die Technologien des Unternehmens machen elektronische Systeme intelligenter, indem sie Funktionen wie Personenerkennung, Objektklassifizierung und Analytik ermöglichen, zusätzlich zur Durchführung komplexer Datenanalysen in Echtzeit, Bereitstellung hochwertiger Bilder und Erhaltung wichtiger Systemressourcen wie Leistung und Netzwerkbandbreite. Da...
Ambarella, Inc. (Ambarella) ist ein Entwickler von System-on-a-Chip (SoC)-Halbleitern und Software für Edge-Künstliche-Intelligenz (KI)-Anwendungen.
Die Technologien des Unternehmens machen elektronische Systeme intelligenter, indem sie Funktionen wie Personenerkennung, Objektklassifizierung und Analytik ermöglichen, zusätzlich zur Durchführung komplexer Datenanalysen in Echtzeit, Bereitstellung hochwertiger Bilder und Erhaltung wichtiger Systemressourcen wie Leistung und Netzwerkbandbreite. Das Unternehmen hat sich auf die Entwicklung einsetzbarer, skalierbarer Designs für intelligente elektronische Systeme spezialisiert, die Hochbandbreitensensoren nutzen und einen bewährten Weg zur Massenproduktion bieten.
Das Unternehmen hat hauptsächlich Anwendungen für die menschliche Betrachtung mit Video- und Bildprozessoren für Unternehmens-, öffentliche Infrastruktur- und Heimanwendungen bedient, wie beispielsweise Internetprotokoll (IP)-Sicherheitskameras, Sportkameras, Wearables, Luftdrohnen und nachgerüstete automatische Videorekorder für Fahrzeuge. Das Unternehmen nutzt sein Erbe in der menschlichen Betrachtung, um den Markt für maschinelles Sensorik zu erschließen. Die jüngsten Entwicklungsanstrengungen des Unternehmens konzentrieren sich darauf, fortschrittliche KI-Inferenztechnologien zu schaffen, die es Edge-Geräten ermöglichen, die Umgebung visuell wahrzunehmen und Entscheidungen auf der Grundlage der von Kameras und anderen Sensortypen wie 4D-Radar gesammelten Daten zu treffen. Diese Kategorie von KI-Technologie wird als Computer Vision (CV) oder Edge-Inferenz-KI bezeichnet, und die KI-Inferenz-SoCs des Unternehmens integrieren seine Video-Prozessortechnologie zusammen mit der kürzlich entwickelten Deep-Learning-Neuronennetz-Verarbeitungstechnologie des Unternehmens, die das Unternehmen als CVflow bezeichnet. Die CVflow-Architektur unterstützt eine Vielzahl von KI-Inferenzalgorithmen, einschließlich Objekterkennung, -klassifizierung und -verfolgung, semantischer und instanzieller Segmentierung, Bildverarbeitung, Stereo-Objekterkennung und Geländekartierung. Die neueste CVflow-Technologie der dritten Generation des Unternehmens ermöglicht es dem Unternehmen, inkrementelle und rechenintensive KI-Anwendungen für Deep Fusion, Deep Planning und große Sprachmodelle (LLMs) anzugehen, sowie effizient Transformer-KI-Netzwerke zu verarbeiten. Darüber hinaus kann CVflow auch andere Sensor-Modalitäten verarbeiten, einschließlich Lidar, Radar, Time-of-Flight, Thermal- und Nahinfrarot (NIR), und ermöglicht es Kunden, ihre Produkte zu differenzieren, indem sie ihre eigenen oder von Drittanbietern stammende neuronale Netzwerke und/oder klassische Computer Vision-Algorithmen auf die CVflow-basierten SoCs des Unternehmens portieren. Die KI-Technologie des Unternehmens schafft Möglichkeiten für das Unternehmen, einen breiteren Markt und Anwendungen anzusprechen, während es dem Unternehmen auch ermöglicht, mehr Inhalte pro elektronischem System zu erfassen.
Die neue CV3 AI-Zentraldomänencontroller-Familie von SoCs des Unternehmens ist speziell für Anwendungen im Bereich des autonomen Fahrens konzipiert. Neben der Bereitstellung der vorhandenen fortschrittlichen Kamerawahrnehmungsverarbeitung des Unternehmens fügt CV3 Sensorfusion- und Planungsschichten hinzu, die eine breitere Palette vollautomatisierter Geräte ermöglichen. Der kürzlich angekündigte N1-SoC des Unternehmens ist in der Lage, LLM-Inferenz mit Modellen von bis zu 34 Milliarden Parametern auszuführen, was eine Reihe von KI-Anwendungen in IoT-Geräten ermöglicht, einschließlich industrieller Robotik, intelligenter Gesundheitsbildgebung und Diagnostik, Edge-KI-Servern, die Multi-Modal-LMMs ausführen, und autonomen Flotten-Telematik.
Im November 2021 übernahm das Unternehmen Oculii Corp., einen Entwickler von hochauflösender Radar-Technologie. Die adaptiven KI-Softwarealgorithmen von Oculii sind darauf ausgelegt, die Radarwahrnehmung unter Verwendung aktueller Radar-Chips mit deutlich höherer Auflösung, größerer Reichweite und höherer Genauigkeit zu ermöglichen. Die Software von Oculii kann auf den vorhandenen CVflow-SoCs des Unternehmens eingesetzt werden, die in Verbindung mit führenden Radar-RF-Lösungen arbeiten, um die Sicherheit und Zuverlässigkeit signifikant zu erhöhen. Das Unternehmen hat kürzlich eine zentralisierte Radararchitektur eingeführt, die die adaptiven KI-Softwarealgorithmen von Oculii zusammen mit der CV3-Domänencontroller-Familie des Unternehmens synergistisch nutzt, was zu einer verbesserten Wahrnehmung, geringerem Energieverbrauch und reduzierten Materialkosten für Mobilitätsanwendungen im Vergleich zur aktuellen Generation von Radar-Systemen führt, die heute auf dem Markt genutzt werden.
Die Produkte von Ambarella werden nun in einer Vielzahl von Anwendungen für die menschliche Betrachtung und Computer Vision eingesetzt, darunter verschiedene Automotive-Kamerasysteme, Video-Sicherheitskameras, mobile und stationäre Roboter, industrielle Anwendungen und Verbrauchergeräte wie Action-, Drohnen- und 360°-Kameras.
Zielmärkte
Die CV-SoCs des Unternehmens sind auf die Anforderungen des Edge-Inferenzmarktes optimiert, um hochgenaue Ergebnisse, erhebliche Rechenleistung, geringe Formfaktoren und minimale Latenz bei sehr niedrigem Energieverbrauch zu bieten und gleichzeitig sowohl Funktionen für die menschliche Betrachtung als auch Computer Vision zu liefern, oft bei Unterstützung mehrerer Kameras und mehrerer KI-Inferenzanwendungen mit einem einzigen SoC in einem Endpunktgerät. Darüber hinaus können Datenschutz und Sicherheit verbessert werden, da kritische persönliche Informationen möglicherweise nicht in die Netzwerkinfrastruktur gelangen müssen.
Das erste KI-SoC des Unternehmens wurde 2018 eingeführt, und das CV3-SoC integriert die CVflow-Technologie der dritten Generation des Unternehmens. Die Entwicklungsanstrengungen des Unternehmens konzentrieren sich nun auf SoCs, die sowohl Funktionen für die menschliche Betrachtung als auch Computer Vision bieten. Mit der Übernahme von Oculii ergänzt das Unternehmen seine fortschrittlichen Kamerawahrnehmungsfähigkeiten um fortschrittliche Radarwahrnehmung, um höhere Autonomiestufen zu ermöglichen.
Das Unternehmen konzentriert sich auf die Endmärkte Automotive und Internet der Dinge (IoT), die zunehmend anspruchsvolle KI-Inferenzaufgaben und Verarbeitungsleistung erfordern:
Automobilanwendungen. Kameras und andere Sensoren sowie Hochleistungsrechnerprozessoren werden für eine Vielzahl von Anwendungen im Automobilmarkt eingesetzt, und die Produkte des Unternehmens sind in Originalgerätehersteller (OEM) und Aftermarket-Anwendungen integriert. Das Unternehmen bedient die folgenden Automobilmarkt-Anwendungen:
Zentrale Domänencontroller für autonome Fahrzeuge der Stufen L2+ bis L4. Das Unternehmen treibt weiterhin seine Forschung in kritischen Bereichen der autonomen Fahrzeugentwicklung voran, wie Fahrzeugerkennung, Hinderniserkennung, Fußgängererkennung, Spurerkennung, Verkehrsschilderkennung, Stereovisionsverarbeitung und Sensorfusion und Planung, was dem Unternehmen ermöglicht, robuste Plattformen für Anwendungen von Level2+ Autopilot bis zur vollständigen Autonomie zu entwerfen. Die CV3-Familie ermöglicht eine zentralisierte, einchipige Verarbeitung für multisensorische Wahrnehmung, einschließlich hochauflösender Vision, Radar, Ultraschall und Lidar, sowie Deep Fusion für mehrere Sensormodalitäten und autonome Fahrzeugpfadplanung. Der zentrale Domänencontroller in autonomen Fahrzeugen ist mit der Kamera, dem Radar und anderen Sensorsuiten verbunden. Unter Verwendung von neuronalem Netzwerk- und traditioneller Computer-Vision-Verarbeitung fusioniert der Domänencontroller die Sensordaten und nimmt die Umgebung des Fahrzeugs wahr. Basierend auf dieser multisensorischen Umgebungswahrnehmung schätzt der Domänencontroller einen sicheren Fahrweg für das Fahrzeug ab. Darüber hinaus kann der Domänencontroller gleichzeitig In-Cabin-Sensoranwendungen verarbeiten, einschließlich Fahrer- und Insassenüberwachung.
Front-Advanced-Driver-Assistance-System (ADAS)-Kameras. Diese nach vorne gerichteten Kameras sind oft hinter dem Rückspiegel positioniert und ermöglichen Funktionen wie automatische Notbremsung, Spurhalteassistent, Kollisionswarnung, intelligente Scheinwerfersteuerung und Geschwindigkeitsunterstützungsfunktionen, von denen viele von einer zunehmenden Anzahl regionaler New Car Assessment Programs (NCAP) gefordert werden. Die fortschrittlichsten Front-ADAS-Kameras erfordern in der Regel Ultra-High-Definition (UHD)-Auflösung und fortschrittliche CV-Verarbeitung, was für die Objekterkennung auf lange Distanz mit einem weiten Sichtfeld und extrem niedrigem Energieverbrauch aufgrund ihres inhärenten kleinen Formfaktors entscheidend sein kann.
Kabinenüberwachungssystem (CMS) und Fahrerüberwachungssystem (DMS)-Kameras. Diese im Innenraum montierten Kameras verfolgen Fahrer und Passagiere, um Unfälle zu verhindern, indem sie einen müden oder abgelenkten Fahrer warnen und bei der Auslösung von Sicherheitsfunktionen wie Airbags helfen. Diese Innenkameras können auch von Dienstleistern genutzt werden, insbesondere bei autonomen Fahrzeugen, um neue Geschäftsmöglichkeiten zu schaffen, bei denen Innenrauminformationen, die durch Kameras gesammelt werden, monetarisiert werden können. Die Lösungen des Unternehmens verarbeiten die Innenraum-Sensoralgorithmen seiner Kunden mit hoher Geschwindigkeit und geringem Energieverbrauch und sind auch nachts über die Onboard-RGB-Infrarot-Verarbeitung effektiv. Die DMS-Lösungen des Unternehmens können mit zusätzlichen Kameraanwendungen integriert werden, darunter elektronischer Spiegel, Front-ADAS und hochauflösende Fahreraufzeichnung.
Elektronische Spiegel. Eine oder mehrere Kameras, in Verbindung mit einem elektronischen Display, werden verwendet, um reflektierende Glasrückspiegel und/oder Seitenspiegel zu ergänzen oder in einigen Fällen zu ersetzen, um ein breiteres und unverdecktes Sichtfeld zu bieten. Intelligente elektronische Spiegel, die die CV-SoCs des Unternehmens integrieren, können auch bei der Erkennung von Objekten im toten Winkel, beim Überholen von Fahrzeugen und bei der Warnung vor gefährdeten Verkehrsteilnehmern wie Fußgängern und Fahrrädern helfen.
Automatische Videorekorder für Fahrzeuge (auch als Datenaufzeichnungsgeräte bekannt). Diese Videokameras sind in Fahrzeugen vorinstalliert oder (nachträglich) montiert, um Ereignisse für Abgleiche aufzuzeichnen, beispielsweise für Versicherungs- und Haftungsfragen, Fahrerbewertung oder -training und Sicherheitszwecke. Das Unternehmen bietet Lösungen für OEM- und Aftermarket-Fahraufzeichnungsgeräte an, von denen einige erweiterte Fahrerassistenzsysteme (ADAS) enthalten.
Sicherheitskameras. Das Unternehmen ist führend auf den Märkten für Unternehmens- und Heimsicherheitskameras, mit Lösungen, die außergewöhnliche Computer-Vision-Leistung, branchenführende Kompressionseffizienz, geringen Energieverbrauch und herausragende Bildqualität, einschließlich High Dynamic Range (HDR), Low-Light-Verarbeitung und Fischaugenobjektiv-Entzerrung, bieten. Die CV-Produkte des Unternehmens ermöglichen höhere Automatisierungsgrade als die Vision-Prozessoren des Unternehmens durch fortschrittliche Algorithmen wie Objekterkennung, -klassifizierung und -verfolgung, Kennzeichenerkennung und Gesichtserkennung. Das Unternehmen bedient die folgenden Sicherheitskamera-Anwendungen:
Unternehmens- und öffentliche Sicherheitsklasse. Diese Kameras werden für die Videoüberwachung und Sicherheitsüberwachung in Unternehmens- und öffentlichen Infrastrukturanwendungen verwendet. Die Lösungen des Unternehmens ermöglichen das Streaming mehrerer Videostreams, um die Fernüberwachung an mehreren Standorten zu ermöglichen. Die eingebettete Computer-Vision-Technologie unterstützt fortgeschrittene Analysen am Rand des Systems, einschließlich Personen zählen und verfolgen, Gesichtserkennung und Verhaltensanalyse im Einzelhandel.
Heimsicherheit. Heimsicherheitskameras sind für den Heim- oder Kleinunternehmenseinsatz konzipiert und können über Heimnetzwerke mit WLAN an Cloud-Services und Anwendungen angeschlossen werden. Diese Kameras erfordern möglicherweise einen sehr geringen Bitrate-Betrieb, um HD-Auflösung über begrenzte Bandbreitenverbindungen zu unterstützen, während ihre kleinen Formfaktoren oder batteriebetriebenes Design einen sehr geringen Energieverbrauch erfordern können. Zu den Formfaktoren gehören intelligente Videotürklingeln und videofähige Lichter. Die eingebettete Computer-Vision-Technologie unterstützt fortgeschrittene Funktionen, einschließlich Eindringlings- und Haustiererkennung, Gesichtserkennung und Paketüberwachung.
Aufkommende Roboter- und Industrieanwendungen. Die Lösungen des Unternehmens können Intelligenz in eine Reihe von teilweise oder vollständig robotischen Anwendungen integrieren, einschließlich Zugangskontrolle, industrieller/Fabrikautomatisierung, Sensorkameras und einer Vielzahl von industriellen und häuslichen Roboteranwendungen. Die fortschrittlichen CV-SoCs des Unternehmens verarbeiten eine Vielzahl von komplexen Algorithmen, von Niedrigpegel-Wahrnehmungsfunktionen und neuronalen Netzwerken bis hin zu höherstufigen autonomen Softwarestapeln, während die Videoverarbeitungspipeline des Unternehmens den Betrieb unter herausfordernden Lichtverhältnissen wie Szenen mit hohem Kontrast und extrem schlechten Lichtverhältnissen ermöglicht, und das alles bei geringem Energieverbrauch. Das Unternehmen bedient die folgenden Markt-Anwendungen für Industrie und Robotik:
Identifikations-/Authentifizierungskameras. Die videobasierten Sensorenlösungen des Unternehmens ermöglichen kontaktlose Zugangskontrolle für Heim-, Unternehmens- und öffentliche Anwendungen. Die CV-SoCs des Unternehmens sind darauf ausgelegt, schnell Eingaben aus der physischen Umgebung zu extrahieren, Daten aus mehreren Sensoren zu fusionieren, die eingehenden Daten zu analysieren und das entsprechende Feedback mit geringer Latenz und geringer Leistungsfähigkeit zu liefern. Anwendungen umfassen Unternehmenszugangskontrolltafeln, elektronische Schlösser und kontaktlose mobile Zahlungsterminals.
Roboterprodukte. Die Produkte und Technologien des Unternehmens eignen sich gut für eine Vielzahl von intelligenten Heim- und Unternehmensroboteranwendungen. Mit Stereovisionsfähigkeiten und CNN-basierter Objektklassifizierung sind die Lösungen des Unternehmens auch für eine Vielzahl von industriellen Maschinenvisionssystemen, mobilen Robotern für Lieferungen oder Anwendungen in Fabriken/Lagern, Luftdrohnen, robotischen Staubsaugern und anderen aufstrebenden Roboteranwendungen geeignet.
Sensorkameras. Die CV-SoCs des Unternehmens ermöglichen Sensorkameras, die Video mithilfe von KI-basierten Algorithmen in der Kamera analysieren, um entfernten Benutzern Updates, Warnungen oder Geschäftsdaten basierend auf der Analyse bereitzustellen. Da keine Video-, Audio- oder Bilddaten die Kamera verlassen müssen, kann die Privatsphäre priorisiert werden. Anwend
