Industrielle Fertigung
Industrielles Internet der Dinge | Industrielle Materialien | Gerätewartung und Reparatur | Industrielle Programmierung |
home  MfgRobots >> Industrielle Fertigung >  >> Industrial Internet of Things >> Sensor

Ein Warnsystem für selbstfahrende Autos lernt aus Fehlern

Ein neues Modell für selbstfahrende Autos lernt aus Fehlern der Vergangenheit, indem es sie im Voraus erkennt, manchmal bis zu 7 Sekunden.

Bei autonomen Fahrzeugen kann eine unbekannte oder komplexe Fahrsituation (wie eine überfüllte Kreuzung) dazu führen, dass das Selbstfahrsystem entweder durch automatische Sicherheitsmaßnahmen oder durch menschliches Eingreifen deaktiviert wird.

Ein Modell der künstlichen Intelligenz der Technischen Universität München (TUM) verwendet Tausende von realen Verkehrssituationen – insbesondere aufgezeichnete Ausrücksequenzen von Testfahrten – als Trainingsdaten, um zukünftige Ausfälle vorherzusagen.

Um Ausfälle so früh wie möglich vorherzusagen, klassifiziert der Machine-Learning-Ansatz Sequenzen von Sensordaten entweder als Ausfall oder Erfolg.

Erkennt das System zum Beispiel eine neue Fahrsituation, die das Regelsystem bisher nicht bewältigen konnte, wird der Fahrer frühzeitig vor einer möglichen kritischen Situation gewarnt.

Die an der TUM entwickelte Sicherheitstechnologie erfasst mit Sensoren und Kameras Umgebungsbedingungen wie Lenkradwinkel, Straßenzustand, Wetter, Sichtverhältnisse und Geschwindigkeit. Die KI System, das auf einem rekurrenten neuronalen Netzwerk (RNN) und Tausenden von realen Verkehrssituationen basiert, lernt anhand der Daten Muster zu erkennen.

Das Auto selbst wird als Black Box behandelt, die sich nur auf die Dateneingabe und Datenausgabe konzentriert. Das System lernt introspektiv aus seinen eigenen früheren Fehlern, so das Münchner Team.

„Der große Vorteil unserer Technologie:Wir ignorieren komplett, was das Auto denkt. Stattdessen beschränken wir uns auf die Daten des tatsächlichen Geschehens und suchen nach Mustern“, sagt der leitende Forscher Prof. Eckehard Steinbach , der auch Vorstandsmitglied der Munich School of Robotics and Machine Intelligence (MSRM) ist an der TUM,. „Auf diese Weise kann die A.I. entdeckt potenziell kritische Situationen, die Modelle möglicherweise nicht erkennen können oder noch entdecken müssen."

Das System biete eine Sicherheitsfunktion, die weiß, wann und wo die Autos Schwachstellen haben, sagt Steinbach.

Die Methode von Steinbach und seinem Team kombiniert zwei Arten von Sensoren. Ein bildbasiertes Modell lernt, allgemein herausfordernde Situationen zu erkennen, wie z. B. eine belebte Straße in der Stadt. Ein zusätzliches datenbasiertes Modell erkennt schnelle Änderungen unmittelbar vor einem Ausfall, wie z. B. plötzliches Bremsen oder Ausbrechen. Das Ergebnis der einzelnen Modelle wird durch Mittelung der einzelnen Ausfallwahrscheinlichkeiten fusioniert.

Die BMW Group hat den „Introspective Failure Prediction Approach“ durch 14 Stunden autonomes Fahren auf öffentlichen Straßen evaluiert und rund 2.500 Situationen analysiert, in denen der Fahrer eingreifen musste.

Laut einer im Dezember 2020 veröffentlichten Studie ermöglicht der Late-Fusion-Ansatz die Vorhersage von Ausfällen mit einer Genauigkeit von über 85 % – bis zu sieben Sekunden vor ihrem Auftreten und mit einer Falsch-Positiv-Rate von 20 %.

In einem kurzen Interview mit Tech Briefs Unten spricht Steinbach über die Stärken eines Black-Box-Ansatzes sowie die Grenzen heutiger Fahrzeugsicherheitsmaßnahmen.

Technische Informationen :Ich finde das eine interessante Idee:„Wir ignorieren komplett, was das Auto denkt. Stattdessen beschränken wir uns auf die Daten, die auf dem beruhen, was tatsächlich passiert, und suchen nach Mustern.“ Was sind einige Beispiele für Muster, die ein Modell möglicherweise nicht erkennt?

Prof. Eckehard Steinbach :In unserer Arbeit betrachten wir den Zustand des Autos, wie Bremsen und Lenken, sowie die Kamerabilder, die das Auto erhält, um Muster zu erkennen, die zu Ausrückungen führen. Dadurch kann unser Modell zwar einen großen Prozentsatz der Situationen erkennen, in denen ein Mensch übernehmen muss, aber nicht alle Informationen über eine Fahrszene werden in diesen Daten erfasst.

Als einfaches Beispiel kann ein Muster wiederholten Bremsens ein normales Fahren bei warmem Wetter sein, aber ein bevorstehendes Ausrücken anzeigen, wenn die Straßen vereist und rutschig sind. Wenn die Kamerabilder diese Informationen über die Umgebung nicht erfassen, kann dieses Muster nicht verwendet werden, um zwischen normalem und gestörtem Fahren zu unterscheiden. Während die Kamerainformationen normalerweise ausreichen, um den Zustand der Straße zu beurteilen, können solche Muster dennoch schwer zu erkennen sein.

Mehr über selbstfahrende Autos

Auf Tech Briefs TV ansehen:Michigan entwickelt einen einzigartigen Korridor für vernetzte und autonome Fahrzeuge.

Auf dem Blog:Eine Expertenbefragung geht der Frage nach:Wie werden sich autonome Systeme auf die Natur auswirken?

Technische Informationen :Warum ist es ein Vorteil, „zu ignorieren, was das Auto denkt“?

Prof. Eckehard Steinbach :Wenn das Auto eine Situation ganz richtig einschätzt, müsste der Fahrer nicht eingreifen. Übermäßiges Selbstvertrauen ist jedoch eine erhebliche Herausforderung vieler Modelle, die beim autonomen Fahren verwendet werden. Indem wir diese Situationen aufzeichnen und daraus lernen, können wir lernen, zu erkennen, ob eine neue Situation problematisch ist, selbst wenn das Auto zu zuversichtlich ist.

Darüber hinaus ermöglicht die Beobachtung von Mustersequenzen über den Zustand und die Umgebung des Autos unserem Modell, effektiv in die Zukunft zu extrapolieren, um Ausrückungen bis zu sieben Sekunden im Voraus vorherzusagen. So früh im Voraus könnte die Einschätzung des Autos von der Szene noch völlig korrekt sein, was bedeutet, dass es nicht verwendet werden könnte, um das herausfordernde Szenario vorherzusagen. Die gesammelten Rohdaten hingegen können bereits Muster enthalten, die zuvor zu Ausfällen geführt haben, und ermöglichen es daher, Abbrüche im Voraus vorherzusagen.

Technische Informationen :Wie kann das System sieben Sekunden im Voraus ein „kritisches“ Szenario erkennen? Und was passiert als Nächstes, wenn diese Erkennung auftritt? Was sieht der Fahrer im Auto und was macht das Auto?

Prof. Eckehard Steinbach :Der Schlüssel liegt darin, Datensequenzen zu beobachten und nach zeitlichen Mustern zu suchen. Durch die Berücksichtigung der letzten drei Sekunden der aufgezeichneten Daten ist unser Modell in der Lage, Muster zu erkennen, die sich schließlich zu einem Szenario entwickeln, in dem der menschliche Fahrer die Kontrolle übernehmen muss. Wenn Sie wissen, worauf Sie achten müssen, können Sie viele Sekunden im Voraus erste Anzeichen einer herausfordernden Situation erkennen.

Unsere Methode erreicht dies zu etwa 85 % der Zeit sieben Sekunden im Voraus. Die verbleibenden 15 % der Situationen lassen sich dadurch erklären, dass sich in sehr kurzer Zeit einige herausfordernde Szenarien entwickeln, wie z. B. Fußgänger, die plötzlich zwischen geparkten Autos hervorkommen und sich der Straße nähern. Wenn die Erkennung auftritt, muss der Fahrer gewarnt werden.

Technische Informationen :Wie wird der Fahrer gewarnt?

Prof. Eckehard Steinbach :Die Implementierung dieser Warnung hängt von der spezifischen Wahl der Mensch-Maschine-Schnittstelle ab, aber der Fahrer muss wissen, dass seine Kontrolle über das Auto innerhalb der nächsten sieben Sekunden erforderlich sein wird. Diese Zeit ermöglicht es dem Auto auch, ein sicheres Anhaltemanöver zu planen, falls der menschliche Fahrer nicht auf die Aufforderung reagiert.

Technische Informationen :Wie verlief Ihre Probefahrt? Was war die beeindruckendste Erkennung, die Sie gesehen haben?

Prof. Eckehard Steinbach :Da die Testfahrten von der BMW Group durchgeführt wurden, habe ich im Auto nicht daran teilgenommen. Unsere Gruppe arbeitete später mit den Aufzeichnungen der Fahrten. Das beeindruckendste Element des Erkennungssystems ist, wie früh die Vorhersage oft erfolgt. Zum Zeitpunkt der Erkennung kann das Fahrszenario zum Beispiel noch regulär erscheinen, nur dass sich der Verkehr an der nächsten Kreuzung in eine komplizierte, überfüllte Umgebung verwandelt, in der der Mensch wenige Sekunden später übernimmt, um die Sicherheit zu gewährleisten.

Technische Informationen :Was ist für selbstfahrende Autos immer noch schwierig zu erkennen?

Prof. Eckehard Steinbach :Eine wichtige Herausforderung beim autonomen Fahren sind neuartige oder vergriffene Daten. Wenn das Auto in eine Situation gerät, für die es nicht trainiert wurde, oder ein Objekt sieht, das es nicht kennt, können Probleme auftreten. Solche neuartigen Szenen verursachen menschliche Eingriffe, was dazu führt, dass diese Szenen als Trainingsdaten für unseren Ansatz verwendet werden. Während unsere Methode dann helfen kann, eine solche neue herausfordernde Umgebung beim nächsten Antreffen zu erkennen, bleibt das Erkennen und korrekte Verwalten einer völlig neuen Szene beim ersten Antreffen eine herausfordernde Aufgabe.

Was denken Sie? Teilen Sie unten Ihre Fragen und Kommentare.


Sensor

  1. Renesas:Automobilchips von Nissan für seinen neuen Skyline ProPILOT 2.0
  2. Ist Ihr System bereit für IoT?
  3. Hauptherausforderungen im Datenschutzmanagement für Unternehmen von 2021–23
  4. Die Pandemie treibt ein neues Modell für die Entscheidungsfindung in der Lieferkette
  5. Externe Eingabe für programmierte Werte
  6. Zündtechnik für Elektroantriebe
  7. Antriebssystem für Überschallflüge
  8. Kalibriersystem für die automatisierte Faserplatzierung
  9. System zum Nachweis von Chemikalien für geringe Konzentrationen
  10. 3D-Bewegungsverfolgungssystem für autonome Technologie