AI-Plattform Blackberry Ivy

Kind oder Bierkiste? KI erkennt, wer auf dem Rücksitz sitzt.

02.05.2024  — 

Wie genau kann ein Steuergerät im Auto die Unterschiede zwischen einer Bierkiste und einem Kind erkennen? Und wie lernt das Fahrzeug unseren Musikgeschmack kennen? Antworten darauf haben Rüdiger Kewitz und Clemens Satzger aus der Abteilung Vehicle Software Solutions bei IAV.

Neuronales Netz
Die Plattform Blackberry Ivy bringt die Künstliche Intelligenz (KI) ins Fahrzeug.

Wo kommt Blackberry Ivy zum Einsatz?

Einfach gesagt: auf einem Steuergerät im Fahrzeug. Dort nutzt Blackberry Ivy die Sensoren, die im Auto verbaut sind – das kann der Sitzbelegungssensor, die Lenkwinkelerfassung oder die Kamera im Fahrzeug sein – und baut daraus synthetischen Sensoren. Die lokalen Sensoren bilden die Grundlage für synthetische Sensoren. Diese ermöglichen es uns, zusätzliche Funktionen bereitzustellen.

 

Eine zusätzliche Funktionalität wäre zum Beispiel … ?

Angenommen, auf dem Rücksitz meines Autos steht eine Bierkiste. Ein gewöhnlicher Gewichtssensor könnte diese mit einem Kind verwechseln, da beide ähnliche Gewichte aufweisen, und fälschlicherweise ein Anschnallzeichen anzeigen. Blackberry Ivy hingegen nutzt Kameradaten, um festzustellen, was tatsächlich auf dem Sitz platziert ist, und kann somit den Unterschied zwischen einer Bierkiste und einem Kind erkennen.

 

Was ist ein synthetischer Sensor?

Ein synthetischer Sensor ist ein mathematisches Modell, das Maschinen hilft, Informationen aus Daten zu extrahieren. Zum Beispiel kann eine Maschine zunächst nichts mit einem Kamerabild anfangen. Aber durch den Einsatz eines synthetischen Sensors, der auf Gesichtserkennung basiert, kann sie ein Gesicht im Bild identifizieren und daraus schließen, dass es sich um einen Menschen handelt. Insbesondere kann sie so erkennen, ob das abgebildete Gesicht zu einem Kind gehört.

 

Wie funktioniert die Übersetzung von dieser mathematischen Gleichung zur Erkennung?

Die Übersetzung der mathematischen Gleichung zur Erkennung funktioniert ähnlich wie unser Gehirn. Es verwendet einzelne Neuronen, um zu entscheiden, ob wir ein Gesicht erkennen. Diese neuronale Verknüpfung kann mathematisch nachgebildet und dem System beigebracht werden, sodass es in der Lage ist, ein Gesicht zu erkennen.

 

Neuronen und Mathematik, das klingt nach künstlicher Intelligenz. Kannst du ausführen, was das bedeutet?

Ja, die künstliche Intelligenz ist letztendlich eine Verschaltung von Neuronen. Früher sagte man neuronales Netz, jetzt ist es ein Teil der künstlichen Intelligenz. Letztlich ist es einfach eine Verschaltung von unterschiedlichen Neuronen, die vorher antrainiert wurden. Das geschieht, damit sich anhand von Wahrscheinlichkeiten sagen lässt, ob sich Bierkiste oder Kind auf dem Rücksitz befinden.

 

In welchen Situationen nützt mir dieses Wissen?

Dieses Wissen ist in verschiedenen Situationen hilfreich. Zum Beispiel kann das Fahrzeug so programmiert werden, dass es die Tür verriegelt, wenn es ein Kind erkennt, um zu verhindern, dass das Kind die Tür öffnet – eine Funktion, die bei einer Bierkiste unnötig ist. Zudem fordern ENCAP-Regularien ab 2025 solche Erkennungssysteme. Fahrzeughersteller benötigen diese Technologie, um beste Bewertungen für ihre Fahrzeuge zu erzielen.

 

Blackberry Ivy kann die Stimmung von Fahrer:innen erkennen. Wie funktioniert das?

Blackberry Ivy kann die Stimmung der Fahrer:innen durch die Kombination verschiedener Datenquellen erkennen und darauf reagieren. Angenommen, eine Fahrerin ist gestresst wegen des starken Verkehrs. Eine im Auto installierte Kamera identifiziert sie als Fahrerin und zusätzliche Daten, wie Wetterinformationen, werden aus der Cloud abgerufen. Um ihre Stimmung zu verbessern, könnte Blackberry Ivy eine beruhigende Playlist anbieten, die auf ihren Musikvorlieben basiert. Diese Funktion wird trainiert, indem Bilder der Fahrerin und ihre bevorzugte Musik zur Modellierung verwendet werden.

 

Und wie erkennen Kamera und künstliche Intelligenz die Stimmung? An Gesicht oder Körperhaltung? 

Die Stimmungserkennung durch Kamera und künstliche Intelligenz basiert auf der Analyse von Gesichtsmerkmalen, ähnlich wie Menschen es tun. Die KI beobachtet die Mundregion, um Emotionen zu identifizieren: Hochgezogene Mundwinkel deuten auf Freude hin, während ein gerader, zusammengepresster Mund auf Anspannung hindeuten kann. Zusätzlich berücksichtigt die KI die Augenregion, um etwaige Überraschung oder Erschrecken festzustellen. All diese Merkmale können durch die KI erfasst und ausgewertet werden.

 

Wie gut funktioniert die Stimmungserkennung schon? Kennt die künstliche Intelligenz während mit der Zeit meinen Musikgeschmack?

Die Fähigkeit der Stimmungserkennung von KI hat bereits fortgeschrittene Stadien erreicht. Als lernfähiges System kann die KI mit der Zeit das Verhalten einer Person in bestimmten Situationen besser verstehen und vorhersagen.

Bedeutet das, wenn die Fahrerin ein Lied aus der Playlist überspringt, weil es ihr nicht gefällt, wird Blackberry Ivy dieses Lied zukünftig nicht mehr vorschlagen?

Ja, genau so funktioniert es. Die künstliche Intelligenz lernt aus den Interaktionen und passt ihre Aktionen entsprechend an.

 

Für welche anderen Anwendungen eignet sich Blackberry Ivy?

Blackberry Ivy lässt sich vielseitig einsetzen. Es kann Fahrzeuginsassen klassifizieren und so Sicherheitssysteme wie Airbags optimieren. Bei Elektrofahrzeugen unterstützt es die Bewertung des Batteriezustands und gibt Geschwindigkeitsempfehlungen. Es hilft auch bei der vorausschauenden Wartung, indem es den Verschleiß von Reifen und Bremsen – unter Berücksichtigung des Fahrverhaltens und Reifentyps – überwacht. Die KI kann beispielsweise einen Vorschlag  machen, welcher Reifen für das Fahrprofil der Fahrer:innen geeignet ist.

 

Wie spielen Blackberry Ivy und Insassenklassifizierung zusammen?

Blackberry Ivy ist eine Softwareplattform, die die Integration von künstlicher Intelligenz in Fahrzeugsteuergeräte erleichtert. Sie ermöglicht den Betrieb neuronaler Netzwerke, die für Funktionen wie die Insassenklassifizierung entwickelt werden. Blackberry Ivy ist also ein Schlüsselwerkzeug, um künstliche Intelligenz effizient in Fahrzeugen einzusetzen.

 

Welche Daten, neben den Wetterdaten, könnte Blackberry Ivy noch nutzen?

Neben Wetterdaten, die sowohl für Stimmung als auch Klimatisierung relevant sind, könnte Blackberry Ivy Verkehrsinformationen zur Verbesserung der Navigation verwenden. Allgemeine Online-Informationen könnten zur Optimierung verschiedener Aufgaben beitragen. Daten von Smartwatches könnten die Gesundheit der Fahrer:innen überwachen und im Notfall Alarm auslösen. Es gibt also eine Vielzahl möglicher Datenquellen.

 

Der größte Nutzen von Blackberry Ivy ist …?

Der größte Nutzen von Blackberry Ivy liegt in seiner einfachen Anwendbarkeit und Hardware-Unabhängigkeit. Entscheidend ist, dass im Gegensatz zu bisherigen Praktiken, bei denen Steuergeräte für jedes Fahrzeug individuell entwickelt wurden, Blackberry Ivy universell einsetzbar ist. Algorithmen, die einmal für ein bestimmtes Fahrzeug entwickelt wurden, können auf jedes andere Fahrzeug übertragen werden, was erheblich Ressourcen einspart.

Kontakt: 

Rüdiger Krewitz
Rüdiger Kewitz

ruediger.christfried.kewitz@iav.de

LinkedIn