Oliver Bernecker, CEO Know Center: »Am Know Center sind wir stolz darauf, mit unserer Arbeit neue Maßstäbe zu setzen und Innovationen zu fördern, die die Art und Weise, wie wir Mobilität verstehen, nachhaltig verändern werden.« © Cameron Menschhorn
Mit Deep Reinforcement Learning will das Grazer Know Center nicht nur den autonomen Rennsport verändern. Die Erkenntnisse sollen das autonome Fahren sicherer und effizienter machen.
Das Know Center aus Graz hat einen bedeutenden Durchbruch in der Welt des autonomen Rennsports erzielt: Durch den innovativen Einsatz von Deep Reinforcement Learning (RL) in Kombination mit Fahrzeugtelemetriedaten hat das Grazer Spitzenforschungszentrum neue Wege zur Optimierung autonomer Fahrsysteme erschlossen. Diese technologische Errungenschaft hat nicht nur das Potenzial, den Rennsport zu revolutionieren, sondern wird auch wegweisend für die Entwicklung sicherer und effizienter autonomer Fahrsysteme in der Praxis sein.
Die Zukunft des autonomen Rennsports
Traditionelle Ansätze im autonomen Fahren konzentrieren sich oft auf die Bildverarbeitung und die Nutzung von Kameras zur Orientierung auf der Rennstrecke. Das Know Center verfolgt jedoch einen anderen Ansatz: Die Forscher:innen verwenden ausschließlich Telemetriedaten, um autonome Systeme zu trainieren, was zu einer erheblichen Reduktion der Rechenressourcen führt und gleichzeitig eine höhere Geschwindigkeit bei der Verarbeitung ermöglicht.
Das Projektteam, bestehend aus Adrian Remonda, Sarah Krebs, Eduardo Veas, Granit Luzhnica und Roman Kern, hat es sich zum Ziel gesetzt, die Grenzen des Möglichen im Bereich des autonomen Fahrens neu auszuloten: Durch die Anwendung von Deep Reinforcement Learning, insbesondere des Algorithmus Deep Deterministic Policy Gradient (DDPG) , konnten sie ein Modell entwickeln, das in der Lage ist, Rennwagen auf unbekannten Strecken mit erstaunlicher Präzision zu steuern.
Optimierte Rundenzeiten – maximale Performance
Im Gegensatz zu Personenkraftwagen, bei denen Sicherheit die oberste Priorität hat, ist das Hauptziel eines Rennwagens die Minimierung von Rundenzeiten. Der Schwerpunkt des mit AVL List aus Graz cofinanzierten Forschungsprojekts lag daher primär auf der Entwicklung eines autonomen Fahrsystems, das es professionellen Fahrern ermöglicht, ihre Rennlinie zu verbessern und die physikalischen Grenzen des Fahrzeugs auszureizen. Traditionell wird dieses Problem durch Methoden der Steuerungstheorie angegangen, die jedoch oft manuelle Anpassungen und tiefes Domänenwissen erfordern. Mit den RL-Modellen des Know Centers wird dieser Prozess deutlich optimiert.
Revolutionäre Algorithmen für maximale Leistung
Die Ergebnisse der Forschung zeigen, dass die von den Wissenschaftler:innen entwickelten RL-Modelle nicht nur schneller fahren können als bestehende, handgefertigte Open-Source-Bots, sondern auch in der Lage sind, auf unbekannten Strecken zu generalisieren. Das bedeutet, dass diese Modelle nicht nur auf bestimmten, vorhergesehenen Strecken gut funktionieren, sondern auch auf neuen und unerforschten Strecken optimale Leistungen erbringen.
Ein wesentlicher Beitrag dieses Projekts ist die Entwicklung eines einfachen Schemas, das den Erkundungsraum reduziert, wenn zwei Outputs im kontinuierlichen Aktionsraum einander ausschließen sollten. Zudem wurde eine Modifikation des Zielwerts eingeführt, um ein Problem zu lösen, das bei der Abtastung von End-of-Episode-Übergängen auftritt. Ein weiteres Highlight von Formula RL ist der Einsatz der sogenannten Look Ahead Curvature (LAC), die Informationen über die bevorstehende Streckenform bereitstellt, welche in einer vorherigen Runde aufgezeichnet wurden. Diese innovative Technik ermöglicht es dem autonomen System, die Rennstrecke so effizient wie möglich zu bewältigen.
Vielfältige Anwendungen und Zukunftsperspektiven
Die Erkenntnisse aus diesem Projekt haben weitreichende Implikationen, die über den Rennsport hinausgehen. Das Know Center sieht in dieser Technologie eine Grundlage für die Entwicklung neuer Systeme in verschiedenen Industriebereichen. Etwa kann die Verwendung von RL-Modellen in der Automobilindustrie den Grundstein für die nächste Generation autonomer Fahrzeuge legen, die sicherer, effizienter und anpassungsfähiger an verschiedene Fahrbedingungen sind. Ähnliche Ansätze können genutzt werden, um Lieferketten zu optimieren, indem autonome Transportfahrzeuge in komplexen Umgebungen navigieren. Die Prinzipien der autonomen Navigation und Entscheidungsfindung können auf die Entwicklung von autonomen Drohnen und Raumfahrzeugen übertragen werden.
Das Know Center plant, diese Technologien weiter zu erforschen und gemeinsam mit Partnern aus der Industrie neue Standards in der autonomen Fahrzeugtechnik zu setzen. Dies wird nicht nur die Wettbewerbsfähigkeit der europäischen Industrie stärken, sondern auch einen positiven Einfluss auf die globale Automobilbranche haben.
„Wir stehen an der Schwelle zu einer neuen Ära im autonomen Fahren. Unsere Forschung zeigt, dass die Kombination von künstlicher Intelligenz und Telemetriedaten nicht nur im Rennsport, sondern in vielen Industriezweigen revolutionäre Veränderungen bewirken kann. Am Know Center sind wir stolz darauf, mit unserer Arbeit neue Maßstäbe zu setzen und Innovationen zu fördern, die die Art und Weise, wie wir Mobilität verstehen, nachhaltig verändern werden“, resümiert Oliver Bernecker, CEO Know Center. (BS)