Bundesministerium für Bildung und Forschung f?rdert zwei KI-Nachwuchsgruppen an der Universit?t Paderborn
Künstliche Intelligenz (KI) gilt als eine der zukünftigen Schlüsseltechnologien. Ob Sprachassistenten, Smarthomes oder Modelle zur Vorhersage von Pandemien: KI unterstützt uns in unz?hligen Bereichen und ist aus unserem Alltag nicht mehr wegzudenken. Um die rasanten technischen Entwicklungen umfassend verstehen, die Technologie zielgerichtet weiterentwickeln und in die Anwendung bringen zu k?nnen, ist Forschung auf dem Gebiet wichtiger denn je. Wie sich maschinelles Lernen optimieren und effektiver einsetzen l?sst als bisher, erforschen seit September gleich zwei neue KI-Nachwuchsgruppen an der Universit?t Paderborn. Ziel der jungen Wissenschaftler*innen ist es zum einen, durch die Kombination von maschinellem Lernen und Expertenwissen die Qualit?t von Modellen dynamischer Systeme zu verbessern und zum anderen, das Training tiefer neuronaler Netze durch sogenannte Mehrzieloptimierungsmethoden robuster, effizienter und interaktiver zu gestalten. Das Bundesministerium für Bildung und Forschung (BMBF) f?rdert beide Gruppen für drei Jahre mit insgesamt ca. 1,8 Millionen Euro.
Die zwei Teams planen, eng zusammenzuarbeiten, um ihre Kompetenzen im KI-Bereich bestm?glich zu bündeln. Paderborn bietet dafür die optimale Infrastruktur: Durch das Paderborn Center for Parallel Computing (PC2) haben die Wissenschaftler*innen die M?glichkeit, neuste HPC-Hardware (High Performance Computing) für Funktions- und Demonstrationstests zu nutzen. Die Methoden, Softwarewerkzeuge und Daten der Nachwuchsgruppen sollen am Ende einer breiten Anwendergemeinschaft kostenfrei als Open-Access-Material zur Verfügung gestellt werden.
Vorteile von Experten- und Datenwissen für Modellbildung vereinen
Von der Temperatursch?tzung in Elektromotoren bis hin zur Vorhersage der COVID-19-Verbreitungsdynamik oder der Arbeitslosenquote: Eine Vielzahl dynamischer Systeme in den Ingenieur-, Wirtschafts- und Sozialwissenschaften sowie der Physik, Biologie, Chemie und Medizin k?nnen durch mathematische Modelle beschrieben werden. Die Modellierung dieser komplexen dynamischen Systeme ist jedoch oft eine Herausforderung. ?In den vergangenen Jahren ist ein klarer Trend weg von Experten- hin zu Black-Box-Modellen, die mittels maschinellen Lernens entwickelt werden, erkennbar. Beide haben für sich genommen viele Vor- allerdings auch Nachteile“, so Dr.-Ing. Oliver Wallscheid vom Paderborner Institut für Elektrotechnik und Informationstechnik und Leiter einer der neuen KI-Nachwuchsgruppen. Ziel der Wissenschaftler*innen um Wallscheid ist es, die Vorteile von experten- und datengetriebener Modellbildung zu vereinen, um die Modellgüte in Bezug auf Genauigkeit, Robustheit und Komplexit?t für verschiedene Anwendungen ma?geblich zu verbessern. Im Projekt ?Automatisierte Modellbildung und -validierung dynamischer Systeme mittels des maschinellen Lernens sowie a priori Expertenwissen“ (ML-Expert) erforschen sie, wie die im Grundsatz verschiedenen Modellierungsparadigmen – von Fachleuten bzw. durch KI entwickelt – in einer hybriden Modellbildung vereint werden k?nnen.
Wallscheid erkl?rt die bisherige Problematik: ?W?hrend expert*innen-basierte Ans?tze das Systemverhalten robust und interpretierbar wiedergeben, ben?tigen diese h?ufig viel Zeit sowie Personalressourcen und weisen systematische Abweichungen aufgrund von Vereinfachungen auf. Demgegenüber k?nnen Black-Box-Modelle, also datengetriebene Modelle, mitunter schnell und ohne nennenswertes Vorwissen generiert werden. Dadurch lassen sich zwar genaue und skalierbare Modelle erzeugen, es mangelt ihnen allerdings u. a. an Interpretierbarkeit und Robustheit gegenüber Ausrei?ern.“
Durch eine effiziente und ressourcenorientierte Datengenerierung, Modellbildung und -validierung sollen zukünftig schnellere Entwicklungs- und Applikationszyklen erreicht werden. ?Insbesondere für kostenrelevante industrielle Anwendungen, z. B. in der Automobil-, Energie- oder Automatisierungsbranche, stellt das auch vor dem Hintergrund eines sich zuspitzenden Fachkr?ftemangels einen signifikanten Mehrwert dar. Unsere Arbeiten sollen allerdings nicht auf diese Branchen beschr?nkt, sondern dom?nenübergreifend ausgerichtet sein“, betont Wallscheid.
Optimale Kompromissl?sungen für maschinelle Lernverfahren
Maschinelle Lernverfahren stecken darüber hinaus in zahlreichen weiteren Anwendungen. Sogenannte tiefe neuronale Netze (engl.: Deep Neural Networks, kurz: DNN) erm?glichen beispielsweise eine intelligente Bilderkennung oder Sprachverarbeitung. Der Anstieg verfügbarer Rechenkapazit?ten erlaubt es, immer gr??ere, tiefere und komplexere DNNs zu konstruieren. Mit diesen Fortschritten steigen auch die Herausforderungen: Im Optimalfall sollten bei der Konstruktion und dem Training von DNNs zeitgleich zahlreiche, mitunter widersprüchliche, Ziele bestm?glich erfüllt werden. ?Im Gegensatz zu vielen Bereichen aus Technik und Gesellschaft, in denen die Betrachtung mehrerer Kriterien selbstverst?ndlich ist, z. B. bei der Krebsbehandlung, liegt das enorme Potenzial einer Mehrzielbetrachtung im maschinellen Lernen bislang weitestgehend brach“, so Jun.-Prof. Dr. Sebastian Peitz vom Institut für Informatik. Das will der Leiter der neuen KI-Nachwuchsgruppe mit dem Vorhaben ?Multikriterielles Maschinelles Lernen – Effizienz, Robustheit, Interaktivit?t und Systemwissen“ (MultiML) ?ndern. Ziel ist es, durch die Entwicklung von Mehrzieloptimierungsmethoden das Training von DNNs robuster, effizienter und interaktiver zu machen und somit entscheidend zu verbessern. Darüber hinaus soll die zus?tzliche Einbindung von Systemwissen die Konstruktion extrem effizienter, auf bestimmte Problemklassen zugeschnittener Methoden erm?glichen.
Peitz nennt einfache Beispiele: ?In nahezu allen Bereichen aus Technik, Wirtschaft und Gesellschaft tritt das Dilemma auf, dass miteinander in Konkurrenz stehende Kriterien von ?hnlicher Bedeutung sind: Elektrische Fahrzeuge sollen gleichzeitig schnell fahren und eine hohe Reichweite haben, ein herzustellendes Produkt soll eine hohe Qualit?t und niedrige Produktionskosten aufweisen und bei politischen Entscheidungen sollen sowohl ?konomische als auch ?kologische Aspekte berücksichtigt werden.“ Die Herausforderung lautet dabei immer: optimale Kompromissl?sungen, sogenannte Pareto-Optima, identifizieren und ausw?hlen. ?Auch im maschinellen Lernen gibt es zahlreiche Kriterien, die gleichzeitig bestm?glich erfüllt werden sollten, wie die Robustheit gegenüber unvollst?ndigen Eingangsdaten, die Generalisierung über die Trainingsdaten hinaus oder die bestm?gliche Einhaltung physikalischer Gesetzm??igkeiten“, so der Informatiker weiter.
Durch die Entwicklung von Mehrzieloptimierungsmethoden für das maschinelle Lernen sollen Algorithmen erm?glicht werden, die es erlauben, auf h?chst effiziente Art die Menge der optimalen Kompromisse zu bestimmen. ?Die Kenntnis aller Kompromissl?sungen erm?glicht es Anwender*innen unter anderem, sehr viel informierter und bewusster Abw?gungen zu treffen und Lernverfahren situationsbedingt anzupassen, indem eine neue Priorisierung der einzelnen Ziele vorgenommen werden kann“, erkl?rt Peitz.