Erster Data Science (online) Journal Club

Ähnlich wie in anderen Departments soll ein regelmäßiger Informationsaustausch über aktuelle Data Science Themen etabliert werden. Den Anfang macht Sebastian Eresheim, unser Experte im Spezialbereich des Reinforcement Learning. Im Anschluss an die Präsentation des Papers findet eine angeregte Diskussion über die Inhalte statt.

Besonderer Fokus dieses Formats liegt darauf, wie die aktuellen Forschungsergebnisse in unserer Lehre verwendet werden können, etwa für Projekte, Bachelor- oder Masterarbeiten.

Zum Thema: Reinforcement Learning

Künstliche Intelligenz hat mittels Reinforcement Learning („bestärkendem Lernen“) in den letzten Jahren auf unterschiedlichsten Gebieten Übermenschliches erreicht. Angefangen bei Brettspielen, über komplizierte Echtzeit-Strategiespiele hinweg, bis hin zur Steuerung von „Internet-Ballons“ in der Stratosphäre.

Die jeweilige Aufgabenstellung so zu formulieren, was die künstliche Intelligenz dabei zu bewerkstelligen hat, war in der Vergangenheit oftmals der erste Schritt. Je fortgeschrittener diese lernfähigen Programme dabei werden und je mehr Aufgaben ein einzelnes Programm übernimmt, desto größer wird dabei auch die Herausforderung werden, der künstlichen Intelligenz beizubringen was sie bei der Erreichung ihres Ziels nicht machen soll.

Ein Beispiel dafür: Ein Roboter soll Essen servieren, dabei soll er aber gleichzeitig darauf achten, keine Einrichtungsgegenstände oder Gegenstände, die seinen Weg kreuzen, zu zerstören. Oft sind sich die Menschen die diese Programme erstellen dieser Nicht-Ziele nicht bewusst, oder es gibt zu viele als dass man sie einzeln auflisten könnte.

Forscher der Oregon State University haben hierfür nun in ihrem Paper „Avoiding Side Effects in Complex Environments“ einen möglichen Ansatz zur Bewältigung dieses Problems auf komplexeren Umgebungen evaluiert. Dabei haben sie festgestellt, dass die Anwendung dieses Ansatzes in seiner einfachsten Form, schon eine beträchtliche Auswirkung auf die Vermeidung von Nebeneffekten hat.

Nächster Online Journal Club geplant

Der nächste Online Journal Club wird in ca. 3 Wochen stattfinden, eine entsprechende Ankündigung folgt. Wir freuen uns schon jetzt über rege Teilnahme!