Welche KI-Lösungen findet ihr gegenwärtig sehr interessant, toll, genial …?

Ich finde Reinforcement Learning sehr spannend.

Reinforement Learning ist eine KI-Methode, die nicht lediglich anhand markierter Trainingsdaten lernt (Supervised Learning, z.B. Bild-Klassifizierung) oder unüberwacht neue Strukturen aufdeckt (Unsupervised Learning, z.B. Anomalieerkennung). RL basiert darüber hinaus auf der operanden Konditionierung – einem lernpsychologischen Konzept. Also dem Lernen von Reiz-Reaktionsmustern. Somit ist RL noch einmal mehr an der Natur orientiert als die anderen Machine Learning Paradigmen. Es hat bereits sehr vielversprechende Ergebnisse erzielt (Go-Computer) und ist auch ein zentraler Baustein für autonomes Fahren uvm.

Kurzum: Man kann sich das so vorstellen, dass es einen Agenten (KI) und eine Umgebung gibt. Der Agent nimmt seine Umgebung wahr und kann dann Handlungen in ihr ausführen. Je nachdem welche Handlung er ausführt und welchen Effekt diese Handlung auslöst, wird der Agent belohnt oder bestraft. Er wird also konditioniert: Tue gutes, erhalte Belohnung, tue schlechtes, erhalte Bestrafung. Der Agent versucht also die Umgebung und die Konsequenzen seiner Handlungen zu konkreten Umgebungszuständen soweit wie möglich zu lernen und vorherzusagen. Am Ende möchte er so viel Belohnung wie möglich erhalten.

Bild-Quelle: https://www.kdnuggets.com/2019/10/mathworks-reinforcement-learning.html

Spannend sind neuste Ansätze des Self-Reinforcement-Learning. Bisher haben wir Menschen RL-Agenten die Belohnung immer vorgegeben – also irgendwie berechnet, wie der Agent in welcher Situation belohnt werden soll.

Nun versucht man Konzepte zu entwickeln, wie der Agent von sich aus intrinsisches Verhalten entwickeln kann. Also nicht nur auf eine externe Belohnung irgendwelcher Menschen hinarbeitet sondern eigene Bedürfnisse entwickelt, nach denen er handelt. Er belohnt sich z.B. selbst, indem er von sich aus möglicherweise Konzepte wie “Geschmack”, “Spaß” oder “Moral” lernt.

Rational betrachtet sehe ich aber insb. zwei wesentliche Dimensionen, die grob vorgegeben sind, aber die hinsichtlich der Selbstbelohnung vom Agenten selbst spezifiziert werden können:

• Qualität: Ein möglichst gutes/sicheres/… Ergebnis erreichen
• Effizienz/Kosten: Möglichst schnell / mit möglichst geringem Mitteleinsatz ans Ziel kommen

Das eignet sich zur Lösung von Optimierungsproblemen. Aber “natürlichere” Verhaltensweisen sind ein Feld für sich. Wir Menschen leben in Gruppen, haben somit entsprechende zusammenhängende natürliche Bedürfnisse und Einstellungen. Z.B. Egoismus, Altruismus, Liebe, Neid usw.. Zudem haben wir einen Sexualtrieb, einen Stoffwechsel und verbundene Bedürfnisse wie Hunger, Durst usw.

Das hat ein Computerprogramm natürlich nicht von sich aus. Es würde auch keinen Sinn machen, es künstlich anzutrainieren. Es ist ja kein biologisches Lebewesen.

Ich denke aber, dass unsere Ethik und Moral – unsere ganze Kultur – letztlich auf den genannten Ur-Instinkten basiert. Teilweise lassen sich die Triebe zwar irgendwie auf die generischen Dimensionen Qualität und Effizienz abbilden, aber der KI fehlt das evolutionär bedingte “ES”, wie Freud es nannte.

Bild-Quelle: https://de.wikipedia.org/wiki/Strukturmodell_der_Psyche