Kurz-Fakten
- Der Durchbruch kam ab 2012 mit ausreichend Rechenleistung auf Grafikkarten
- Moderne Sprachmodelle bestehen aus Milliarden einzelner Parameter
- Je tiefer das Netz, desto schwerer nachvollziehbar sind seine Entscheidungen
- Das Training großer Modelle ist energieintensiv, die Nutzung deutlich weniger
Bedeutung in der Praxis
Die Stärke von Deep Learning ist zugleich sein Problem: Es findet Merkmale selbst, kann aber nicht sagen, welche. Bei einer Kreditentscheidung oder einer medizinischen Einschätzung ist das kein Detail, sondern der Kern der Auseinandersetzung um erklärbare KI.