Kurz-Fakten
- Die Angabe 7B, 70B oder 405B bezeichnet Milliarden Parameter
- Kleine Modelle laufen auf eigener Hardware, große brauchen Rechenzentren
- Seit 2024 erreichen kleinere Modelle mit besserem Training frühere Spitzenwerte
- Die Parameterzahl sagt nichts über Aktualität oder Faktentreue aus
Bedeutung in der Praxis
Die Parameterzahl eignet sich schlecht als Auswahlkriterium. Für einen Assistenten, der Fragen aus eigenen Dokumenten beantwortet, ist ein kleineres Modell mit sauberer Dokumentenanbindung meist besser als ein großes ohne. Für die Kosten macht der Unterschied dagegen viel aus.