Aleph Alpha veröffentlicht Kolibri, ein offenes 78B-Modell für Deutsch und Englisch unter Apache 2.0

Das MoE-Modell aktiviert 3,46 Mrd. Parameter pro Token und unterstützt bis zu 1M Token Kontext, laut Modellkarte.

Das MoE-Modell aktiviert 3,46 Mrd. Parameter pro Token und unterstützt bis zu 1M Token Kontext, laut Modellkarte.