Aleph Alpha, Almanca ve İngilizce için açık ağırlıklı 78 milyar parametreli Kolibri adlı MoE modelini yayımladı

Aleph Alpha, Kolibri'yi Apache 2.0 ile yayımlıyor

3 Ekim 2026'da Alman yapay zeka şirketi Aleph Alpha, ağırlıkları Hugging Face üzerinde Apache 2.0 lisansıyla sunulan, Almanca ve İngilizce için açık ağırlıklı bir dil modeli olan Kolibri'yi yayımladı. Hacker News'in ana sayfasına ulaşan tej.as blogundaki teknik yazıda özetlenen şirket lansman materyallerine göre model, Almanya ve Finlandiya'daki altyapıda sıfırdan eğitildi; Aleph Alpha, egemen Avrupayı yapay zekası söyleminde bu noktaya ağır basıyor. Adı Almancada sine kuşu anlamına geliyor; hilesi hafif kalmak olan bir model için uygun bir isim.

Öne çıkan rakamlar şöyle: mixture-of-experts olarak düzenlenmiş 78,1 milyar toplam parametre, herhangi bir token için yalnızca 3,46 milyarı, yani yaklaşık %4,4'ü aktif; doğal bağlam penceresi 262.144 token olup 1.048.576'ya kadar doğrulandı; tool calling; dört akıl yürütme düzeyi; bilgi kesim tarihi 18 Haziran 2026. Eğitim, 768 NVIDIA B200 GPU üzerinde yaklaşık 24 trilyon token üzerinden gerçekleştirildi; bunların beşte birinden fazlası Almancaydı.

Almanca metin etrafında kurgulanmış

Kolibri'nin 50 katmanının her biri 384 uzman artı bir paylaşılan uzman içeriyor ve bir router her token'ı 384 uzmandan 6'sına gönderiyor. 78 milyar parametreyi token başına yaklaşık 3,5 milyarlık gerçek hesaplamaya dönüştüren şey bu. Model kartının açıkça belirttiği takas şudur: Herhangi bir anda yalnızca küçük bir bölümü çalışsa da tüm parametre setinin bellekte durması gerekiyor; FP8'de ağırlıklar yaklaşık 78 GB yer kaplıyor.

Tokenizer daha sıra dışı kısmı. Aleph Alpha, byte-pair birleştirmeyi koruyan ancak aday birleştirmeleri Unigram hedefiyle puanlayan ve böylece Almanca birleşik kelimeleri bozulmadan koruyan UniBPE adını verdiği yeni bir algoritmayla 128.000 token'lık bir kelime dağarcığı eğitti. Şirketin teknik raporu, Almanca metin için GPT-5'ün tokenizer'ından %11,2 daha az token iddia ediyor; bu, ölçtüğü dokuz alternatif arasındaki en iyi sonuç.\n tej.as yazarı bunu bağımsız olarak, yoğun hukuki metinden oluşan 185 KB'lık tüm Alman anayasasını altı tokenizer ile token'lara ayırarak test etti. Kolibri, GPT-4o ve GPT-5'in tokenizer'ı olan o200k_base'in 41.482'sine karşılık 35.190 token'a ihtiyaç duydu; bu yaklaşık %15 daha az, oysa İngilizcede ikisi 39.875'e karşı 39.737 ile fiilen başa baştı. Daha az token, Almanca girdide daha ucuz çıkarım ve aynı bağlam penceresine sığan daha fazla Almanca metin anlamına geliyor.

Attention da bölünmüş durumda: 50 katmandan 40'ı 512 token'lık bir kayan pencere kullanırken her beşinci katman tüm diziyi dikkate alıyor. Konum bilgisi yalnızca kayan pencere katmanlarında mevcut; bağlamın ek hilelere gerek kalmadan eğitilmiş uzunluğun ötesine uzanmasını sağlayan da bu. RULER uzun bağlam kıyaslamasında bir milyon token'da Kolibri'nin taban modeli 63,2 puan aldı; Qwen3.5 35B-A3B'nin taban modeli ise 57,5 aldı.

Egemen, ama yıldız işaretli

Aleph Alpha egemenliği iki şekilde çerçeveliyor: model Almanya'daki ekipler tarafından, Avrupa ve Alman hukuku altında, Almanya ve Finlandiya'daki donanımda, şirketin ifadesiyle "yabancı kontrol olmadan" geliştirildi; ayrıca müşteriler dağıtım üzerinde özgürlük ve fikri mülkiyet koruması elde ediyor, böylece bir bakanlık ya da araba tedarikçisi veri binadan hiç çıkmadan kendi sunucularında çalıştırabiliyor. Aleph Alpha ayrıca AB'nin Genel Amaçlı Yapay Zeka Uygulama İlkelerini imzaladı, modelin baştan itibaren AB Yapay Zeka Yasası göz önünde bulundurularak tasarlandığını söylüyor ve kendi değerlendirmelerinin Kolibri'yi her iki dilde karşılaştırılan tüm benzer boyuttaki modellerin üzerine yerleştirdiğini iddia ediyor.

Model kartı yine de Avrupa dışı modellerin veri hattına dokunduğunu açıkça belirtiyor: İngilizce web metni Google'ın Gemma 4'üyle, Almanca metin Mistral-NeMo ile yeniden ifade edildi ve kalite filtreleri için verileri Qwen3-32B etiketledi. Aleph Alpha, ardından eğitim verisini bu tür modellerin taşıyabileceği siyasi önyargıya göre filtrelediğini söylüyor. Lisansın da bir sınırı var: Apache 2.0 ağırlıkları ve yapılandırma dosyalarını kapsıyor; eğitim kodu ve yöntemleri ise şirkette kalıyor.

Neden önemli

Avrupa yapay zeka egemenliği çoğunlukla politika belgelerinde tartışıldı; Kolibri ise açık ağırlıkları, izin verici lisansı, bilinçli Almanca öncelikli mühendisliği ve AB kurallarıyla uyumlu belgeleriyle bunun somut bir eseri. Almanca iş yükleri için tokenizer sonuçları ve uzun bağlam kıyaslaması pazarlamadan ibaret olmayan gerçek verimlilik kazanımlarına işaret ediyor ve yaklaşık 78 GB'lık bellek ayak izi, tam da veri egemenliği isteyen şirket içi dağıtımlar için yönetilebilir. Öte yandan eğitim hattı, egemenliğin burada ne anlama geldiğini gösteriyor: yabancı modellerden izolasyon değil, hukuk, altyapı ve dağıtım üzerinde kontrol. Bu ayrım, Kolibri'yi tamamen Avrupalı bir yığın olarak değerlendiren herkes için önemli.