· kaynak dev.to (home feed)
Ücretsiz Qwen modeli bir laptop üzerinde ham AI ağırlıklarını yorumladı, Simon Willison'a göre
Simon Willison ücretsiz Qwen 3.8 27B modelini laptopunda çalıştırdı ve başka bir modelin ham ağırlıklarını yorumlatarak, ağırlık düzenleme iddialarının bağımsız olarak incelenmesinin artık laboratuvar ölçeğinde işlem gücü gerektirmediğini gösterdi.

Ne oldu
Girişimci deneyleri çoğu zaman cesur AI iddialarına yönelik erken bir denetim işlevi gören bağımsız geliştirici ve araştırmacı Simon Willison, ücretsiz bir açık ağırlıklı (open-weights) model kullanarak başka bir sinir ağının ham ağırlıklarını yorumladı — üstelik kendi laptopunda. dev.to'da yer alan Fathom News haberine göre Willison, Qwen 3.8 27B'yi yerel olarak çalıştırdı ve yaklaşık 45 dakikalık bir kurulumun ardından, bu teknikle ilgili yeni bir araştırma makalesindeki fikirlerden birini yeniden üretti.
Sonucun önem taşıması çoğunlukla nerede çalıştığından kaynaklanıyor. Modellerin başka modellerin iç yapısını okuyup düzenlemesine dair iddialar şimdiye dek arkalarında ağır altyapı bulunan büyük laboratuvarlardan geldi. Tüketici sınıfı bir laptop ve ücretsiz olarak indirilebilen bir model bu tabloyu değiştirdi.
Temel makale ne iddia ediyor
Makale, büyük dil modellerinin yalnızca metin üretmenin ötesine geçebileceğini savunuyor: bir sinir ağının sayısal ağırlıklarını doğrudan inceleyebilir, hatta değiştirebilirler. Habere göre makale, GPT-6 Astra'nın bir ağın ne için eğitildiğini yalnızca ham ağırlıklarını inceleyerek çıkarsadığını ve Astra'nın Qwen3.5-0.8B'nin ağırlıklarının yalnızca %0,016'sını değiştirerek bu küçük modelin MATH-500 puanını %7,9'dan %48,1'e yükselttiği daha güçlü bir sonucu da açıklıyor.
Ağırlıklar, eğitilmiş bir ağın içindeki milyarlarca öğrenilmiş sayısal değerdir. Geleneksel olarak opak iç bileşenler olarak ele alınırlar ve yalnızca ileri eğitim, fine-tuning veya pekiştirme yoluyla dolaylı olarak ayarlanırlar — bir modelin ya da insanın kod gibi okuyup yamalayacağı bir malzeme olarak değil.
Laptop testi ne gösterdi, ne göstermedi
Willison'ın deneyi iddianın yorumlama kısmını kapsıyordu. Fathom News, bunun makaledeki çarpıcı rakamları doğrulamadığını özenle belirtiyor: Deney, açık bir modelin başka bir modelin parametrelerini yapılandırılmış, okunabilir bir girdi olarak alıp onlar hakkında akıl yürütebildiğini gösteriyor. Dikkat çekici düzenleme kazanımları ise hâlâ kontrollü koşullar altında üretilmiş laboratuvar sonuçları.
Prompting'den bir katman daha derinde
Haber, bazen weight space programming olarak da adlandırılan bu tekniği, yığında prompt engineering'in bir alt basamağı olarak çerçeveliyor. Model, bir modelin ne söylediğini yönlendirmek yerine, çıktıyı üreten mekanizma üzerinde akıl yürüyor ve onu potansiyel olarak yeniden yazıyor. Yaklaşım tutarsa, bir model başka bir modelin iç yapısını teşhis edebilir ve tam bir yeniden eğitim turu yerine hedefli düzenlemeler önerebilir.
Bu iki yönlü işliyor. Geleneksel eğitim döngüleri olmadan ağırlıkları değiştirebilen bir sistem hataları ucuza kapatabilir — ya da onları aynı kolaylıkla gizleyebilir, ki bu da en bariz güvenlik endişesi.
Neden önemli
Qwen 3.8 27B ücretsiz ve açık ağırlıklı olduğu için, artık mütevazı donanıma sahip herkes bu tür bir doğrulamayı deneyebilir; tek bir laboratuvarın sözüne güvenmek zorunda değildir. Yayımlanan en çarpıcı rakamlar hâlâ tek bir kuruluş içinde dikkatle seçilmiş gösterimlerden geliyor ve yöntemin mimariler ve gerçekçi görevler genelinde geçerli olup olmadığını öğrenmenin tek yolu bağımsız tekrarlamadan geçiyor. Ham ağırlıkların okunmasının bir laptop üzerinde denenebileceğini göstererek Willison'ın testi, kuramsal bir iddiayı pratik bir araştırma hedefine dönüştürüyor ve bunu inceleyebilecek insan havuzunu genişletiyor. İzlenecek bir sonraki sinyal, başkalarının bu çalışmayı yeniden üretip genişletip genişletmeyeceği ya da en büyük kazanımların kontrollü ortamlarla sınırlı kalıp kalmayacağı olacak.
- #open-weights
- #qwen
- #ai-research
- #model-interpretability
- #llm
İlgili yazılar
- Ricursive'nin Ripple-65B'si, agentic coding'de 70 kat daha az rollout ile ABD open-weight SOTA iddiasında
- Tencent'in Hy4'ü, açık ağırlıklı sürüm öncesinde amiral gemisi modeline görü ve bilgisayar kullanımı yetenekleri ekliyor
- Anthropic, LLM yanıtlarını doğrulamaya yönelik zkSNARK sistemi FlashProve'u açık kaynak yaptı