deniz.in

Piyasalar

Hava durumu

Hava durumu yükleniyor

· kaynak dev.to (home feed)

DeepMind, Gemini 4 Argon'u geliştiricilere açtı: API erişimi ve kullanıma göre ödeme modeliyle çok modlu LLM

DeepMind, Gemini 4 Argon'u geliştiricilere açtı: REST ve gRPC üzerinden sunulan, kullanıma göre ödeme fiyatlandırmasına, görsel girişe ve yerleşik güvenlik korumalarına sahip, çok modlu ve talimatlarla eğitilmiş bir LLM.

DeepMind, Gemini 4 Argon'u geliştiricilere açtı: API erişimi ve kullanıma göre ödeme modeliyle çok modlu LLM

DeepMind, Gemini 4 Argon'u API üzerinden açtı

dev.to'da yayımlanan bir deneyim yazısına göre DeepMind, Gemini model ailesinin en yeni üyesi olan Gemini 4 Argon'u erişime açtı. Argon; metin, kod ve görselleri kabul eden, 1,6 trilyon parametreye kadar çıkabilen, çok modlu ve talimatlarla eğitilmiş (instruction-tuned) büyük bir dil modeli olarak tanımlanıyor ve geliştiricilere hem REST API hem de gRPC endpoint'i üzerinden, kullanıma göre ödeme fiyatlandırmasıyla sunuluyor. Model metin, kod ve görsel girdisini kabul ediyor — PNG ve JPEG dosyaları bir prompt'a eklenebiliyor — bu da bir mimari diyagramını okuyup eşleşen Terraform kodunu üretmek gibi görevler için artık ayrı bir görüntü işleme servisinin bir dil modeline dikilmesi gerekmediği anlamına geliyor.

Bildirilen performans ve güvenlik iddiaları

dev.to yazısı, DeepMind tarafından yayımlanan ve iddiaya göre Argon'un akıl yürütme ve kod üretme görevlerinde Gemini 1.5'i geçmesini, token başına yaklaşık yüzde 30 daha az işlem gücü kullanmasını gösteren benchmark'lara atıf yapıyor. Doğruysa bu, üretim iş yükleri için daha ucuz ve daha düşük gecikmeli çıkarım (inference) anlamına geliyor. Yazı ayrıca Argon'un, önceki Gemini sürümlerine kıyasla gerçeksel sorgulardaki halüsinasyonları yaklaşık yüzde 45 azaltan ayarlanmış bir güvenlik katmanıyla geldiğini bildiriyor.

Bu rakamlar tek kaynaklı: hepsi tek bir topluluk yazısından geliyor ve benchmark verileri bağımsız bir değerlendirme değil, doğrudan DeepMind'ın kendisinden kaynaklanıyor. Ayrıca belirtilen karşılaştırma tabanının, ailenin daha eski bir modeli olan Gemini 1.5 olduğuna dikkat çekmek gerekiyor; yani bu farklar Argon'un güncel rakiplerine karşı nerede durduğunu daha az şey söylüyor olabilir.

Nasıl entegre edilir

Yazı minimal bir kurulumu adım adım anlatıyor. Geliştiricilerin Gemini konsolundan bir API anahtarına ve Python 3.10 veya daha yeni bir sürüme ihtiyacı var; arka plandaki HTTP çağrılarını resmi google-gemini pip paketi hallediyor. Yazarın örneği istemciyi yalın tutuyor: çağrıları tenacity retry'larıyla sarıyor, görsel baytlarını MIME türüyle birlikte prompt'a iletiyor ve temperature ile çıktı token limitlerini parametre olarak ortaya koyuyor.

Üretim tarafında yazar, istemciyi gecikme temelli otomatik ölçekleme, Prometheus metriklerini dışa aktaran bir sidecar, readiness probe'ları ve Kubernetes secret'tan mount edilen API anahtarıyla bir Kubernetes Deployment arkasında çalıştırıyor. Ek öneriler arasında gRPC endpoint'inde ek yükü azaltmak için HTTP/2'yi etkinleştirmek, yüksek hacimli önbelleklenebilir trafik için Google Cloud Load Balancing ve Cloud CDN kullanmak ve deterministik kod üretimi hatları için temperature'ı sıfıra sabitlemek yer alıyor.

Bir ekibin bildirdiği sonuçlar

Griffin AI Tech'te bir kod asistanı ürünü için çıkarım katmanını kurduğunu söyleyen yazar, ince ayarlı 7 milyar parametreli açık kaynak bir modeli Argon ile değiştirdiklerini bildiriyor. Bu geçiş, token başına maliyeti yaklaşık 0,15 cent azaltmış ve 99. yüzdelik gecikmeyi 850 ms'den kabaca 420 ms'ye düşürmüş. Yönetilen güvenlik katmanı en büyük operasyonel kazanç olarak öne çıkıyor; çünkü modelin güvenli olmayan kod parçacıkları üretmesini engellemek için özel prompt mühendisliği hilelerine olan ihtiyacı azaltmış.

Model her derde deva olarak sunulmuyor. Yazı, çok modlu hattı henüz erken aşamada olarak nitelendiriyor — görselden metne çıktılar aşırı ayrıntılı olabiliyor — ve ekibin, çıktılar aşağı akış servisine ulaşmadan önce halüsinasyonları doğrulamak için Argon'u küçük, damıtılmış bir 3B modelle eşleştirdiğini belirtiyor. Önerilen yaklaşım ise Argon'u temel bir bağımlılık olarak benimsemeden ya da yalnızca yoğun yük kapasitesi yedeği olarak tutmadan önce, gerçekçi yük altında gecikme ve token kullanımını ölçen, sandbox'lanmış bir kavram kanıtısı yapmak.

Neden önemli

Maliyet, gecikme ve gerçekçilikte kazanç iddiasında bulunan, yönetilen, çok modlu ve talimatlarla eğitilmiş bir model, tam da LLM özellikleri çalıştıran birçok ekibin peşinde olduğu dengeyi sunuyor: altyapılarını yeniden mimarmadan daha iyi sonuçlar. Argon'un bildirilen rakamları bağımsız testlerde doğrulanırsa, bu durum kod asistanları, özetleyiciler ve sohbet botları için kendi kendine barındırılan ince ayarlı modellere karşı API tabanlı modellerin elini güçlendirir ve yerleşik koruma bariyerleri, ekiplerin modellerinin çevresinde tuttuğu giderek büyüyen özel güvenlik iskeleti yığınını küçültebilir. Şimdilik kanıtlar tek bir geliştirici yazısında aktarılan DeepMind'ın kendi benchmark'larına dayanıyor; o yüzden öne çıkan rakamları umut verici ama doğrulanmamış olarak görün ve geçiş yapmadan önce kendi iş yüklerinizle benchmark yapın.

  • #gemini
  • #deepmind
  • #llm
  • #api
  • #multimodal

İlgili yazılar