Google, TPU'lar üzerinde otonom LLM ince ayarını tanıttı

Otonom ince ayar nedir?

Google Developers Blog'da paylaşılan "autofinetune" projesi, büyük dil modellerinin (LLM) eğitim sonrası süreçlerini insan müdahalesi olmadan yürüten bir araştırma döngüsü öneriyor. Kapsam, denetimli ince ayar (SFT) ile GRPO üzerinden pekiştirmeli öğrenmeyi içeriyor.

Nasıl çalışıyor?

Geliştirici tek bir Markdown dosyasında sınır koşullarını ve değerlendirme metriklerini tanımlıyor. Ardından bir yapay zekâ ajanı devreye giriyor:

• Eğitim betiklerini yinelemeli olarak düzenliyor,
• Deneyleri başlatıyor,
• Doğrulanan hiperparametre iyileştirmelerini otomatik olarak Git'e işliyor.

Böylece manuel ayar döngüleri ortadan kalkıyor.

Hangi altyapı kullanılıyor?

Sistem Google'ın yapay zekâ yığını üzerine kurulu: Tunix, Gemma modelleri ve Cloud TPU'lar. Proje, hem fonksiyon çağırma hem de matematiksel akıl yürütme modellerinde insan müdahalesi olmadan performans artışı sağlandığını gösteriyor.

Ne anlama geliyor?

Bu yaklaşım, ince ayar sürecinin büyük bölümünü otomatikleştirerek geliştiricilerin deney tasarımına ve değerlendirmeye odaklanmasını sağlıyor. Ancak proje henüz bir araştırma çalışması; üretim ortamlarına ne ölçüde taşınacağı belirsiz.