Joey-1 Karar Modeli: Baseten’den joey-1 – Milyon Jeton Başına 0.01

Yapay zekâ ekosisteminde metin üretme odaklı devasa dil modelleri sektörün hakimi gibi görünse de, şirketler artık otomasyon ve iş akışı yönlendirme süreçleri için çok daha pratik araçlara yöneliyor. Bu eğilimin son örneklerinden biri olan joey-1, yapay zekâ altyapı sağlayıcısı Baseten bünyesindeki Base Labs araştırma laboratuvarı tarafından geliştirildi. Doğrudan metin üretmek yerine karar verme süreçlerine odaklanan bu iki milyar parametreli model, geleneksel sistemlerden farklı bir mimari yaklaşımla çalışıyor.

Joey-1 Karar Modeli: Baseten'den joey-1 - Milyon Jeton Başına 0.01
Görsel: DeltaWorks / Pixabay

Sistematik Karar Mekanizmaları ve Teknik Altyapı

Qwen3.5-2B modelinin tam ince ayardan geçirilmesiyle (post-training) üretilen joey-1, serbest formlu metin üretmek yerine bir etiket ve kalibre edilmiş bir olasılık değeri döndürüyor. Bu yapı, geliştiricilerin model çıktısını ayrıştırmak (parsing) için ek kodlar yazma zorunluluğunu ortadan kaldırıyor. Sistem temel olarak üç farklı soru tipini destekliyor: Belirli seçenekler arasından seçim yapma, evet/hayır ihtimallerini hesaplama ve aciliyet gibi sıralı seviyeleri puanlama.

Eğitim sürecinde 6.21 milyon karar örneği kullanılan model; çekirdek karar becerileri, güvenlik filtreleri, uzman alan değerlendirmeleri ve kamuya açık verilerle eğitildi. Modelin en dikkat çekici yönlerinden biri, çapraz entropi kaybının yanı sıra Brier kalibrasyon terimiyle eğitilmiş olması. Bu kalibrasyon mekanizması sayesinde kullanıcılar belirli bir güven eşiği belirleyebiliyor. Modelin kararsız kaldığı veya belirsizlik tespit ettiği durumlarda ise sorgular daha büyük modellere veya insan operatörlere yönlendirilebiliyor.

Reklam

Hız, Maliyet ve Pazar Konumlandırması

Baseten’in paylaştığı verilere göre model, yaklaşık iki bin tokenlik ortalama bir istekte yirmi milisaniye gibi oldukça düşük bir uçtan uca gecikme süresi sunuyor. Bu hız, şirketin daha büyük modellerinden biri olan elephant-1 modeline kıyasla yaklaşık iki buçuk kat daha hızlı çalışmasını sağlıyor. Model API’leri üzerinden sunulan hizmetin fiyatlandırması ise milyon girdi jetonu başına sadece 0.01 dolar olarak belirlenmiş durumda.

Bu düşük maliyet, özellikle milyonlarca destek talebi işleyen kurumsal yapılar için ciddi bir bütçe avantajı yaratıyor. Örneğin, ayda on milyon destek talebi alan bir sistemin bu model üzerinden işletilmesi, daha büyük alternatiflerine kıyasla operasyonel maliyetleri katbekat azaltabiliyor. Hugging Face üzerinden MIT lisansıyla açık ağırlıklar olarak paylaşılan model, tek bir CUDA grafik kartı üzerine kolayca kurulabiliyor ve API uç noktaları üzerinden erişilebiliyor.

Karar Modellerinin Sektördeki Yeri ve Sınırlamalar

Baseten’in geçen hafta duyurduğu yirmi yedi milyar parametreli mammoth-1 ve dokuz milyar parametreli elephant-1 modelleriyle aynı eğitim verisini ve API yapısını paylaşan joey-1, bu ailenin en küçük üyesi konumunda. Jev Decision Index 0.4 kamu testlerinde dört milyar parametre altındaki modeller arasında en yüksek skoru elde eden sistem, genel bilgi birikimi konusunda ise daha büyük kardeşlerinin gerisinde kalıyor.

Bu durum, joey-1 modelinin karmaşık genel sohbetler veya yaratıcı metin yazarlığı için uygun olmadığını, aksine büyük dil modellerinin önüne konulan bir ilk aşama yönlendirici (router) ve sınıflandırıcı olarak tasarlandığını net bir şekilde gösteriyor. Geliştiriciler, bu küçük ve maliyetsiz modeli kullanarak büyük ve pahalı yapay zekâ sistemlerinin yükünü hafifletebiliyor; yalnızca modelin kararsız kaldığı karmaşık durumlarda devasa modelleri devreye sokabiliyor.

Reklam

Kaynaklar

  • Baseten Releases joey-1, a 2B Decision Model at $0.01 per 1M Tokens (marktechpost.com)
  • unite.ai

Bu yazı, yukarıdaki kaynaklardan yapay zekâ yardımıyla Türkçe olarak derlenmiş bir özettir. Ayrıntılar ve resmi bilgi için kaynaklara başvurun.

İlgili Haberler

Enver KOÇAK

Enver KOÇAK

Gaziantep merkezli yazılım mühendisi, yapay zekâ ve siber güvenlik uzmanı; Etesio Teknoloji'nin kurucusu ve enverkocak.com'un yayıncısı. Yapay zekâ modellerini, araçlarını ve sektördeki gelişmeleri günlük olarak takip ediyor; haberleri kaynaklarıyla birlikte Türkçe olarak derliyor. Fatih Sultan Mehmet Vakıf Üniversitesi Sürekli Eğitim Merkezi (FSMSEM) – 560 saatlik Gazetecilik Eğitimi (Ağustos–Aralık 2024) sertifikasına sahiptir.

İlgili Haberler

Prime Mega MoE Eğitimi Hızlandırıyor

Yapay zekâ altyapı geliştiricileri, devasa dil modellerinin eğitim süreçlerini daha verimli hale getirmek için sürekli yeni donanım optimizasyonları ve yazılım çekirdekleri geliştiriyor. Bu alandaki en son yeniliklerden biri, açık kaynak…

Devamını oku

Mistral Large 4 ve Hugging Face Ekosistemindeki Güvenlik Dalgası

Yapay zekâ dünyası, devasa dil modellerinin peş peşe açık kaynak dünyasına katılmasıyla hareketli günlerden geçiyor. Bu hareketliliğin merkezinde ise hem devasa boyutlarıyla dikkat çeken yeni nesil modeller hem de bu…

Devamını oku

Bir yanıt yazın

E-posta adresiniz yayınlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir