Fugu Ultra v1.1 milik Sakana AI Mengungguli Fable 5 dalam Pembaruan Terbaru

Sakana AI telah merilis pembaruan signifikan untuk router model cerdasnya, Fugu Ultra v1.1, dengan mengklaim lonjakan performa masif di berbagai benchmark teknis yang kritis. Pembaruan ini menandai upaya strategis untuk menyempurnakan cara kueri didistribusikan ke berbagai model kelas atas guna mencapai kemampuan penalaran dan pengodean yang lebih unggul.

Memecahkan Benchmark: Keunggulan Fugu Ultra v1.1

Inovasi inti dari Fugu Ultra v1.1 terletak pada kecerdasan routing-nya, yang memilih model paling sesuai dari kumpulan LLM yang tersedia secara publik untuk setiap prompt yang diberikan. Sakana AI melaporkan bahwa versi ini memberikan peningkatan performa hingga 7,9 poin dibandingkan rilis awal v1.0.

Yang paling menonjol, router ini menunjukkan lonjakan signifikan dalam penilaian teknis khusus, terutama pada benchmark ProgramBench dan TerminalBench 2.1. Dalam klaim yang mengejutkan, Sakana menegaskan bahwa Fugu Ultra v1.1 kini mengungguli Fable 5 milik Anthropic di sebagian besar benchmark—meskipun Fable 5 sebenarnya tidak termasuk dalam kumpulan pilihan router tersebut. Walaupun hasil ini saat ini belum memiliki verifikasi pihak ketiga yang independen, hal tersebut menunjukkan bahwa logika routing menjadi sangat efisien dalam mengekstraksi performa puncak dari arsitektur model yang ada.

Arsitektur Teknis dan Integrasi Pengembang

Pendekatan Sakana dalam menjaga kumpulan model mutakhir sangatlah ketat; perusahaan menyatakan bahwa diperlukan waktu sekitar dua minggu pelatihan dan evaluasi khusus sebelum model kelas atas baru diintegrasikan secara resmi ke dalam ekosistem Fugu. Hal ini memastikan bahwa proses pengambilan keputusan router tetap optimal untuk bobot dan kemampuan terbaru di pasar.

Bagi para pengembang, pembaruan ini memperkenalkan endpoint yang kompatibel dengan Claude Code, yang memungkinkan pengguna untuk memanggil Fugu secara langsung dari terminal mereka. Integrasi ini merampingkan alur kerja bagi para insinyur yang membutuhkan penalaran tingkat tinggi dan otomatisasi berbasis terminal. Terlepas dari kemajuan teknis ini, harga tetap konsisten dengan versi sebelumnya: $5 per satu juta token input dan $30 per satu juta token output. Fugu saat ini dapat diakses melalui platform utama termasuk OpenRouter dan Vercel.

Menghadapi Tantangan Pasar dan Regulasi

Rilis ini muncul setelah periode pengawasan terhadap peluncuran awal Fugu. Kritikus awal menyoroti masalah terkait konsumsi token yang tinggi, latensi, dan hasil yang tidak konsisten. Dengan v1.1, Sakana tampaknya semakin fokus pada efisiensi dan performa tugas khusus untuk mendapatkan kembali kepercayaan pengembang.

Namun, batasan geografis tetap menjadi hambatan bagi adopsi global. Sakana AI saat ini tidak melayani pengguna di dalam Uni Eropa (EU) atau Kawasan Ekonomi Eropa (EEA), dengan alasan kompleksitas seputar GDPR dan kerangka regulasi spesifik EU lainnya. Seiring berkembangnya kategori "model router", kemampuan Sakana untuk membuktikan klaim performa ini melalui data yang transparan dan dapat diverifikasi akan menjadi ujian pamungkas bagi kelayakannya dalam lanskap AI yang kompetitif.

Poin-Poin Penting

  • Benchmark Unggul: Fugu Ultra v1.1 menunjukkan peningkatan 7,9 poin dibandingkan v1.0, terutama mengungguli Fable 5 milik Anthropic pada beberapa metrik meskipun Fable 5 tidak ada dalam kumpulan router.
  • Pembaruan Berpusat pada Pengembang: Versi baru ini menambahkan endpoint terminal yang kompatibel dengan Claude Code, memfasilitasi integrasi yang lebih mudah untuk alur kerja pengodean.
  • Kurasi yang Ketat: Sakana menerapkan siklus evaluasi dua minggu untuk setiap model baru yang ditambahkan ke router guna menjaga akurasi dan performa yang tinggi.