Spline Arena karşınızda

Oylarınla sıralanan 3D yapay zeka liderlik tablosu. İki model aynı prompt’tan Spline’da bir sahne oluşturur, sen daha iyisini seçersin ve her oy sıralamayı değiştirir.

Arenada oy ver

Bugün Spline Arena’yı herkese açıyoruz. Yapay zeka modellerinin 3D’de ne kadar iyi ürettiğini gösteren herkese açık bir liderlik tablosu; sıralama ise senden geliyor.

Yapay zeka modelleri kodda ve metinde giderek iyileşiyor ve bunlar için kıyaslama testleri her yerde. 3D ise farklı. Bir sahnenin iyi olup olmadığı nasıl göründüğüne, nasıl aydınlatıldığına, parçalarının nasıl bir araya geldiğine ve prompt’un istediğini yapıp yapmadığına bağlı. Bunu otomatik olarak puanlamak zor, ama bir insan için bir bakışta değerlendirmek kolay. Biz de değerlendirmeyi insanların yaptığı bir arena kurduk.

Nasıl çalışır

İki model aynı prompt’u alır, örneğin “İşe sürebileceğin bir bisiklet”, ve her biri Spline’da gerçek bir sahne oluşturur.

Bitmiş iki sahneyi yan yana görürsün. Etraflarında dön, kaydır, her açıdan bak, sonra daha iyisini seç: A, B, berabere ya da ikisi de kötü. Modeller anonim kalır; böylece bir isim seçimini etkilemez ve oy verir vermez bir sonraki karşılaşma yüklenir. Modellerin birbirine göre durumu Sıralama’da görünür.

Prompt’lar tek bir nesneden ışıklandırma, animasyon ve tıklanacak şeyler içeren eksiksiz etkileşimli sahnelere kadar uzanıyor:

Spline Arena’daki karşılaşmalar: bir kâse ramen, tıklanınca ağaçları yaprak döken sonbaharda bir köprü, bir kaynak robot kolu ve şimşekli bir fırtınada bir yelkenli

Sıralama

Her oy herkese açık Sıralama’yı besler. Tüm ikili karşılaşma oylarına bir Bradley–Terry modeli oturtuyor ve her puana bir güven aralığı vermek için bootstrap uyguluyoruz. İki model birbirine yakın olduğunda sıralama bunu gösterir.

Her puan, bir modelin kör bir karşılaşmayı ortalama bir modele göre ne kadar daha sık kazandığı şeklinde okunur. %7’lik bir puan, ortalama bir modelin karşılaşmalarının %50’sini kazandığı yerde onun %57’sini kazandığı anlamına gelir. Beraberlikler ve “ikisi de kötü” her iki taraf için yarım galibiyet sayılır.

Arena; Anthropic, OpenAI, Google, xAI ve diğerlerinin öncü modellerini karşılaştırıyor ve yeni modeller çıktıkça kadro değişiyor. Liderlik tablosunun yanındaki bir grafik, her modelin puanını sahne başına ortalama maliyetine göre gösteriyor; böylece hangilerinin paranın karşılığını en iyi verdiğini görebilirsin.

Sıralama’nın bir illüstrasyonu: puana göre sıralanmış modeller, ortalamanın üstü ve altı için oklarla

Bunu neden yapıyoruz

Spline, giderek daha fazla insanın yapay zekayla 3D ürettiği yer: hem kendi ajanımızda hem de Claude, ChatGPT, Cursor ve diğer MCP istemcileri üzerinden. Hangi modellerin 3D’de iyi ürettiğini ve nerelerde hâlâ yetersiz kaldığını bilmek istiyoruz ve bu cevabın onları kullanan insanlardan gelmesini istiyoruz.

Bu sinyal modellerin 3D’de daha iyi olmasına yardımcı oluyor; onlarla birlikte Spline’da oluşturdukları sahneler de iyileşiyor. Tam da bu nedenle oylar, kimliksizleştirilerek yapay zeka araştırma ortaklarıyla paylaşılabilir. Daha iyi modeller, senin için daha hızlı ve daha iyi sonuçlar demek.

Başla

Spline Arena; Dashboard’un kenar çubuğunda, yeni sekme başlatıcısında ve masaüstü uygulamasında kendi sekmesinde. Tek ihtiyacın ücretsiz bir Spline hesabı. Daha fazlası için: spline.design/arena.

İlk oyunu ver

Blogdan daha fazlası