Představujeme Spline Arena
Žebříček AI pro 3D, seřazený podle vašich hlasů. Dva modely postaví ve Spline scénu ze stejného zadání, vy vyberete lepší a každý hlas hýbe žebříčkem.
Dnes otevíráme Spline Arena všem. Je to veřejný žebříček toho, jak dobře AI modely tvoří ve 3D – a pořadí určujete vy.
AI modely jsou čím dál lepší v kódu a textu a benchmarků pro ně je všude plno. 3D je jiné. Jestli je scéna dobrá, závisí na tom, jak vypadá, jak je nasvícená, jak do sebe její části zapadají a jestli dělá to, co zadání chtělo. To se automaticky hodnotí těžko, ale člověk to posoudí na první pohled. Postavili jsme proto arénu, ve které hodnotí lidé.
Jak to funguje
Dva modely dostanou stejné zadání, například „Kolo, na kterém byste mohli jezdit do práce“, a každý postaví ve Spline skutečnou scénu.
Obě hotové scény uvidíte vedle sebe. Otáčejte jimi, posouvejte je, prohlédněte si je ze všech stran a pak vyberte tu lepší: A, B, remízu, nebo obě špatné. Modely zůstávají anonymní, takže výběr nikdy neovlivní jméno, a jakmile zahlasujete, načte se další souboj. Jak si modely vedou, ukazuje žebříček.
Zadání sahají od jednoho objektu po celé interaktivní scény s osvětlením, animací a prvky ke kliknutí:
Žebříček
Každý hlas se promítne do veřejného žebříčku. Na všechny hlasy ze vzájemných soubojů aplikujeme Bradleyho–Terryho model a pomocí bootstrapu ke každému skóre určíme interval spolehlivosti. Když jsou si dva modely blízko, žebříček to ukáže.
Každé skóre vyjadřuje, o kolik častěji model vyhraje slepý souboj než průměrný model. Skóre 7 % znamená, že vyhraje 57 % svých soubojů tam, kde by průměrný model vyhrál 50 %. Remízy a „obě špatné“ se počítají jako polovina výhry pro každou stranu.
Aréna porovnává špičkové modely od Anthropicu, OpenAI, Googlu, xAI a dalších a jejich sestava se mění s každým novým modelem. Vedle žebříčku je graf, který vynáší skóre každého modelu proti jeho průměrné ceně za scénu, takže uvidíte, které modely nabízejí za své peníze nejvíc.
Proč to děláme
Ve Spline tvoří ve 3D s AI stále víc lidí – v našem vlastním agentovi i přes Claude, ChatGPT, Cursor a další MCP klienty. Chceme vědět, které modely tvoří ve 3D dobře a kde ještě zaostávají, a chceme, aby odpověď přišla od lidí, kteří je používají.
Tento signál pomáhá modelům zlepšovat se ve 3D a s nimi se zlepšují i scény, které ve Spline vytvářejí. Právě proto mohou být hlasy v anonymizované podobě sdíleny s partnery pro výzkum AI. Lepší modely znamenají lepší výsledky pro vás, a rychleji.
Začněte
Spline Arena najdete v postranním panelu dashboardu, ve spouštěči nové karty a na vlastní kartě v desktopové aplikaci. Stačí vám bezplatný účet Spline. Více se dozvíte na spline.design/arena.