Ipinapakilala ang Spline Arena
Ang AI leaderboard para sa 3D, nira-rank ayon sa mga boto mo. Dalawang model ang gumagawa ng scene sa Spline mula sa parehong prompt, pipiliin mo ang mas maganda, at bawat boto ay gumagalaw sa rankings.
Ngayon, binubuksan namin ang Spline Arena para sa lahat. Isa itong pampublikong leaderboard kung gaano kahusay gumawa sa 3D ang mga AI model, at sa iyo nanggagaling ang rankings.
Gumagaling na ang mga AI model sa code at text, at kahit saan ay may mga benchmark para doon. Iba ang 3D. Nakadepende kung maganda ang isang scene sa itsura nito, sa ilaw nito, sa kung paano nagkakatugma ang mga bahagi nito, at kung ginagawa nito ang hiniling ng prompt. Mahirap itong i-score nang awtomatiko, pero madali para sa isang tao na husgahan sa isang tingin. Kaya bumuo kami ng arena kung saan mga tao ang humuhusga.
Paano ito gumagana
Parehong prompt ang natatanggap ng dalawang model, gaya ng "Isang bisikletang puwede mong sakyan papasok sa trabaho", at bawat isa ay gumagawa ng totoong scene sa Spline.
Makikita mo ang dalawang tapos na scene nang magkatabi. I-orbit ang mga ito, i-pan, tingnan mula sa bawat panig, saka piliin ang mas maganda: A, B, tabla, o parehong hindi maganda. Nananatiling anonymous ang mga model, kaya hindi kailanman naiimpluwensyahan ng pangalan ang pagpili, at naglo-load ang susunod na laban sa sandaling bumoto ka. Makikita sa Rankings kung paano nagkukumpara ang mga model.
Mula sa iisang object hanggang sa buong interactive na scene ang mga prompt, na may lighting, animation at mga bagay na puwedeng i-click:
Ang rankings
Napupunta ang bawat boto sa pampublikong Rankings. Ini-fit namin ang isang Bradley–Terry model sa bawat head-to-head na boto at bina-bootstrap ito para bigyan ng confidence interval ang bawat score. Kapag dikit ang dalawang model, ipinapakita iyon ng rankings.
Ipinapakita ng bawat score kung gaano mas madalas nananalo ang isang model sa isang blind na laban kumpara sa karaniwang model. Ang score na 7% ay nangangahulugang nananalo ito sa 57% ng mga laban nito, kung saan 50% naman ang panalo ng karaniwang model. Binibilang na kalahating panalo para sa bawat panig ang tabla at ang "parehong hindi maganda".
Ikinukumpara ng arena ang mga frontier model mula sa Anthropic, OpenAI, Google, xAI at iba pa, at nagbabago ang lineup habang may mga bagong model na lumalabas. Katabi ng leaderboard, may chart na nagpapakita ng score ng bawat model laban sa average na gastos nito bawat scene, para makita mo kung alin ang pinakasulit sa pera.
Bakit namin ito ginagawa
Sa Spline gumagawa ng 3D gamit ang AI ang parami nang paraming tao, sa sarili naming agent at sa pamamagitan ng Claude, ChatGPT, Cursor at iba pang MCP client. Gusto naming malaman kung aling mga model ang mahusay gumawa ng 3D at kung saan pa sila kulang, at gusto naming manggaling ang sagot na iyon sa mga taong gumagamit sa kanila.
Tumutulong ang signal na iyon para gumaling ang mga model sa 3D, at gumaganda rin kasabay nila ang mga scene na ginagawa nila sa Spline. Dahil mismo dito, puwedeng ibahagi ang mga boto, nang de-identified, sa mga AI research partner. Mas mahuhusay na model ay nangangahulugan ng mas magagandang resulta para sa iyo, nang mas mabilis.
Magsimula
Nasa sidebar ng dashboard ang Spline Arena, sa new tab launcher, at sa sarili nitong tab sa desktop app. Ang kailangan mo lang ay isang libreng Spline account. Alamin pa sa spline.design/arena.