Przedstawiamy Spline Arena

Ranking AI dla 3D tworzony Waszymi głosami. Dwa modele budują w Spline scenę z tego samego promptu, Ty wybierasz lepszą, a każdy głos zmienia ranking.

Głosuj na arenie

Dziś otwieramy Spline Arena dla wszystkich. To publiczny ranking tego, jak dobrze modele AI budują w 3D – a o kolejności decydujecie Wy.

Modele AI są coraz lepsze w kodzie i tekście, a benchmarków dla nich jest pełno. Z 3D jest inaczej. To, czy scena jest dobra, zależy od tego, jak wygląda, jak jest oświetlona, jak jej części do siebie pasują i czy robi to, o co prosił prompt. Trudno to ocenić automatycznie, a człowiek oceni to jednym spojrzeniem. Dlatego zbudowaliśmy arenę, na której oceniają ludzie.

Jak to działa

Dwa modele dostają ten sam prompt, np. „Rower, którym można dojeżdżać do pracy”, i każdy buduje w Spline prawdziwą scenę.

Widzisz obie gotowe sceny obok siebie. Obracaj je, przesuwaj widok, obejrzyj z każdej strony, a potem wybierz lepszą: A, B, remis albo obie złe. Modele pozostają anonimowe, więc nazwa nigdy nie wpływa na wybór, a kolejne starcie wczytuje się, gdy tylko oddasz głos. To, jak modele wypadają na tle siebie, pokazuje Ranking.

Prompty obejmują wszystko – od pojedynczego obiektu po całe interaktywne sceny z oświetleniem, animacją i elementami do klikania:

Starcia w Spline Arena: miska ramenu, jesienny most, z którego drzew po kliknięciu spadają liście, robotyczne ramię spawalnicze i żaglówka podczas burzy z piorunami

Ranking

Każdy głos trafia do publicznego Rankingu. Do wszystkich głosów z bezpośrednich starć dopasowujemy model Bradleya–Terry’ego i stosujemy bootstrap, by każdy wynik miał przedział ufności. Gdy dwa modele są blisko siebie, ranking to pokazuje.

Każdy wynik mówi, o ile częściej model wygrywa ślepe starcie niż przeciętny model. Wynik 7% oznacza, że wygrywa 57% swoich starć tam, gdzie przeciętny model wygrywa 50%. Remisy i „obie złe” liczą się jako pół wygranej dla każdej ze stron.

Arena porównuje czołowe modele od Anthropic, OpenAI, Google, xAI i innych, a zestawienie zmienia się wraz z premierami nowych modeli. Obok rankingu wykres zestawia wynik każdego modelu z jego średnim kosztem na scenę, więc widzisz, które dają najwięcej za swoją cenę.

Ilustracja Rankingu: modele uszeregowane według wyniku, ze strzałkami oznaczającymi wynik powyżej i poniżej średniej

Dlaczego to robimy

Spline to miejsce, w którym coraz więcej osób buduje 3D z AI – w naszym własnym agencie oraz przez Claude, ChatGPT, Cursora i innych klientów MCP. Chcemy wiedzieć, które modele dobrze budują w 3D, a gdzie wciąż sobie nie radzą – i chcemy, by tę odpowiedź dawali ludzie, którzy z nich korzystają.

Ten sygnał pomaga modelom stawać się lepszymi w 3D, a razem z nimi lepsze stają się sceny, które tworzą w Spline. Właśnie dlatego głosy mogą być udostępniane, w formie zanonimizowanej, partnerom badawczym zajmującym się AI. Lepsze modele to lepsze wyniki dla Ciebie, szybciej.

Zacznij

Spline Arena znajdziesz na pasku bocznym panelu, w launcherze nowej karty i w osobnej karcie w aplikacji desktopowej. Wystarczy darmowe konto Spline. Więcej na spline.design/arena.

Oddaj pierwszy głos

Więcej z bloga