Przedstawiamy Spline Arena
Ranking AI dla 3D tworzony Waszymi głosami. Dwa modele budują w Spline scenę z tego samego promptu, Ty wybierasz lepszą, a każdy głos zmienia ranking.
Dziś otwieramy Spline Arena dla wszystkich. To publiczny ranking tego, jak dobrze modele AI budują w 3D – a o kolejności decydujecie Wy.
Modele AI są coraz lepsze w kodzie i tekście, a benchmarków dla nich jest pełno. Z 3D jest inaczej. To, czy scena jest dobra, zależy od tego, jak wygląda, jak jest oświetlona, jak jej części do siebie pasują i czy robi to, o co prosił prompt. Trudno to ocenić automatycznie, a człowiek oceni to jednym spojrzeniem. Dlatego zbudowaliśmy arenę, na której oceniają ludzie.
Jak to działa
Dwa modele dostają ten sam prompt, np. „Rower, którym można dojeżdżać do pracy”, i każdy buduje w Spline prawdziwą scenę.
Widzisz obie gotowe sceny obok siebie. Obracaj je, przesuwaj widok, obejrzyj z każdej strony, a potem wybierz lepszą: A, B, remis albo obie złe. Modele pozostają anonimowe, więc nazwa nigdy nie wpływa na wybór, a kolejne starcie wczytuje się, gdy tylko oddasz głos. To, jak modele wypadają na tle siebie, pokazuje Ranking.
Prompty obejmują wszystko – od pojedynczego obiektu po całe interaktywne sceny z oświetleniem, animacją i elementami do klikania:
Ranking
Każdy głos trafia do publicznego Rankingu. Do wszystkich głosów z bezpośrednich starć dopasowujemy model Bradleya–Terry’ego i stosujemy bootstrap, by każdy wynik miał przedział ufności. Gdy dwa modele są blisko siebie, ranking to pokazuje.
Każdy wynik mówi, o ile częściej model wygrywa ślepe starcie niż przeciętny model. Wynik 7% oznacza, że wygrywa 57% swoich starć tam, gdzie przeciętny model wygrywa 50%. Remisy i „obie złe” liczą się jako pół wygranej dla każdej ze stron.
Arena porównuje czołowe modele od Anthropic, OpenAI, Google, xAI i innych, a zestawienie zmienia się wraz z premierami nowych modeli. Obok rankingu wykres zestawia wynik każdego modelu z jego średnim kosztem na scenę, więc widzisz, które dają najwięcej za swoją cenę.
Dlaczego to robimy
Spline to miejsce, w którym coraz więcej osób buduje 3D z AI – w naszym własnym agencie oraz przez Claude, ChatGPT, Cursora i innych klientów MCP. Chcemy wiedzieć, które modele dobrze budują w 3D, a gdzie wciąż sobie nie radzą – i chcemy, by tę odpowiedź dawali ludzie, którzy z nich korzystają.
Ten sygnał pomaga modelom stawać się lepszymi w 3D, a razem z nimi lepsze stają się sceny, które tworzą w Spline. Właśnie dlatego głosy mogą być udostępniane, w formie zanonimizowanej, partnerom badawczym zajmującym się AI. Lepsze modele to lepsze wyniki dla Ciebie, szybciej.
Zacznij
Spline Arena znajdziesz na pasku bocznym panelu, w launcherze nowej karty i w osobnej karcie w aplikacji desktopowej. Wystarczy darmowe konto Spline. Więcej na spline.design/arena.