Splineपेश है Spline Arena
3D के लिए AI लीडरबोर्ड, जिसकी रैंकिंग आपके वोट से तय होती है। एक ही प्रॉम्प्ट से दो मॉडल Spline में एक सीन बनाते हैं, आप बेहतर वाला चुनते हैं, और हर वोट रैंकिंग बदलता है।
आज हम Spline Arena सभी के लिए खोल रहे हैं। यह एक सार्वजनिक लीडरबोर्ड है जो दिखाता है कि AI मॉडल 3D में कितना अच्छा बनाते हैं, और इसकी रैंकिंग आपसे आती है।
AI मॉडल कोड और टेक्स्ट में अच्छे होते जा रहे हैं, और उनके बेंचमार्क हर जगह हैं। 3D अलग है। कोई सीन अच्छा है या नहीं, यह इस पर निर्भर करता है कि वह कैसा दिखता है, उसकी लाइटिंग कैसी है, उसके हिस्से आपस में कैसे बैठते हैं और क्या वह वही करता है जो प्रॉम्प्ट ने माँगा था। इसे अपने आप स्कोर करना मुश्किल है, लेकिन किसी इंसान के लिए एक नज़र में परखना आसान। इसलिए हमने एक ऐसा एरीना बनाया जहाँ फ़ैसला लोग करते हैं।
यह कैसे काम करता है
दो मॉडल को एक ही प्रॉम्प्ट मिलता है, जैसे "एक साइकिल जिससे आप काम पर जा सकें", और हर मॉडल Spline में एक असली सीन बनाता है।
आप दोनों तैयार सीन अगल-बगल देखते हैं। उन्हें ऑर्बिट करें, इधर-उधर पैन करें, हर तरफ़ से देखें, फिर बेहतर वाला चुनें: A, B, बराबर, या दोनों ख़राब। मॉडल गुमनाम रहते हैं, ताकि कोई नाम आपकी पसंद पर असर न डाले, और वोट करते ही अगली टक्कर लोड हो जाती है। मॉडल की आपसी तुलना Rankings में दिखती है।
प्रॉम्प्ट एक अकेले ऑब्जेक्ट से लेकर पूरे इंटरैक्टिव सीन तक होते हैं, जिनमें लाइटिंग, एनिमेशन और क्लिक करने लायक चीज़ें होती हैं:
रैंकिंग
हर वोट सार्वजनिक Rankings में जुड़ता है। हम हर आमने-सामने के वोट पर एक Bradley–Terry मॉडल फ़िट करते हैं और bootstrap करके हर स्कोर को एक कॉन्फ़िडेंस इंटरवल देते हैं। जब दो मॉडल क़रीब होते हैं, तो रैंकिंग में यह दिखता है।
हर स्कोर का मतलब है कि कोई मॉडल एक औसत मॉडल के मुक़ाबले कितनी ज़्यादा बार बिना नाम वाली टक्कर जीतता है। 7% स्कोर का मतलब है कि वह अपनी 57% टक्करें जीतता है, जबकि औसत मॉडल 50% जीतता है। बराबरी और "दोनों ख़राब" को दोनों पक्षों के लिए आधी जीत माना जाता है।
एरीना Anthropic, OpenAI, Google, xAI और दूसरों के फ़्रंटियर मॉडल की तुलना करता है, और नए मॉडल आने के साथ लाइनअप बदलता रहता है। लीडरबोर्ड के बगल में एक चार्ट हर मॉडल के स्कोर को प्रति सीन उसकी औसत लागत के सामने दिखाता है, ताकि आप देख सकें कि कौन-से मॉडल पैसे का सबसे ज़्यादा फ़ायदा देते हैं।
हम यह क्यों कर रहे हैं
Spline वह जगह है जहाँ ज़्यादा से ज़्यादा लोग AI के साथ 3D बनाते हैं, हमारे अपने एजेंट में भी और Claude, ChatGPT, Cursor और दूसरे MCP क्लाइंट के ज़रिए भी। हम जानना चाहते हैं कि कौन-से मॉडल 3D अच्छी तरह बनाते हैं और वे अभी कहाँ पीछे रह जाते हैं, और हम चाहते हैं कि यह जवाब उन्हें इस्तेमाल करने वाले लोगों से आए।
यह संकेत मॉडल को 3D में बेहतर बनने में मदद करता है, और उनके साथ-साथ Spline में बनने वाले सीन भी बेहतर होते जाते हैं। ठीक इसी वजह से वोट, पहचान हटाकर, AI रिसर्च पार्टनर के साथ शेयर किए जा सकते हैं। बेहतर मॉडल का मतलब है आपके लिए बेहतर नतीजे, और जल्दी।
शुरू करें
Spline Arena डैशबोर्ड की साइडबार में, नए टैब लॉन्चर में, और डेस्कटॉप ऐप में अपने अलग टैब में मौजूद है। आपको बस एक मुफ़्त Spline अकाउंट चाहिए। spline.design/arena पर और जानें।
