MagicArena verwendet ein mehrstufiges Bewertungssystem: Auf der Basisebene werden zwei Wahlmöglichkeiten von den Nutzern gesammelt, auf der Expertenebene werden mehr als 200 CG-Künstler aufgefordert, professionelle Bewertungen abzugeben, und auf der Systemebene wird automatisch nach CLIP und anderen Bewertungsmodellen bewertet. Diese dreifachen Daten werden gewichtet und berechnet und dann in Echtzeit in den drei Dimensionen der täglichen/wöchentlichen/monatlichen Liste aktualisiert.
Der Ranking-Algorithmus weist folgende Merkmale auf: 1) es wird ein "Neulingsschutz" festgelegt, und die Daten der ersten 48 Stunden neu gestarteter Modelle werden gesondert berechnet; 2) es wird das Elo-Punktesystem verwendet, und die von den siegreichen Modellen erzielten Punkte sind positiv mit dem Rang ihrer Gegner korreliert; 3) es gibt ein "themenspezifisches Ranking um die Leistungsunterschiede zwischen Modellen in verschiedenen Bereichen zu erfassen. Die aktuellen Ranglistendaten zeigen, dass kommerzielle Modelle ihre Dominanz bei realistischen Aufgaben beibehalten, während Open-Source-Community-Modelle 23% in der Kategorie "Abstrakte Erstellung" überholen.
Das Ranking hat sich zu einer wichtigen Windfahne der Branche entwickelt, und der jüngste Modellbeschaffungsplan eines führenden Cloud-Dienstleisters bezieht sich direkt auf die 6-Monats-Trenddaten der Plattform als Entscheidungsgrundlage. Die kürzlich hinzugefügte Funktion "Enterprise API Access" ermöglicht es Unternehmen, direkt auf standardisierte Bewertungsberichte zuzugreifen.
Diese Antwort stammt aus dem ArtikelMagicArena: Ranking-Plattform für visuelles Model-Matchmaking von Headline gestartetDie
