AI-systemen Onderzoeksartikel

Undominated.ai: de onafhankelijke prijsindex voor AI-inference

Eerst het beste. Dan de prijs. Het bord dat de modellen benoemt die zowel slechter als duurder zijn.

Magazijnvloer, elf kratten op een krijtrand in daglicht, een grote ongebruikte stapel in de schaduw
Elf op de rand. De rest van de stapel is zowel slechter als duurder.

Je hebt al een model in productie. Iemand in het team vond een goedkoper endpoint. De spreadsheet viert dat als winst. Het is geen winst als de goedkopere rij het werk niet aankan, en het is geen winst als een derde rij zowel sterker als goedkoper is dan wat je hield.

Undominated.ai is de index die ik voor dat besluit bouwde. Eerst kwaliteit. Dan prijs. De rij die zowel slechter als duurder is, krijgt een naam.

Wat het is

De publieke regel is expres kort: Undominated.ai: the AI price index. Eerst het beste. Dan de prijs.

Het is geen router. Het verkoopt geen tokens. Het neemt geen percentage van inference. Het plakt geen betaalde badge op een rij. De independence-pagina is de commerciële grens op één scherm. Omzet in v1 is er niet. Een latere betaalde feed, als die er komt, zou historie en herkomst verkopen, geen betere rang.

Kwaliteit komt van onafhankelijke evaluatoren. Twee bronnen staan naast elkaar en worden nooit gemengd: indices van Artificial Analysis, getoond ter evaluatie, en menselijke voorkeur van LMArena, gebruikt onder CC BY 4.0 via de officiële dataset. De site scoort zelf geen modellen. Waar de twee bronnen uit elkaar lopen, is dat verschil de vondst. Een samengesteld cijfer zou het wissen.

Waarom een gemiddelde het verkeerde object is

Het verschil tussen het goedkoopste en het duurste model in de catalogus is ongeveer 15.000×. Dat is geen afronding. Daarom is één “waardecijfer” een marketinginstrument. Meng kwaliteit en prijs tot één score en de rij die zowel slechter als duurder is kan achter een aantrekkelijke ratio verdwijnen. Kwaliteit per dollar, op deze catalogus, kroont goedkope modellen onderaan de schaal. Die moet je niet als “beste deal” verschepen.

Er bestaan andere publieke indexen. Sommige publiceren een geometrisch gemiddelde blended $/M. Sommige ketenen SKU’s als een grondstoffenindex. Sommige wegen labtokens naar transactievolume. Ze beantwoorden een andere vraag. Deze vraagt welke modellen überhaupt nog overweging verdienen, en daarna wat de klus kost onder een workload die je kunt zien.

Wat “undominated” hier betekent

Een model is gedomineerd wanneer een ander model in de catalogus hoger scoort én minder kost én nog kan wat het kan: dezelfde contextklasse, dezelfde modaliteiten, dezelfde tools. Ruwe Pareto in twee assen liegt vaak. De methodologie reserveert “beter en goedkoper” voor een vervanger waarvan de capability-envelop een superset is. Als je iets inlevert, zegt het bord dat.

Een model staat op de frontier wanneer niets het zowel verslaat als onderbiedt onder de gekozen lens en workload. Chartreuse in de interface is voor dat lidmaatschap. Het is geen highlightkleur te koop.

Rangen zijn significatierangen, zoals Rank (UB) van LMArena dat al jaren doet. Modellen die de meting niet uit elkaar kan houden, delen een rang. “Het nummer-1-model” is geen claim die deze data draagt. Gelijkspel is gelijkspel.

Unrated is geen nul. Het grootste deel van de catalogus heeft geen onafhankelijk kwaliteitscijfer. Die rijen staan op prijs en blijven buiten de kwaliteitsvolgorde. Niet gemeten is niet hetzelfde als slecht gemeten.

Een snapshot, geen monument

Op 25 augustus 2026 meldde het live bord:

  • 409 modellen, 50 aanbieders, 55 met getrapte prijzen
  • 97 van 108 gewaardeerde, beprijsde modellen verslagen op kwaliteit én onderboden op prijs
  • 11 niet. Die set is de frontier.

Die cijfers bewegen. De vorm van de workload beweegt ze. Batchlevering beweegt ze. Een nieuwe fetch beweegt ze. Citeer de live pagina, niet deze alinea.

Headline $/M is vaak het verkeerde getal. Contexttrappen veranderen het tarief voorbij een promptlengte. Sommige modellen factureren reasoningtokens op een aparte meter. Een paar geeft korting per tijdstip. Het bord herberekent de rij als de gekozen workload die lijnen kruist.

Hoe je het deze week gebruikt

  1. Open het leaderboard. Zet lens en workload op de klus die je echt draait.
  2. Open de frontier. Dat is de korte lijst.
  3. Check het model waar je al voor betaalt. Als het gedomineerd is, noemt het bord wat het verslaat en wat je zou inleveren.
  4. Lees de methodologie voordat je een rang als inkooporder behandelt.
  5. Als een live cijfer botst met een primaire bron, dien een correctie in. De publieke GitHub-repo is de tracker, geen tweede kopie van de catalogus.

Engels is de brontaal. Locales gaan als machinevertaling de deur uit; cijfers, modelnamen en aanbiedersnamen blijven onaangeroerd.

Als een goedkoper endpoint het werk niet aankan, was het nooit goedkoper. Als iets anders zowel sterker als goedkoper is, is het incumbent houden een voorkeur, geen kostenargument. Zet de voorkeur op tafel. Kijk daarna naar de elf.

Bronnen

  1. Undominated.ai
  2. Methodologie
  3. Onafhankelijkheid
  4. Publieke correctietracker
  5. LMArena-rangschikking (Rank UB) · LMArena

Verder lezen

Markdown voor LLMs