Wat is een token eigenlijk?

Het is de eenheid waarin het model leest en schrijft, meestal een deel van een woord. In het Portugees bestaat een gewoon woord doorgaans uit één tot twee tokens. In het Chinees of Japans is één teken vaak al één volledige token, daarom kost dezelfde inhoud meer in die talen.

Nee, en geen enkele die niet de officiële tokenizer van elk model gebruikt, zal dat zijn. Elke familie tokeniseert op een andere manier. De schatting hier is afgestemd op tekst en dient om kosten en context te ramen, gebruik voor de factuur het aantal dat de provider terugstuurt in het API antwoord.

Wordt mijn tekst naar een server gestuurd?

Nee. Tellen en rekenen gebeuren volledig in je browser. Daarom kun je hier een document plakken dat je niet zou plakken in een tool die de inhoud uploadt.

Waarom kosten invoer en uitvoer verschillend?

Omdat genereren meer kost dan lezen. Het model verwerkt de invoer in één keer, maar produceert de uitvoer token voor token, en die generatie verbruikt meer rekenkracht. Daarom kost uitvoer doorgaans drie tot vijf keer zoveel als invoer.

Is een duurder model altijd beter?

Niet voor elke taak. Classificeren, een veld eruit halen en korte tekst samenvatten doen lichte modellen prima. Het dure model bewaren voor wat écht redeneren vraagt, is het verschil tussen een gezonde en een absurde rekening aan het eind van de maand.

Hoe kies je in de praktijk, zonder op één te gokken?

Door per taak te routeren: het eenvoudige verzoek gaat naar het goedkope model, het moeilijke gaat omhoog. Dit handmatig doen bij elke aanroep is onhaalbaar, het is precies het werk van de module Router, die de bestemming kiest en ook leert van het resultaat.

Tools

Wat kost deze tekst bij elk model?

Hetzelfde werk kost ordes van grootte meer of minder, afhankelijk van wie het uitvoert. Plak de tekst en zie de prijs naast elkaar, van goedkoop naar duur.

Module: Router
Invoer: Een tekst
Draait op: Je browser
Kosten: Gratis, zonder registratie

0tekens

0geschatte tokens

antwoordtokens

Schatting per schrift: Latijns ≈ 4 tekens per token; Chinees, Japans en Koreaans verbruiken flink meer. Publieke lijstprijzen, in dollars.

Wat de rekensom laat zien

Dezelfde tekst, hetzelfde werk, prijzen die honderd keer verschillen

Een AI model rekent per token, woorddelen, bij invoer en uitvoer. Waar bijna niemand naar kijkt, is hoeveel die prijs varieert: dezelfde tekst die centen kost bij een licht model, kost tientallen keren meer bij het topmodel. Voor een eenvoudige taak is dat elke maand weggegooid geld.

De tool schat de tokens van je tekst, telt op wat je als antwoord verwacht en past de openbare prijs van elk model toe. De lijst staat van goedkoop naar duur geordend, en modellen met open gewichten zijn gemarkeerd, omdat je die ook zelf kunt draaien.

Hoe het werkt

Je plakt de tekst

Prompt, document, transcriptie, wat het ook is. Niets verlaat de browser: de telling gebeurt hier.

Je geeft de lengte van het antwoord op

De uitvoer kost meestal drie tot vijf keer zoveel als de invoer, dus haar negeren halveert de geschatte rekening.

De vergelijking komt gesorteerd op prijs

Van goedkoop naar duur, met de balk die de werkelijke afstand ertussen laat zien.

Veelgestelde vragen

01 Wat is een token eigenlijk?: Het is de eenheid waarin het model leest en schrijft, meestal een deel van een woord. In het Portugees bestaat een gewoon woord doorgaans uit één tot twee tokens. In het Chinees of Japans is één teken vaak al één volledige token, daarom kost dezelfde inhoud meer in die talen.
02 Is de telling exact?: Nee, en geen enkele die niet de officiële tokenizer van elk model gebruikt, zal dat zijn. Elke familie tokeniseert op een andere manier. De schatting hier is afgestemd op tekst en dient om kosten en context te ramen, gebruik voor de factuur het aantal dat de provider terugstuurt in het API antwoord.
03 Wordt mijn tekst naar een server gestuurd?: Nee. Tellen en rekenen gebeuren volledig in je browser. Daarom kun je hier een document plakken dat je niet zou plakken in een tool die de inhoud uploadt.
04 Waarom kosten invoer en uitvoer verschillend?: Omdat genereren meer kost dan lezen. Het model verwerkt de invoer in één keer, maar produceert de uitvoer token voor token, en die generatie verbruikt meer rekenkracht. Daarom kost uitvoer doorgaans drie tot vijf keer zoveel als invoer.
05 Is een duurder model altijd beter?: Niet voor elke taak. Classificeren, een veld eruit halen en korte tekst samenvatten doen lichte modellen prima. Het dure model bewaren voor wat écht redeneren vraagt, is het verschil tussen een gezonde en een absurde rekening aan het eind van de maand.
06 Hoe kies je in de praktijk, zonder op één te gokken?: Door per taak te routeren: het eenvoudige verzoek gaat naar het goedkope model, het moeilijke gaat omhoog. Dit handmatig doen bij elke aanroep is onhaalbaar, het is precies het werk van de module Router, die de bestemming kiest en ook leert van het resultaat.