Zo meten we

Het AVG-profiel

Het AVG-profiel vat samen wat een aanbieder zelf publiceert over je gegevens. Het is een hulpmiddel voor je shortlist, geen juridisch advies en geen audit.

Voor een vaktool tellen we punten: 2 als de aanbieder schrijft dat de data in de EU staat, 1 als de aanbieder een certificering (ISO 27001, NEN 7510) of AVG/GDPR-naleving noemt, en 1 als de aanbieder in Nederland of de EU/EER is gevestigd. 3 of 4 punten is Sterk, 2 is Goed, 1 is Beperkt en 0 is Onbekend.

Een vermelding telt alleen als hij niet ontkend wordt: "geen AVG-verklaring gevonden" of "data niet in de EU" levert geen punt op.

Voor een algemeen AI-model kijken we naar drie dingen: EU-hosting mogelijk, geen training op je data bij zakelijk gebruik, en zelf te hosten. Alle drie, of EU-hosting samen met geen training, is Sterk. Een andere combinatie van twee is Goed, één is Beperkt, geen is Onbekend.

Let op krijgt een model met een concreet, gedocumenteerd aandachtspunt, zoals een onderzoek door een toezichthouder of een licentiebeperking. Dat weegt zwaarder dan de punten.

Onbekend betekent: we vonden geen van de drie dingen die punten opleveren. Soms publiceert de aanbieder wel iets anders, zoals een SOC 2-rapport, HIPAA of servers buiten de EU; dat levert geen punt op en staat in de toelichting op de veiligheidspagina. Onbekend is geen oordeel over de kwaliteit van de tool.

Stand vandaag over alle 958 vaktools: 141 sterk, 232 goed, 388 beperkt, 197 onbekend.

Elo en Code-Elo

Elo is het kwaliteitscijfer van LMArena (arena.ai). Gebruikers stellen een vraag, krijgen twee anonieme antwoorden en kiezen het beste. Uit die duels volgt per model een Elo-score, zoals bij schaken.

Code-Elo komt uit dezelfde duels, maar dan alleen met programmeeropdrachten. Een model kan in gewone tekst hoog staan en in code lager, of andersom.

Per modelfamilie (Claude, ChatGPT, Gemini, …) telt de best scorende variant op LMArena. We halen de ranglijsten voor tekst en code elke ochtend op en bewaren de historie, zodat je de trend ziet. Is de officiële ranglijst niet bereikbaar, dan gebruiken we een kortere openbare kopie ervan. Een model dat daar niet in staat, houdt zijn laatste echte meting; op de modelpagina staat dan die datum, en in de maandranking staat het bij de modellen zonder meting, niet bij de modellen die van LMArena verdwenen.

Een verschil van zo'n 20 punten merk je in de praktijk. Verschillen onder 5 punten vallen binnen de meetmarge van LMArena: in een vergelijking tussen twee modellen tonen we ze als gelijk, en in de maandranking staat erbij welke modellen binnen die marge van de nummer 1 liggen. Een plek delen modellen daar alleen bij exact dezelfde Elo.

Een model dat niet zelf op LMArena staat, krijgt geen eigen Elo; we schatten er geen. Uitzondering: Microsoft Copilot draait op GPT van OpenAI, dus tonen we bij Copilot de Elo van dat model. In de maandranking telt Copilot daarom niet mee, anders stond hetzelfde model er twee keer in.

De redactiescore

De redactiescore is ons eigen oordeel op 10 per modelfamilie. Hij weegt drie dingen: hoe geschikt het model is voor professioneel werk, de prijs inclusief wat je er in de praktijk bij moet kopen, en privacy.

Er is geen formule die het cijfer uitrekent: het is een oordeel van de redactie, vastgelegd in de data en aangepast als een model, prijs of voorwaarde verandert. Daarom staat het nooit alleen, maar altijd naast de onafhankelijke Elo.

De ranglijst van modellen staat op Elo; de redactiescore staat ernaast. Waar we een advies geven, wegen ze even zwaar: in een vergelijking van twee modellen (wie komt hoger uit op kwaliteit) en bij de volgorde van de algemene assistenten per beroep, na het AVG-profiel. Beide worden dan geschaald tussen het laagste en hoogste model in de index en tellen elk voor de helft.

Hoe vaak we controleren

Elke ochtend halen we kwaliteit (LMArena), API-prijzen en contextvensters (OpenRouter), populariteit (HuggingFace, GitHub) en community-signalen (Hacker News) opnieuw op.

Vaktools loopt de redactie-agent na tegen de site en voorwaarden van de aanbieder: elke dag een vaste portie op functies en gratis proef, elke dag tien tools met ontbrekende gegevens ('Niet bekend'), elke donderdag een ronde prijzen, twee keer per week nieuwe tools in een paar beroepen, elke vrijdag de modellen, en op de eerste van de maand vijf AVG-profielen opnieuw. Bij de tien tools met ontbrekende gegevens gaan de tools met de meeste vertoningen in Google voor; die lijst zet een script vast klaar, de agent kiest niet zelf.

De regel 'Laatst gecontroleerd' op een tool- of veiligheidspagina is de dag waarop die tool of dat model voor het laatst is nagelopen. Op een beroepspagina is het de laatste dag waarop de lijst of een van de tools erin is nagelopen.

Feiten komen uit openbare bronnen: de site, documentatie en voorwaarden van de aanbieder, of een officiële bron. Waar we de bron-URL hebben vastgelegd, staat die bij de tool of het model. Klopt er iets niet meer, dan horen we het graag via het aanvulformulier op de toolpagina of via de pagina Over.

Niet te koop

Aanbieders kunnen niet betalen voor een plek, een hogere score of een beter AVG-profiel. Er zijn geen gesponsorde vermeldingen.

Een aanbieder kan via 'Is dit jouw tool?' ontbrekende gegevens aanleveren. Die inzending komt in een wachtrij en verandert pas iets als de bron het bevestigt.

Komen er ooit affiliate-links, dan markeren we die. De volgorde blijft altijd op data.