Zo meten wij

Trovely meet of AI jouw bedrijf aanraadt door 6 AI-kanalen typische klantvragen uit jouw branche te stellen, elke vraag meerdere keren, en te tellen in hoeveel antwoorden je genoemd wordt. Een uitslag is pas iets waard als je weet hoe die tot stand komt. Daarom lees je hier precies hoe we meten, hoe je de uitslag leest, en wat we níet kunnen garanderen.

Kort gezegd

• We stellen typische klantvragen uit jouw branche, met jouw plaats erin (bij een landelijk bedrijf ook zonder plaats).
• In 6 AI-kanalen, met live zoeken op internet aan en gericht op Nederland.
• De AI-assistenten stellen we elke vraag meerdere keren: in het AI-rapport en de Check-up 3 keer, in een abonnement 2 keer (Claude bij Business 1 keer). Google AI Overviews en AI Mode meten we 1 keer per vraag.
• In een abonnement meten we daarnaast elke maand de breedte: nog meer vragen uit jouw branche, voor je plaatsen, één keer in Perplexity en Gemini. Die geven het brede beeld; je score en verloop komen uit de wekelijkse kernvragen.
• De uitslag is “genoemd in X van Y”, met een marge.
• Elke uitslag is een momentopname, met de datum en het model erbij.

Welke vragen we stellen

Typische klantvragen, per branche opgesteld, met jouw plaats erin. Voor vrijwel elke branche hebben we vragen geschreven zoals klanten ze kunnen stellen, verdeeld over soorten: iets ontdekken (“Wat is de beste tandarts in Utrecht?”), een specifieke dienst zoeken, spoed, prijs, betrouwbaarheid checken en vergelijken. Per scan stellen we er vast tot 15, steeds dezelfde, zodat je uitslagen door de tijd kunt vergelijken.

Welke vragen, hangt af van je werkgebied. Bij een lokaal bedrijf staat de plaatsnaam in de vraag. Bij een landelijk bedrijf of webshop stellen we ook vragen zonder plaats. Bij een bestemming, zoals een hotel, vragen we het ook zoals een gast van elders dat doet. Jouw bedrijfsnaam noemen we nooit in de vraag, want dan zegt het antwoord niets. De vragen hebben we zelf per branche opgesteld, op basis van hoe klanten naar een bedrijf zoeken; het zijn geen vragen die we bij klanten hebben verzameld.

• Gratis check: 3 van deze vragen, alleen in ChatGPT, 1 keer per vraag. Dat is een eerste indicatie, geen volledige meting.
• AI-rapport en Check-up: een vaste selectie van tot 15 vragen uit jouw branche, in alle 6 kanalen, met herhalingen.
• Abonnementen (binnenkort): elke week gemeten, in de AI's van je abonnement. Zie hieronder welke AI's in welk abonnement zitten.

Welke AI-kanalen we meten

6 kanalen: ChatGPT, Google Gemini, Perplexity, Claude, Google AI Overviews, Google AI Mode. We noemen alleen kanalen die we echt bevragen, en bij elke uitslag staat welk model we gebruikten.

Kanalen die we niet op dezelfde manier kunnen meten (Grok, Copilot) tellen niet mee in scores en rapporten.

Welke AI's per abonnement

In het AI-rapport en de Check-up meten we alle 6 kanalen. In de abonnementen, die binnenkort komen, hangt het af van je abonnement:

• Start: ChatGPT, Perplexity en Google AI Overviews.
• Plus: ook Gemini.
• Business: ook Claude en Google AI Mode.

Hoe we een vraag stellen

Zo dicht mogelijk bij hoe een klant het doet: een nieuw gesprek, live zoeken aan, en de plaats erbij.

• Elke vraag in een nieuw gesprek, zonder voorgeschiedenis en zonder instructies van ons. Net als een klant die voor het eerst iets vraagt.
• Met live zoeken op internet aan, zoals de apps dat zelf ook doen.
• Bij een vraag met een plaats is dat ook de meetplaats. Waar een kanaal dat toelaat, geven we daarnaast Nederland (en de plaats) mee als locatie; vragen zonder plaats meten we met alleen Nederland als locatie, en bestemmingsvragen vanuit een grote stad waar gasten vandaan komen. Google AI Overviews (op google.nl) en Google AI Mode meten we in het Nederlands, vanaf dezelfde plaats.
• We bewaren het antwoord en de bronnen die de AI noemt, zodat je kunt nalezen waar een uitslag op is gebaseerd.

Waarom we vragen herhalen

Omdat AI-antwoorden wisselen. Stel je dezelfde vraag twee keer, dan krijg je vaak een ander lijstje bedrijven, in een andere volgorde. Eén antwoord zegt dus weinig; meerdere antwoorden laten zien hoe vaak je er echt bij staat.

• AI-assistenten (ChatGPT, Google Gemini, Perplexity, Claude): in het AI-rapport en de Check-up elke vraag 3 keer, in een abonnement 2 keer. Claude, dat alleen in Business zit, vragen we daar 1 keer. Telkens in een nieuw gesprek.
• Google AI Overviews en AI Mode: 1 keer per vraag. Google toont per zoekopdracht één antwoord, en niet bij elke zoekopdracht verschijnt er een AI-overzicht. Is er geen AI-overzicht, dan telt die vraag niet mee, in plaats van als “niet genoemd”.

Waarom 2 keer in een abonnement? Minder herhalingen betekent minder antwoorden per vraag, en dus een iets bredere marge. Een voorbeeld met 10 vragen: 3 keer vragen geeft 30 antwoorden per AI, 2 keer vragen 20. Word je in 30% van de antwoorden genoemd, dan is de marge bij 30 antwoorden 17–48% en bij 20 antwoorden 15–52%. Daar staat tegenover dat een abonnement elke week meet. Na een paar weken zie je zo toch een duidelijke lijn. Daar kijken we naar, niet naar één meting.

Zo lees je de uitslag

De uitslag is “genoemd in X van Y”. Y is het aantal geldige antwoorden, X het aantal antwoorden waarin jouw bedrijf genoemd wordt. Bij een klein aantal antwoorden speelt toeval een grote rol. Daarom staat er een marge bij: het bereik waarin je werkelijke score vrijwel zeker ligt. Voor wie het precies wil weten: een 95%-betrouwbaarheidsinterval volgens de Wilson-methode, dezelfde rekenmethode als in je dashboard en rapport.

Valt een nieuwe meting binnen de marge van de vorige? Dan is dat nog geen echte verandering. Pas als een uitslag duidelijk buiten de marge valt, spreken we van een stijging of daling.

We zoeken je bedrijfsnaam in elk antwoord. Een automatische check kan een vermelding missen of ten onrechte tellen, bijvoorbeeld bij een andere schrijfwijze of een veelvoorkomende naam. Daarom controleren we in een rapport elke uitslag van “0 keer genoemd” met de hand.

Wat we niet kunnen garanderen

Vier dingen, en we zeggen ze liever vooraf dan achteraf.

• Niet precies de app van je klant. We meten via de koppelingen (API's) van de AI-aanbieders en voor Google via een meetpartner. Dat komt dicht in de buurt, maar is niet exact wat iemand in de app op zijn telefoon ziet. Die kan een ander model gebruiken, persoonlijke instellingen of geheugen hebben, of op een andere plek zijn.
• Antwoorden wisselen. Dezelfde vraag kan morgen een ander antwoord geven. Daarom herhalen we en tonen we een marge.
• Een momentopname. Elke uitslag hoort bij een datum en een model. AI-aanbieders passen hun modellen regelmatig aan, en dan kan een uitslag verschuiven zonder dat er bij jou iets veranderd is.
• Geen garantie op vermeldingen. Wij bepalen niet wat AI aanraadt. We laten zien waar je staat en adviseren wat je kunt doen, maar een vermelding, een positie of extra klanten kunnen we niet beloven. Jij of je webbouwer voert het advies uit.

Gepland: elke maand een steekproef in de echte app

Omdat een koppeling niet precies de app is, gaan we elke maand een steekproef doen. We leggen vragen uit verschillende branches naast de echte ChatGPT-app en laten op deze pagina zien hoe goed onze meting daarmee overeenkomt. Zodra de eerste steekproef klaar is, staat de uitkomst hier, met datum. Tot die tijd staat hier geen cijfer.

Klopt een uitslag niet?

Zagen we je bedrijf over het hoofd, of tellen we een ander bedrijf als het jouwe? Mail ons via hallo@trovely.nl. We kijken het met de hand na. Zelf proberen? Doe de gratis check. Wat je met een uitslag doet, lees je bij AI-zichtbaarheid meten en in de kennisbank.