Hoe test je of voice AI een zakelijk gesprek echt begrijpt?

Zakelijke voice AI moet niet alleen prettig klinken, maar ook onderbrekingen, namen en correcties goed verwerken. Test met realistische gesprekken en controleer wat er daadwerkelijk wordt vastgelegd. Laat afspraken met gevolgen expliciet bevestigen en maak het AI-karakter duidelijk.

Een overtuigende demonstratie is een mooi begin. Maar wat gebeurt er als je halverwege zegt: ‘Wacht, ik bedoel een andere datum’? Juist zulke momenten laten zien of een spraakfunctie bruikbaar is in het dagelijkse werk. Met de vijf tests hieronder beoordeel je niet de mooiste stem, maar de kwaliteit van het gesprek én de uitkomst.

Waarom is een vloeiende stem niet genoeg?

Voice AI is AI waarmee je via gesproken taal communiceert. De hoorbare stem is maar één onderdeel. Voor zakelijke inzet moet het systeem ook je woorden herkennen, de bedoeling verwerken en informatie correct doorgeven aan het werkproces.

Maak daarom onderscheid tussen drie vragen:

• Klinkt het goed? Zijn uitspraak, tempo en pauzes prettig?
• Wordt de boodschap goed verwerkt? Herkent het systeem bijvoorbeeld dat je een eerdere datum vervangt?
• Klopt het resultaat? Staat de juiste datum ook in de samenvatting, afspraak of registratie?

Spraakherkenning draait om het herkennen van wat er gezegd wordt. Een goede zakelijke afhandeling vraagt daarnaast dat de betekenis en gevolgen goed worden verwerkt. Een correct herhaalde zin bewijst nog niet dat de juiste actie volgt.

De beste controlevraag is niet: ‘Klonk dit menselijk?’, maar: ‘Is precies vastgelegd wat we hebben afgesproken?’

Waarop test je zakelijke voice AI?

Test onderbrekingen, namen, getallen, achtergrondgeluid en herstel van misverstanden. Een natuurlijk klinkende stem bewijst niet dat informatie correct wordt verwerkt of vastgelegd.

Gebruik fictieve zakelijke gesprekken in een testomgeving, zonder echte bestellingen, betalingen of klantwijzigingen. Leg vooraf de gewenste uitkomst vast. Onderstaande voorbeelden zijn testsuggesties, geen gemeten resultaten van een specifiek product.

1. Wat gebeurt er als je de AI onderbreekt?

Laat de AI een afspraak samenvatten en onderbreek terwijl de stem nog spreekt:

‘Wacht even, niet dinsdag. Ik wil donderdag. Het tijdstip blijft hetzelfde.’

Controleer of de AI ruimte maakt voor je correctie, de nieuwe dag verwerkt en het tijdstip behoudt. Vraag daarna opnieuw welke afspraak er staat. Bekijk ook de uiteindelijke registratie.

Let bovendien op het verschil tussen een echte onderbreking en een kort ‘ja’ of ‘hm-hm’. Zo’n luisterreactie hoeft niet te betekenen dat je de spreekbeurt wilt overnemen of ergens definitief mee instemt.

Geslaagd gedrag: de correctie wordt verwerkt zonder andere gegevens onbedoeld te wijzigen. Noteer ook of je moest herhalen en hoe lang je moest wachten voordat je kon reageren.

2. Hoe gaat de AI om met namen die op elkaar lijken?

Gebruik een fictieve naam die gemakkelijk verkeerd wordt verstaan:

‘De afspraak is voor Van der Meer. Meer met dubbel e, niet Meijer.’

Controleer de naam in het gesprek én in het daarvoor bestemde veld. Laat bij twijfel spellen of gericht navragen. Een systeem dat vriendelijk ‘helemaal goed’ zegt maar de verkeerde naam opslaat, heeft deze test niet doorstaan.

Probeer ook een bedrijfsnaam, een naam met een tussenvoegsel en een naam die de AI niet eerder heeft gehoord. Gebruik verschillende sprekers, waaronder mensen met een regionaal accent.

Geslaagd gedrag: de naam wordt correct bevestigd en vastgelegd. Als de AI twijfelt, vraagt zij door in plaats van zelf een aannemelijke naam in te vullen.

3. Blijven getallen, bedragen en eenheden kloppen?

Test niet alleen losse cijfers, maar ook hun betekenis:

‘Het gaat om vijftien dozen, niet vijftig. In elke doos zitten twaalf stuks.’

De gewenste uitkomst is vijftien dozen met twaalf stuks per doos. Controleer dat dozen en losse stuks niet worden verwisseld. Test daarnaast een bedrag met centen, een tijdstip en een fictief referentienummer.

Gebruik ook een datum die uitleg vraagt, zoals ‘volgende vrijdag’. Laat de AI die omzetten naar een concrete kalenderdatum en controleer of die overeenkomt met wat de spreker bedoelt.

Geslaagd gedrag: waarde, eenheid en context blijven bij elkaar. Bij een dubbelzinnige datum volgt een controlevraag, geen stille aanname.

4. Wat gebeurt er bij achtergrondgeluid of een slechte verbinding?

Herhaal hetzelfde testgesprek eerst in een rustige ruimte en daarna met realistisch kantoorgeluid of via een handsfreeverbinding. Houd de inhoud gelijk, zodat je de uitkomsten kunt vergelijken.

Let op wat de AI doet als een belangrijk woord wegvalt. Een goede herstelvraag is bijvoorbeeld: ‘Ik verstond het aantal niet. Hoeveel dozen bedoel je?’ Dat is bruikbaarder dan een algemeen verzoek om het hele verhaal opnieuw te vertellen.

Geslaagd gedrag: de AI vraagt ontbrekende informatie gericht na en vult geen kritieke gegevens in op basis van een gok. Als verstaan niet lukt, stopt zij de afhandeling of volgt de afgesproken route naar een mens.

5. Herstelt de AI een misverstand ook in de vastlegging?

Corrigeer iets dat al eerder is bevestigd:

‘Ik heb nog een wijziging: het afleveradres wordt de Havenstraat. Het factuuradres blijft de Marktstraat.’

Deze test gaat verder dan een woord vervangen. De AI moet herkennen welk gegeven verandert en welk gegeven juist gelijk blijft.

Controleer de uiteindelijke samenvatting en beide adresvelden. Vraag ook: ‘Wat heb je aangepast?’ Zo ontdek je of de AI onderscheid maakt tussen de oude informatie en de geldende afspraak.

Geslaagd gedrag: alleen het bedoelde gegeven wijzigt. De eerdere waarde blijft niet per ongeluk actief in een tweede registratie of geplande actie.

Hoe leg je de uitkomsten vast in een testformulier?

Gebruik per testgesprek één regel en bewaar de verwachte uitkomst naast de werkelijke uitkomst. Daarmee voorkom je dat een prettige luisterervaring zwaarder weegt dan een verkeerde registratie.

Dit is een voorgesteld luister- en begripstestformulier dat je zelf in een spreadsheet kunt maken:

Beoordeel spreekcomfort en inhoudelijke juistheid afzonderlijk. Een onhandige pauze is iets anders dan een verkeerd afleveradres.

Herhaal scenario’s met meerdere sprekers en na relevante wijzigingen aan model, instructies of koppelingen. Rapporteer aantallen met context, bijvoorbeeld ‘twee verkeerde registraties in twintig fictieve gesprekken’, niet alleen een gemiddeld rapportcijfer. Zo’n kleine proef bewijst nog geen betrouwbaarheid voor alle praktijksituaties.

Spreek vooraf af welke fouten inzet blokkeren. Een ongewenste bestelling mag niet worden weggemiddeld tegen een reeks prettig verlopen gesprekken.

Welke afspraken vragen expliciete bevestiging?

Laat gegevens expliciet bevestigen voordat een actie met zakelijke gevolgen wordt uitgevoerd. Denk aan een bestelling, annulering, adreswijziging of afspraak met kosten.

Een bruikbare bevestiging is concreet:

‘Ik heb vijftien dozen met twaalf stuks per doos genoteerd, voor levering op het zojuist bevestigde adres. Wil je dat ik deze bestelling definitief plaats?’

Dit is een fictief voorbeeld. De juiste formulering hangt af van de taak en bevoegdheden. Het systeem moet ook onderscheid maken tussen gegevens bevestigen en toestemming geven voor uitvoering.

‘Ik heb je verzoek genoteerd’ betekent iets anders dan ‘de bestelling is geplaatst’. Test daarom of de uitgesproken status overeenkomt met wat er werkelijk in het systeem is gebeurd. Voor gevoelige of onomkeerbare handelingen kan aanvullende menselijke goedkeuring nodig zijn.

Hoe maak je duidelijk dat iemand met AI spreekt?

Vertel aan het begin van het gesprek dat het om een AI-assistent gaat en benoem kort de taak. Bijvoorbeeld:

‘Je spreekt met de AI-assistent van onze organisatie. Ik help je een afspraakverzoek vast te leggen.’

Die melding moet passen bij wat het systeem werkelijk kan. Een menselijke naam of natuurlijke stem mag geen misleidende menselijke identiteit suggereren. Dat is ook een uitgangspunt van AIMAZE voor Digitale Medewerkers.

Artikel 50, leden 1 en 5, van de AI Act verlangt dat aanbieders systemen voor directe interactie zo ontwerpen dat mensen over de AI-interactie worden geïnformeerd, tenzij dit in de context al duidelijk is. De vereiste informatie moet uiterlijk bij de eerste interactie duidelijk en toegankelijk worden gegeven. Maak daarom met je leverancier expliciet wie deze melding inricht en controleert.

Hoe ga je zorgvuldig om met opnamen en transcripties?

Bepaal vóór de proef welke gegevens je nodig hebt en waarom. Audio, uitgeschreven gesprekken en samenvattingen zijn verschillende bestanden; leg voor elk vast wat wordt bewaard en wie erbij kan.

Maak afspraken over bewaartermijnen, beveiliging, verwijdering, leveranciers en eventueel gebruik voor modeltraining. Laat beoordelen welke grondslag en informatievoorziening nodig zijn. Alleen melden dat je opneemt, maakt gegevensverwerking niet automatisch rechtmatig.

Gebruik voor de eerste tests fictieve klantgegevens. Ook dan kan de stemopname van een echte tester persoonsgegevens bevatten. Bewaar dus niet vanzelf alle audio omdat dat technisch mogelijk is.

Begin bij één afgebakende taak: wat mag de AI vragen, vastleggen en uitvoeren, en wanneer neemt een mens het over? Kies daarna pas de stem en technische inrichting.