[{"data":1,"prerenderedAt":239},["ShallowReactive",2],{"post-\u002Fnl\u002Fblog\u002Ftesten-in-het-tijdperk-van-ai-agenten":3,"post-surround-\u002Fnl\u002Fblog\u002Ftesten-in-het-tijdperk-van-ai-agenten":228},{"id":4,"title":5,"authors":6,"badge":7,"body":9,"date":211,"dateModified":6,"description":212,"extension":213,"image":214,"meta":219,"navigation":220,"path":221,"seo":222,"stem":225,"translation":226,"__hash__":227},"blog\u002Fnl\u002Fblog\u002Ftesten-in-het-tijdperk-van-ai-agenten.md","Testen in het tijdperk van AI-agenten",null,{"label":8},"AI-agenten",{"type":10,"value":11,"toc":199},"minimark",[12,24,29,45,49,52,55,70,77,81,84,87,91,94,97,106,114,117,121,124,127,139,142,146,149,173,176,180,183,187],[13,14,15,16,23],"p",{},"Stel ChatGPT twee keer dezelfde vraag en je krijgt twee verschillende antwoorden. In een chatvenster is dat geen probleem. Maar als een AI-agent met je klanten praat, wil je zeker weten of de codewijziging van vandaag hem beter of slechter heeft gemaakt. Zo testen wij de AI-agenten achter ",[17,18,22],"a",{"href":19,"rel":20,"target":21},"https:\u002F\u002Fchatsome.co\u002F",[],"_blank","Chatsome",".",[25,26,28],"h2",{"id":27},"de-belangrijkste-punten","De belangrijkste punten",[30,31,32,36,39,42],"ul",{},[33,34,35],"li",{},"De output van een LLM verschilt per keer, dus traditionele tests die bij dezelfde input dezelfde output verwachten, schieten tekort.",[33,37,38],{},"We bouwden een eigen testsuite: elke test legt een chatgeschiedenis en de verwachte output vast, en een aparte GPT-sessie beoordeelt of het antwoord klopt.",[33,40,41],{},"In één voorbeeld ging het aantal falende tests van 5 naar 2 door één zin in een prompt aan te passen.",[33,43,44],{},"Zonder geautomatiseerde tests weet je nooit of een wijziging je agent echt verbetert.",[25,46,48],{"id":47},"chatsome-een-ai-agent-gekoppeld-aan-je-crm","Chatsome: een AI-agent gekoppeld aan je CRM",[13,50,51],{},"Bij Coding Delta helpen we klanten groeien, maar we bouwen en vermarkten ook onze eigen producten. Een daarvan is Chatsome, een AI-chatbot die integreert met de CRM-systemen van onze klanten.",[13,53,54],{},"Via die CRM-koppeling wordt Chatsome een volwaardig onderdeel van het team:",[30,56,57,64],{},[33,58,59,63],{},[60,61,62],"strong",{},"Digitale verkoopagent:"," de chatbot kent alle producten die worden verkocht en helpt bezoekers 24\u002F7.",[33,65,66,69],{},[60,67,68],{},"Digitale klantenserviceagent:"," met toegang tot bestelgegevens lost hij veel vragen op zonder dat er een medewerker van de klantenservice aan te pas komt.",[13,71,72],{},[73,74],"img",{"alt":75,"src":76},"Chatsome-chatwidget die een vraag van een bezoeker over deurklinken beantwoordt met productkaarten","\u002Fcontent\u002Fimages\u002Fchatsome-screenshot-widget.png",[25,78,80],{"id":79},"hoe-onze-agenten-werken","Hoe onze agenten werken",[13,82,83],{},"Websitebezoekers stellen allerlei vragen, van verkoopvragen tot klantenservicekwesties. We ontwikkelden een uitgebreide pijplijn die de intentie van de gebruiker en het juiste antwoord bepaalt.",[13,85,86],{},"Onze klanten verkopen heel verschillende producten, van deurklinken tot babyaccessoires. Daarom bouwden we een generieke workflow die zich aan elk scenario aanpast, en ons systeem kan ze allemaal aan.",[25,88,90],{"id":89},"het-probleem-testen-wat-nooit-twee-keer-hetzelfde-antwoordt","Het probleem: testen wat nooit twee keer hetzelfde antwoordt",[13,92,93],{},"Die diversiteit maakt testen lastig: hoe weet je of een codewijziging de prestaties van de bot voor een specifieke klant verbetert of verslechtert? Met een handvol klanten konden we nog handmatig testen. Toen we opschaalden en meer edge cases moesten afvangen, werd dat onwerkbaar.",[13,95,96],{},"Daar komt bij dat ChatGPT elke keer anders antwoordt op dezelfde vraag. We vroegen twee keer \"Wie is de koning van Nederland?\" en kregen deze antwoorden:",[98,99,100],"blockquote",{},[13,101,102,105],{},[60,103,104],{},"Antwoord 1:"," De huidige koning van Nederland is koning Willem-Alexander. Hij is monarch sinds 30 april 2013, na de abdicatie van zijn moeder, koningin Beatrix.",[98,107,108],{},[13,109,110,113],{},[60,111,112],{},"Antwoord 2:"," De koning van Nederland is koning Willem-Alexander. Hij is de regerende monarch sinds 30 april 2013, na de abdicatie van zijn moeder, koningin Beatrix. Koning Willem-Alexander is de eerste mannelijke monarch van Nederland in meer dan een eeuw, na een lijn van drie vrouwelijke monarchen.",[13,115,116],{},"De antwoorden lijken op elkaar, maar verschillen genoeg om een probleem te zijn als een computer ze moet interpreteren.",[25,118,120],{"id":119},"onze-oplossing-een-testsuite-voor-llms","Onze oplossing: een testsuite voor LLM's",[13,122,123],{},"Traditioneel testen gaat ervan uit dat een functie bij dezelfde input steeds dezelfde output geeft. GPT doet dat niet, dus we hadden een andere aanpak nodig en ontwikkelden een eigen testsuite.",[13,125,126],{},"Voor elke belangrijke interactie met de bot schrijven we een test met de chatgeschiedenis en de verwachte output. Daarna:",[128,129,130,133,136],"ol",{},[33,131,132],{},"Laten we GPT een antwoord genereren op basis van de chatgeschiedenis.",[33,134,135],{},"Starten we een nieuwe GPT-sessie die het antwoord vergelijkt met de verwachte output.",[33,137,138],{},"Beoordelen we het resultaat als \"waar\" of \"onwaar\".",[13,140,141],{},"Zo kunnen we elke codewijziging controleren. Faalt er een test, dan zoeken we uit waarom en lossen we het op tot alle tests slagen.",[25,143,145],{"id":144},"waarom-llm-tests-nodig-zijn-één-zin-drie-extra-geslaagde-tests","Waarom LLM-tests nodig zijn: één zin, drie extra geslaagde tests",[13,147,148],{},"Kleine wijzigingen kunnen tot heel andere uitkomsten leiden. Hieronder zie je twee testruns waarbij we maar één prompt hebben aangepast, en in die prompt maar één zin. Het resultaat: drie tests meer geslaagd.",[150,151,157,165],"div",{"className":152},[153,154,155,156],"flex","flex-col","sm:flex-row","sm:gap-3",[150,158,159],{},[13,160,161],{},[73,162],{"alt":163,"src":164},"Testrun vóór de wijziging: 22 tests, 17 geslaagd, 5 mislukt","\u002Fcontent\u002Fimages\u002Fllm-test-5-failed.png",[150,166,167],{},[13,168,169],{},[73,170],{"alt":171,"src":172},"Testrun na het aanpassen van één zin in de prompt: 22 tests, 20 geslaagd, 2 mislukt","\u002Fcontent\u002Fimages\u002Fllm-test-2-failed.png",[13,174,175],{},"Daarom zijn geautomatiseerde tests onmisbaar als je met LLM's werkt. Zonder tests weet je nooit of een wijziging in je code of prompts de uiteindelijke output verbetert.",[25,177,179],{"id":178},"de-impact","De impact",[13,181,182],{},"Sinds we LLM-tests gebruiken, is onze ontwikkelsnelheid flink toegenomen. En we hebben meer vertrouwen in de juistheid van de antwoorden die onze AI-agent aan de bezoekers van onze klanten geeft.",[25,184,186],{"id":185},"zet-ai-agenten-in-voor-jouw-bedrijf","Zet AI-agenten in voor jouw bedrijf",[13,188,189,192,193,198],{},[17,190,22],{"href":19,"rel":191,"target":21},[]," zet vandaag AI-agenten in voor klantenservice en sales via je website, WhatsApp, e-mail en telefoon. Wil je onze AI-agenten gebruiken, of meer weten over onze testsuite? Gebruik de knop hieronder om contact op te nemen. Kijk je naar AI verder dan klantenservice? Bekijk hoe wij ",[17,194,197],{"href":195,"rel":196},"\u002Fnl\u002Fautomation",[],"AI en automatisering"," aanpakken.",{"title":200,"searchDepth":201,"depth":201,"links":202},"",2,[203,204,205,206,207,208,209,210],{"id":27,"depth":201,"text":28},{"id":47,"depth":201,"text":48},{"id":79,"depth":201,"text":80},{"id":89,"depth":201,"text":90},{"id":119,"depth":201,"text":120},{"id":144,"depth":201,"text":145},{"id":178,"depth":201,"text":179},{"id":185,"depth":201,"text":186},"2024-06-26","Het gebruik van een testframework is cruciaal bij het creëren van consistente AI-agenten","md",{"src":215,"alt":216,"height":217,"width":218},"\u002Fcontent\u002Fimages\u002Fcover-testing-ai-agents-nl.jpg","Cover: 'Eén zin aangepast. Alles getest.' met een testoverzicht van 17 naar 20 van de 22 geslaagde tests",900,1600,{},true,"\u002Fnl\u002Fblog\u002Ftesten-in-het-tijdperk-van-ai-agenten",{"title":223,"description":224},"AI-agents testen voor consistente resultaten","Zo testen we Chatsome, onze AI-agent voor klantenservice en sales, met een LLM-testsuite, zodat een wijziging voor één klant nooit een andere klant breekt.","nl\u002Fblog\u002Ftesten-in-het-tijdperk-van-ai-agenten","testing-in-the-age-of-ai-agents","dyt4qF9-0MkCgPjqDvLGhSOS7o97udUEllRVrcFnCmA",[229,234],{"title":230,"path":231,"stem":232,"description":233,"children":-1},"Optimalisatie van Luchtkwaliteitsbewaking met IoT: Een Casestudy","\u002Fnl\u002Fblog\u002Foptimalisatie-van-luchtkwaliteitsbewaking-met-iot","nl\u002Fblog\u002Foptimalisatie-van-luchtkwaliteitsbewaking-met-iot","Hoe we honderden sensoren gebruiken om de luchtkwaliteit te verbeteren.",{"title":235,"path":236,"stem":237,"description":238,"children":-1},"Hoe Familiebank familieleningen hervormt: een interview met Josca Buitenhuis","\u002Fnl\u002Fblog\u002Fhoe-familiebank-familieleningen-hervormt-interview-met-josca-buitenhuis","nl\u002Fblog\u002Fhoe-familiebank-familieleningen-hervormt-interview-met-josca-buitenhuis","Ontdek hoe Josca Buitenhuis met Familiebank familieleningen vereenvoudigt. Lees over haar visie, plannen en samenwerking met Coding Delta.",1795282282550]