Kent AI de Denderstreek beter dan de Denderstrekenaren?

Kent AI de Denderstreek beter dan de Denderstrekenaren?

Hoe goed kent artificiële intelligentie de Denderstreek eigenlijk?

AiLabo.eu nam de proef op de som en legde ChatGPT, Gemini, Claude en Perplexity tien uitspraken over de streek voor. De vragen kwamen uit Geraardsbergen, Ninove, Denderleeuw, Haaltert, Aalst, Erpe-Mere, Lede, Lebbeke en Dendermonde.

De opdracht was eenvoudig: juist of fout? De modellen moesten hun oordeel uitleggen, eventuele fouten corrigeren en betrouwbare bronnen vermelden.

De onderwerpen waren herkenbaar voor wie de Denderstreek een beetje kent: mattentaarten, carnaval, wielrennen, voetbal, bekende streekgenoten, Mariaverering, chocolade en lokale folklore.

Toch bleken kleine details opnieuw voldoende om AI op het verkeerde been te zetten. Tot welke gemeente behoort Aaigem? Welk stamnummer behield FCV Dender na de fusie? En was Cacao Barry nu een Frans of een Zwitsers bedrijf?

Claude kwam als beste uit de test. ChatGPT eindigde op de tweede plaats, Perplexity werd derde en Gemini sloot de rangschikking af.

Claude was het enige model dat alle tien de stellingen correct als juist of fout beoordeelde. ChatGPT gebruikte doorgaans sterke bronnen, maar trok bij de chocoladefabriek in Wieze een opvallend verkeerde conclusie.

ChatGPT vindt het juiste feit en geeft toch het verkeerde antwoord

Een van de merkwaardigste momenten van de test draaide rond Barry Callebaut.

De stelling beweerde dat de groep in 1996 ontstond uit een fusie van het Belgische Callebaut en het Zwitserse Cacao Barry.

ChatGPT ontdekte tijdens zijn controle zelf dat Cacao Barry geen Zwitsers maar een Frans bedrijf was. Daarmee had het model precies het detail gevonden waardoor de volledige stelling fout was.

Toch zette ChatGPT als eindoordeel “JUIST”. De informatie in de uitleg klopte dus, maar de conclusie niet.

Ook Perplexity ging bij deze vraag de mist in. Het model noemde Cacao Barry eveneens Zwitsers en gaf zijn antwoord bovendien met volledige zekerheid.

Gemini raakt verstrikt in het stamnummer van FCV Dender

Een andere lokale valstrik ging over FCV Dender. De huidige fusieclub ontstond in 2005 en behield stamnummer 3900 van Verbroedering Denderhoutem.

Gemini beoordeelde die informatie als fout. Tijdens zijn uitleg begon het model echter zelf te twijfelen of stamnummer 3900 misschien toch werd overgenomen.

Die twijfel was terecht: de oorspronkelijke stelling klopte. Gemini kwam dus dicht bij het juiste antwoord, maar paste zijn eindoordeel niet meer aan.

Hetzelfde gebeurde bij Lucien Van Impe. Gemini twijfelde eraan of de Tourwinnaar uit Mere in 1983 Belgisch kampioen werd. Ook dat feit is correct.

Aaigem ligt niet in Aalst

Ook Jan De Wilde dook op in de test. De kleinkunstzanger werd in Aalst geboren, is bekend van onder meer “Eerste sneeuw” en woont in Aaigem.

De valstrik zat niet bij de zanger, maar bij de plaatsnaam. Aaigem behoort tot Erpe-Mere en is geen deelgemeente van Aalst.

Alle vier de AI-modellen herkenden die fout. Een kleine overwinning voor de lokale aardrijkskunde.

Katuit laat geen tien jaar op zich wachten

In Dendermonde ging het over het Ros Beiaard en Katuit. Beide ommegangen zijn nauw verbonden met de lokale folklore, maar ze volgen niet hetzelfde ritme.

Het Ros Beiaard trekt normaal één keer om de tien jaar door de stad. Katuit vindt daarentegen ieder jaar plaats. De bewering dat beide ommegangen slechts om de tien jaar uitgaan, was dus fout.

Ook bij Carnaval Ninove zat de fout in de timing. De Gouden Wortelworp vindt plaats op maandagavond, maar de traditionele wortel wordt pas op dinsdag verbrand.

Moraal van het verhaal?

AI blijkt behoorlijk wat over de Denderstreek te weten. De modellen kenden de Geraardsbergse mattentaart, de vroegere aankomst van de Ronde van Vlaanderen in Meerbeke, De Jeneverdrinker van Kerksken en de wielercarrière van Lucien Van Impe.

Maar één detail over een deelgemeente, voetbalstamnummer, processie of bedrijfsherkomst kan een overtuigend antwoord volledig fout maken.

De test toont ook dat AI soms wel de juiste informatie vindt, maar daar vervolgens toch de verkeerde conclusie uit trekt. Wie alleen naar het eindantwoord kijkt, kan daardoor belangrijke tegenstrijdigheden missen.

De Denderstrekenaren hoeven hun lokale reputatie voorlopig dus nog niet aan AI af te staan. Zeker niet wanneer het over carnaval, voetbal, chocolade of een eigenzinnig stukje gemeentelijke geografie gaat.

Bekijk de volledige test met alle tien stellingen, antwoorden en bronnen .

Bron: AiLabo.eu – praktijktest van ChatGPT, Gemini, Claude en Perplexity over de Denderstreek.