AI heeft revolutionaire sprongen gemaakt: van diagnose stellen bij ziektes, het schrijven van poëzie tot zelfs het besturen van voertuigen. Maar er is één simpel woord dat de technologie nog steeds niet goed weet te hanteren: “nee.” Dit blinde vlek kan ernstige gevolgen hebben in situaties waar precisie cruciaal is, zoals in de gezondheidszorg.
Een recent onderzoek, geleid door PhD-student Kumail Alhamoud van het MIT, legt bloot dat het niet begrijpen van woorden als “nee” en “niet” ernstige gevolgen kan hebben, vooral in medische omgevingen. Het vermogen om negatie te begrijpen, zoals “geen breuk” of “niet vergroot”, is van levensbelang. De studie toont aan dat huidige AI-modellen, waaronder bekende als ChatGPT en Llama, er vaak niet in slagen om negatieve uitspraken correct te interpreteren. In plaats daarvan neigen ze te vervallen in positieve associaties.
Het probleem gaat dieper; het gaat niet alleen om een gebrek aan data, maar ook om de manier waarop AI wordt opgeleid. De meeste grote taalmodellen zijn ontworpen om patronen te herkennen, niet om logisch te redeneren. Hierdoor kan een model “niet goed” interpreteren als iets dat nog steeds positief is, omdat het de associatie met “goed” volgt. Experts benadrukken dat zonder een les in logisch redeneren, de modellen kwetsbaar blijven voor gevaarlijke misverstanden.
Franklin Delehelle, hoofdonderzoeker bij Lagrange Labs, stelt: “AI is uitstekend in het genereren van antwoorden die lijken op wat het heeft gezien tijdens training. Maar het is behoorlijk slecht in het bedenken van iets volkomen nieuws of buiten de trainingsdata.” Als de trainingsdata geen sterke voorbeelden bevat van het gebruik van “nee” of negatieve sentimenten, kan het model het moeilijk hebben om deze reacties te genereren.
Onderzoekers hebben ontdekt dat modellen die zijn ontwikkeld om beelden en tekst te interpreteren, een nog sterker vooroordeel vertonen richting bevestigende uitspraken. Ondanks vooruitgang in de redeneervaardigheden van AI, blijven veel systemen worstelen met menselijke logica, vooral in open eindige problemen die een dieper begrip vereisen.
Kian Katanforoosh, adjunct-professor aan Stanford University, wijst op de fundamentele complexiteit van negatie. Woorden zoals “nee” en “niet” draaien de betekenis van een zin om. De meeste modellen redeneren echter niet; ze voorspellen wat waarschijnlijk klinkt op basis van patronen. Dit maakt dat ze de kern van een negatieve uitspraak vaak missen. De gevolgen van deze misinterpretaties kunnen verstrekkend zijn, vooral in sectoren als de juridische, medische of HR-omgevingen waar de impact van foutieve interpretaties cruciaal kan zijn.
Katanforoosh benadrukt dat het niet alleen om meer data draait, maar om betere redeneervaardigheden. “We hebben modellen nodig die met logica kunnen omgaan, niet alleen met taal. Dat is waar de echte uitdaging ligt: het verbinden van statistisch leren met gestructureerd denken.”
“Laten we de AI de kracht van “nee” laten ontdekken!”
Waarom begrijpt AI negatie vaak niet goed?
Negatie is complex en de meeste AI-modellen zijn ontworpen om patronen te herkennen, niet om logisch te redeneren. Dit leidt tot misinterpretaties van negatieve uitspraken.
Wat zijn de gevolgen van deze misinterpretaties?
Foutieve interpretaties kunnen ernstige gevolgen hebben in kritische sectoren zoals de gezondheidszorg, wetgeving en HR, waar precisie van essentieel belang is.
Hoe kunnen we deze beperkingen van AI verbeteren?
Door AI-modellen te trainen in logisch redeneren en niet alleen in het herkennen van patronen, kunnen we ze beter laten omgaan met complexere taalstructuren zoals negatie.
