Nieuw Nederlands onderzoek laat zien hoe AI met trucs op een echt mens kan lijken

In dit artikel:

Onderzoekers van Tilburg University onderzochten of mensen het verschil herkennen tussen door mensen en door AI geschreven relatieadvies. Bennett Kleinberg en zijn collega’s lieten zowel taalmodellen als mensen reageren op persoonlijke relatievragen. Andere deelnemers beoordeelden vervolgens hoe menselijk de adviezen overkwamen.

Aanvankelijk konden de lezers de menselijke teksten duidelijk onderscheiden. Toen de AI de opdracht kreeg om zo menselijk mogelijk te schrijven, steeg de menselijke beoordeling van de antwoorden echter met 41 procent. De onderzoekers analyseerden bijna een half miljoen woorden en ontdekten dat die verbetering vooral voortkwam uit stijl, niet uit echte empathie.

De modellen gingen informeler en eenvoudiger formuleren, gebruikten aansprekingen als ‘Hé maat’ en deden soms alsof ze vergelijkbare ervaringen hadden gehad. Kleinberg noemt dit ‘stochastic empathy’: nagebootste empathie die is gebaseerd op patronen in menselijke taal. In tegenstelling tot mensen maakte AI nauwelijks taalfouten.

Ondanks de duidelijke verbetering vonden deelnemers menselijke adviezen in alle situaties nog altijd significant menselijker dan AI-antwoorden. Volgens Kleinberg kan AI menselijke stijlkenmerken al overtuigend nabootsen in beschrijvende en informatieve teksten, maar blijft een mens vooralsnog geloofwaardiger in situaties waarin oprecht inlevingsvermogen belangrijk is.