”Jeg spørger lige chatten.” Det er efterhånden blevet et hverdagsudtryk for mange af os. Hvor vi før googlede os frem til information, er AI-chatbots blevet en gængs måde at finde svar på alt fra, hvad man skal lave til aftensmad, over hvordan man formulerer den svære mail til chefen, til hvad det egentlig betyder, når renten stiger.
Men de store sprogmodeller, som AI-chatbots er baseret på, giver os et markant smallere udvalg af information end en almindelig internetsøgning. Det viser et nyt studie anført af Datalogisk Institut på Københavns Universitet.
”Samtlige sprogmodeller, vi har testet, giver brugeren mere ensartet information end en simpel Google-søgning på tværs af alle de emner, vi undersøgte. Folk bliver altså i høj grad eksponeret for den samme information igen og igen. Så AI-chatbots ændrer ikke kun, hvordan vi finder viden, men også hvilken viden vi får adgang til,” siger førsteforfatter Dustin Wright, der er tidligere adjunkt på Datalogisk Institut og i dag tilknyttet Aalborg Universitet.
Bedste model er mindst 18% dårligere end Google
Forskerne har testet 27 forskellige store sprogmodeller på 155 emner. For hvert af emnerne har de brugt 200 forskellige prompt-formuleringer baseret på spørgsmål fra virkelige brugere. Det har genereret et datamateriale bestående af cirka 70 millioner udsagn fra modellerne.
