Studie: GPT-5:s svar är 18,5 % mindre varierade än Google Search

En studie av forskare vid Köpenhamns universitet visar att svar från stora språkmodeller (LLM) är mindre varierade än informationen i Google Search. Även GPT-5, modellen som gav de mest varierade svaren i studien, gav svar som var 18,5 % mindre varierade än resultaten från Google Search.

Forskarna testade 27 LLM-modeller inom 155 ämnen, från kärnvapen till K-Pop. De använde 200 formuleringar av frågor som byggde på forskning om verklig användning av chattbotar och genererade 70 miljoner svar. Studien genomfördes av universitetets institution för datavetenskap (DIKU).

Försteförfattaren Dustin Wright sade att människor ofta möter samma information om och om igen, vilket påverkar både hur de hittar kunskap och vilken kunskap de kan ta del av. Isabelle Augenstein, professor vid DIKU och studiens seniorförfattare, sade att ett smalare urval av perspektiv kan göra populärt innehåll mer dominerande medan annat material förbises. Hon beskrev detta som en risk för en ”ond cirkel”.

Augenstein jämförde den möjliga minskningen av mångfalden med globaliseringen, som har gjort samma produkter och kaffekedjor vanliga på många platser. Hon sade att någon kunskapskollaps inte pågår ännu och att nyare modeller ger något mer varierade svar än äldre modeller.