Ny studie: ChatGPT blir sämre med nya uppdateringar

Håller OpenAI:s chatverktyg ChatGPT på att bli dummare? Ja det verkar så om man ska tro några Stanford- och Berkeley-forskare som nyss har släppt en ny rapport som visar att chatboten blir sämre och sämre genom sina nya uppdateringar, berättar Futurism.

Både GPT–3.5 och GPT-4 visar resultat där exaktheten i deras svar verkar gå ner, och det bevisar isåfall alla de uppgifter från användarna att de senaste versionerna av programvaran har försämrats avsevärt under månaderna sedan verktyget släpptes för första gången i november förra året.

ChatGPT blir sämre

Ett exempel är GPT-4 som kom i mars kunde mycket noggrant identifiera nummer, med upp till 97,6 procent, men i juni hade den förmågan rasat kraftigt.

“Både GPT-4 och GPT-3.5″ hade fler formateringsfel i kodgenereringen i juni än i mars”, uppger forskarna.

Generellt sätt så får ChatGPT inte särskilt högt betyg alls i rapporten.

“Vi finner att prestanda och beteende för både GPT-3.5 och GPT-4 varierar avsevärt mellan dessa två utgåvor och att deras prestanda på vissa uppgifter har blivit avsevärt sämre med tiden.”

Vad händer framöver?

Frågan är då vad som kommer hända framöver för det populära verktyget.

“Det är intressant att ifrågasätta om GPT-4 verkligen blir starkare.”

Som svar på tal uttalade sig OpenAI:s produktchef Peter Welinder genom en tweet förra veckan:

“Nej, vi har inte gjort GPT-4 dummare. Tvärtom, vi gör varje ny version smartare än den tidigare.”

Läs även: Unga i riskzonen när ChatGPT tar över