Två forskare vid MIT har testat om ChatGPT har någon effekt på produktivitet och kvalité i skrivuppgifter.

Testpersonerna delades in i två grupper och gavs ett antal uppgifter. De ena gruppen skulle använda ChatGPT för att lösa dem, medan de andra fick använda ett program som heter Overleaf.

Resultaten visade att användning av ChatGPT minskade den genomsnittliga tiden det tog att slutföra uppgiften med 37 procent, samtidigt som slutresultatets kvalitet ökade med 45 procent.

Personer som har utbildning från högskola och arbetar professionell med att skriva, men befinner sig på en mellannivå kvalitetsmässigt, presterar mycket bättre när de använder ChatGPT.

Personer med låg produktivitet producerade bättre texter på kortare tid.

För högpresterande skribenter hjälper ChatGPT dem att behålla hög kvalitet och producera texter snabbare.

En som är upprymd över resultaten är Ethan Mollick, professor vid Wharton. På Twitter skriver han:

"Två tidiga papers finner att effekterna av generativ AI på kunskapsarbete är helt oöverträffade i modern historia."

Han hänvisar också till en undersökning från Github, där liknande positiva resultat observerats.

Han fortsätter:

"Separata studier av både skribenter och programmerare finner 50 procentiga ökningar i produktivitet med AI, och högre prestanda och tillfredsställelse. Och detta är bara början."

Forskarna påpekar att studien har dock vissa begränsningar, såsom relativt korta och självständiga uppgifter. Effekterna av ChatGPT kommer sannolikt att variera beroende på yrke, uppgift och färdighetsnivå. Deras paper har inte heller genomgått per-review ännu.

Mathias Sundin
Den arge optimisten