Menu luk

ChatGPT svarer forkert på spørgsmål om programmering

Pas på med at lade ChatGPT klarer kodeærterne for dig. Den svarer ofte forkert, viser en ny undersøgelse.

29. maj 2024
2 min

Hvis du troede, at du kunne læne dig tilbage med en kop kaffe, smække benene op og binge-watche din nyeste yndlingsserie, mens ChatGPT skriver al dine kode for dig, bør du nok læse med her. 

Den er nemlig endnu langt fra at kunne konkurrere med en dygtig programmør på en række områder. 

Et team af forskere fra amerikanske Purdue University har i et studie konstateret, at ChatGPTs svar på 517 programmeringsspørgsmål i halvdelene af tilfældene indeholdt fejl.

Derudover var 77 % af svarene mere omfangsrige end menneskelige svar, og 78 % af dem var inkonsistente i forhold til menneskelige svar. 

Det skriver Futurism.

Høflige og velstrukturerede svar

Det tyder samtidig på, at flere programmører foretrækker ChatGPT’s svar, mens andre ikke opdagede de fejl, der havde sneget sig ind i koden.

Om end det er baseret på få interviews, tilskrives det bl.a. ChatGPTs høflige og velstrukturerede skrivestil, som tilsyneladende virker overbevisende på folk. 

"De opfølgende semi-strukturerede interviews afslørede, at det høflige sprog, de velartikulerede og lærebogsagtige svar samt den omfattende dækning var nogle af hovedårsagerne til, at ChatGPT's svar virkede mere overbevisende, hvilket fik deltagerne til at sænke deres parader og overse noget misinformation i ChatGPTs svar," skriver forskerne.

(Artiklen fortsætter efter boksen)

Du kan ikke stole på den

En af landets førende dataloger, professor Henning Christiansen fra RUC, har også tidligere pointeret overfor Finans It & Tech, at man ikke kan skal passe på med, hvad man bruger ChatGPT til.

”Når man sætter sig ind i teknologien, står det hurtigt klart, at den genererer plausible svar, men ikke sande svar. Den kan rable derud af med tekst og kode, som ser rigtigt ud. Det er lidt som gymnasieeleven, der er god til at regne ud, hvad læreren vil høre,” sagde han og slog fast:

”Du kan ikke stole på den.”

Seneste nyt