Ga ChatGPT valgvinnerens politikk – bommet ni av ti ganger

Å vite akkurat hva man skal stemme på, kan for mange være utfordrende. 

Flere som er usikre på akkurat hvem som skal få deres stemme ved et valg, bruker blant annet valgomater for å finne ut hvilke partier de er mest enig med.

Men å spørre chatboter kan være problematisk, viser en ny undersøkelse fra Civil Liberties Union for Europe, eller bare Liberties, omtalt av The Guardian.

Liberties undersøkte hvordan gratisversjonene av ChatGPT og Google Gemini svarte på spørsmål om valget i Ungarn.

– Helt sentralt for menneskelig utvikling

livsstil

Organisasjonen laget fem fiktive «velgerprofiler» basert på standpunktene til de fem partiene som stilte med nasjonal liste. Opplysningene ble hentet fra den ungarske valgomaten Voksmonitor.

Enklere forklart opplyste organisasjonen om hvilke utsagn fra valgomaten hver profil var enige og uenige i til chatbotene, i samsvar med det de politiske partiene hadde svart.

Chatbotene ble enten bedt om å anbefale et parti eller beregne hvor mange prosent den fiktive velgerens synspunkter samsvarte med de forskjellige partiene.

Totalt ble 200 svar undersøkt.

Resultatene var ofte feilaktige og ustabile. Identiske spørsmål kunne gi svært forskjellige råd og prosentanslag.

– Svarene fremsto som velbegrunnede, presise og autoritative. Det skaper en risiko for at brukerne oppfatter dem som pålitelige, selv om metoden er ugjennomsiktig og resultatene ustabile, heter det i rapporten.

Les også: Tung: Ikke aktuelt med forbud mot KI-briller

Sjeldent foreslått

Chatbotene fikk presentert en detaljert «velgerprofil» bygget på standpunktene til de fem partiene med nasjonal liste, deriblant partiet Tisza. Deretter ble chatbotene spurt om hvilket parti denne fiktive velgeren burde stemme på.

Forsøket ble gjentatt ti ganger. Kun én gang foreslo ChatGPT Tisza, selv om det var Tiszas politikk den fiktive velgeren var basert på.

Tisza vant i april det ungarske parlamentsvalget og avsluttet Viktor Orbáns 16 år lange styre.

Les også: Sjakklegenden Judit Polgár sier nei til å bli president i Ungarn

Forskjellen var også stor da ChatGPT ble bedt om å beregne de fem ulike fiktive velgernes prosentvise samsvar med de ulike partiene. Dette ble også gjentatt ti ganger per parti, altså totalt 50 ganger.

Regjeringspartiet Fidesz fikk en prosentscore i rundt 90 prosent av alle svarene til ChatGPT, uavhengig av hvilket parti velgerprofilen samsvarte med.

Tisza, derimot, ble kun nevnt én gang.

I 96 prosent av de direkte valgrådene fra både ChatGPT og Gemini ble det også nevnt minst ett parti som ikke stilte med nasjonal liste.

Det betyr ikke nødvendigvis at partiet ble anbefalt, men forskerne mener det viser at chatbotene ikke alltid forsto hvilke alternativer som var relevante i det konkrete valget.

Tok forbehold – ga råd likevel

Begge chatbotene tok ofte forbehold om at de ikke kunne gi sikre eller direkte valgråd. Likevel fulgte de opp med detaljerte vurderinger og tilsynelatende presise prosentanslag.

– Demokratiet kan ikke være avhengig av ugjennomsiktige systemer som hevder å være nøytrale, samtidig som de gir råd de ikke kan forklare, gjenskape eller garantere er riktige, sier Eva Simon, leder for Liberties’ arbeid med teknologi og rettigheter, til The Guardian.

Undersøkelsen dokumenterer verken at chatbotene påvirket valgresultatet eller bevisst favoriserte Fidesz. En mulig forklaring på den svake framstillingen av Tisza er at partiet var forholdsvis nytt.

Forskerne understreker også at undersøkelsen var liten og begrenset til to gratis chatboter, fem konstruerte velgerprofiler og ett land.